🚀 go-pugleaf

RetroBBS NetNews Server

Inspired by RockSolid Light RIP Retro Guy

Article View: fj.net.ftp
Article #1775

Re: mirroring

#1775
From: Kazushi Marukawa
Date: Mon, 22 Jun 1998 00:00
49 lines
3255 bytes
   牛根 宏幸 <ush@netlab.is.tsukuba.ac.jp> wrote:
   > FreeBSD distrubtion のフルミラーで 5 から 8 MBとなっています.
   > (これは 1997年11月の話なので もう少し増えているかもしれません)
   > 私のところで debian のミラーをするときのftpmirrorのメモリ使用量は
   > だいたい4MB 程度です.(FreeBSDは分割ミラーしているので 不明です)

僕はそういった大きな物のフルミラーはしてないので、
mirrorプログラムについてのデータは出せません。
誰かそういう物をmirrorでミラーしてて、どのぐらいの
メモリ使用量になっているとかってデータを持ってる人は
いませんかね。

   > mirror 2.9 では 設定次第で使用するメモリ量は減らせるということ
   > なので,ftpmirror 1.94 の README.jisの

誤解されてます。僕の説明が、ちょっと分かり難かったですか。
もう一度説明しておきます。1993年に公開された2.1で既に、
使用するメモリ量は減らせることができたと言いたいのです。

mirrorは2.1の頃から、ls-lRを一気に取得していました。
また、当時からuse_filesオプションによって、その取得結果を
メモリ上に展開するのではなく、dbmに書き出して利用するという
ことができました。ですから、当初から、use_filesオプション
を利用すれば、大きな配布物も問題なくミラーできたのでは
ないかと予想しています。ただし、実際に試したことはないので、
どの位メモリを消費するかとか分かりませんし、実際にメモリとか
ディスクとか消費して利用できないのかもしれません。

一方、こないだ出たmirror-2.9の説明を読むと、今回から、
algorithmオプションでディレクトリ毎にデータを取れるように
なったと書いてありました。多分これを使うとftpmirrorと同様
な動作をするのでしょう。どちらの機能が速いかとか、どちらが
効率がいいかとか分かりませんが、これを使えばftpmirrorと
ほとんど同じ振舞いをするようになるのでしょう。


さて、そういうわけなので、ftpmirrorを薦める人がいつも使う、
「mirrorじゃメモリを喰い尽してしまうファイル群も、ftpmirror
ならできる」というのは嘘じゃないかと、そう思っているのです。
数年前にも、同じ話題がでて同じ話をしましたが、誰もmirrorで
大きなファイル群のミラーをしてなくて、結局本当にmirrorじゃ
駄目かどうかは分かりませんでした。

これで誰からも報告とかなかったら、今度一遍試してみようかな。
debianのフルミラーをすると、どのぐらいディスクを喰うので
しょうか?

-- かずし
Technical Details
Message-ID: <ajglm6.6q1.ln@sou.nerv.org>
Path: arc1-ca.pugleaf.net!unknown!not-for-mail
References: <JUN.98Jun15163841@watson.nih.go.jp> <898087903.893920@pixy.netlab.is.tsukuba.ac.jp> <dmacm6.i7c.ln@sou.nerv.org> <898498131.757444@pixy.netlab.is.tsukuba.ac.jp>

Show Full Headers
Complete Article Headers
X-Google-Language: Japanese,JIS
X-Google-Thread: 1097d7,afd319dc357067a8
X-Google-Attributes: gid1097d7,public
From: Kazushi (Jam) Marukawa <jam@pobox.com>
Subject: Re: mirroring
Date: 1998/06/22
Message-ID: <ajglm6.6q1.ln@sou.nerv.org>
X-Deja-AN: 364943887
Content-Transfer-Encoding: 7bit
Sender: Kazushi (Jam) Marukawa <jam@sou.nerv.org>
References: <JUN.98Jun15163841@watson.nih.go.jp> <898087903.893920@pixy.netlab.is.tsukuba.ac.jp> <dmacm6.i7c.ln@sou.nerv.org> <898498131.757444@pixy.netlab.is.tsukuba.ac.jp>
Content-Type: text/plain; charset=iso-2022-jp
Organization: none
User-Agent: tin/pre-1.4-980618 (UNIX) (NetBSD/1.3F (i386))
Mime-Version: 1.0
Newsgroups: fj.net.ftp