トップページ⇒linux
981コメント275KB

ファイルシステム総合スレ その10

レス数が950を超えています。1000を超えると書き込みができなくなります。
0001login:Penguin2009/04/02(木) 20:57:26ID:AdLAWklr
●過去スレ
01 ttp://pc.2ch.net/test/read.cgi/linux/1006743807/
02 ttp://pc5.2ch.net/test/read.cgi/linux/1063025258/
03 ttp://pc8.2ch.net/test/read.cgi/linux/1101495293/
04 ttp://pc8.2ch.net/test/read.cgi/linux/1136695633/
05 ttp://pc8.2ch.net/test/read.cgi/linux/1152348695/
06 ttp://pc11.2ch.net/test/read.cgi/linux/1173530292/
07
08 ttp://pc11.2ch.net/test/read.cgi/linux/1190788761/
09 ttp://pc11.2ch.net/test/read.cgi/linux/1225001916/

●関連リンク
ext4
ttp://www.bullopensource.org/ext4/
reiserfs/reiser4
ttp://www.namesys.com/
xfs
ttp://oss.sgi.com/projects/xfs/
jfs
ttp://jfs.sourceforge.net/
nfs
ttp://nfs.sourceforge.net/
ntfs
ttp://www.linux-ntfs.org/doku.php
fuse
ttp://fuse.sourceforge.net/
btrfs
ttp://btrfs.wiki.kernel.org/index.php/Main_Page
NILFS2 (NTT)
ttp://www.nilfs.org/ja/
0896login:Penguin2009/10/07(水) 15:32:47ID:GKCaaGWu
この時点でLVMの意味がない気がする
コマンド一発即復元くらいの手軽さと堅牢さが無いと
スナップショットの意味が無いし
0897login:Penguin2009/10/07(水) 22:17:57ID:Qp7oAGqU
>>896
この時点ってどの時点だよｗ

>コマンド一発即復元くらいの手軽さと堅牢さが無いと
>スナップショットの意味が無いし

お前がLVMのスナップショットを勘違いしていることはわかる
0898login:Penguin2009/10/07(水) 22:35:37ID:S/muvVf3
Windowsの復元ポイントの方がまだましだ。
0899login:Penguin2009/10/07(水) 23:00:39ID:VjRpVaZb
ntfsはなかなかよろしい
0900login:Penguin2009/10/08(木) 01:49:33ID:8PGRqXpm
Windowsはフォーマットが戻せるとでも？
0901login:Penguin2009/10/08(木) 06:41:35ID:BWYr7R7g
>>900
？
0902login:Penguin2009/10/08(木) 21:44:07ID:PsdW0Ala
マスターブートレコードの規格書を探しています。
IBMあたりからでているらしいですが、入手方法をご存じのかたがいらっしゃいましたらお願いします。
0903login:Penguin2009/10/08(木) 23:00:08ID:BWYr7R7g
ディスクの初め64GB
0904login:Penguin2009/10/08(木) 23:32:55ID:8PGRqXpm
64ギガかよ！
0905login:Penguin2009/10/09(金) 00:06:58ID:cIdIe9Hh
>>902
規約ではないけど、この本おすすめ
http://www.informit.com/store/product.aspx?isbn=0321268172
09069022009/10/09(金) 09:56:06ID:7PR7Akzw
> 905さん

ありがとうございます。
確認してみます。

Webでときどき引用されている、IBMの技術書って何なんでしょうね。
0907login:Penguin2009/10/14(水) 19:53:33ID:5II52myQ
ext4はまだまだ完成はしていないの？
0908login:Penguin2009/10/14(水) 20:06:43ID:RqRDwSUH
>>907
「完成」ってどういう状態を言うの?
0909login:Penguin2009/10/14(水) 20:14:08ID:BErWecLm
誰もメンテしなくなったら完成
0910login:Penguin2009/10/14(水) 20:15:15ID:EQvZ7mhC
この世に「完成」というものはない。ｷﾘｯ

Ts'o
0911login:Penguin2009/10/14(水) 20:16:34ID:48LYwqB/
reiser3は完成に近いな
0912login:Penguin2009/10/16(金) 11:01:19ID:R/sZzhZ2
ムショの中でメンテしてるかもしれないじゃないか！
0913login:Penguin2009/10/16(金) 13:50:36ID:OBXA42dG
レイザー３？2人のほかに居るの？
0914login:Penguin2009/10/16(金) 14:45:50ID:7VtA57Dm
ヤレヤレ
0915login:Penguin2009/10/18(日) 14:05:00ID:z6rTYCwi
reiser4も完成しそうだな
WinFSほどの完成度はないと思うが
0916login:Penguin2009/10/19(月) 03:34:34ID:7oOV9tU+
結局存在すらしなかったものを語るとか・・・（　´,_ゝ`）
0917login:Penguin2009/10/23(金) 15:52:13ID:P3SujbWP
ext4、大量のファイルの読み込み/書き込みがめちゃくちゃ速いな。
Ubuntu Karmic だとデフォでext4なんだが、ディスクチェックも即効で終わるw
体感速度がext3よりも全然速いわ。
0918login:Penguin2009/10/23(金) 16:11:01ID:S4nqv2kn
japan linux symposiumで
btrfsの話を聞いてきた人レポートよろしく
0919login:Penguin2009/10/24(土) 10:01:13ID:PS9fv/ZN
つ btrfs@JLS話
- fsレベルでの情報を使えるんで同じCoWでも効率とかがLVMより圧倒的にいい
- btrfsでは"snapshot"も"subvolume"の１つにすぎない
-- なので、任意のディレクトリ以下だけスナップショットできたり
-- ネストしてスナップショットもできたり
-- もちろんスナップショットに書き込むのもおけ
- オンラインデフラグができる
-- APIがあって、ファイル単位で明示的にリロケートできる
-- 起動時間の最適化とか、特定目的にあわせた最適化ができる
-- シケーンシャルI/O化による速度アップも
--- 従来fs(自社比?)で5MB/s->17MB/sに大幅に向上（ここでビデオ再生）
--- これはランダムアクセスの発行順序を揃え直したことによる効果
- btrfs-RAIDもスバラシスですよ話
-- btrfsがmountedな状態で下層のdev片方をddで壊す -> エラー検出してもう一方を使うだけで無問題
-- ディスクの追加削除、連動してのfsレベルリサイズも超楽勝
-- RAIDl[56]（実装した）で、liveなファイルが乗ってるディスクにオフライン化命令を出してもOK
--- 空きがある別の領域に勝手に移動してからオフライン化する（LVMとかだとpvmoveしてから抜かないとだめ）
- fsync問題も楽勝
-- ディレクトリツリーとは別のデータ構造でファイル一覧を管理してる
-- なので、ツリー全体のfsyncせずにファイル単位でfsyncできる。メル鯖にお勧め

で、いつ使えるの？
- あなたのリスク許容度によるけどもう使える
- 銀行で使うのはやめとけ。あと２年はマテ
0920login:Penguin2009/10/24(土) 10:12:12ID:0B2G1IE+
ライセンス以外にzfsと何が違うのか
0921login:Penguin2009/10/24(土) 10:22:38ID:PS9fv/ZN
>>520
それQAであった。
機能はほぼ同様だが、実装方法がかなり違う。
詳しくは見ていないが、たとえばzfsはliveなファイルが乗ってるデバイスを
外せない。とか言ってた。
0922login:Penguin2009/10/24(土) 10:24:04ID:i5QEus6M
こんなに快適で軽快なext4を使えずにいる人が可哀想でならない。
0923login:Penguin2009/10/24(土) 10:34:53ID:qWQNOQDs
もうずっとext4をdata=journalで使ってたんだけど、
昨日data=orderedにしてdelayed allocationを有効にして電プチしてみたらzsh_historyが0バイトになった
auto_da_allocも付けてたんだが…
0924login:Penguin2009/10/24(土) 10:35:39ID:+8Cii34t
>>919
Thx! これ読むだけでわくわくしてくる。早く使いたいな。

>>922
ext4評判良いな。「つなぎ」とか言われながらもしっかり進化してるんだな。
はやくRHEL(CentOS)で使えるようにならないかな。
0925login:Penguin2009/10/24(土) 10:42:40ID:qWQNOQDs
http://thunk.org/tytso/blog/2009/03/12/delayed-allocation-and-the-zero-length-file-problem/

これ（>>919のfsync問題？）に遭遇したのかしらん
ext4評判いいって言うけど、評判がいいのは速度面ばっかりという印象
nodelallocつけないと駄目だとか、データ消えたとかいっぱい出てくる
0926login:Penguin2009/10/24(土) 10:54:54ID:PS9fv/ZN
>>925
fsyncしてない問題だね。
これについてはXFSを他が5年遅れくらいでようやく追体験してる状態というべきか・・・
0927login:Penguin2009/10/24(土) 10:59:12ID:PS9fv/ZN
fsync問題はみんなが直すの待ってると首が長くなるので、AOPでfsyncしたい
箇所にフックかけて勝手にfsyncするとかどうですか？とか妄想したり。
100回writeしたら勝手に1回fsyncフック走らせるとか。
0928login:Penguin2009/10/24(土) 11:02:23ID:+8Cii34t
>>926
ディスク自体が比較的大きなキャッシュを持っている今、
fsyncがどれだけ意味を持ってるかわからん気がする。
もちろん、危険が減るのは確かだが、犠牲にされる性能は大きいっぽいし。
0929login:Penguin2009/10/24(土) 11:18:51ID:5X3wIwmB
キャッシュ上のデータも何とかしたいなら、
独立電源のSATABOX入れてそれにUPSくらいしか手がないわなー。

AOPってアスペクトの話？できるとは思うけどウィーバー依存になるから、
ソースツリーと基本的なツールでビルドできるっていうメリットの消滅が
オープンソース的に痛すぎると思われ。
コンパイラコンパイラも似たような話だけどあっちはデファクトスタンダードが
あるからまだマシか。
0930login:Penguin2009/10/24(土) 11:37:22ID:PS9fv/ZN
>>928
性能がfsyncで犠牲（というほどダメージでかい）のはext3だけらしい。
だからfsync汁という結論なんだけど、ext3が普及してるので困ってる。

ディスクキャッシュまで含めた保証はどうなるんかね。
HDDに巨大コンデンサ積むか、FeRAMでも積んでもらうか？

Flashのセッションでは「メーカは変なファーム入れなくていいから
生Flash晒せば俺らがUBIFS使うだけだからおけ」とか言ってたけど、
段々fs-blockdev-devのレイヤを超えた密な設計になってきてるような。
HDDのキャッシュ制御もキャッシュが巨大化したら「このファイルに
対応するディスクキャッシュだけフラッシュ」とかなってきそうだ。
0931login:Penguin2009/10/24(土) 11:53:39ID:0JR1CSs4
>>921
実用レベルはまだまだ先ってんなら、その頃にはzfsはもっと進化してるんじゃね
0932login:Penguin2009/10/24(土) 12:00:33ID:PS9fv/ZN
>>931
そうだろうね。
話してた「コア部分では別物」というのが実現できることにどれだけの差を
生むのかが知りたいけど、それは今後の展開で見ていってくれってことかと。
0933login:Penguin2009/10/24(土) 12:33:29ID:0JR1CSs4
まあ、LinuxでZFSと同じようなことができるならありがたい
zfsのCOMSTARみたいなiscsiの機能があれば尚よい
そういうのはないのかねー
0934login:Penguin2009/10/24(土) 13:19:59ID:jL6mRE8B
Linux板にあるから ext3 や ext4 の議論が進められてるのかと
思ったら、全然話題にでてきてないのねw

このスレ、板違いじゃないか？
0935login:Penguin2009/10/24(土) 13:41:49ID:1C9neHeH
Btrfs defrag demonstration @JLS
http://www.youtube.com/user/atmarkit
0936login:Penguin2009/10/24(土) 15:25:51ID:+8Cii34t
ハードウエアキャッシュ上のデータは制御しようがないので、
いっそのこと fsync しないってのが、
すーっとまえの Linus の考えだったはず。
0937login:Penguin2009/10/24(土) 15:38:53ID:CKiSDgF8
ZFSだどfsync用に専用のデバイスを設定できるので
iodriveのようなのを盛ってくれば安心。
0938login:Penguin2009/10/24(土) 15:38:58ID:0fAQmF0i
HDDのハードキャッシュは書く時も使われるのか・・・
0939login:Penguin2009/10/24(土) 16:31:52ID:r+z2mX27
何を今さら
0940login:Penguin2009/10/24(土) 16:32:07ID:Em1NyL7r
むしろ書き込み時がメイン(性能に与える影響が大きい)
0941login:Penguin2009/10/24(土) 20:44:26ID:Jvb2AScJ
btrfsの仕様が確定したら教えてね。それまではreiser3でいいや
0942login:Penguin2009/10/24(土) 20:53:39ID:OP5yup/p
まっとうな RAID コントローラは、HDDの書き込みキャッシュはDisableにして
RAID コントローラのバッテリバックアップされたキャッシュを使用する。
電源断になったら次回電源On時にライトバックする。
0943login:Penguin2009/10/24(土) 21:26:41ID:lAIp0OzZ
>>942
それはパフォーマンスをあげるためであって
「まっとう」ではなくて「高性能」がただしいね。
HDDの書き込みキャッシュが有効になっていても
OSがちゃんと書き込み完了を検知していれば問題なし。
0944login:Penguin2009/10/24(土) 21:31:44ID:PS9fv/ZN
そろそろ次スレを用意するお時間ですかね・・・
0945login:Penguin2009/10/24(土) 22:32:44ID:AURAQ/qn
扱うデータ量はここ数年飛躍的に増大しているのに
HDDの性能はぜんぜん伸びないので、怒ったベンダー連中が
ついにファイルシステムいじりという禁忌に乗り出したということでよいか？

なんかひどく不安だ
0946login:Penguin2009/10/24(土) 22:45:27ID:oayMi+fi
>943
>942が言いたいところは「バッテリバックアップされた」だと思われ…。
0947login:Penguin2009/10/24(土) 23:00:07ID:+8Cii34t
>>945
いや、大昔からfsyncの問題は議論されていて、
確かに >>942 は正しいが、
そんな一部のユーザのために全てのデスクトップの性能を犠牲にするのはもったいない。
って Linus が言って、そういうことになってるんだよ。
たしか、ext2を設計してた頃の話。
0948login:Penguin2009/10/24(土) 23:45:28ID:/X441C9T
ソース
0949login:Penguin2009/10/25(日) 00:18:29ID:hNJAbGBe
>>931
実際、ZFSではL2ARCなどの新機能をガシガシ載せてきているものねい。
0950login:Penguin2009/10/25(日) 06:44:18ID:6dfn4xT5
http://www.atmarkit.co.jp/news/200910/23/btrfs.html
＞すでにディスク上のフォーマットはフィックスされていることから、
いつのまに
0951login:Penguin2009/10/25(日) 10:44:21ID:ZEOPPRnT
CRFS on Btrfs ってどうなんだろ？
0952login:Penguin2009/10/25(日) 11:16:53ID:inCB1OT5
マジレスしとくと「大昔からfsyncの問題は議論されていて」じゃなくて「大昔にfsyncの問題は議論されていて」
更に言うと、この時、HDDの書き込み方向のキャッシュをパフォーマンスの為にこれからも利用し続ける事になったが
その所為で、他の*NIXを利用している連中(教祖様含む)からLKMLやNetNews、教祖様に至っては怪文書で色々とケチを付けられた
これがこのスレで度々書き込まれる、fsync問題とか称するバカ話の発端

なぜバカ話かというと、当時ケチを付けていた連中の使っていた*NIXですら、今では書き込み方向のキャッシュを利用しているから
つまりは今となってはHDDの書き込みキャッシュを利用する方が標準なわけ
しかも昔のSeagateとかならともかく、今ではHDD自体がキャッシュに留まっているのか、ちゃんと書き出したのか
そこまで判定できるし、読み込みと書き込みでキャッシュのパイプラインを分けている物も多数あるんで殆ど問題ない

なぜ「殆ど」かと言うと、キャッシュに溜っているのか、それともちゃんと書き出したのかの判定をせずに
HDDからの完了通知を即書き込み完了として処理する、とてもアレなFSも中にはあるから
まあこのスレの馬鹿共は、ここでFSを名指ししたりすると即アンチ認定しそうだからFSの名前は伏せとくわ
自分で調べてくらさい
0953login:Penguin2009/10/25(日) 11:40:55ID:DdsJmjpm
Windowsだとどうなの？
0954login:Penguin2009/10/25(日) 12:04:35ID:zcb3DW6X
>>953
チェックボックスひとつで済む問題
0955login:Penguin2009/10/25(日) 15:53:57ID:3CHPE8G/
>>952
> とてもアレなFS
JFSの事ですね知ってます
0956login:Penguin2009/10/26(月) 12:34:11ID:qTMhbqMh
ext5は開発されているの？
0957login:Penguin2009/10/26(月) 14:02:18ID:NuIcT7+C
>>950
> Btrfsはオラクルが開発していると思われがちだが、IBMやインテルからも
> コードの貢献があり、例えば次期バージョンに含まれるRAID 5/6/60には
> インテルが取り組んでいるという。

Intelも積極的にコミットかぁ
btrfsの好感度アップ！
0958login:Penguin2009/10/26(月) 14:08:05ID:X5NNLUuN
md/dmのコードにどうコミットしていくかはっきりさせないと
drbdの二の舞じゃないかな< btrfs
0959login:Penguin2009/10/26(月) 18:23:12ID:H1UxVpfp
http://zfs.macosforge.org/
The ZFS project has been discontinued.
The mailing list and repository will also be removed shortly.

(´；ω；`) Macたん・・・
0960login:Penguin2009/10/26(月) 19:15:30ID:KfDVw46h
この先もHFS+かｗｗｗ
0961login:Penguin2009/10/26(月) 20:44:57ID:qTMhbqMh
あらら(´；ω；｀)
0962login:Penguin2009/10/26(月) 21:09:22ID:FeZZLFoK
タイムマシンはZFSなしでも何ら影響なしなんじゃろか
0963login:Penguin2009/10/26(月) 21:20:33ID:H1UxVpfp
もともと、pdumpfsみたいな実装だったと思うし関係ないんじゃないかな。

TimeCapsule相手だと、スナップショット取ってから、sendして
って実装になってくれたら快適だったのに・・・・ね。
0964login:Penguin2009/10/26(月) 22:53:18ID:lYNcUPnc
FreeBSDはどうなの？
0965login:Penguin2009/10/26(月) 23:23:05ID:lmn0WHFR
>>964
こんなんあった。
http://lwn.net/Articles/339337/
結論としてはsoft updatesには未来が無いのこと。
0966login:Penguin2009/10/26(月) 23:39:07ID:6tfZ6pQg
soft update作った人も今じゃLinuxカーネルをハックしてるんだな
0967login:Penguin2009/10/27(火) 03:11:06ID:uYojG2JR
今更ながらのReiser4ノススメ
カーネルパッチ
ttp://www.kernel.org/pub/linux/kernel/people/edward/reiser4/
公式の墓場
http://web.archive.org/web/20071024001500/http://www.namesys.com/v4/v4.html
リンク切れだらけのReiser4手順
http://web.archive.org/web/20071226171643/http://www.namesys.com/install_v4.html
ベンチマーク
http://web.archive.org/web/20071010004133/http://www.namesys.com/benchmarks.html
透過圧縮の設定
http://web.archive.org/web/20070706091201/http://dev.namesys.com/CryptcompressSettings
マウントオプション
パッチ後のソースのDocumentation/filesystems/reiser4.txtを参照
0968login:Penguin2009/10/27(火) 05:40:32ID:jiElCaIn
>>967
> 今更ながらのReiser4ノススメ

Raiser4 書いた人って、2006年に妻を殺害して第一級殺人犯になった男だよな？
0969login:Penguin2009/10/27(火) 11:39:34ID:T/52Nhue
>>968
だれでも考えつくことだが、彼は思い立ったら実行するタイプなんだ。
0970login:Penguin2009/10/27(火) 12:27:39ID:yAzkp/C5
キャラディのショートショートかよ
0971login:Penguin2009/10/27(火) 13:00:14ID:kbCC42CA
>>968
すんげー板違いだけど日本って国はいつ出来たかも分からない国で、
極東軍事裁判でA級戦犯指定された人が総理大臣になった国で、
慰安婦という名の敗戦後できた言葉の売春婦問題で国連から謝罪しろと言われてる国で
宣戦布告もしてない紛争相手だった中華民国が400万人の死傷者と発表したのに対して
侵略大国の中華人民共和国が死亡者3500万人と妄言を吐いても抗議の一つもしない国で
自国の領土を他国に占領され続けてもろくに対話もしない国で
アメリカの侵略戦争には諸手を上げて賛成して金を貢ぐが加勢した虐殺についてもろくに報道せず
只々談話とやらをを継承し謝罪と賠償を続ける謎の国

おまえさんはそんな国の言葉を使っているんだぞ？

裁判とか信用できねー
ttp://www.s-a-t.org/sat/sarin.html
インテルは経済犯罪もしてるけど裁かれないよ。だけどインテルのCPU使ってるよー
ファイルシステムと関係ないよー
0972login:Penguin2009/10/27(火) 13:00:47ID:0KgMD8XY
普通ファイルシステム作ろう、と思ってもとてもできないし
奥さん殺したい、と思ってもとてもできない

両方やってしまったライザーさんは超一流
0973login:Penguin2009/10/27(火) 14:29:07ID:T/52Nhue
>>970
お前は即レスでとんでもない書き込みをしやがった。
その的確すぎる突っ込みのせいで、もうお前の次以降の書き込みはゴミの価値もない。
お前のせいだ。自分で埋めて、次スレ立てな。
0974login:Penguin2009/10/27(火) 14:30:19ID:T/52Nhue
>>973
なんてこった。これじゃ、俺自身がゴミレス書いちまったことになる。
しかも、これも含めて2つもだ。許せん。
早くこのスレを埋め、datの奥深くに封印すべきだ。
0975login:Penguin2009/10/27(火) 19:33:14ID:yAzkp/C5
970踏むと次スレ担当とは知らなかったが一応立てました。

ファイルシステム総合スレ その11
http://pc11.2ch.net/test/read.cgi/linux/1256639505/
0976login:Penguin2009/10/29(木) 00:47:27ID:DXI6bBsK
>>971
空飛ぶパンツを見たら爆発した。。。

まで読んだ
0977login:Penguin2009/10/30(金) 18:10:37ID:+PEywT7G
>>976
あれとか、あれのＣＧ製作紹介とか、外人が見たら日本のこと何て思うのかな…
0978login:Penguin2009/10/30(金) 18:14:17ID:jAMWfBL0
>>977
http://shirouto.seesaa.net/article/130599887.html
0979login:Penguin2009/10/30(金) 18:45:53ID:egCJ2Fg2
野尻スレ化
0980login:Penguin2009/11/01(日) 16:46:46ID:9HL6Onmf
まぁ、EDだけだよね、良いのは
0981login:Penguin2009/11/05(木) 03:11:56ID:C8ymsVpl
>>975
いい事いうじゃねえか。
出来るんだな？
今すぐ頼むぞ。
レス数が950を超えています。1000を超えると書き込みができなくなります。