テキストデータとRDB
■ このスレッドは過去ログ倉庫に格納されています
0001名無しさん＠お腹いっぱい。
NGNGヤフーオークションの検索のように
大量のデータから検索させるシステムを作るのですが、
データはどのようにするのが一番効率よいのでしょうか？
テキストファイルにまとめておくと、
１万件読み出して、１行追加してから、一万件書きこみとか
なってしまって大丈夫なのかとか思ってってしまいます。
データベースサーバがあったほうがよいのでしょうか？
0002名無しさん＠お腹いっぱい。
NGNG低レベルの入出力やメモリーマップドファイル、
共有メモリを組み合わせて使えば良い。
DBを使うのは作業効率の問題。
0003名無しさん＠お腹いっぱい。
NGNGDBを導入するメリットは少ないと思う。
ただマルチユーザーからの同時アクセスを考慮する
なら、話は別。
0004名無しさん＠お腹いっぱい。
NGNGなるほど、特にリレーショナルの必要が無いときは
DBはいらないのですね。
私が、心配なのは、テキストファイルが肥大しすぎないかということなのです。
それとWEBにおくのでマルチユーザーの同時アクセスは前提です。
掲示板のログなんかはflockかけてても良くとんじゃいますよね？
0005名無しさん＠お腹いっぱい。
NGNG>大量のデータから検索させるシステムを作るのですが、
>4
>それとWEBにおくのでマルチユーザーの同時アクセスは前提です。
そういうときのためにこそDBMSがあるのです。
検索エンジンや排他制御の仕組みをどうしても自分
で作りたいという理由とそれを保守していく人的資
源があるならともかく、ビジネス目的の実用システ
ムを作るなら、OracleなどのDBMSを使いましょう。
0006名無しさん＠お腹いっぱい。
NGNGOracleだけはやめましょう。
大手ベンダーは別のあつかいしてもらえるらしいけど。
0007名無しさん＠お腹いっぱい。
NGNG0008名無しさん＠お腹いっぱい。
NGNG0009名無しさん＠お腹いっぱい。
NGNGhttp://www.namazu.org/
0010名無しさん＠お腹いっぱい。
NGNGそんなに手間かからないからＤＢＭＳの必要無いかも。
読むだけなら、複数同時にアクセスあっても気にする事無いし。
0011名無しさん＠お腹いっぱい。
NGNG>テキストデータとRDB
これは、データ保存の形式においてＲＤＢの比較対象として「テキスト」と
言っているわけであって、必ずしもNamazuが全文検索の対象としている
ような「テキスト」のデータを扱うとは、書いてないな。
>１万件読み出して、１行追加してから、一万件書きこみとか
少なくとも insert はあるってことだな。
既存のDBMS使わずに自作するなら、索引の構造とか、排他
制御対象の単位をどうするかとか、データキャッシュ（←もし使
うなら）の制御とか、書き込み処理の原子性の保証とか、いろ
いろ考慮する必要あるぞ。
0012名無しさん
NGNGテキストファイルに１行書き込むということは、
どんな言語でどうやっても、
全行読み出して、全行＋１行書き込みをやっていることになるのでしょうか？
１行ずつ追加する関数を標準でもっている言語とかもありますけど、
内部的にはそうやっているのでしょうか？
0013>12
NGNG追加する行より前は読み書きしない、くらいはやったほうがいいでしょうね。
でも、そのファイルのフォーマットがただのテキストファイルでなくても
いいんなら、行の先頭へのファイルポインタて管理するとか、いろいろ方法
があるので、エディタスレッドに出てるページが参考になるかも↓
http://mentai.2ch.net/test/read.cgi?bbs=prog&key=966997468
0014＞１２
NGNGという手はあります。
0015名無しさん＠お腹いっぱい。
NGNGどちらにせよ、別の場所に入る事になるんだから、
内部では、１２のゆっているよーに、そーゆーことやってるね、たぶん
初めから、でかい領域をとっていれば・・・・・・
0016名無しさん＠お腹いっぱい。
NGNGでかい領域って、どっち？ ファイル？ メモリ?
0017名無しさん＠お腹いっぱい。
NGNG0018名無しさん＠お腹いっぱい。
NGNG0019名無しさん
NGNGんなわけないじゃん。
0020名無しさん＠お腹いっぱい。
NGNGフィールド固定長でランダムアクセス掛けるよ。
BasicのField文でも勉強したら？
■ このスレッドは過去ログ倉庫に格納されています