トップページ⇒tech
37コメント8KB

検索エンジンの作り方

■ このスレッドは過去ログ倉庫に格納されています
0001Fｒｙ05/02/02 20:57:21
こんにちは、初書き込みです。
これからお世話になりますがどうぞよろしくお願いします。
私PCの知識がなくてよくわからないのですが。
検索エンジンと言う物を作ってみたいんですけど、
作るにはどうすればいいのでしょうか？

0002デフォルトの名無しさん05/02/02 20:57:59
クソすれ2ゲット
0003デフォルトの名無しさん05/02/02 20:59:43
1) まず　パソコンショップに言って　できるだけ性能のよいパソコンを買います。
0004Fｒｙ05/02/02 21:03:02
はい
0005デフォルトの名無しさん05/02/02 21:04:10
2ストか4ストか選ぶ
0006Fｒｙ05/02/02 21:15:48
はい
0007Fｒｙ05/02/02 21:17:25
>>5
バイクのエンジンじゃないですか？
0008デフォルトの名無しさん05/02/02 21:18:14
検索エンジンか
まずはモーターと電池を買ってこい
0009Fry05/02/02 21:31:24
ましな人はいませんか？
0010デフォルトの名無しさん05/02/02 21:37:21
まずサーバを500台用意しなさい。話はそれからだ
0011デフォルトの名無しさん05/02/02 22:14:53
その500台のサーバにLinuxとMySQLをインスコだ。
0012デフォルトの名無しさん05/02/02 22:30:43
ハードウエアの問題はお金で解決できそうです。
個人で使用するのでサーバーは１０台買います。
ハードディスクは2000Gバイトを用意します。

次の３つのソフトウェアについて情報を下さい。

１　データを自動的にかき集めるソフトウェア
２　書きかつめたデータに高速検索用のインデクスをふるソフトウェア
３　高速検索用のソフトウェア

MySQLの全文検索は遅いので、2000Gのテキストを20秒以内に検索する
ソフトウェアを探しています。よろしくお願いします。
0013デフォルトの名無しさん05/02/02 22:33:53
探していますって…
作るんじゃなかったの？
0014デフォルトの名無しさん05/02/02 22:36:10
システムを作るんだろ。プログラム板だけどねw
0015Fry05/02/02 22:40:52
>>12ありがとうございます。
>>14
よく見ると板違いでしたｗ
0016デフォルトの名無しさん05/02/02 22:44:22
こ、こいつうぜぇ
00171205/02/02 22:49:09
>>14
>システムを作るんだろ。プログラム板だけどねw
全てをゼロから作るのは無理。利用できる便利なツールは
出来るだけ利用して、利用できない部分を自分でプログラム
を書く。次の３つは便利なツールがありそう。

１　データを自動的にかき集めるソフトウェア
２　書きかつめたデータに高速検索用のインデクスをふるソフトウェア
３　高速検索用のソフトウェア
0018Fry05/02/02 22:53:37
>>17
ありがとう
0019デフォルトの名無しさん05/02/02 22:54:59
google使えば簡単。
0020デフォルトの名無しさん05/02/02 22:55:22
逆切れかｗ
> 利用できない部分を自分でプログラムを書く。
この部分だけ話題にするのがこの板だろうに
00211205/02/02 23:15:42
>>20
公開されているツール／ライブラリの機能を確認した上で、
利用できない部分を自作する。Cコンパイラーをゼロから
書く馬鹿はいない。

○屋上屋おくを架す（広辞苑）
無用のことをするたとえ。「屋下おくかに屋を架す」とも。
00221205/02/02 23:17:03
>>19
>google使えば簡単。
使用制限があるから自由には使えない。だから自作する。
でも利用できるツールは利用する。
0023デフォルトの名無しさん05/02/02 23:25:43
そんな使いかたしなけりゃいいじゃん。
0024デフォルトの名無しさん05/02/02 23:38:56
そもそも要求定義が定まっていない。
0025デフォルトの名無しさん05/02/02 23:48:06
>>12
まず何を作りたいのかぐらい言えよ。
00261205/02/02 23:53:49
>>25
>>1
>検索エンジンと言う物を作ってみたいんですけど、
多少、遅くてもよいので、インターネット上で公開されている
全ての文字データをかき集めて、形態素処理をして、多少、
複雑な検索（この部分を自分でプログラミングする）を行う。
検索結果の出力形式はGoogleのようにKWIC形式が見やすいので、
これを目指す。

形態素処理のソフトウェアは分かったので、かき集めるソフト
ウェアと高速検索のためのソフトウェア（MySQL以外のもの）に
関する情報を下さい！
0027デフォルトの名無しさん05/02/02 23:58:50
形態素処理のソフトウェアは何を使うの？
00281205/02/03 00:10:44
>>27
「形態素処理のソフトウェア」でGoogle!
0029デフォルトの名無しさん05/02/03 00:17:49
>>28
0件だったし形態素処理に何使うかによっても
状況は変わってくるだろうから、教えられる人も教えられないと思うよ。
まあどうでもいいけど。
0030デフォルトの名無しさん05/02/03 00:55:26
> ハードウエアの問題はお金で解決できそうです。

ソフトウェアの問題も金で解決してください。

終了。
0031デフォルトの名無しさん05/02/03 03:03:58
strstr
00321205/02/03 09:16:28
>>29
>形態素処理に何使うかによっても
英語、ドイツ語、日本語など多くの言語処理ができる
XLEがいいようです。

http://www2.parc.com/istl/groups/nltt/xle/
0033デフォルトの名無しさん05/02/03 11:44:45
日本語の場合は茶筅の方がいいんじゃないの。
0034sage05/02/03 12:07:58
茶筅＋ナマズは、既にやり尽くされているから、できれば少し新しいこと
に挑戦したい。XLEであれば、１つの言語のモジュールを開発すれば、
それを別言語でも利用できるはずなので、拡張性がある。

１　かき集めるツール（他人が作ったのを利用）
２　XLE（他人が作ったのを利用）
３　XLEの出力結果を整形するツールを自作する
４　整形したデータをデータベースに読み込ませる
５　高速検索をするツール（他人が作ったのを利用）
5　KWIC出力をする（一部自作のプログラム）
0035デフォルトの名無しさん05/02/03 14:00:41
>>34
> １　かき集めるツール（他人が作ったのを利用）
自分で作らないと。　JPNIC
0036デフォルトの名無しさん05/02/04 10:56:50
LFGでやるのか。頑張ってね。
00371205/02/04 21:45:13
>>36
>LFGでやるのか。頑張ってね。
去年の日本の言語処理学会で日本語XLEが賞を取っていたし、
ヨーロッパではLFGが大人気。
■ このスレッドは過去ログ倉庫に格納されています