検索エンジンをつくりたい
■ このスレッドは過去ログ倉庫に格納されています
0001yam ◆AyW.Rdbg
01/12/22 23:16ID:???自力で商用化をしたいんだけれど、
開発費用っていくらぐらいかかる？
信頼のおける技術者も探しています。
0103nobodyさん
04/02/25 17:39ID:zi0n15ep今後も復旧するだろうけど、見る人の立場になるとどんなもんかと。。
（TVCMの動画とか３Dが決して評判がいいわけじゃないのと同じで。。）
なんしか、「早い」「見やすい」「わかりやすい」
検索システムが必要なわけで。それもジャンルに特化した。
0104nobodyさん
04/02/25 18:00ID:???と思うとなかなか難しいもので。
0105nobodyさん
04/02/25 18:07ID:???本気で何かを探そうとしている時に「FLASHロード中…」なんてメッセージ
みたくないよね。
ジャンルに特化するのは良いと思うけど、特化しにくいジャンルはどうすればいい？
本や映画などのようなものは良いけど、「検索エンジン アルゴリズム」みたいな
キーワードで検索したい時はジャンルは何？ 「プログラム」ってジャンルは広すぎる
し、「検索エンジン」じゃ狭すぎる。
こういう時にどうしても「オールジャンル」な検索エンジンが必要になる。
それはともかく…
Google APIを使ってGUIな検索ツールっていうのはどうだろ？
ブラウザ密着でなくなるから使いにくくなるかな？
おまけ：http://www.mamma.com/index.html（以外といい感じに使える…）
0106nobodyさん
04/02/26 02:40ID:???そうゆうのはGoogleにお任せで。
0107nobodyさん
04/02/26 10:21ID:???0109nobodyさん
04/02/26 14:55ID:khyHj+7Hだって君達検索エンジン作るって言ったって
YomiとかCosmoNaviとかの既存のスクリプト使って作るんだろ？
それとも一から自分で作るのか？
0110nobodyさん
04/02/26 15:00ID:QRXddEDf／´ ￣｀ヽ,
/ 〃 _,ｧ---‐一ﾍヽ
i ／´ ﾘ}
| 〉. -‐ '''ｰ {!
| | ‐ｰ くー |
ﾔヽﾘ ´ﾟ ,ｒ "_,,>､ ﾟ'｝
ヽ_｣ ト‐＝‐ｧ' !
ゝ i、 ` ｀二´' 丿
ｒ|､｀ '' ー--‐ｆ´
_／ | ＼ ／|＼_
/￣/ | ／｀又´＼| | ￣＼
俺様がみあか様だーよ キヒヒ
悔しかったらここまできな
http://school.2ch.net/test/read.cgi/senmon/1074344178/l50
0112nobodyさん
04/02/26 23:27ID:???嘘？マジで？
Yomi-SearchとかCosmoNaviとかAmigoNavigatorなどの
既存の検索エンジンスクリプトを使わないなんてすごいね。
ちなみにもう自作のスクリプトは動いてるのかなみんな？
0114nobodyさん
04/02/27 11:14ID:???Yahooのようなカテゴリ型の検索エンジンの話と仮定すると
あのYahooのカテゴリの階層ってどのように管理すればいいのかとか
カテゴリのショートカットはどうしようかとか結構大変でしょ？
0115nobodyさん
04/02/28 10:13ID:???0116nobodyさん
04/02/28 17:31ID:+L9rAJmN0117nobodyさん
04/02/28 18:00ID:???http://yellow.ribbon.to/~mil/
0119nobodyさん
04/02/28 23:15ID:+L9rAJmNやっぱり自前で作る場合、Yahooレベルのものを作るのは無理かな？
0120nobodyさん
04/02/29 01:44ID:???精度を気にしないなら GETA とか使ってクラスタリングするといい。
0121nobodyさん
04/02/29 01:45ID:???0122nobodyさん
04/02/29 05:52ID:???0125nobodyさん
04/03/03 01:18ID:lXnthRs50126nobodyさん
04/03/03 13:22ID:???このエンジンは気持ちは分かるが、作りこみが今一かな
更新作業が楽そうで本当は手を焼いてるんじゃないかと思う
0127nobodyさん
04/03/03 20:52ID:???0128nobodyさん
04/03/03 23:21ID:lXnthRs5カテゴリ型なのかロボット型なのか。
使用言語は何か。データはテキストで扱うのか、それともDBに格納するのか。
0129nobodyさん
04/03/04 00:02ID:???0130nobodyさん
04/03/04 05:13ID:naRm3zqcyomi程度なら誰でも簡単に作れるだろうし、自分で作った方が自由度は高い。
一番の問題は登録するデータをどう増やすのか。
検索サイトを作ったは良いが、登録データが増えず放置されるケースが多い事！
0131nobodyさん
04/03/04 05:50ID:???俺はカテゴリ型でPHP+MySQLで目標10万件を予定してます。
>>130
登録データが増えずに放置されるケースの対策はほぼ出来ている。
もちろん、Yahoo!やGoogleと対抗するのはおかしいが
中規模の検索サイト並みの情報を保てるだろう。
問題は上でも出てきたけど、+αの機能。
ようはユーザーに「迷った時にはここに来よう」と思わせるような検索エンジンであるべきだ。
そう思わせたらお気に入り登録→ホーム登録へとなりやすいだろうし
1年後・2年後には反響も出て商売としても成り立つと思う。
ところで問題の+αの機能。俺が良いと思うのは各検索ごとにRSSのような
ニュース記事が表示される機能。例えば、「パソコン」で検索したら
パソコンに関連したニュースが出るような。すでにどこかが行っている可能性もあるけど。
0132130
04/03/04 07:58ID:naRm3zqc教えて下さい。凄く気になる
＋αはカテゴリを絞るのが良いんじゃ無いかと思います。
間口を広げると特徴を出すのが難しく、収拾不可能に成るかも知れないです。
0133nobodyさん
04/03/04 10:03ID:???http://www.google.co.jp/search?sourceid=navclient&hl=ja&ie=UTF-8&oe=UTF-8&q=%E6%A4%9C%E7%B4%A2%E3%82%A8%E3%83%B3%E3%82%B8%E3%83%B3
で表示されているサイトかな？個人的にはJOYだな。
んでカテゴリを絞るというのはその通りだと思う。
逆にしぼらなければ無理。
0134nobodyさん
04/03/05 19:30ID:N0xwB9R1でもどんなところが検索エンジンとして良いんだろう？
0135130
04/03/05 20:51ID:SabcyS9O検索サイトも見慣れた感じがあるのと、アクセス支援のためだけの検索エンジンが増えて、
検索サイトへの興味が薄れて来てる。
ユーザが使おうと思うのがほとんど無くて、アクセス支援の登録のためだけに存在する検索エンジンは不必要。
なんかスレッドフロートＢＢＳを設置すれば人が集まると勘違いしてる人と同じな状況でもあるのかな？
JOYは中堅なんですね。古くからあるところは老舗っぽくて存在は知ってても使わないのが寂しいｋな。
検索エンジンの大手・中堅とかのセグメント分けをしたリストがあれば面白いけどね。
検索サイトの検索エンジンとかメタサーチとかも今一だし、大手ポータルには敵わないのかな。
そういえば、韓国系のWAKANAって今あるのかな？
0136130
04/03/05 20:56ID:???ＷＡＫＡＮＯだった。ＷＡＫＡＮＡじゃないのね。
でもここ重たくて機能してないみたい。
0137nobodyさん
04/03/05 20:57ID:???gooもinfoseekもフレッシュアイもその他の検索エンジンも
Yahoo!やGoogleには到底及ばない。100:1いや、1000:1かもしれない。
なぜgooやInfoseekが出遅れた（もしくは越された）かと言うと
企業的な思惑はあるにせよ、Googleと比べて圧倒的に検索されるページと
検索時間が劣るからだ。逆に言えば、Googleはそれに特化して
現在の地位を保っていると言っても過言ではないと思う。
Yahoo!は「検索エンジン」というよりはすでにインターネット＝Yaoo!になってきているから
全く別問題だと思うが。
それで、これらに対抗しようと思ってもいくら人や金があっても無理。所詮”猿真似”だからね。
では、どうすればいいのか？というとオリジナルの「何か」が必要なわけで。
検索エンジンとはとか違うけどblogなんかはかなり参考になると思う。
0138nobodyさん
04/03/05 21:04ID:???やっぱり量より”質”だと思う。
SEOにも当てはまるがユーザーにとっては「知りたいページ」が見られたら
それで言い訳で、知りたいページ・類似したページは多くても10ページあればいいわけで。
という事は検索した際により多くの情報が出るよりはより「ユーザーの考えにあったページ」
が検索結果に現れるといいわけだ。
こうなるともう、ブラウザにATOKのような機能を付けて
検索ワードの保護をしてやらないといけないわけで・・・M$任せになるな。。
0139nobodyさん
04/03/06 00:45ID:mLIiHzki0140nobodyさん
04/03/06 00:48ID:???それなりに長期に渡って運用していかないとデータ量すくないし、
逆に、データが増えたらとてつもなく膨大になるし・・・
0141nobodyさん
04/03/06 01:20ID:???googleのデータを何とか整理すればと思うが・・・。
0142nobodyさん
04/03/06 03:09ID:???最近チェックした商品をもとに、マイページみたいなところでタイプの似た商品なんかを上げてくれるんだけど、
検索エンジンにも、そんな風に以前の検索結果と似たタイプのものを出してくれると、
知りたいページが得られるとか思った。
ついでに、とても中規模に収まらないと思った _|￣|○
0143nobodyさん
04/03/06 06:23ID:???おれも同じ事考えている。別にアカウント登録して無くても出来る見たいだし。
概念としては検索エンジンにキャッシュ機能みたいなのをつけて
検索ワードで判別して付随ページを抽出すれば。
中規模で収まる気がする
0144nobodyさん
04/03/06 07:21ID:m/dCwq/8かなり昔からあった機能ですね。
話は違いますが、前に検索したキーワードを出したり、類似性の高いキーワードを出すサイトもありますね。
yomiサーチを使ってるところが多すぎて、面白みが全く無い気がします。
自前の検索サイトを晒す勇気はありませんが、ブックマークで来てる人の少ない事。
137さんが言っている様にGoogle＆Yahooがほとんどでgooがちょぼちょぼのアクセスです。
聞いた話ですが、某アダルト検索サイトの運営者がログを見たら、
上位キーワードが自身のコンテンツの名称だったそうです。
ブックマークをするのも面倒なのか、それとも家族でPCを共有してるのか、興味深い話でした。
サイト名称は分かり易くし、独特な名前にするのが良さそうです。
0145nobodyさん
04/03/06 09:46ID:???だろうね。極端な話アダルトなら「AV Search」でもいいと思う。
3,4年前はこういう名称のつけ方は「ありきたりでダサい」と言われてきたけど
逆に今はわかりやすくていいと思うし。
ところで
>話は違いますが、前に検索したキーワードを出したり、類似性の高いキーワードを出すサイトもありますね。
って書いているけど、具体的にはどこ？俺は知らないけど・・。
0146nobodyさん
04/03/06 09:53ID:???Yahoo!＆GoogleとgooやinfoseekやMSNなどを含めて決定的に違うこと。
それは「検索エンジンだと理解されやすいデザイン」だと思う。
例えばネットに詳しくない人はフォームがあったからってそれがなんなのか？
検索って何？みたいな人が多いわけで。
それでも使っていくうちに分かるわけだが、MSNなんか特にそうだけど
どの部分が検索フォームかわかりにくい。と言うより「検索以外に目が行く」
と言った方がいいかもしれないね。それだけ検索エンジンには力をいれてないのだろう。
しかし、Googleはもちろん、旧Yahoo!なんかも明らかに検索フォームが”目立つ”
だから利用しやすいしわかりやすいと思うんだよね。
ちょっとプログラムとは違うけど、デザイン的な作り方もかなり重要だと思った。
0147145
04/03/06 10:16ID:m/dCwq/8合わせて検索される頻度が高いキーワードのチャックボックスやリンクが出る奴ですね。
旧Infoseekはそうでしたし、今はつながりシークだったかな名称が・・・
米国では結構あった気がしますが、思い出せない。
アフィリエイト全盛で広告に埋没した検索サイトも多くデザインは度外視かも知れないですね。
検索サイトは圧倒的なヒット数が無いと利益を出すのは難しいですね。
0148nobodyさん
04/03/06 13:42ID:???『共通語リスト』
例えば「プログラム 言語」で検索すると
「C / Java / VB ...」みたいに検索結果の中で良く出てくるキーワードを
抽出する。それをクリックすることで検索結果から「Java」を取り除いたり
「C」でフィルタリングしたり…。
結局はAND検索になるのだけど、良く出てくるキーワードがリストで出てくると
「なぜ、検索結果がぼやけるのか」が分かるような気がする。
検索者は「プログラム言語といえばCだろ！」と思って、「プログラム 言語」で
C言語の情報を探そうとしているが、予想以上にJava関連の情報が多かったりする
ことが一目で分かるよね。
/* この例ではキーワードが下手すぎるがそれは置いておく */
0149nobodyさん
04/03/06 13:52ID:???そそ。そういうのいいよね。
自サイトにアクセス解析を置いている人なら分かると思うけど
たまに「どうしてそのキーワードなの？」って人が訪れてくるからね。
キーワードの選択の仕方がわからないっていう場合が多い。
日本語って難しいからな〜
0151nobodyさん
04/03/07 01:24ID:???ttp://labs.nttrd.com/
0152nobodyさん
04/03/07 15:19ID:???一瞬いいと思ったんだが、”回答を登録できる”ってのが
いたずらをされる可能性も高く、使えないね。
ただ、グラフにして表示するのはいいと思う。
検索エンジン内のデータ件数・キーワード数+特定ワードを調べて。
0153nobodyさん
04/03/07 23:47ID:???0155nobodyさん
04/03/08 07:19ID:???0156nobodyさん
04/03/08 14:12ID:???２ｃｈ内をまともに検索できれば最強…
ってひろゆきが既にやってた。http://find.2ch.net/
0159nobodyさん
04/03/09 17:38ID:???機能、どうこう言う前に。
0160nobodyさん
04/03/09 17:39ID:???0161nobodyさん
04/03/10 19:37ID:XZBETSH0金取るのかよ・・・
0162nobodyさん
04/03/10 20:59ID:???キーワードの選択って考えると、ディレクトリ登録型のほうが便利だよね。
自分から絞り込んで行けるから。
>>161
本文と投稿者を検索するとき金がかかるみたい。
スレタイ検索は無料っぽい、というか普通にできたよ。
0163nobodyさん
04/03/10 21:23ID:???>>146
米Yahoo!がGoogleみたいな検索のみのページ始めたよ。
http://search.yahoo.com/
infoseekとかgooって、Googleと違ってポータルサイトってやつだから別モノなんじゃない？
WEB全体を検索するのはまず自分のとこにある記事を見てからっていうか、
自分のところで一般的な（？）情報は手に入るようにしてあるような。
0164nobodyさん
04/03/11 20:35ID:uu5Wjkv7何故今まで自社でロボット検索エンジンを開発しなかったのか。
0166nobodyさん
04/03/13 13:49ID:???0167nobodyさん
04/03/16 19:54ID:OF6zD5aFttp://www.tkensaku.com/
類似性検索の逆？が実装されています。
まだ荒いけど、これから面白くなるかもしれませんね。
0169nobodyさん
04/03/16 20:53ID:???15億超えてました
20億超えている？
0170167
04/03/16 21:14ID:OF6zD5aF12億ページもインデックスされていないのでは？
google で「図書館」が約３００万
tkensaku で同じキーワードで約１９万
単純にいって１５分の１ぐらいでしょ。
google全体でも４２億ですし、
tkensaku は日本語だけだからもっと少ないはず。
0171nobodyさん
04/03/16 23:20ID:???ごめん、間違えた。
150万ページはインデックス化されている。
「本」に関連する1508985ページ中の第1位から第10位までを表示しています。
ttp://210.189.72.196/sclient.cgi?value=%96%7B
4年超で法人登記して150万ページか
Record last updated on 02-15-2000 05:51:52 GMT
Record expires on 02-15-2011 05:51:52 GMT
Record created on 02-15-2000 05:51:52 GMT
Database last updated 03-16-2004 21:37:12 GMT
0172nobodyさん
04/03/20 22:57ID:hMly4azrurl を紹介してくれるようなプログラムを作ってみようと
思っているのですが、どこかに先例のようなものはありませんか？
まだ誰も思いついていない？
0173nobodyさん
04/03/21 03:35ID:???金取るが、書いた30秒くらいに反映されたり、
2ch内のすべての文章から検索してくれたり、と
その気になれば結構使える検索エンジンかも。
お金を払うのはちょっとつらいが。
性能はかなりよさそう。
0175nobodyさん
04/03/21 21:30ID:???0177nobodyさん
04/03/22 16:47ID:???MS-Officeでイルカの消し方がFAQになることと、Googleが好ましいとされる理由に「余分なインターフェースがない」が上位に挙げられることを思うと、あまり成功しない気がするよ。
検索エンジンとつながるマスコットが昔あったような気がするな。打ち込んだキーワードを学習して、時々新しいURLを勝手に拾ってきては、飼い主に「みてみて」とせがんでくる奴。
0178172
04/03/23 00:02ID:???確かにうざったいと誰も使ってくれないでしょうね。
検索をしたいときに遊びっぽいとうざったいけど、
遊びたいときにたまたまurlを発見してくれるとか。
やっぱりだめかな。
0179nobodyさん
04/03/23 00:47ID:???要はそのサイトを誰かが評価してあればいいんだよ。
昔はNTTの新着情報からのアクセスが一番多かったものだけど、
ｸﾞｸﾞﾙに新着情報ページがあれば結構アクセスあるかもね。
0180nobodyさん
04/03/31 22:06ID:???音声で会話できるなら、会話型インタフェースも悪くないと思うよ。
0182nobodyさん
04/06/05 23:35ID:KbDZzecN0183nobodyさん
04/06/10 01:45ID:???いずれはユーザに登録させるとしても、最初は
人力で集めるんでしょ？
リンクの多そうなサイトを登録して、そこから
リンクたどってって、徐々に増やしていくとか？
自分も特定の分野の検索サイトをやりたいんだけど、
エンジン作りに挑戦してみようかな。
どっかに、検索エンジンの基本部分を解説してる
サイトってない？
0184nobodyさん
04/06/10 20:45ID:???0185nobodyさん
04/06/19 21:21ID:???作ればいいのかわかる奴いますか？
「クローラの自動巡回でデータ集める」
ってどうやるんだよ・・・分かんねぇ。
0189nobodyさん
04/07/02 03:03ID:wbSwwq8f【必要な機能】 ロボット検索技術を応用した、インターネット上の販売情報を検索することができるソフト。商品名やスペック等からリアルタイムな情報を検索することができる。その得た情報をMYSQLなどのDBに落とし込みたい。
【. 目 的 】 リアルタイムに価格比較できるPC比較サイトを作りたい
【. 使用OS 】 windowsXP
【. 条 件 】 10万以内なら払いたい
■試したけど条件を満たさなかったソフト
【. 名 称 】 まったく見つからず
■これだけはやりました
【 >>1-10、FAQ集、上手な検索の仕方 を読んだ 】 はい
【 調べたサイトの名前 】 GOOGLE YAHOO など大手検索エンジン
【検索キーワードは？ ..】 ロボット型検索技術 クロール ソフト
恐らくこのようなソフトはないと思います。。
この技術の最も単純なソフト。もしくは応用が聞くような単純ソフトがあれば・・・・などと不遜にも考えています。
ちなみに下記２サイトで私がやりたいような事を行っております。
http://www.bestgate.net/
http://yasune.dokoda.jp/
このような技術の雛形などご存知の方いましたらどうかご教授下さい。
0190nobodyさん
04/07/02 03:08ID:???http://pc5.2ch.net/test/read.cgi/php/1086715675/235
↑バラ撒きっぱなしか？
# どこのテンプレを使い回しとるんだ…。
0191nobodyさん
04/07/02 03:52ID:???0192nobodyさん
04/07/07 01:24ID:???だろうが、でなければ意味ないわ。
価格比較にしても、まずは価格比較サイトにいくだろ。ロボットで価格を
漁るということに何の意味も見いだせない。
クローラーは単純だ。「波乗り野郎」みたいなもんだ。
ttp://www.bug.co.jp/nami-nori/
0193nobodyさん
04/07/23 16:09ID:ackJdXhihttp://www.surpara.com/
0194nobodyさん
04/09/03 04:40ID:bPh7a+Nk0195名無しさん
04/10/08 01:02:54ID:TPGoBuLXhttp://umasql.netkeiba.com/db/horse.php?hid=2000101537
0196nobodyさん
04/10/10 23:39:08ID:FanGpL5aGoogleみたいなロボット巡回型は相当難しそうだけど
0197nobodyさん
04/10/10 23:40:21ID:FanGpL5a0198nobodyさん
04/10/13 16:43:48ID:???グーグルの規模を小さくしたような検索エンジン・・・ないよな
0199nobodyさん
04/10/13 21:56:37ID:???ここオリジナルのロボットで運営してるよ
0200nobodyさん
04/12/15 19:54:07ID:???0201nobodyさん
04/12/20 08:16:35ID:???頼むから爆撃アクセスするようなロボットは作らないでくれな。
robot.txtやMETAタグには従うように。
どうせIPで弾くだろうけどな。
■ このスレッドは過去ログ倉庫に格納されています