トップページ
⇒
tech
621コメント
211KB
超高機能なサーチエンジンを作りたいんだけど
全部
前100
次100
最新50
■ このスレッドは過去ログ倉庫に格納されています
0497
デフォルトの名無しさん
NG
NG
>>496
このスレの419だけど、動かし方はコマンドラインから実行するだけ。
設定ファイルがあるので、そこで開始URL(複数指定可)、
何階層までリンクをたどるかなどを指定する。
他には、巡回しないURLを指定できたり、正規表現で指定もできる。
Robot.txtを見るかとか、METAタグを見るかなどの指定もある。
全部
前100
次100
最新50
■ このスレッドは過去ログ倉庫に格納されています