改めて投稿します。申し訳ありませんでした。

検索技術(クローラ)に関する質問です。

楽天やYAHOOショップ、また、他のECサイトのPC価格をリアルタイムで
比較する価格比較サイトを作りたいと思っています。
比較対象webサイト数は6個です。
しかし、「リアルタイム」を実現するには自分でDBなどに価格を入力
して、それをPHPなどで吐き出すだけでは時間的に間に合いません。
そこで、検索エンジンのクローラという技術を応用できないかと考え、
ネットを検索していると下記のような、
私の考えと合致する2サイトを見つけました。

1:http://www.bestgate.net/
2:http://yasune.dokoda.jp/

このように、クローラ?が定時的に(1日1回など)指定した
パソコンショップのサイトやECサイトに自動的に巡回して、
価格情報を探し、その価格情報をDBに抽出できるような
仕組みをご存知の方はいませんか?このような技術の雛形、
また、応用すればできるというようなソフトなどご教授願えませんでしょうか。フリーではなかなか難しいと思っておりますのである程度のお金は用意しています。自分の努力で解決するのならば、無料が一番良いですが・・・・。