全然知らないけど。
複数の辞書全体の本文内にある連続文字のハッシュをキーにしたテーブルが、
表示対象の単語ページへの参照列を持ってるんじゃないの?

ハッシュ関数を上手く作れれば、あとはページ参照列のリストを頭から
ホントに単語が本文中にあるかチェックしながら表示するだけ