ディレクトリか？ロボットか？

どちらもなくならないところをみると、どちらも捨てがたい事が理解できます。

ディレクトリ型は人が介在するので、劇的に登録を増大させる事はできません。登録申請しなければ、今となっては、見つけてもらえないでしょう。反面、人間が判断するので、確実、正確です。ヤフーのディレクトリで、カテゴリと違うページが登録されていた事はないでしょう。以前は、無料で登録できましたが、この手間を考えると今後は、有料となるでしょう。

ロボットはコンピュータで処理しますので、申請を出さなくても、リンクをたどって、登録される事があります。また、ページの変更が行われれば、自動的に検索結果に反映されます。しかし、３億以上といわれるページを毎日全てチェックするには、相当な設備投資を行わなければなりません。当然、重要なホームページが優先的に調べられ、そうでもないものは後回しになります。通常のページであれば、更新間隔は１ヶ月以上です。また、機械的に処理されるため、以前は、あまり結果が正しくなく、プログラムを騙す事も頻繁に行われていました。