OTEMARI ウェブディレクトリー: ディレクトリー型検索サイト>検索サイト>ウェブサイト・ホームページの検索>ロボット型検索エンジン
ロボット型検索エンジンとは、クローラーと呼ばれるプログラムを使って、自動的にウェブサイトを収集し、利用者がキーワードなどを入力することにより、該当するウェブサイトのURLや、参考情報として、そのコンテンツの一部が表示されるようにした検索エンジンです。
ロボット型検索エンジンは、ウェブのほとんど全体またはその多くを検索対象とすることができるという利点がありますが、情報収集と分析が自動化されているため、だますことが比較的容易です。そのためのテクニックがSEOと呼ばれ、一部のサイトで、ロボット型検索エンジンで上位に表示されるようにいろいろなSEOの手段が講じられています。その結果、単にたくさんのサイトが検索結果に表示されているだけで、上位に表示されているウェブサイトが、必ずしも、有益とは限らないと言う状況になりがちです。検索エンジンスパムと言って、抜け穴的な不正な方法で上位表示を実現している場合が多くあり、そういうことをする人や業者と検索エンジンとの戦いが繰り広げられています。この様な状況から、ロボット型検索エンジンを利用する場合、上位表示されるサイトは、検索エンジンスパムの結果であることが多いという点をよく認識し、上位以下の順位のウェブサイトにも十分注目することが必要です。