目次:
定義-クローキングとはどういう意味ですか？
クローキングとは、通常の人間のユーザーに配信されるコンテンツとは異なるコンテンツが検索エンジンに表示されるように、Webページのコンテンツを検索エンジンに配信するために使用される手法です。 クローキングの目標は、特定のキーワードでウェブサイトの検索エンジンのランクを上げることです。
クローキングでは、検索エンジンとユーザーは文字通り同じページにありません。 したがって、ユーザーと検索エンジンの両方がだまされています。
Techopediaはクローキングについて説明します
クローキングにより、ユーザーは、それらのサイトの本当のコンテンツを偽装することにより、ユーザーが期待する以外のサイトに移動します。 クローキング中、検索エンジンのスパイダーとブラウザには、同じWebページの異なるコンテンツが表示されます。 HTTPヘッダー情報またはIPアドレスは、間違ったWebページの送信を支援します。 検索者は、ポルノサイトなど、探していなかった情報を含むWebサイトにアクセスします。 ウェブサイトのディレクトリは、クローキング技術のシェアも提供します。
大規模な検索エンジン企業の多くは、ユーザーを苛立たせ、標準に準拠していないため、クローキングに反対しています。 検索エンジン最適化（SEO）業界では、クローキングはブラックハットテクニックであると考えられていますが、使用されている間、ほとんどの正当なSEO企業やWebサイト運営者に嫌われています。 クローキングを捕まえると、インデックスから完全に削除されるなど、検索エンジンから大きなペナルティが発生する可能性があります。
