CDNは、ユーザーに近い場所に設置されたエッジサーバーにコンテンツをキャッシュすることで高速な配信を可能にする技術です。ウェブサイトの表示を高速化するためにさまざまなサイトにCDNが導入されていますが、そうしたCDNが検索用のクローラーボット ...