Apple独自のWebクローラー「Applebot」、SiriやSpotlightでの検索用の情報を収集

Applebot

Apple独自のWebクローラー「Applebot」の運用について、公式の案内ページが公開されました。

このクローラーは、iOSの「Siri」とOS Xの「Spotlight」において、検索を行った際に表示する情報をWebから収集するというものです。

Appleのクローラーなので(どこぞのアジア系検索エンジンとは異なり)お行儀は良いと思いますが、何らかの理由でアクセスさせたくない場合は、robots.txtで弾くとちゃんとそれに従います。robots.txtにApplebotに関する記述がない場合、Googlebotに対する記述に従うようになっています。

  • IPアドレスの範囲:17.0.0.0 - 17.255.255.255
  • ユーザーエージェント:Applebot

 30日間無料体験 Amazon Music Unlimited

6,500万曲以上が聴き放題、聞きたい音楽が広告なしで楽しめる、インターネット接続がない場所でもオフライン再生で。まずは30日間無料体験で!

関連するエントリー