Apple、Applebotの存在を公式ドキュメントに記す 6
ストーリー by hylom
botとなったApple信者ではない 部門より
botとなったApple信者ではない 部門より
あるAnonymous Coward 曰く、
AppleがAbout Applebotというドキュメントを公開した。Appleがクローラを使って情報を集めているという話は以前からあったが、その存在を公式に認めるのは初めてのようだ。
これによると、ApplebotはSiriやSpotlight Suggestionsで利用するための情報を集めるクローラで、ほかのクローラと同じくrobots.txtやrobotsメタタグでその挙動をコントロール可能とのこと。また、Applebotに対する問い合わせメールアドレスについても示されている。
webサーバのログを確認 (スコア:1)
手元のwebサーバのログを見ると、user-agentの機種名は2種類あって、末尾にURLが足されてるね。
PCとスマホで表示するページを変えているサイトがあるから、なのかな？
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/600.2.5 (KHTML, like Gecko) Version/8.0.2 Safari/600.2.5 (Applebot/0.1; +http://www.apple.com/go/applebot)
Mozilla/5.0 (iPhone; CPU iPhone OS 8_1 like Mac OS X) AppleWebKit/600.1.4 (KHTML, like Gecko) Version/8.0 Mobile/12B410 Safari/600.1.4 (Applebot/0.1; +http://www.apple.com/go/applebot)
Applebotのuser-agentは3月の初旬からあって、それ以前は見付からなかった。
それ以前は、botであることを明示していなかったのかな？
Re:webサーバのログを確認 (スコア:1)
17.0.0.0/8 から来てるの、ほとんどボットじゃない？appleはだいたいのサービスを17.0.0.0/8でやってるらしいから。
Apple vs. Google (スコア:0)
アップル、Googleの牙城を崩せるか～Spotlight検索エンジン開発グループを増員中 [livedoor.com]
記事にする必要あるの？ (スコア:3, 参考になる)
robots.txt無視とか、集めた情報勝手に売ってるなら、フザケんなクソ野郎と叩くが、まっとうな使い方してるようにしか見えませんし。