at_yasu's blog

ロード的なことを

Twitter で URL 流したらやってきたクローラー一覧メモ

多分ここらへん。FriendFeed のAdobeAirアプリがあるのにへぇ〜と思うなど。

  • Twitturly / v0.6
  • PEAR HTTP_Request class ( http://pear.php.net/ )
  • mozilla/5.0 (compatible; googlebot/2.1; +http://www.google.com/bot.html)
  • AppEngine-Google; (+http://code.google.com/appengine; appid: retimeme)
  • Mozilla/5.0 (compatible; MSIE 6.0b; Windows NT 5.0) Gecko/2009011913 Firefox/3.0.6 TweetmemeBot
  • "app:/AFriendFeed.swf" "Mozilla/5.0 (Macintosh; U; Intel Mac OS X; en) AppleWebKit/531.9 (KHTML, like Gecko) AdobeAIR/2.6
  • Mozilla/5.0 (compatible; Jetslide; +http://jetsli.de)
  • PostRank/2.0 (postrank.com)
  • PycURL/7.18.2
  • urlresolver
  • Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0) *1
  • Voyager/1.0
  • Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)
  • LinkedInBot/1.0 (compatible; Mozilla/5.0; Jakarta Commons-HttpClient/3.1 +http://www.linkedin.com)
  • Summify (Summify/1.0.1; +http://summify.com)
  • Atig::Http/5a541315ea95eb852726f00a070a60b271ea614d (http.rb; net-irc) Ruby/1.9.3 (x86_64-linux)
  • MetaURI API/2.0 +metauri.com
  • Mozilla/5.0 (compatible; Jetslide; +http://jetsli.de)
  • Twitterbot/0.1
  • Mediapartners-Google

*1:favicon.ico を取得した形跡が無いのでクローラーと判断