Pour ceux qui se risquent encore à faire du "cloaking" à l'attention des moteurs de recherche, voici une bonne source pour connaitre les véritables adresses IP des robots, comme GoogleBot, Exabot ou Yahoo Slurp.

Cela vient de l'interface de démo de Crawltrack, un outil de tracking des passages de robots. Voir la liste des robots venus sur ce site pendant 1 an.  Ce n'est pas 100% complet car rien ne dit que d'autres IP ne sont pas utilisées pour auditer d'autres sites, et des faux robots ont pu se glisser dans la liste, mais c'est quand même un bon début.

Spywords surveille également les passages de robots, mais ne donne pas cette information.

Pour ceux qui sont pressés, whois.arin.net donne une large plage d'adresses comme appartenant à Google (ne dit pas qu'il s'agit de la seule plage d'adresses) :

OrgName:    Google Inc.
OrgID:      GOGL
Address:    1600 Amphitheatre Parkway
City:       Mountain View
StateProv:  CA
PostalCode: 94043
Country:    US

NetRange:   66.249.64.0 - 66.249.95.255
CIDR:       66.249.64.0/19
NetName:    GOOGLE
NetHandle:  NET-66-249-64-0-1
Parent:     NET-66-0-0-0-0
NetType:    Direct Allocation
NameServer: NS1.GOOGLE.COM
NameServer: NS2.GOOGLE.COM
Comment:
RegDate:    2004-03-05
Updated:    2004-11-10

OrgTechHandle: ZG39-ARIN
OrgTechName:   Google Inc.
OrgTechPhone:  +1-650-318-0200
OrgTechEmail:  arin-contact@google.com

# ARIN WHOIS database, last updated 2006-10-18 19:10

Premier billet sur ce sujet, à suivre