Alors que des rumeurs couraient déjà depuis fin 2014 sur l’arrivée prochaine de Apple dans le domaine du search, il aura fallu attendre le mois de mai de cette année pour confirmer l’existence du robot d’exploration de la firme de Cupertino : AppleBot. A l’instar des autres crawlers, il est donc possible de lui communiquer des directives à suivre à l’aide du fichier robots.txt.
Applebot is the web crawler for Apple, used by products including Siri and Spotlight Suggestions.
Une particularité, et non des moindres, le caractérise cependant : si l’Applebot n’est pas mentionné, il respectera les directives du célèbre GoogleBot, soit le robot d’exploration de Google. Pour éviter ce comportement unique en son genre, il faudra donc explicitement citer l’AppleBot, quitte à ne pas lui spécifier de directives.
