Nouvelles fonctionnalités de Googlebot : Présentation des crawlers GoogleOther-Image et GoogleOther-Video
Google a récemment enrichi sa famille de robots d’exploration Web, connus sous le nom de Googlebot, en introduisant deux nouvelles variantes ciblées : GoogleOther-Image et GoogleOther-Video. Ces nouvelles versions sont optimisées pour extraire des données binaires sous formes d’images et de vidéos, respectivement, offrant une meilleure prise en charge dans la recherche et le développement.
Les spécificités des nouveaux crawlers de Google
- GoogleOther-Image – Conçu pour accéder efficacement aux URL d’images disponibles publiquement, son identifiant d’agent utilisateur combine GoogleOther-Image et GoogleOther, avec la chaîne complète de l’agent utilisateur désignée par GoogleOther-Image/1.0.
- GoogleOther-Video – Similaire à la version Image mais adapté pour les URL de vidéos publiques, cet agent utilise également les tokens GoogleOther-Video et GoogleOther dans sa chaîne d’agent utilisateur, précisée par GoogleOther-Video/1.0.
Raison de ces développements : Google souligne que l’amélioration de l’exploration des contenus multimédias enrichit la capacité du moteur de recherche à supporter innovativement les recherches et les études technologiques.
Exploration par Google : types de crawlers
- Googlebot principal – Le crawler principal pour les produits de recherche de Google, toujours en conformité avec les directives robots.txt.
- Crawlers spéciaux – Des robots dédiés à des fonctions spécifiques qui peuvent ou non observer les règles de robots.txt.
- Déclencheurs activés par l’utilisateur – Des outils et des fonctionnalités de produits qui initient l’exploration d’une page à la demande de l’utilisateur, comme le Google Site Verifier ou certains outils de Google Search Console.
En outre, Google a mis à disposition les plages d’adresses IP et les masques DNS inversés pour chaque type de crawlers, permettant ainsi aux webmasters de mieux comprendre et contrôler l’accès de ces robots à leurs sites.
Importance pour les professionnels du web
L’apparition de ces nouvelles versions de GoogleOther est cruciale pour les administrateurs de sites web qui surveillent régulièrement les activités d’exploration et la fréquentation bot de leurs sites. La reconnaissance de ces nouveaux agents peut aider à assurer que les analyses de trafic demeurent précises et que les ressources web sont optimisées pour une exploration efficace.
Ces développements démontrent l’engagement continu de Google envers l’amélioration des technologies d’indexation et d’exploration du web, affinant ainsi l’expérience des utilisateurs et des professionnels du numérique.