Étiquette : Crawl

Exploration, logs, budget crawl, priorisation et gestion des paramètres d’URL.

Robot dans voiture volante
Recherche IA & moteurs génératifs

ChatGPT crawl davantage que Googlebot

Une étude menée sur 24,4 millions de requêtes montre que les crawlers liés à l’IA dépassent désormais Googlebot sur un échantillon de 69 sites. ChatGPT-User arrive largement en tête, dans un contexte où les logiques de crawl évoluent et où les usages entre robots se différencient de plus en plus. Une analyse publiée par Alli […]

Taille fichier Google
SEO technique

Google précise les limites de taille des fichiers crawlés

Google a retouché sa documentation sur les limites de taille des fichiers crawlés, après des incompréhensions côté SEO. Le texte rappelle la limite par défaut à 15 Mo, tout en précisant que Googlebot peut avoir un plafond plus bas (ex. 2 Mo) et que les limites peuvent varier selon le type de fichier (PDF vs […]

Gérer mes choix de confidentialité