Archivo robots.txt Distribución de uso En Wallis y Futuna

Arriba en Archivo robots.txt Distribución de uso En Wallis y Futuna

Tecnología	Sitios web	%
Robots Disallow	93	13,72
Baidu Bot Disallow	70	10,32
Googlebot Disallow	69	10,18
Sogou Bot Disallow	65	9,59
Alexa Bot Disallow	59	8,7
Yandex Bot Disallow	58	8,55
Microsoft BingBot Disallow	57	8,41
Yahoo Slurp Disallow	56	8,26
Soso Bot Disallow	55	8,11
Google Media Partners Disallow	29 *	4,28
Ahrefs Bot Disallow	7	1,03
Microsoft MSNBot Disallow	6	0,88
Google AdsBot Disallow	4	0,59
Majestic Bot Disallow	4	0,59
Semrush Bot Disallow	4	0,59
Google AdsBot Mobile Disallow	3	0,44
Common Crawl Bot Disallow	3	0,44
Google Image Bot Disallow	3	0,44
GPTBot Disallow	2	0,29
Anthropic Claude Bot Disallow	2	0,29
Google AdsBot Mobile Apps Disallow	2	0,29
ByteDance Bytespider Disallow	2	0,29
Exalead Bot Disallow	2	0,29
Webz Omgili Disallow	2	0,29
Google News Bot Disallow	2	0,29
Google Video Bot Disallow	2	0,29
DuckDuckGo Bot Disallow	2	0,29
Google Favicon Disallow	2	0,29
Google API Bot Disallow	2	0,29
Google DuplexWeb Disallow	2	0,29
AppleBot Disallow	1	0,15
Google Bard Disallow	1	0,15
Facebook Bot Disallow	1	0,15
Apple AI Bot Disallow	1	0,15
Perplexity	1	0,15
360 Bot Disallow	1	0,15
Diffbot Disallow	1	0,15
BuiltWithBot Disallow	1	0,15
Youdao Bot Disallow	1	0,15

678 Detecciones

de Archivo robots.txt En Wallis y Futuna. Última actualización 07th mar. 2025.

Robots Disallow Actualmente es la tecnología más popular en esta categoría.