Robots.txt Distribución de uso en Guam

Distribución para sitios web que utilizan Robots.txt tecnologías

Tecnología	Sitios web	%
GPTBot Disallow	38	8,54
Anthropic Claude Bot Disallow	38	8,54
Common Crawl Bot Disallow	37	8,31
Google Bard Disallow	37	8,31
AppleBot Disallow	35	7,87
Facebook Bot Disallow	35	7,87
Apple AI Bot Disallow	35	7,87
Cohere AI Disallow	35	7,87
Perplexity	35	7,87
Google AdsBot Mobile Apps Disallow	34	7,64
Ahrefs Bot Disallow	30	6,74
Yandex Bot Disallow	15	3,37
Robots Disallow	7	1,57
Semrush Bot Disallow	6	1,35
Yahoo Slurp Disallow	4	0,9
ByteDance Bytespider Disallow	4	0,9
Alexa Bot Disallow	3	0,67
Majestic Bot Disallow	3	0,67
Webz Omgili Disallow	3	0,67
Sogou Bot Disallow	2	0,45
Microsoft BingBot Disallow	2	0,45
DuckDuckGo Bot Disallow	2	0,45
Soso Bot Disallow	1	0,22
Microsoft MSNBot Disallow	1	0,22
Diffbot Disallow	1	0,22
YOU Disallow	1	0,22
Pipl Disallow	1	0,22