Robots.txt Distribución de uso en Uzbekistán

Distribución para sitios web que utilizan Robots.txt tecnologías

Tecnología	Sitios web	%
Robots Disallow	1.529	25,44
Googlebot Disallow	938	15,61
Yandex Bot Disallow	635	10,57
Ahrefs Bot Disallow	442	7,35
Semrush Bot Disallow	423	7,04
Majestic Bot Disallow	406	6,76
Microsoft MSNBot Disallow	339	5,64
Google AdsBot Disallow	190	3,16
Some Robots Disallow	149	2,48
Google AdsBot Mobile Disallow	149	2,48
Baidu Bot Disallow	103	1,71
Microsoft BingBot Disallow	75	1,25
Alexa Bot Disallow	74	1,23
Yahoo Slurp Disallow	61	1,01
Sogou Bot Disallow	60	1
GPTBot Disallow	51	0,85
Google Image Bot Disallow	41	0,68
Soso Bot Disallow	40	0,67
Common Crawl Bot Disallow	33	0,55
Anthropic Claude Bot Disallow	30	0,5
ByteDance Bytespider Disallow	29	0,48
Google Bard Disallow	26	0,43
360 Bot Disallow	20	0,33
AppleBot Disallow	18	0,3
Google AdsBot Mobile Apps Disallow	18	0,3
Exalead Bot Disallow	18	0,3
Facebook Bot Disallow	16	0,27
Apple AI Bot Disallow	15	0,25
Cohere AI Disallow	13	0,22
Perplexity	13	0,22
Google News Bot Disallow	8	0,13
Google Video Bot Disallow	8	0,13
Webz Omgili Disallow	7	0,12
DuckDuckGo Bot Disallow	7	0,12
Google Favicon Disallow	7	0,12
Google API Bot Disallow	7	0,12
Google DuplexWeb Disallow	7	0,12
BuiltWithBot Disallow	2	0,03
Diffbot Disallow	2	0,03
YOU Disallow	1	0,02