Robots.txt Distribuzione dell'utilizzo In Uzbekistan

Distribuzione per i siti Web che utilizzano Robots.txt tecnologie

Tecnologia	Siti web	%
Robots Disallow	1.862	28,44
Googlebot Disallow	943	14,4
Yandex Bot Disallow	707	10,8
Ahrefs Bot Disallow	491	7,5
Semrush Bot Disallow	464	7,09
Majestic Bot Disallow	445	6,8
Microsoft MSNBot Disallow	372	5,68
Google AdsBot Disallow	207	3,16
Some Robots Disallow	185	2,83
Baidu Bot Disallow	96	1,47
Alexa Bot Disallow	87	1,33
Microsoft BingBot Disallow	86	1,31
Yahoo Slurp Disallow	69	1,05
Sogou Bot Disallow	67	1,02
GPTBot Disallow	51	0,78
Soso Bot Disallow	47	0,72
Google Image Bot Disallow	45	0,69
Common Crawl Bot Disallow	35	0,53
Anthropic Claude Bot Disallow	32	0,49
ByteDance Bytespider Disallow	31	0,47
Google Bard Disallow	27	0,41
Exalead Bot Disallow	23	0,35
360 Bot Disallow	21	0,32
AppleBot Disallow	19	0,29
Google AdsBot Mobile Apps Disallow	18	0,27
Facebook Bot Disallow	17	0,26
Apple AI Bot Disallow	15	0,23
Cohere AI Disallow	14	0,21
Perplexity	13	0,2
Webz Omgili Disallow	8	0,12
Google News Bot Disallow	8	0,12
Google Video Bot Disallow	8	0,12
DuckDuckGo Bot Disallow	7	0,11
Google Favicon Disallow	7	0,11
Google API Bot Disallow	7	0,11
Google DuplexWeb Disallow	7	0,11
BuiltWithBot Disallow	3	0,05
Diffbot Disallow	2	0,03
YOU Disallow	1	0,02