Роботы.txt Распределение использования в Сальвадоре

Вверху Роботы.txt Распределение использования в Сальвадоре

Технологии	Веб-сайты	%
Google AdsBot Disallow	466	15,03
Googlebot Disallow	350	11,29
Google AdsBot Mobile Disallow	338	10,9
Robots Disallow	198	6,39
Ahrefs Bot Disallow	120	3,87
AppleBot Disallow	100	3,23
GPTBot Disallow	96	3,1
Common Crawl Bot Disallow	96	3,1
Anthropic Claude Bot Disallow	95	3,06
Google Bard Disallow	94	3,03
Facebook Bot Disallow	94	3,03
Apple AI Bot Disallow	94	3,03
Perplexity	94	3,03
Cohere AI Disallow	92	2,97
Baidu Bot Disallow	88	2,84
Google AdsBot Mobile Apps Disallow	88	2,84
Google Media Partners Disallow	73 *	2,35
Sogou Bot Disallow	73	2,35
Yandex Bot Disallow	66	2,13
Some Robots Disallow	65	2,1
Microsoft BingBot Disallow	62	2
Alexa Bot Disallow	57	1,84
Yahoo Slurp Disallow	55	1,77
Soso Bot Disallow	52	1,68
Majestic Bot Disallow	20	0,65
Semrush Bot Disallow	19	0,61
Microsoft MSNBot Disallow	13	0,42
ByteDance Bytespider Disallow	8	0,26
Webz Omgili Disallow	7	0,23
Exalead Bot Disallow	5	0,16
Google Image Bot Disallow	5	0,16
Diffbot Disallow	4	0,13
YOU Disallow	4	0,13
360 Bot Disallow	3	0,1
BuiltWithBot Disallow	2	0,06
Google News Bot Disallow	1	0,03
Google Video Bot Disallow	1	0,03
DuckDuckGo Bot Disallow	1	0,03
Google API Bot Disallow	1	0,03

3 100 Обнаружения

из Роботы.txt в Сальвадоре. Последнее обновление 07th мар 2025.

Google AdsBot Disallow в настоящее время является самой популярной технологией в этой категории.