Роботы.txt Распределение использования в Саудовская Аравия

Топ в Роботы.txt Распределение использования в Саудовская Аравия

Технологии	Веб-сайты	%
Ahrefs Bot Disallow	4 544	9,98
Common Crawl Bot Disallow	4 199	9,22
Soso Bot Disallow	4 121	9,05
Sogou Bot Disallow	4 111	9,03
Majestic Bot Disallow	4 012	8,81
Exalead Bot Disallow	3 910	8,59
360 Bot Disallow	3 904	8,57
BuiltWithBot Disallow	3 896	8,56
Google AdsBot Disallow	2 184	4,8
Googlebot Disallow	1 917	4,21
Google AdsBot Mobile Disallow	1 664	3,65
Robots Disallow	1 606	3,53
Baidu Bot Disallow	419	0,92
GPTBot Disallow	384	0,84
Some Robots Disallow	380	0,83
Google Bard Disallow	358	0,79
Anthropic Claude Bot Disallow	342	0,75
AppleBot Disallow	341	0,75
Facebook Bot Disallow	337	0,74
Perplexity	330	0,72
Apple AI Bot Disallow	326	0,72
Cohere AI Disallow	320	0,7
Google AdsBot Mobile Apps Disallow	317	0,7
Yandex Bot Disallow	303	0,67
Alexa Bot Disallow	265	0,58
Microsoft BingBot Disallow	264	0,58
Yahoo Slurp Disallow	256	0,56
Semrush Bot Disallow	174	0,38
Google Media Partners Disallow	135 *	0,3
ByteDance Bytespider Disallow	38	0,08
Google Image Bot Disallow	37	0,08
Microsoft MSNBot Disallow	36	0,08
Webz Omgili Disallow	20	0,04
Google News Bot Disallow	15	0,03
Google Video Bot Disallow	12	0,03
DuckDuckGo Bot Disallow	12	0,03
Diffbot Disallow	8	0,02
Google Favicon Disallow	7	0,02
Google API Bot Disallow	7	0,02
Google DuplexWeb Disallow	6	0,01
Youdao Bot Disallow	5	0,01
YOU Disallow	4	0,01
Pipl Disallow	3	0,01
Google FeedFetcher Disallow	1	0

45 530 Обнаружения

из Роботы.txt в Саудовская Аравия. Последнее обновление 04th янв 2025.

Ahrefs Bot Disallow на данный момент является самой популярной технологией в этой категории.