Роботы.txt Распределение использования в Саудовская Аравия

Топ в Роботы.txt Распределение использования в Саудовская Аравия

Технологии	Веб-сайты	%
Ahrefs Bot Disallow	4 265	9,96
Common Crawl Bot Disallow	3 989	9,32
Majestic Bot Disallow	3 800	8,88
Sogou Bot Disallow	3 742	8,74
Soso Bot Disallow	3 716	8,68
Exalead Bot Disallow	3 704	8,65
360 Bot Disallow	3 698	8,64
BuiltWithBot Disallow	3 690	8,62
Google AdsBot Disallow	2 199	5,14
Googlebot Disallow	1 903	4,45
Google AdsBot Mobile Disallow	1 700	3,97
Robots Disallow	1 271	2,97
Baidu Bot Disallow	405	0,95
GPTBot Disallow	381	0,89
Google Bard Disallow	354	0,83
Some Robots Disallow	343	0,8
AppleBot Disallow	330	0,77
Anthropic Claude Bot Disallow	330	0,77
Facebook Bot Disallow	328	0,77
Perplexity	318	0,74
Apple AI Bot Disallow	316	0,74
Cohere AI Disallow	311	0,73
Google AdsBot Mobile Apps Disallow	309	0,72
Yandex Bot Disallow	258	0,6
Alexa Bot Disallow	216	0,5
Microsoft BingBot Disallow	214	0,5
Yahoo Slurp Disallow	211	0,49
Semrush Bot Disallow	171	0,4
Google Media Partners Disallow	134 *	0,31
Microsoft MSNBot Disallow	37	0,09
ByteDance Bytespider Disallow	35	0,08
Google Image Bot Disallow	35	0,08
Webz Omgili Disallow	20	0,05
Google News Bot Disallow	14	0,03
Google Video Bot Disallow	11	0,03
DuckDuckGo Bot Disallow	11	0,03
Diffbot Disallow	8	0,02
Google Favicon Disallow	6	0,01
Google API Bot Disallow	6	0,01
Youdao Bot Disallow	5	0,01
Google DuplexWeb Disallow	5	0,01
YOU Disallow	3	0,01
Pipl Disallow	3	0,01
Google FeedFetcher Disallow	1	0

42 806 Обнаружения

из Роботы.txt в Саудовская Аравия. Последнее обновление 18th дек 2024.

Ahrefs Bot Disallow на данный момент является самой популярной технологией в этой категории.