Роботы.txt Распределение использования в Пакистан

Топ в Роботы.txt Распределение использования в Пакистан

Технологии	Веб-сайты	%
Ahrefs Bot Disallow	12 513	28,35
Google AdsBot Disallow	11 839	26,83
Robots Disallow	2 729	6,18
Googlebot Disallow	2 691	6,1
Baidu Bot Disallow	1 940	4,4
Some Robots Disallow	1 535	3,48
Sogou Bot Disallow	1 210	2,74
Microsoft BingBot Disallow	1 079	2,44
Yandex Bot Disallow	1 078	2,44
Yahoo Slurp Disallow	1 021	2,31
Alexa Bot Disallow	938	2,13
Soso Bot Disallow	878	1,99
Google AdsBot Mobile Disallow	579	1,31
Majestic Bot Disallow	475	1,08
Semrush Bot Disallow	442	1
Google Media Partners Disallow	423 *	0,96
Common Crawl Bot Disallow	284	0,64
Google Image Bot Disallow	272	0,62
GPTBot Disallow	256	0,58
AppleBot Disallow	205	0,46
Google Bard Disallow	190	0,43
Anthropic Claude Bot Disallow	167	0,38
ByteDance Bytespider Disallow	166	0,38
Facebook Bot Disallow	161	0,36
Apple AI Bot Disallow	148	0,34
Perplexity	146	0,33
Cohere AI Disallow	144	0,33
Google AdsBot Mobile Apps Disallow	141	0,32
Exalead Bot Disallow	130	0,29
Microsoft MSNBot Disallow	74	0,17
360 Bot Disallow	67	0,15
BuiltWithBot Disallow	67	0,15
Diffbot Disallow	24	0,05
Webz Omgili Disallow	23	0,05
Google News Bot Disallow	21	0,05
Youdao Bot Disallow	21	0,05
Google Video Bot Disallow	20	0,05
DuckDuckGo Bot Disallow	8	0,02
Google Favicon Disallow	6	0,01
Google API Bot Disallow	6	0,01
YOU Disallow	5	0,01
Google DuplexWeb Disallow	5	0,01
Pipl Disallow	3	0,01
Google FeedFetcher Disallow	1	0

44 131 Обнаружения

из Роботы.txt в Пакистан. Последнее обновление 04th янв 2025.

Ahrefs Bot Disallow на данный момент является самой популярной технологией в этой категории.