Роботы.txt Распределение использования в Германия

Топ в Роботы.txt Распределение использования в Германия

Технологии	Веб-сайты	%
Googlebot Disallow	985 224	13,61
Baidu Bot Disallow	701 461	9,69
Sogou Bot Disallow	467 032	6,45
Yandex Bot Disallow	443 104	6,12
Alexa Bot Disallow	437 699	6,05
Microsoft BingBot Disallow	434 071	6
Yahoo Slurp Disallow	427 121	5,9
Soso Bot Disallow	416 104	5,75
Ahrefs Bot Disallow	375 022	5,18
Majestic Bot Disallow	293 613	4,06
Some Robots Disallow	290 876	4,02
Semrush Bot Disallow	286 429	3,96
Google AdsBot Disallow	275 504	3,81
Robots Disallow	268 898	3,72
ByteDance Bytespider Disallow	243 883	3,37
Google AdsBot Mobile Disallow	198 255	2,74
GPTBot Disallow	55 714	0,77
Google AdsBot Mobile Apps Disallow	50 228	0,69
Common Crawl Bot Disallow	49 729	0,69
Anthropic Claude Bot Disallow	44 849	0,62
Google Bard Disallow	42 494	0,59
Facebook Bot Disallow	40 874	0,56
AppleBot Disallow	40 050	0,55
Cohere AI Disallow	36 860	0,51
Apple AI Bot Disallow	36 314	0,5
Perplexity	34 913	0,48
Google Image Bot Disallow	32 247	0,45
Google Media Partners Disallow	31 482 *	0,43
Microsoft MSNBot Disallow	26 712	0,37
DuckDuckGo Bot Disallow	23 833	0,33
Exalead Bot Disallow	23 059	0,32
Google News Bot Disallow	19 321	0,27
Google Video Bot Disallow	19 305	0,27
Google Favicon Disallow	19 029	0,26
Google API Bot Disallow	18 964	0,26
Google DuplexWeb Disallow	18 819	0,26
Webz Omgili Disallow	10 476	0,14
360 Bot Disallow	7 787	0,11
BuiltWithBot Disallow	4 784	0,07
Diffbot Disallow	2 696	0,04
YOU Disallow	1 781	0,02
Pipl Disallow	788	0,01
Youdao Bot Disallow	276	0
Google FeedFetcher Disallow	131	0
Google Read Aloud Disallow	18	0
Google Web Light Disallow	5	0
Google BIG Bench Disallow	4	0

7 237 838 Обнаружения

из Роботы.txt в Германия. Последнее обновление 18th дек 2024.

Googlebot Disallow на данный момент является самой популярной технологией в этой категории.