Роботы.txt Распределение использования в Гуам

Топ в Роботы.txt Распределение использования в Гуам

Технологии	Веб-сайты	%
GPTBot Disallow	38	8,54
Anthropic Claude Bot Disallow	38	8,54
Common Crawl Bot Disallow	37	8,31
Google Bard Disallow	37	8,31
AppleBot Disallow	35	7,87
Facebook Bot Disallow	35	7,87
Apple AI Bot Disallow	35	7,87
Cohere AI Disallow	35	7,87
Perplexity	35	7,87
Google AdsBot Mobile Apps Disallow	34	7,64
Ahrefs Bot Disallow	30	6,74
Yandex Bot Disallow	15	3,37
Robots Disallow	7	1,57
Semrush Bot Disallow	6	1,35
Yahoo Slurp Disallow	4	0,9
ByteDance Bytespider Disallow	4	0,9
Alexa Bot Disallow	3	0,67
Majestic Bot Disallow	3	0,67
Webz Omgili Disallow	3	0,67
Sogou Bot Disallow	2	0,45
Microsoft BingBot Disallow	2	0,45
DuckDuckGo Bot Disallow	2	0,45
Soso Bot Disallow	1	0,22
Microsoft MSNBot Disallow	1	0,22
Diffbot Disallow	1	0,22
YOU Disallow	1	0,22
Pipl Disallow	1	0,22

445 Обнаружения

из Роботы.txt в Гуам. Последнее обновление 18th дек 2024.

GPTBot Disallow на данный момент является самой популярной технологией в этой категории.