Роботы.txt Распределение использования в Кабо-Верде

Топ в Роботы.txt Распределение использования в Кабо-Верде

Технологии	Веб-сайты	%
Robots Disallow	19	24,05
Alexa Bot Disallow	6	7,59
GPTBot Disallow	4	5,06
Common Crawl Bot Disallow	4	5,06
AppleBot Disallow	4	5,06
Anthropic Claude Bot Disallow	4	5,06
Google Bard Disallow	4	5,06
Facebook Bot Disallow	4	5,06
Apple AI Bot Disallow	4	5,06
Cohere AI Disallow	4	5,06
Perplexity	4	5,06
Google AdsBot Mobile Apps Disallow	4	5,06
Majestic Bot Disallow	4	5,06
Ahrefs Bot Disallow	3	3,8
Semrush Bot Disallow	2	2,53
Google Image Bot Disallow	2	2,53
Yahoo Slurp Disallow	1	1,27
Exalead Bot Disallow	1	1,27
Microsoft MSNBot Disallow	1	1,27

79 Обнаружения

из Роботы.txt в Кабо-Верде. Последнее обновление 18th дек 2024.

Robots Disallow на данный момент является самой популярной технологией в этой категории.