Роботы.txt Распределение использования в Бурунди

Топ в Роботы.txt Распределение использования в Бурунди

Технологии	Веб-сайты	%
Robots Disallow	44	16,73
Sogou Bot Disallow	21	7,98
Yandex Bot Disallow	21	7,98
Microsoft BingBot Disallow	20	7,6
Alexa Bot Disallow	19	7,22
Yahoo Slurp Disallow	19	7,22
Soso Bot Disallow	19	7,22
Some Robots Disallow	17	6,46
Ahrefs Bot Disallow	8	3,04
GPTBot Disallow	8	3,04
Common Crawl Bot Disallow	7	2,66
AppleBot Disallow	6	2,28
Anthropic Claude Bot Disallow	6	2,28
Google Bard Disallow	6	2,28
Facebook Bot Disallow	6	2,28
Apple AI Bot Disallow	6	2,28
Cohere AI Disallow	6	2,28
Perplexity	6	2,28
Majestic Bot Disallow	6	2,28
Google AdsBot Mobile Apps Disallow	5	1,9
Semrush Bot Disallow	4	1,52
ByteDance Bytespider Disallow	1	0,38
Webz Omgili Disallow	1	0,38
Diffbot Disallow	1	0,38

263 Обнаружения

из Роботы.txt в Бурунди. Последнее обновление 18th дек 2024.

Robots Disallow на данный момент является самой популярной технологией в этой категории.