Роботы.txt Распределение использования в Непал

Топ в Роботы.txt Распределение использования в Непал

Технологии	Веб-сайты	%
Robots Disallow	1 236	20,95
Googlebot Disallow	587	9,95
GPTBot Disallow	335	5,68
Google AdsBot Disallow	314	5,32
Baidu Bot Disallow	306	5,19
Some Robots Disallow	268	4,54
Google AdsBot Mobile Disallow	221	3,75
Google Media Partners Disallow	203 *	3,44
Yandex Bot Disallow	199	3,37
Sogou Bot Disallow	187	3,17
Ahrefs Bot Disallow	171	2,9
Alexa Bot Disallow	158	2,68
Microsoft BingBot Disallow	157	2,66
Yahoo Slurp Disallow	151	2,56
Soso Bot Disallow	130	2,2
Common Crawl Bot Disallow	126	2,14
Google Bard Disallow	122	2,07
AppleBot Disallow	115	1,95
Facebook Bot Disallow	115	1,95
Anthropic Claude Bot Disallow	112	1,9
Apple AI Bot Disallow	107	1,81
Majestic Bot Disallow	88	1,49
Cohere AI Disallow	86	1,46
Perplexity	86	1,46
Semrush Bot Disallow	85	1,44
Google AdsBot Mobile Apps Disallow	80	1,36
Webz Omgili Disallow	32	0,54
Microsoft MSNBot Disallow	23	0,39
Google Image Bot Disallow	20	0,34
Exalead Bot Disallow	18	0,31
ByteDance Bytespider Disallow	15	0,25
DuckDuckGo Bot Disallow	10	0,17
Diffbot Disallow	8	0,14
360 Bot Disallow	6	0,1
Youdao Bot Disallow	6	0,1
BuiltWithBot Disallow	5	0,08
Google News Bot Disallow	3	0,05
Google Video Bot Disallow	2	0,03
Google API Bot Disallow	2	0,03
YOU Disallow	1	0,02
Google Favicon Disallow	1	0,02
Google DuplexWeb Disallow	1	0,02
Pipl Disallow	1	0,02
Google FeedFetcher Disallow	1	0,02

5 900 Обнаружения

из Роботы.txt в Непал. Последнее обновление 04th янв 2025.

Robots Disallow на данный момент является самой популярной технологией в этой категории.