Роботы.txt Распределение использования в Идти

Распространение для сайтов, использующих Роботы.txt технологии

626 Обнаружения

из Роботы.txt в Идти. Последнее обновление 18th дек 2024.

Robots Disallow Robots Disallow на данный момент является самой популярной технологией в этой категории.

Вершина 1m
Топ-1 000 000 сайтов по посещаемости
874 020
Вершина 100k
Топ-100 000 сайтов по посещаемости
153 037
Вершина 10k
Топ-10 000 сайтов по посещаемости
22 876
Весь Интернет
178 790 857
Соединенные Штаты
50 588 778
Германия
7 237 838
Великобритания
4 740 717
Россия
3 939 848
Австралия
3 044 952
Канада
2 171 895
Италия
1 870 671
Франция
1 316 306
Бразилия
1 252 692
.co
1 028 587
Нидерланды
1 027 984
Испания
948 549
Япония
886 466
Швейцария
840 439
Индия
776 532
Китай
603 997
PL Польша
489 698
NZ Новая Зеландия
476 834
BE Бельгия
459 548
SE Швеция
431 930
AT Австрия
369 196
ME .me
368 341
NO Норвегия
325 445
MX Мексика
304 901
DK Дания
304 179
CZ Чешская Республика
303 144
ZA Южная Африка
272 058
IE Ирландия
255 473
KR Южная Корея
249 673
RO Румыния
230 520
TR Турция
228 394
IO .io
227 045
CC Кокосовые острова
208 810
FI Финляндия
201 548
ID Индонезия
188 071
PH Филиппины
166 891
PT Португалия
147 793
TW Тайвань
139 650
SG Сингапур
135 643
AR Аргентина
128 286
HU Венгрия
115 422
TH Таиланд
111 114
CL Чили
110 976
HK Гонконг
104 263
TV .tv
104 119
GR Греция
102 772
UA Украина
99 253
VN Вьетнам
92 562
IL Израиль
85 209
AI Ангилья
81 414
SK Словакия
78 092
AE ОАЭ
76 621
VG Британские Виргинские острова
68 550
MY Малайзия
65 963
LU Люксембург
59 396
SA Саудовская Аравия
42 806
WS Самоа
40 273
PK Пакистан
39 825
LT Литва
37 943
IR Иран
37 152
BG Болгария
36 334
EE Эстония
34 581
IS Исландия
33 355
LV Латвия
32 987
CM Камерун
32 485
PE Перу
31 868
SI Словения
30 838
HR Хорватия
23 682
NU Ниуэ
22 071
PR Пуэрто-Рико
21 131
CR Коста-Рика
20 786
RS Сербия
19 357
EC Эквадор
18 587
BY Беларусь
18 512
NG Нигерия
17 007
KE Кения
16 943
IM Остров Мэн
16 818
PW Палау
16 358
UY Уругвай
16 270
LI Лихтенштейн
14 113
TO Тонга
13 912
DO Доминиканская Республика
13 526
RE Воссоединение
13 272
KZ Казахстан
13 255
MT Мальта
12 419
VC Святой Винсент и Гренадины
11 798
GG Гернси
11 714
MA Марокко
11 397
BD Бангладеш
11 269
GT Гватемала
10 794
EG Египет
10 244
SH Остров Святой Елены
10 043
LB Ливан
9 052
PA Панама
8 892
AL Албания
8 186
GE Грузия
8 119
LK Шри-Ланка
8 077
CY Кипр
7 994
VE Венесуэла
7 745
QA Катар
6 859
AM Армения
6 711
BZ Белиз
6 594
GH Гана
6 551
UG Уганда
6 311
TZ Танзания
6 201
UZ Узбекистан
6 010
SO Сомали
5 959
FM Микронезия
5 803
KW Кувейт
5 663
NP Непал
5 371
JO Иордания
4 690
MD Молдова
4 548
MK Македония
4 533
HN Гондурас
4 490
CX Остров Рождества
4 346
PY Парагвай
3 853
MU Маврикий
3 784
TN Тунис
3 563
GP Гваделупа
3 557
KH Камбоджа
3 349
BS Багамы
3 314
SV Сальвадор
3 233
MN Монголия
3 157
RW Руанда
3 128
AZ Азербайджан
3 110
BH Бахрейн
3 098
MC Монако
3 081
BO Боливия
3 057
AG Антигуа и Барбуда
2 948
BA Босния и Герцеговина
2 931
OM Оман
2 872
NA Намибия
2 833
VI Виргинские острова США
2 741
KY Каймановы острова
2 718
DZ Алжир
2 686
ZW Зимбабве
2 508
ST Сан-Томе и Принсипи
2 482
TT Тринидад и Тобаго
2 365
JE Джерси
2 330
FO Фарерские острова
2 253
JM Ямайка
2 215
ZM Замбия
2 153
AF Афганистан
2 151
BM Бермуды
2 113
ET Эфиопия
2 077
NI Никарагуа
2 035
SC Сейшельские острова
1 984
PM Сен-Пьер и Микелон
1 948
MS Монтсеррат
1 824
BB Барбадос
1 744
SX Синт-Мартен
1 696
MM Мьянма
1 662
IQ Ирак
1 620
MZ Мозамбик
1 619
NC Новая Каледония
1 614
MV Мальдивы
1 607
AD Андорра
1 577
CI Берег Слоновой Кости
1 548
AO Ангола
1 464
YT Майотта
1 384
FJ Фиджи
1 361
MQ Мартиника
1 328
BW Ботсвана
1 314
CD Конго
1 304
LC Санкт-Люсия
1 302
SN Сенегал
1 281
TC Острова Тёркс и Кайкос
1 258
KG Кыргызстан
1 231
AS американское Самоа
1 207
GL Гренландия
1 148
ML Мали
1 074
MG Мадагаскар
1 038
GI Гибралтар
1 016
AW Аруба
936
HT Гаити
915
PS Палестина
887
GY Гайана
887
GD Гренада
864
GS Южная Георгия и Южные Сандвичевы острова
844
VU Вануату
706
TG Идти
626
MW Малави
622
BF Буркина-Фасо
596
TJ Таджикистан
587
WF Уоллис и Футуна
584
GM Гамбия
574
CU Куба
534
DJ Джибути
498
PG Папуа - Новая Гвинея
462
NE Нигер
456
GF Французская Гвиана
448
GU Гуам
445
BN Бруней
432
AX Аландские острова
430
BJ Бенин
417
SL Сьерра-Леоне
379
SR Суринам
378
SB Соломоновы острова
349
YE Йемен
338
TL Восточный Тимор
336
SD Судан
300
LR Либерия
297
CK Острова Кука
292
LA Лаосская Народно-Демократическая Республика
282
PF Французская Полинезия
265
BI Бурунди
263
SM Сан-Марино
248
HM Остров Херд и острова Макдональда
242
LY Ливия
232
TM Туркменистан
218
SY Сирия
188
CW Кюрасао
184
MP Северные Марианские острова
184
BT Бутан
182
SZ Свазиленд
180
KN Сент-Китс и Невис
162
GA Габон
160
SJ Шпицберген и Ян-Майен
160
LS Лесото
148
MR Мавритания
142
DM Доминика
130
MO Макао
128
UM Малые отдаленные острова США
84
NF Остров Норфолк
80
CV Кабо-Верде
79
VA Ватикан
73
CG Конго
69
GN Гвинея
69
TD Чад
63
KI Кирибати
61
FK Фолклендские острова
52
SS южный Судан
52
BL Сен-Бартелеми
50
GW Гвинея-Бисау
48
MH Маршалловы острова
47
PN Питкэрн
32
NR Науру
28
AQ Антарктида
23
BQ Бонайре
20
ER Эритрея
16
GQ Экваториальная Гвинея
12
Категории