тенур войти
срез? 17 сентября 2026 · скоро освободятся

Статистика рунета

Что стоит на сайтах зон .ru, .рф и .su — по собственному обходу каждого сайта, а не по выборке. Движки, серверы, HTTPS, хостинг, тематика, регионы, вёрстка, ошибки, роботы ИИ — с числом, долей и объяснением, как это посчитано.

сайтов с профилем 39 669 из 40 786 хостов, у которых есть адрес в DNS
6 %живые сайты
19 %HTTPS
24 %адаптивная вёрстка

Что успела измерить перепись

У каждого показателя своя база: доля движков считается от сайтов с профилем, доля HTTPS — от ответивших по HTTP, доля адаптивной вёрстки — от прошедших глубокий разбор. Знаменатель написан рядом с каждым графиком, потому что без него процент ничего не значит.

Первый проход зоны ещё идёт: цифры растут каждую ночь, а доли устаканиваются по мере того, как обход доходит до хвоста реестра.

40 786хостов резолвится у имени есть адрес в DNS — сайт теоретически можно открыть
39 669сайтов с профилем 100,0 % от сайтов с профилем
36 511ответили по HTTP 92,0 % от сайтов с профилем
7 072с сертификатом 17,8 % от сайтов с профилем
37 417с фактами о странице 94,3 % от сайтов с профилем
36 056с глубоким разбором 90,9 % от сайтов с профилем
2 145с тематикой 5,4 % от сайтов с профилем
1 892с регионом 4,8 % от сайтов с профилем
2 018с robots.txt 5,1 % от сайтов с профилем
46 923сверены со списками домены, проверенные по публичным спискам блокировок
1 / 14

Живые сайты и заглушки

Ответ по HTTP ещё не значит, что там есть сайт. Заглушку истёкшей регистрации, парковку регистратора, страницу хостинга «сайт не настроен» и пустой ответ перепись отличает от настоящего сайта по содержимому, а не по коду ответа: код 200 у них у всех.

  • Из 36 511 ответивших по HTTP живой сайт — у 2 214 (6,1 %). Остальное — заглушки: страницы, за которыми нет сайта.
  • Самая частая — «истёкшая регистрация»: 18 571 домен (50,9 %). Домен куплен, срок вышел, регистратор поставил свою страницу.
  • Среди живых чаще всего встречается тип «корпоративный» — 1 260 сайтов; магазинов — 295, лендингов — 544.
что отвечает домен · от 36 511
истёкшая регистрация 18 571 · 50,9 %
ошибка сервера 10 433 · 28,6 %
парковка хостера 2 899 · 7,9 %
живой сайт 2 214 · 6,1 %
ошибка 4xx 996 · 2,7 %
пустая страница 876 · 2,4 %
хостинг: сайт не привязан 162 · 0,4 %
хостинг: сайт отключён 106 · 0,3 %
«домен продаётся» 60 · 0,2 %

от ответивших по HTTP; «живой сайт» — первая строка

таблицей
значениесайтовдоля
истёкшая регистрация18 57150,9 %
ошибка сервера10 43328,6 %
парковка хостера2 8997,9 %
живой сайт2 2146,1 %
ошибка 4xx9962,7 %
пустая страница8762,4 %
хостинг: сайт не привязан1620,4 %
хостинг: сайт отключён1060,3 %
«домен продаётся»600,2 %
типы сайтов · от 39 669
истёкший 20 126 · 50,7 %
заглушка 14 022 · 35,3 %
парковка 3 012 · 7,6 %
корпоративный 1 260 · 3,2 %
лендинг 544 · 1,4 %
магазин 295 · 0,7 %
заблокирован 240 · 0,6 %
СМИ / медиа 99 · 0,2 %
блог 54 · 0,1 %

тип определяется по содержимому главной

таблицей
значениесайтовдоля
истёкший20 12650,7 %
заглушка14 02235,3 %
парковка3 0127,6 %
корпоративный1 2603,2 %
лендинг5441,4 %
магазин2950,7 %
заблокирован2400,6 %
СМИ / медиа990,2 %
блог540,1 %
2 / 14

Движки сайтов

Сайт не говорит, на чём он сделан, — это видно по следам: путям вида /bitrix/ или /wp-content/, именам кук, заголовкам ответа, meta generator. Движок называется, когда совпало несколько признаков; один спорный — не называется. «Не определён» значит именно это, а не «самописный».

  • Движок опознан у 3 269 сайтов из 39 669 с профилем — 8,2 %. У остальных его нет или он не оставляет следов: большая часть «не определён» — заглушки и парковки без движка вовсе.
  • Next.js — 1 426 сайтов, 43,6 % от опознанных.
  • Следом Tilda (910) и WordPress (511).
движки — по числу сайтов · от 39 669
Next.js 1 426 · 3,6 %
Tilda 910 · 2,3 %
WordPress 511 · 1,3 %
1C-Bitrix 124 · 0,3 %
Joomla 74 · 0,2 %
MODX 30 · 0,1 %
OpenCart 26 · 0,1 %
Drupal 21 · 0,1 %
uCoz 12 · 0,0 %
Shop-Script (Webasyst) 12 · 0,0 %

доля — от всех сайтов с профилем; не определён — 36 400 (91,8 %)

таблицей
значениесайтовдоля
Next.js1 4263,6 %
Tilda9102,3 %
WordPress5111,3 %
1C-Bitrix1240,3 %
Joomla740,2 %
MODX300,1 %
OpenCart260,1 %
Drupal210,1 %
uCoz120,0 %
Shop-Script (Webasyst)120,0 %
не определён36 40091,8 %
3 / 14

Технологии

Отпечатки технологий — по открытой базе (webappanalyzer) плюс сигнатуры рунета: скрипты, заголовки, куки, ссылки. Категории — те же технологии, сложенные по назначению: серверы, удостоверяющие центры, аналитика, библиотеки, шрифты.

  • Чаще всего у сайта виден Nginx — 32 788 сайтов, 82,7 %.
  • jQuery по-прежнему на 5 072 сайтах (12,8 %) — фронтенд рунета старше, чем принято думать.
  • Яндекс Метрика стоит на 9 268 сайтах (23,4 %); счётчик — самый частый способ понять, что сайт вообще кто-то ведёт.
технологии · от 39 669
Nginx 32 788 · 82,7 %
Yandex.Metrika 9 268 · 23,4 %
HSTS 8 693 · 21,9 %
React 8 156 · 20,6 %
Open Graph 6 821 · 17,2 %
Google Fonts 6 643 · 16,7 %
Google Font API 6 608 · 16,7 %
jQuery 5 072 · 12,8 %
Bootstrap 4 156 · 10,5 %
Cloudflare 2 812 · 7,1 %
Let's Encrypt 2 746 · 6,9 %

один сайт может быть в нескольких строках

таблицей
значениесайтовдоля
Nginx32 78882,7 %
РСЯ (Яндекс Реклама)10 71227,0 %
Yandex.Metrika9 26823,4 %
HSTS8 69321,9 %
React8 15620,6 %
Open Graph6 82117,2 %
Google Fonts6 64316,7 %
Google Font API6 60816,7 %
jQuery5 07212,8 %
Bootstrap4 15610,5 %
Cloudflare2 8127,1 %
Let's Encrypt2 7466,9 %
категории технологий · от 39 669
Веб-серверы 34 586 · 87,2 %
Реклама 10 748 · 27,1 %
Аналитика и счётчики 9 687 · 24,4 %
Защита и анти-бот 9 096 · 22,9 %
JS-фреймворки 8 402 · 21,2 %
Разное 7 667 · 19,3 %
JS-библиотеки 7 018 · 17,7 %
Шрифты 6 977 · 17,6 %

сайты с хотя бы одной технологией категории

таблицей
значениесайтовдоля
Веб-серверы34 58687,2 %
Реклама10 74827,1 %
Аналитика и счётчики9 68724,4 %
Защита и анти-бот9 09622,9 %
JS-фреймворки8 40221,2 %
Разное7 66719,3 %
JS-библиотеки7 01817,7 %
Шрифты6 97717,6 %
4 / 14

Веб-серверы, CDN и защита

Имя сервера — из заголовка Server ответа; за CDN виден он, а не сервер сайта. CDN и анти-DDoS узнаются по адресу, заголовкам и куки: DDoS-Guard, Cloudflare, Qrator, Variti. Это то, что сайт показывает любому браузеру, — ничего сверх.

  • nginx отдаёт 31 720 сайтов — 86,9 % ответивших.
  • За CDN или анти-DDoS стоят 2 276 сайтов (6,2 %); остальные отвечают сами.
веб-серверы · от 36 511
nginx 31 720 · 86,9 %
Apache 1 697 · 4,6 %
Qrator 1 424 · 3,9 %
Cloudflare 593 · 1,6 %
axelname 497 · 1,4 %
DDoS-Guard 251 · 0,7 %
OpenResty 102 · 0,3 %
lighttpd 53 · 0,1 %

не указан — 50 (0,1 %)

таблицей
значениесайтовдоля
nginx31 72086,9 %
Apache1 6974,6 %
Qrator1 4243,9 %
Cloudflare5931,6 %
axelname4971,4 %
DDoS-Guard2510,7 %
OpenResty1020,3 %
lighttpd530,1 %
не указан500,1 %
CDN и анти-DDoS · от 36 511
  • Cloudflare1,6 %
  • DDoS-Guard0,7 %
  • Qrator3,9 %
  • Fastly0,0 %
  • другие0,0 %
  • без CDN93,8 %

серый — без CDN

таблицей
значениесайтовдоля
Cloudflare5981,6 %
DDoS-Guard2510,7 %
Qrator1 4243,9 %
Fastly10,0 %
другие20,0 %
без CDN34 23593,8 %
WAF · от 36 511
  • Qrator3,9 %
  • Cloudflare1,6 %
  • DDoS-Guard0,7 %
  • другие0,0 %
  • без WAF93,8 %

серый — без WAF

таблицей
значениесайтовдоля
Qrator1 4243,9 %
Cloudflare5981,6 %
DDoS-Guard2510,7 %
другие70,0 %
без WAF34 23193,8 %
5 / 14

HTTPS и сертификаты

Сначала сайт пробуется по https, потом по http; сертификат читается из TLS-рукопожатия: кто выдал, какого типа (DV/OV/EV), до какого числа, какая версия протокола. Доля HTTPS считается от ответивших, доли по сертификатам — от сайтов, у которых он есть.

  • HTTPS у 6 948 сайтов из 36 511 ответивших — 19,0 %. Остальные открываются только по http, и браузер честно пишет «не защищено».
  • HTTP/2 умеют 4 585 сайтов (12,6 %).
  • Из сайтов с сертификатом 51,3 % договариваются по TLS 1.3.
  • Let's Encrypt выдал 2 891 сертификатов — 40,9 %; платные удостоверяющие центры остались у крупных.
  • Почти все сертификаты — DV, с проверкой только домена: 56,4 %; EV, с проверкой организации, — 1.
HTTPS · от 36 511
  • HTTPS19,0 %
  • только HTTP81,0 %
таблицей
значениесайтовдоля
HTTPS6 94819,0 %
только HTTP29 56381,0 %
HTTP/2 · от 36 511
  • HTTP/212,6 %
  • HTTP/1.187,4 %
таблицей
значениесайтовдоля
HTTP/24 58512,6 %
HTTP/1.131 92687,4 %
версии TLS · от 7 072
  • TLSv1.351,3 %
  • TLSv1.248,0 %
  • не указана0,6 %
таблицей
значениесайтовдоля
TLSv1.33 63151,3 %
TLSv1.23 39748,0 %
не указана440,6 %
типы сертификатов · от 7 072
  • EV0,0 %
  • OV43,6 %
  • DV56,4 %

EV и OV — с проверкой организации

таблицей
значениесайтовдоля
EV10,0 %
OV3 08343,6 %
DV3 98856,4 %
удостоверяющие центры · от 7 072
Let's Encrypt 2 891 · 40,9 %
самоподписанный (пример OpenSSL) 1 864 · 26,4 %
Tilda.Domains 720 · 10,2 %
Google Trust Services 558 · 7,9 %
GlobalSign 517 · 7,3 %
Sprinthost 401 · 5,7 %

не указан — 14 (0,2 %)

таблицей
значениесайтовдоля
Let's Encrypt2 89140,9 %
самоподписанный (пример OpenSSL)1 86426,4 %
Tilda.Domains72010,2 %
Google Trust Services5587,9 %
GlobalSign5177,3 %
Sprinthost4015,7 %
не указан140,2 %
6 / 14

Хостинг

Хостинг — по адресу сайта и автономной системе (AS), которой он принадлежит; бренд берётся по владельцу сети. Это честный ответ на вопрос «чей сервер», но не «у кого куплен тариф»: сайт может стоять за CDN или на своём железе в чужом дата-центре.

  • REG.RU держит 16 804 сайта — 42,4 % всех с профилем; заметная часть из них — парковка регистратора, а не хостинг.
  • Тройка — REG.RU, RU-CENTER, Beget — это 68,8 % рунета.
хостинги · от 39 669
REG.RU 16 804 · 42,4 %
RU-CENTER 6 979 · 17,6 %
Beget 3 501 · 8,8 %
Timeweb 2 132 · 5,4 %
Cloudflare 2 058 · 5,2 %
Selectel 1 981 · 5,0 %
DDoS-Guard 1 204 · 3,0 %
FirstVDS 1 146 · 2,9 %
OVH 686 · 1,7 %
Masterhost 576 · 1,5 %
Sprinthost 457 · 1,2 %
Hostland 109 · 0,3 %
таблицей
значениесайтовдоля
REG.RU16 80442,4 %
RU-CENTER6 97917,6 %
Beget3 5018,8 %
Timeweb2 1325,4 %
Cloudflare2 0585,2 %
Selectel1 9815,0 %
DDoS-Guard1 2043,0 %
FirstVDS1 1462,9 %
OVH6861,7 %
Masterhost5761,5 %
Sprinthost4571,2 %
Hostland1090,3 %
7 / 14

Тематика

Рубрика — по тексту главной страницы: словари из 118 рубрик в 25 группах, без сети и без нейросетей, поэтому воспроизводимо. Точность по группе около 80 %; у каждого пятого живого сайта темы нет — короткие главные, каталоги без слов, страницы входа.

  • Тематика считалась у 2 145 живых сайтов; у 526 (24,5 %) рубрику по тексту главной определить не удалось.
  • Самая крупная группа — «Одежда и аксессуары»: 211 сайтов (13,0 % от размеченных).
  • Самая частая рубрика — «Одежда», 116 сайтов.
группы тематик · от 2 145

не определена — 526 (24,5 %)

таблицей
значениесайтовдоля
Одежда и аксессуары2119,8 %
Промышленность и B2B1818,4 %
Недвижимость и строительство1486,9 %
СМИ, культура и развлечения1456,8 %
Дом, сад и интерьер1054,9 %
Образование и наука843,9 %
Авто и транспорт803,7 %
IT и связь763,5 %
Финансы и право753,5 %
Медицина и здоровье612,8 %
не определена52624,5 %
рубрики · от 2 145
таблицей
значениесайтовдоля
Одежда1165,4 %
Ювелирные изделия и часы472,2 %
Сайты для взрослых472,2 %
Мебель401,9 %
Производство и заводы381,8 %
Металл и металлообработка341,6 %
Курсы и онлайн-школы331,5 %
Строительство домов331,5 %
Клиники и медцентры321,5 %
Персональные блоги и авторские сайты321,5 %
8 / 14

География

Субъект и город — по кодам телефонов, реквизитам (ИНН выдаёт регион), почтовым индексам, адресу в подвале и упоминаниям в тексте; справочники — Россвязь, Почта, Викиданные. Масштаб — сколько регионов сайт называет своими.

  • Регион нашёлся у 1 091 из 1 892 сайтов, где он считался (57,7 %).
  • Москва — 300 сайтов, 27,5 % от сайтов с регионом. Следом Санкт-Петербург (114) и Московская область (82).
  • 47,6 % сайтов работают на один регион; на всю страну — 3,0 %.
субъекты РФ · от 1 892

не определён — 801 (42,3 %)

таблицей
значениесайтовдоля
Москва30015,9 %
Санкт-Петербург1146,0 %
Московская область824,3 %
Краснодарский край422,2 %
Свердловская область372,0 %
Ростовская область331,7 %
Республика Татарстан241,3 %
Самарская область241,3 %
Нижегородская область231,2 %
Красноярский край201,1 %
не определён80142,3 %
города · от 1 892
Москва 300 · 15,9 %
Краснодар 20 · 1,1 %
Самара 19 · 1,0 %
Новосибирск 16 · 0,8 %
Красноярск 15 · 0,8 %
Казань 13 · 0,7 %
таблицей
значениесайтовдоля
Москва30015,9 %
Санкт-Петербург1146,0 %
Екатеринбург271,4 %
Ростов-на-Дону221,2 %
Краснодар201,1 %
Самара191,0 %
Нижний Новгород170,9 %
Новосибирск160,8 %
Красноярск150,8 %
Казань130,7 %
масштаб · от 1 892
  • один регион47,6 %
  • несколько регионов8,8 %
  • вся Россия3,0 %
  • за пределами РФ0,2 %
  • не определён40,5 %

серый — не определён

таблицей
значениесайтовдоля
один регион90047,6 %
несколько регионов1668,8 %
вся Россия563,0 %
за пределами РФ40,2 %
не определён76640,5 %
9 / 14

Вёрстка и оформление

Оценка по HTML главной: возраст вёрстки — по набору признаков (табличная сетка, флоаты, флекс, грид, современные теги), а не по дате; мобильность — по viewport, медиазапросам и относительным размерам. Это ориентир, а не приговор дизайну.

  • Полностью адаптивная вёрстка у 8 573 сайта из 36 056 разобранных — 23,8 %; частично — 38,9 %, совсем нет — 37,3 %.
  • Вёрстка образца до 2015 года — у 88,6 % сайтов; современной, по набору признаков, выглядит 1,1 %.
  • Bootstrap — самый частый CSS-фреймворк: 4 438 сайтов; Tailwind — 1 688.
возраст вёрстки · от 36 056
таблицей
значениесайтовдоля
современная3831,1 %
2015–20203 72210,3 %
2010–201521 15058,7 %
до 201010 80130,0 %
мобильная вёрстка · от 36 056
  • адаптивный23,8 %
  • частично38,9 %
  • нет37,3 %
таблицей
значениесайтовдоля
адаптивный8 57323,8 %
частично14 03838,9 %
нет13 44537,3 %
откуда шрифты · от 36 056

серый — в HTML не видно

таблицей
значениесайтовдоля
свои шрифты2950,8 %
системные1 0632,9 %
Google Fonts5 27714,6 %
не видно в HTML29 42181,6 %
CSS-фреймворки · от 36 056
Bootstrap 4 438 · 12,3 %
Tailwind 1 688 · 4,7 %
Bulma 16 · 0,0 %
Foundation 9 · 0,0 %
UIkit 4 · 0,0 %
Materialize 1 · 0,0 %

без фреймворка — 29 900 (82,9 %)

таблицей
значениесайтовдоля
Bootstrap4 43812,3 %
Tailwind1 6884,7 %
Bulma160,0 %
Foundation90,0 %
UIkit40,0 %
Materialize10,0 %
без фреймворка29 90082,9 %
форматы картинок · от 36 056
png 21 437 · 59,5 %
svg 12 063 · 33,5 %
webp 1 744 · 4,8 %
jpg 1 515 · 4,2 %
gif 1 070 · 3,0 %
jpeg 399 · 1,1 %
avif 6 · 0,0 %

сайты, где формат встречается на главной

таблицей
значениесайтовдоля
png21 43759,5 %
svg12 06333,5 %
webp1 7444,8 %
jpg1 5154,2 %
gif1 0703,0 %
jpeg3991,1 %
avif60,0 %
10 / 14

Ошибки и гигиена

Технические недоработки главной страницы, которые видны без специальных инструментов: нет description или Open Graph, нет h1 и lang, главная отдана по http, видна версия сервера. Заголовки безопасности — из ответа; разметка schema.org — из HTML.

  • Самая частая недоработка — «нет Open Graph»: 30 810 сайтов, 85,5 % разобранных.
  • Заголовки безопасности редкость: HSTS у 23,2 %, CSP у 4,9 % сайтов с фактами о странице.
  • Без viewport — то есть без подсказки телефону, как масштабировать страницу, — 13 649 сайтов (36,5 %).
технические ошибки · от 36 056
нет Open Graph 30 810 · 85,5 %
нет description 27 624 · 76,6 %
нет lang 25 086 · 69,6 %
нет charset 18 340 · 50,9 %
устаревшие теги 11 650 · 32,3 %
нет h1 4 518 · 12,5 %
таблицей
значениесайтовдоля
нет Open Graph30 81085,5 %
главная отдана по http27 93177,5 %
нет description27 62476,6 %
нет lang25 08669,6 %
нет charset18 34050,9 %
нет мобильной вёрстки13 45837,3 %
запрет индексации12 37434,3 %
устаревшие теги11 65032,3 %
запрещено масштабирование7 53920,9 %
нет h14 51812,5 %
заголовки безопасности · от 37 417
hsts 8 693 · 23,2 %
x-frame-options 2 772 · 7,4 %
nosniff 2 259 · 6,0 %
csp 1 842 · 4,9 %
referrer-policy 443 · 1,2 %
permissions-policy 150 · 0,4 %
таблицей
значениесайтовдоля
hsts8 69323,2 %
x-frame-options2 7727,4 %
nosniff2 2596,0 %
csp1 8424,9 %
referrer-policy4431,2 %
permissions-policy1500,4 %
viewport · от 37 417
  • есть viewport63,5 %
  • нет viewport36,5 %
таблицей
значениесайтовдоля
есть viewport23 76863,5 %
нет viewport13 64936,5 %
разметка schema.org · от 37 417
SiteNavigationElement 1 474 · 3,9 %
ListItem 362 · 1,0 %
BreadcrumbList 356 · 1,0 %
ImageObject 267 · 0,7 %
WebSite 232 · 0,6 %
Organization 229 · 0,6 %
WebPage 200 · 0,5 %
SearchAction 193 · 0,5 %
таблицей
значениесайтовдоля
SiteNavigationElement1 4743,9 %
ListItem3621,0 %
BreadcrumbList3561,0 %
ImageObject2670,7 %
WebSite2320,6 %
Organization2290,6 %
WebPage2000,5 %
SearchAction1930,5 %
главное зеркало · от 37 417
  • без www91,8 %
  • с www0,6 %
таблицей
значениесайтовдоля
без www34 36091,8 %
с www2100,6 %
11 / 14

Содержимое

Что о сайте говорит его главная и карта: объявленный язык, дата последнего обновления (из разметки, заголовков и текста — если её нет, так и пишем), размер по карте сайта, наличие llms.txt.

  • Язык страницы объявлен у 32,3 % сайтов; ru — 4 373, en — 8 443: английский часто стоит по умолчанию у шаблонов.
  • Дату обновления удалось найти у 11,0 % сайтов; обновлялись за последние три месяца 2 637.
  • Карта сайта есть у 2,8 % сайтов с профилем.
  • llms.txt — описание сайта для языковых моделей — выложили 17 сайтов.
язык страницы · от 39 669
en 8 443 · 21,3 %
ru 4 373 · 11,0 %
it 1 · 0,0 %
ua 1 · 0,0 %
tr 1 · 0,0 %
russian 1 · 0,0 %

не указан — 26 845 (67,7 %)

таблицей
значениесайтовдоля
en8 44321,3 %
ru4 37311,0 %
it10,0 %
ua10,0 %
tr10,0 %
russian10,0 %
не указан26 84567,7 %
свежесть · от 36 056
  • обновлён за 3 месяца7,3 %
  • обновлён за год0,4 %
  • больше года назад0,3 %
  • больше трёх лет назад3,0 %
  • дата не найдена89,0 %

серый — дата не найдена

таблицей
значениесайтовдоля
обновлён за 3 месяца2 6377,3 %
обновлён за год1290,4 %
больше года назад1150,3 %
больше трёх лет назад1 0843,0 %
дата не найдена32 09189,0 %
размер сайта по карте · от 39 669
  • 1–10 страниц0,7 %
  • 11–1001,0 %
  • 101–1 0000,5 %
  • 1 001–10 0000,2 %
  • больше 10 0000,4 %
  • карта пустая0,5 %
  • нет карты сайта96,7 %

серый — карты нет или она пуста

таблицей
значениесайтовдоля
1–10 страниц2800,7 %
11–1003791,0 %
101–1 0002060,5 %
1 001–10 000950,2 %
больше 10 0001560,4 %
карта пустая1990,5 %
нет карты сайта38 35496,7 %
llms.txt · от 36 056
  • есть llms-full.txt0,0 %
  • есть llms.txt0,0 %
  • нет llms.txt3,9 %
таблицей
значениесайтовдоля
есть llms-full.txt10,0 %
есть llms.txt160,0 %
нет llms.txt1 4113,9 %
12 / 14

Посещаемость

Индекс — свой, с открытой формулой: корзины популярности CrUX (Google, CC BY 4.0), ранг Tranco, показания открытых счётчиков и внешние ссылки. Не «примерно столько визитов», а полоса: чем выше, тем больше независимых свидетельств, что на сайт ходят.

  • Индекс посещаемости 0–100 посчитан для 50 918 доменов; в полосе 70 и выше — 42, это 0,1 %: заметных сайтов в рунете мало, и это нормально.
индекс посещаемости · от 50 918
  • 70–89 — заметные0,1 %
  • 50–69 — обычные живые сайты1,8 %
  • 0–39 — почти без посетителей98,1 %
  • нет оценки0,0 %

серый — нет оценки

таблицей
значениесайтовдоля
70–89 — заметные420,1 %
50–69 — обычные живые сайты9231,8 %
0–39 — почти без посетителей49 94798,1 %
нет оценки60,0 %
13 / 14

Роботы ИИ и поисковики

robots.txt разбирается по RFC 9309: группы User-agent, самое длинное совпадающее правило, явная группа робота старше общей. Это заявленная владельцем политика, а не наблюдение за тем, кто на сайт реально ходит: robots.txt — просьба, а не запрет.

  • robots.txt запрашивался у 2 018 живых сайтов; роботов ИИ хоть как-то ограничивают 103 (5,1 %), у 484 файла нет вовсе.
  • Чаще всего закрывают CCBot — 89 сайтов; GPTBot — 83, ClaudeBot — 66.
  • От поисковиков целиком закрыты 30 сайтов (1,5 %).
отношение к роботам ИИ · от 2 018

серый — нет robots.txt

таблицей
значениесайтовдоля
закрыт от всех роботов311,5 %
закрыт от ИИ713,5 %
часть ИИ закрыта10,0 %
ИИ не упомянут1 42570,6 %
ИИ разрешён явно60,3 %
нет robots.txt48424,0 %
каким роботам ИИ закрыт корень · от 2 018
CCBot 89 · 4,4 %
GPTBot 83 · 4,1 %
Amazonbot 73 · 3,6 %
ClaudeBot 66 · 3,3 %
Google-Extended 66 · 3,3 %
Bytespider 66 · 3,3 %
Applebot-Extended 65 · 3,2 %
meta-externalagent 65 · 3,2 %
таблицей
значениесайтовдоля
CCBot894,4 %
GPTBot834,1 %
Amazonbot733,6 %
ClaudeBot663,3 %
Google-Extended663,3 %
Bytespider663,3 %
Applebot-Extended653,2 %
meta-externalagent653,2 %
поисковые роботы · от 2 018
  • поисковикам открыт98,1 %
  • закрыт от части поисковиков0,4 %
  • закрыт от поисковиков1,5 %
таблицей
значениесайтовдоля
поисковикам открыт1 98098,1 %
закрыт от части поисковиков80,4 %
закрыт от поисковиков301,5 %
14 / 14

Списки блокировок

Восемь открытых источников — зеркала реестра, архив реестра, списки вредоносного ПО, фишинга и спама — скачиваются каждые сутки, и домены сверяются с ними. На карточке домена написано, в каком именно списке он нашёлся и на какую дату.

  • Из 46 923 сверенных доменов хотя бы в одном публичном списке встречается 2 967 доменов — 6,3 %. Это не «заблокирован Роскомнадзором»: официальный реестр отдаётся только по запросу с электронной подписью, а публичные списки шире его.
домены в списках · от 46 923
rkn_antifilter 2 723 · 5,8 %
rkn_registry 1 798 · 3,8 %
malware 217 · 0,5 %
spam 43 · 0,1 %
phishing 13 · 0,0 %

хотя бы в одном списке — 2 967 (6,3 %)

таблицей
значениесайтовдоля
rkn_antifilter2 7235,8 %
rkn_registry1 7983,8 %
malware2170,5 %
spam430,1 %
phishing130,0 %
хотя бы в одном списке2 9676,3 %

Как считаем

Каждую ночь по последнему обходу каждого сайта строится срез?: для каждого показателя — сколько сайтов с каким значением. Срезы хранятся по дням, поэтому у каждой цифры есть история, а у каждого значения — своя страница с примерами живых сайтов.

  • Источник один — собственные наблюдения: ответы сайтов, DNS, TLS, robots.txt, открытые списки. Ни платных API, ни чужих рейтингов внутри показателей.
  • Обход вежливый: не быстрее запроса в секунду на хост, с честным именем робота, без обхода капч и форм.
  • Прирост к прошлому срезу здесь не показывается намеренно: пока зона проходится впервые, он говорит о ходе обхода, а не о рунете. Динамика по дням есть на странице каждого значения.
  • Данные открыты под CC BY 4.0: тот же срез отдаёт /api/stats?scope=hot; непонятное слово — в словаре.