нет robots.txt
сколько живых сайтов рунета получили вердикт «нет robots.txt» — по собственному ежедневному обходу зоны .ru/.рф/.su · срез 2026-09-17
Как менялось
8 срезов, от 11 239 до 109 762 сайтов.
Примеры живых сайтов
| домен | движок | тип |
|---|---|---|
| 1beton-nn.ru | — | Корпоративные сайты |
| 2d6.su | — | Лендинги |
| hd-touch.ru | Powergap | Интернет-магазины |
| holodpromtorg73.ru | — | Корпоративные сайты |
| ipark-avtovaz.ru | rostsayt.ru | Корпоративные сайты |
| karlukskoe.ru | WordPress | Лендинги |
| nadgorizontom.ru | — | Корпоративные сайты |
| nlpperm.ru | — | Корпоративные сайты |
| r-e.su | — | Корпоративные сайты |
| round4u.ru | — | Корпоративные сайты |
| scforum.ru | WordPress | Корпоративные сайты |
| strangecompany.ru | — | Корпоративные сайты |
| time-fishing.ru | 1C-Bitrix | Интернет-магазины |
| turkey-obnovlenie.ru | Drupal | Корпоративные сайты |
| ufnika.ru | — | Корпоративные сайты |
| vendinggid.ru | WebSite X5 | Лендинги |
| volgatour.ru | Joomla | СМИ и медиа |
| vprobkenn.ru | — | Корпоративные сайты |
| web-univer.su | — | Лендинги |
| эйвис.рф | Tilda | Корпоративные сайты |
| 07ai.ru | — | Корпоративные сайты |
| 21-school-nn.ru | — | Корпоративные сайты |
| abz-oktyabrskii.ru | Tilda | Корпоративные сайты |
| airtone.su | — | Лендинги |
Рядом
ИИ не упомянут 364 624 CCBot 22 247 GPTBot 21 590 Amazonbot 20 175 ClaudeBot 20 013 Bytespider 19 792 meta-externalagent 19 247 Google-Extended 19 138 Applebot-Extended 18 910 ChatGPT-User 18 000 anthropic-ai 17 813 Claude-Web 17 462 Omgilibot 17 384 ImagesiftBot 17 258 FacebookBot 17 086 cohere-ai 17 053 PerplexityBot 17 028 OAI-SearchBot 16 978 Diffbot 16 968 Claude-SearchBot 16 872
Как считаем: цифра берётся из ночного среза по всем обследованным сайтам зоны, тем же способом, что и на странице статистики, — разойтись они не могут. Доля — от сайтов, у которых показатель вообще снят.