meta-externalagent
сколько сайтов рунета закрыли робота meta-externalagent в своём robots.txt — по собственному ежедневному обходу зоны .ru/.рф/.su · срез 2026-11-02
Как менялось
41 срезов, от 2 565 до 164 060 сайтов.
Примеры живых сайтов
| домен | движок | тип |
|---|---|---|
| real.su | MODX | Интернет-магазины |
| oboi.su | 1C-Bitrix | Интернет-магазины |
| lori.ru | — | Интернет-магазины |
| hpt.su | HPT Engine | Блоги |
| gormed.su | WordPress | Корпоративные сайты |
| web-c.ru | 1C-Bitrix | Блоги |
| siteedit.ru | SiteEdit | СМИ и медиа |
| astrakhan.su | WordPress | СМИ и медиа |
| nfa.ru | 1C-Bitrix | СМИ и медиа |
| 3d-m.ru | WordPress | Интернет-магазины |
| eprussia.ru | 1C-Bitrix | СМИ и медиа |
| cnmt.ru | MODX | Корпоративные сайты |
| abiturient.ru | 1C-Bitrix | СМИ и медиа |
| rustest.ru | — | СМИ и медиа |
| aksgroup.su | 1C-Bitrix | Интернет-магазины |
| imot.ru | Tilda | Корпоративные сайты |
| rech.spb.ru | 1C-Bitrix | Интернет-магазины |
| potolki.ru | 1C-Bitrix | Интернет-магазины |
| monso.su | Tilda | Корпоративные сайты |
| susmu.su | 1C-Bitrix | Корпоративные сайты |
| gruza.ru | WordPress | Корпоративные сайты |
| 1688.ru | — | Интернет-магазины |
| gifts.ru | — | Интернет-магазины |
| ipserver.su | — | Корпоративные сайты |
Рядом
ИИ не упомянут 1 679 018 нет robots.txt 639 172 CCBot 174 806 GPTBot 174 705 ClaudeBot 167 957 Amazonbot 167 859 Bytespider 165 564 anthropic-ai 164 849 Google-Extended 162 991 Claude-Web 162 903 ChatGPT-User 162 252 Applebot-Extended 160 609 cohere-ai 160 167 Diffbot 159 505 Omgilibot 159 339 ImagesiftBot 157 569 FacebookBot 156 981 PerplexityBot 156 658 OAI-SearchBot 156 347 Claude-SearchBot 155 898
Как считаем: цифра берётся из ночного среза по всем обследованным сайтам зоны, тем же способом, что и на странице статистики, — разойтись они не могут. Доля — от сайтов, у которых показатель вообще снят.