Yottis

YottisBot

Вы попали сюда, потому что увидели этого робота в логах своего сайта. Ниже — кто он, зачем приходит, как проверить, что это действительно мы, и как ограничить или запретить обход.

Как он представляется

User-Agent: YottisBot/1.0 (+https://yottis.ru/bot)

Что	Значение
Имя в robots.txt	`YottisBot`
Частота по умолчанию	не более одного запроса в секунду на сайт
Одновременных соединений	не более двух
Обратное имя	`*.bot.yottis.ru`
Диапазоны адресов	bot-ranges.json
Контакт	bot@yottis.ru, отвечаем в течение суток

Зачем он приходит

Yottis — поисковая система с собственным индексом. Робот читает открытые страницы, чтобы они находились в поиске. Он не заполняет формы, не нажимает кнопки, не пытается войти в закрытые разделы и не собирает персональные данные сверх того, что вы сами опубликовали.

Как мы обходим

Мы уважаем robots.txt по RFC 9309, включая директиву Crawl-delay. Если ваш сайт отвечает медленно или возвращает ошибки, робот автоматически снижает скорость — каждая ошибка сервера удваивает паузу между запросами.

При повторном заходе мы отправляем условные заголовки If-Modified-Since и If-None-Match. Если вы ответите 304 Not Modified, мы не станем скачивать страницу заново — это экономит ваш трафик и наш.

Как проверить, что это действительно мы

Любой может представиться нашим именем. Проверка двусторонняя и занимает две команды: сначала по адресу получаете имя, затем по имени — адрес. Совпали — это наш робот.

$ host 203.0.113.10
10.113.0.203.in-addr.arpa domain name pointer crawl-01.bot.yottis.ru.

$ host crawl-01.bot.yottis.ru
crawl-01.bot.yottis.ru has address 203.0.113.10

Если обратное имя не заканчивается на .bot.yottis.ru или обратная проверка не сходится — это не наш робот. Сообщите нам на bot@yottis.ru: подделка под нас вредит и вам, и нашей репутации.

Как ограничить обход

Полностью запретить:

User-agent: YottisBot
Disallow: /

Закрыть отдельные разделы:

User-agent: YottisBot
Disallow: /admin/
Disallow: /cart
Disallow: /*?sort=

Замедлить — пауза в секундах между запросами:

User-agent: YottisBot
Crawl-delay: 10

Если робот мешает прямо сейчас

Изменения в robots.txt вступают в силу в течение суток — столько живёт наш кэш этого файла. Если нагрузка мешает немедленно, напишите на bot@yottis.ru, и мы остановим обход вашего сайта вручную, не дожидаясь обновления кэша.

Это не формальная отписка: мы считаем, что сайт, которому наш робот мешает работать, — наша ошибка, а не его проблема.

Как убрать страницу из поиска

Способ	Что делает
`<meta name="robots" content="noindex">`	Страница обходится, но не показывается в поиске. Ссылки с неё по-прежнему учитываются
Заголовок `X-Robots-Tag: noindex`	То же самое для файлов, где нельзя поставить мета-тег
`Disallow` в robots.txt	Страница не обходится. Не гарантирует отсутствия в поиске, если на неё ссылаются извне — для гарантии нужен `noindex`
Кабинет вебмастера	Срочное скрытие адреса на 90 дней, пока не пройдёт переобход

Права граждан

Если в поиске находится информация о вас, распространяемая с нарушением закона, недостоверная или утратившая значение, вы можете потребовать прекратить выдачу ссылок на неё — это право закреплено статьёй 10.3 Федерального закона № 149-ФЗ. Обращение подаётся через форму на нашем сайте.

Мы рассматриваем такие обращения в установленный срок и отвечаем мотивированно как при удовлетворении, так и при отказе. Ссылка скрывается из выдачи по запросам о вас, а не удаляется из индекса целиком: решение может быть обжаловано, а удаление необратимо.