SearchPlusBot — робот SearchPlus
Если в журнале сервера вашего сайта есть User-Agent Mozilla/5.0 (compatible; SearchPlusBot/1.0; +https://searchplus.ru/bot), это наш робот.
Владелец сайта подключил его к SearchPlus — поиску по каталогу для интернет-магазинов на 1С-Битрикс, и робот настраивает поиск этого сайта.
Что он читает
- главную страницу, ссылки её меню и подвала и адреса из sitemap.xml;
- не больше 40 публичных страниц за обход и не дольше 2 минут, страницу — до 2 МБ;
- заголовки и начало текста страниц, чтобы найти доставку, оплату, контакты и возврат и направлять туда покупателей, которые ищут «доставка» или «куда доставляете».
Обход запускается, когда владелец добавляет сайт в панель, и по его кнопке — не чаще раза в час.
Чего он не делает
- не открывает каталог, карточки товаров, корзину, оформление заказа и личный кабинет: товары сайт передаёт сам, через модуль;
- не отправляет формы, не выполняет скрипты и не входит на сайт;
- не представляется браузером или поисковым роботом и не заходит на другие домены.
robots.txt
Робот соблюдает правила robots.txt для SearchPlusBot, а если их нет — для всех роботов (User-agent: *).
Обойти запрет robots.txt он может только с согласия владельца сайта, данного в панели SearchPlus. Тогда он читает те же публичные страницы с теми же ограничениями. Владелец может отозвать согласие в настройках сайта, а при смене домена оно теряет силу.
Чтобы открыть сайт только нашему роботу, добавьте в robots.txt:
User-agent: SearchPlusBot
Allow: /
Если робот мешает, попросите владельца сайта отозвать согласие или выключить автонастройку в панели — или напишите нам.
Как связаться
Поддержка SearchPlus: help@tech-director.ru