Ответы с сайта: бот читает ваш сайт
Адрес сайта, до 200 страниц, исключение страницы и обновление
Где включить
Откройте бота в «Bots», вкладку «О компании и модель» и блок «Ответы с сайта». Введите адрес сайта, выберите, сколько страниц прочитать, до 200, и нажмите «Прочитать сайт».
Что мы обходим
Только ваш сайт и его вариант с www: ссылки на другие сайты и поддомены пропускаем. Сначала читаем страницы, на которые ведёт главная, потом адреса из sitemap.xml. Корзину, вход, поиск и файлы вроде PDF не открываем.
Правила сайта
Робот называется WooveBot и соблюдает robots.txt: закрытые страницы не открывает, паузу Crawl-delay выдерживает. Страницы с метатегом noindex пропускает. Если robots.txt отвечает ошибкой сервера, обход не начинается.
Как идёт чтение
Под адресом видно, сколько страниц открыто и сколько ждёт в очереди. Между запросами пауза, одну страницу ждём до 15 секунд, у страницы больше 2 МБ берём начало. Весь обход длится не дольше 15 минут.
Проверьте страницы
Нажмите «Страницы»: у каждой видно, в базе она, пропущена или не открылась, и почему. Ссылка «текст» показывает, что бот взял со страницы, без меню, скриптов и форм.
Исключите лишнее
Выключите переключатель у страницы, по которой бот отвечать не должен, например у прошедшей акции. После обновления исключённая страница остаётся исключённой.
Как бот отвечает
В шаге «Ответ ИИ» бот ищет в страницах сайта и в базе Woove Help, если она есть, и отвечает по найденному. Ссылку «Подробнее» он даёт на страницу вашего сайта, в Авито отвечает без ссылки. Проверить ответ можно на вкладке «Проверка».
Обновите после правок
Поменяли цены или условия на сайте, нажмите «Обновить». Страницы, которых на сайте больше нет, уйдут из базы. Кнопка «Остановить» прерывает обход, прочитанное при этом сохраняется.
Если не работает
Сколько это стоит
Чтение сайта входит в подписку бота. Оно работает, пока у бота идут пробные дни, есть оплата или Woove Pro.
Какие есть лимиты
До 200 страниц за обход, до трёх сайтов у бота, до 1000 страниц в базе на аккаунт и до 20 обходов в сутки. На аккаунте одновременно читается один сайт, остальные ждут в очереди.
Страниц с текстом не нашлось
Скорее всего, сайт собран на JavaScript без серверной отрисовки, и робот получает пустую страницу. Перенесите главное в поле «Что важно знать» на этой же вкладке или в базу Woove Help.
Сайт не пустил робота
Если хостинг или защита от ботов отвечает ошибкой 403, откройте доступ роботу WooveBot или впишите нужное в «Что важно знать».
Какие адреса не подходят
Подходят только http и https на стандартных портах. Адреса внутренней сети, localhost и адреса с логином и паролем мы не открываем.