AuditPro
Полный обход сайта за 40 секунд. Это не скорость, это пустой экстракт
Клиент гордится: «проверили весь сайт за минуту». В выгрузке 30 URL, у половины пустой title. Это не производительность краулера. Это обход не увидел документ.
Частые причины в РФ: cookie-заглушка, которая отдает пустой HTML роботу; CDN отдаёт 304 по старому ETag и тело не приходит; магазин на React, где ссылки появляются только после JS. Яндекс частично исполняет JS, ваш ночной чекер — нет.
Спросите подрядчика: сколько URL в статусе fetched с ненулевым HTML, не «поставлено в очередь». Если очередь 2000, а тел 40 — отчёт врёт масштабом.
Перед повторным аудитом: согласие не должно резать служебных роботов, если вы сами запускаете проверку; не травите кэш пустым 304; в HTML нужны обычные <a href>. Иначе любой сервис нарисует красивый ноль.
Честный полный обход занимает минуты и часы, не десятки секунд на витрине из тысяч карточек. Если принесли «всё готово» сразу — смотрите экстракт, не таймер.
getauditpro.ru