Google обновил рекомендации по краулинговому бюджету и прямо посоветовал использовать HTTP-код 304 Not Modified для URL, контент которых не изменился с прошлого визита робота.
Механика простая: Googlebot уже сохранил версию страницы, отправляет условный запрос, а сервер вместо полного HTML отвечает: «ничего нового». Роботу не нужно повторно скачивать документ целиком, сервер меньше напрягается, а ресурсы обхода можно направить на новые и реально обновлённые страницы.
На сайте на 500 страниц это не повод срочно собирать штаб. Там почти наверняка найдутся задачи важнее: индексация, дубли, контент, скорость, структура.
Но на больших проектах тема становится очень предметной. Я сейчас плотно работаю с сайтом на 25 000 000+ страниц, и здесь любая «незаметная» неэффективность быстро получает много нулей в конце. Если робот регулярно получает 200 OK и полный HTML на миллионах давно неизменившихся URL, это уже не просто трафик. Это нагрузка на генерацию, CDN, origin и потенциально менее рациональный обход.
Есть важная оговорка: 304 не является фактором ранжирования и не лечит SEO сам по себе. Он не исправит бесконечные фильтры, soft 404, медленный сервер или sitemap, куда сложили всё, что смогли найти.
Зато это хороший повод проверить техническую базу:
- работают ли
Last-Modifiedи/илиETag; - возвращается ли 304 при повторном условном запросе, а не декоративно висит заголовок;
- что именно в системе считается изменением страницы;
- не сбрасывают ли кеш случайные блоки вроде счётчиков, времени генерации и перетасованной выдачи рекомендаций;
- какие типы URL стоит внедрять первыми.
Я бы начинал со стабильного сегмента: старые статьи, архивы, неизменившиеся карточки. Внедрить, посмотреть серверные логи, долю 304, нагрузку и поведение обхода. А не включать магическую кнопку «оптимизировать 25 миллионов URL» в пятницу вечером.
#SEO #Google #ТехническоеSEO #КраулинговыйБюджет #WebPerformance #ВебАналитика #Ecommerce #DigitalProduct
Читать полную статью на сайте → https://vlukas.ru/blog/google-304-not-modified-crawl-budget
