Наверх
Open Nav
/
/
Краулеры Google сканируют и индексируют первые 15 МБ HTML-файла страницы
В тренде

Краулеры Google сканируют и индексируют первые 15 МБ HTML-файла страницы

27.06.2022 Время прочтения: 1 минута

Дата обновления: 15.02.2023

В обновленной справке Googlebot появилось указание размера файла, который сканируют боты: «Googlebot сканирует первые 15 МБ ‎‎HTML-файла или поддерживаемого текстового файла‎‎. Все ресурсы, ссылки на которые указаны в HTML (изображения, видео, CSS и JavaScript), извлекаются отдельно. После первых 15 МБ файла Googlebot прекращает сканирование и рассматривает для индексации только первые 15 МБ файла. Ограничение размера файла применяется к несжатым данным. У других краулеров могут быть другие ограничения».

Джон Мюллер, сотрудник Поиска Google, отвечая на вопрос SEO-специалиста Саннидхи (Sannidhi) в Твиттере, пояснил, что лимит накладывается только на HTML-файл, а встроенные элементы не являются его частью:

01-googlebot-limit.png

Проверить, какую часть контента сканирует и ранжирует бот Гугл, можно с помощью инструмента проверки URL-адресов в Google Search Console.

02-instrument-proverki.png

Комментарий эксперта:

«Поработав с большим количеством различных сайтов могу отметить, что средний размер HTML-документа редко превышает 2-3 МБ, поэтому беспокоиться насчет данного нововведения не стоит. В то же время, SEO-специалисты должны знать эту особенность работы поискового робота Google и проверять размер HTML-страниц у всех новых сайтов. Сделать это можно с помощью Screaming Frog SEO Spider или любого другого робота-парсера».

Главный технолог SEO-эксперт компании SEO.RU
Полина Маенкова

Пусть другие тоже знают!

Еще на эту тему

SEO живее всех живых. Умерло «ленивое» SEO
SEO живее всех живых. Умерло «ленивое» SEO
Константин Абдуллин, SEO-технолог SEO.RU, дал советы по поис...
18.08.2017 3037
Google разработал новый алгоритм создания оригинального контента
Google разработал новый алгоритм создания оригинального контента
Специалисты исследовательского проекта Google Brain опублико...
25.05.2018 3239

Другие интересные статьи

Оставить заявку Оставить заявку