Не знаю, насколько для вас это полезно, но... В англоязычной | АлаичЪ про SEO, бизнес и …
Не знаю, насколько для вас это полезно, но...
В англоязычной справке о том, как работает Googlebot компания добавила один абзац с указанием ограничения по размеру сканируемого файла.
Теперь прописано, что робот будет сканировать первые 15 МБ содержимого html-файла или поддерживаемого текстового файла. После первых 15 МБ файла Googlebot прекращает сканирование и рассматривает для индексации только первые 15 МБ контента.
Пруф про пироги с индексированием тут: https://developers.google.com/search/docs/advanced/crawling/googlebot