Как заявил специалист отдела качества поиска Джон Мюллер: Google выделяет на сканирование каждой страницы не больше 10 Мб.
Если объем страницы больше 10 мегабайт, то в этом случае следует убедиться, что Google произвел сканирование контента страницы в установленном лимите. Google также старается увеличивать лимит.
Джон Мюллер говорит: «Есть ограничение на размер страницы, который мы сможем скачать. Этот лимит примерно равен 10 Мегабайтам. Если наполненность страницы не больше 10 Мегабайт, мы сможем распознать его и показать в результатах поиска».
В середине прошлого года представители Google объявили о запуске инструмента, позволяющий вебмастерам просмотреть страницы сайтов, которые содержат файлы CSS и JavaScrip и изображения. Сообщили, что новые возможности будут доступны в сервисе «Инструменты для веб-мастеров» во вкладке раздела «Просмотреть как Googlebot».
В 2015 году Google совершил запуск новой конфигурации собственного робота Googlebot для страниц, которые адаптированы к местности.
