Physical Address

304 North Cardinal St.
Dorchester Center, MA 02124

Рендеринг страниц с помощью Fetch от Google

Функция Fetch as Google в инструментах для веб-мастеров предоставляет веб-мастерам результаты попыток робота Googlebot получить их страницы. Показанные заголовки сервера и HTML полезны для диагностики технических проблем и побочных эффектов взлома, но иногда затрудняют перепроверку ответа: Помогите! Что означают все эти коды? Это действительно та же страница, которую я вижу в своем браузере? Где мы пообедаем? С последним мы помочь не можем, но в остальном мы недавно расширили этот инструмент, чтобы также показать, как робот Googlebot сможет рендерить страницу.

Просмотр отрисованной страницы

Для рендеринга страницы робот Googlebot попытается найти все задействованные внешние файлы и также извлекет их. Эти файлы часто включают изображения, файлы CSS и JavaScript, а также другие файлы, которые могут быть косвенно внедрены с помощью CSS или JavaScript. Затем они используются для рендеринга изображения предварительного просмотра, которое показывает вид страницы роботом Googlebot.

Вы можете найти функцию Fetch as Google в разделе сканирования Инструментов Google для веб-мастеров. После отправки URL-адреса с надписью «Fetch and render» дождитесь его обработки (для некоторых страниц это может занять некоторое время). Когда все будет готово, просто щелкните строку ответа, чтобы увидеть результаты.

Обработка ресурсов, заблокированных роботами.txt

Робот Googlebot следует robots.txt правилам для всех файлов, которые он извлекает. Если вы запрещаете обход некоторых из этих файлов (или если они встроены со стороннего сервера, который запрещает обход их роботом Googlebot), мы не сможем показать их вам в отрисованном виде. Аналогичным образом, если сервер не отвечает или возвращает ошибки, мы также не сможем их использовать (вы можете найти похожие проблемы в разделе «Ошибки сканирования» инструментов для веб-мастеров). Если мы столкнемся с какой-либо из этих проблем, мы покажем их под изображением предварительного просмотра.

Мы рекомендуем убедиться, что робот Googlebot может получить доступ к любому встроенному ресурсу, который вносит существенный вклад в видимое содержимое вашего сайта или в его макет. Это упростит использование Fetch as Google, а также позволит роботу Googlebot находить и индексировать этот контент. Некоторые типы контента, такие как кнопки социальных сетей, шрифты или скрипты веб-аналитики, как правило, не вносят существенного вклада в видимый контент или макет, и их просмотр может быть запрещен. Для получения дополнительной информации, пожалуйста, ознакомьтесь с нашим предыдущим сообщением в блоге о том, как Google работает над улучшением понимания Интернета.

Мы надеемся, что это обновление упростит вам диагностику подобных проблем и обнаружение контента, просмотр которого случайно заблокирован. Если у вас есть какие-либо комментарии или вопросы, сообщите нам здесь или напишите на форуме помощи веб-мастерам.