Как исправить ошибки сканирования сайта Google Webmaster Tool

Google Webmaster Tool (GWT) — лучший бесплатный инструмент SEO, который вы можете получить для своего блога. Для любого уровня блоггера GWT позволит вам полностью контролировать состояние вашего сайта и поможет вам реализовать различные методы оптимизации для вашего блога. Мы рассмотрели некоторые из них в прошлом, но если вы только начинаете, вот несколько статей, которые помогут вам освоиться:

Несколько дней назад Google добавил красивую диаграмму в свой инструмент для веб-мастеров, показывающую частоту ошибок при сканировании сайта и причины этих ошибок. Это действительно очень полезный инструмент, и я собираюсь быстро показать вам, что можно определить по этим ошибкам, и возможные решения для исправления предупреждений об ошибках сканирования сайта с помощью Google Webmaster Tool.

Начало работы с ошибками сканирования сайта в GWT:

Войдите в свою учетную запись GWT и под панелью управления сайтом нажмите «Здоровье» > «Ошибки сканирования». На этой странице будет отображаться график со списком ошибок и их причинами. Поскольку мой блог не сталкивается с такими проблемами сканирования, я использую изображение из официальный пост в блоге. Таким образом, обнаружение различных ошибок сканирования будет выглядеть примерно так:

На момент написания этого поста Google Webmaster Tool показывает три типа ошибок:

  • DNS-ошибки
  • Ошибки подключения к серверу
  • Ошибки robots.txt

Если вы видите, что ошибки, обнаруженные на вашей диаграмме, растут, как показано на изображении выше, помните, что вы обязаны исправить все эти ошибки, чтобы позволить ботам эффективно сканировать ваш сайт.

Давайте рассмотрим различные типы возможных ошибок:

Типы ошибок сайта Google

На странице с обнаруженными ошибками вы увидите список затронутых ссылок. После того, как вы решили проблемы, вы можете выбрать отдельные ссылки и пометить их как исправленные.

Ошибки DNS:

Это похоже на обычные проблемы с DNS, с которыми мы сталкиваемся в нашей системе, когда наше интернет-соединение не может открыть адрес и отображает уведомление об ошибке DNS в окне браузера. Это может произойти по любой из многих причин, в том числе при смене службы хостинга или изменении сервера имен.

Поскольку репликация DNS требует времени, часто возникает ошибка DNS. Во многих странах боты не могут получить доступ к вашему сайту из-за сбоя сервера доменных имен, и в результате вы получаете аналогичную ошибку. Помните, что вы можете проверить статус пинга вашего сайта в разных странах с помощью такого сервиса, как Just-Ping.

Несколько дней назад я переместил ShoutMeLoud с Hostgator на Knownhost VPS и заметил, что количество ошибок DNS увеличивается. В конце концов я получил это электронное письмо от GWT:

«За последние 24 часа робот Googlebot обнаружил 66 ошибок при попытке получить информацию DNS для вашего сайта. Общий коэффициент ошибок для DNS-запросов для вашего сайта составляет 1,5%. Подробнее об этих ошибках можно узнать в Инструментах для веб-мастеров».

Поскольку я знал причину этих ошибок, я не стал этим заморачиваться, и на данный момент у меня нет ошибок DNS.

Ошибки DNS, обнаруженные в Инструменте для веб-мастеров, также можно из-за высокая задержка, и это обычно связано с проблемой вашего хостинга. Если вы постоянно получаете большое количество ошибок DNS, вам следует обратиться в службу технической поддержки вашего хоста и попросить их разобраться в этом. Если они не могут решить проблему, просто перейдите на более качественный хостинг, а не обвиняйте хост или Google в таких ошибках.

Ошибки подключения к серверу:

Эта проблема обычно связана с конфигурацией вашего сервера, из-за которой боты Google не могут сканировать ваш сайт, или время ожидания вашего сайта перед загрузкой страницы. Обычно это происходит, когда страница загружается слишком долго или ресурсы вашего сервера исчерпаны. Один из простых способов решить эту проблему — контролировать скорость сканирования ботов. GWT не предлагает вам красивую диаграмму, такую ​​как Bing Webmaster Tools, для контроля времени сканирования, поэтому вы можете использовать Webmaster Parameter Tool и Robots.txt для управления сканированием.

Убедитесь, что ваш сервер не недостаточно мощный. Если это так, перейдите на хостинг с большим количеством ресурсов. Если вы используете самонастраиваемый VPS или выделенный хостинг, убедитесь, что ваш брандмауэр и настройки безопасности не блокируют доступ к ботам поисковых систем. Подробнее об этом можно прочитать на официальной странице здесь. Если вы не используете какой-либо механизм кэширования, я бы рекомендовал использовать любой из этих плагинов кэширования WordPress, который поможет вам справиться с ошибками подключения к серверу.

Ошибки загрузки robots.txt:

Это распространенная ошибка, возникающая из-за неправильно настроенных файлов robots.txt. Имейте в виду, что robots.txt используется для остановки сканирования ботами определенных областей вашего сайта, которые вы не хотите, чтобы они индексировали, обычно это ваша папка wp-admin и ее параметры, если вы ее используете. Я рекомендую не останавливать сканирование ваших тегов и страниц категорий с помощью robots.txt, так как сканирование и индексация — это разные вещи. Мы уже много писали об этом в прошлом, и вы можете обратиться к следующим статьям для получения дополнительной информации об этой концепции.

Всегда помните, что некоторые из ошибок, которые вы увидите, носят временный характер. Например, ошибки подключения к серверу могут возникать из-за нагрузки на сервер и, следовательно, могут быть непостоянными. Но если вы постоянно видите ошибки или если вы получаете электронное письмо от GWT о проблемах со сканированием, вам следует начать работать над устранением проблем, которые вы видите.

Сообщите мне, какие ошибки вы видите при использовании Инструмента Google для веб-мастеров.

Какие действия вы предпринимаете для устранения ошибок вашего сайта?

Если вы найдете информацию в этом посте полезной, поделитесь ею с друзьями и коллегами в Facebook, Twitter и Google Plus.

Похожие записи

Добавить комментарий

Ваш адрес email не будет опубликован.