Наиболее распространенными среди ошибок 4xx являются 404 (страница отсутствует) и 410 (страница удалена безвозвратно).
Инструменты Google для веб-мастеров показывают нам ошибки, разделенные по типам ошибок и типам устройств.
ошибки сканирования
Когда у нас возникают ошибки такого типа, мы должны управлять ими и стараться уменьшить их количество, поскольку страница, к которой невозможно получить доступ, создаст неприятные впечатления, и Google наказывает за это.
Статистика сканирования
Статистика сканирования сообщает нам объем данных, которые Google сканирует каждый день (страницы и килобайты), а также время загрузки каждой страницы.
статистика отслеживания
Резкое сокращение количества обходов или внезапное увеличение времени загрузки может указывать на наличие проблемы, которая не позволяет поисковой системе оптимально получить доступ к нашему сайту.
Исследуйте как Google
Важность просмотра нашего веб-сайта со стороны Google заключается в том, что мы сможем обнаружить ресурсы, которые блокируют сканирование и, возможно, вызывают неправильную индексацию.
Чтобы изучить такую страницу, как Google, нам нужно будет ввести URL-адрес в поле поиска и выбрать способ его исследования. У нас есть два способа исследования, как у Google:
Получать
Когда мы «получаем» то, что мы делаем, мы получаем в ответ HTTP-ответ на загрузку вместе с кодом, который получает Google.
Этот метод сканирования практически мгновенный.
начни исследовать, как Google
Получить и обработать
С помощью этого метода исследования мы получим ту же информацию, что и предыдущий, но веб-сайт также будет обработан, чтобы показать его таким, каким его видит пользователь, вместе с изображением, как его интерпретирует Google.
тестер robots.txt
Тестер файла robots.txt — это, Список телефонных номеров WhatsApp в Индонезии с одной стороны, инструмент проверки ошибок в файле.
С другой стороны, это позволяет нам редактировать файл, загружать его, а затем загружать в корневой каталог по FTP.
Карты сайта
Хотя наличие карты сайта не является обязательным для Google для сканирования и индексирования наших URL-адресов, мы уже говорили, насколько важно упростить сканирование с помощью информации в этом файле.

В этом разделе мы можем отслеживать, с одной стороны, страницы, которые мы отправляем в нашу карту сайта (которые мы можем рассматривать как предложения по индексированию), а с другой стороны, сколько из этих страниц Google в конечном итоге индексирует.
индексировать карты сайта
Но он также сообщит нам об ошибках, которые он обнаруживает при попытке доступа к различным URL-адресам нашей карты сайта.
ошибки карты сайта.