Быстрое исследование индексации сайта через новый Вебмастер beta. webmaster. yandex. ru
1. Проверка соответствия реальной структуры сайта и добавление новых разделов 2. Выгрузка данных 3. Исследование данных Коды ответа, отличающиеся от 200 Коды ответа 200, но исключенные из поиска. Возможные причины и способы их устранения 4. Распространенные ошибки 5. Выводы
Проверка соответствия реальной структуры сайта и добавление новых разделов 1. Заходим в новый вебмастер Яндекса, выбираем нужный сайт и заходим в раздел «Индексирование – Структура» . Структура сайта отображает только разделы, которые содержат более 10 страниц и составляют более 1% от общего числа страниц, загруженных в базу Поиска. 2. В случае необходимости добавляем новые разделы кнопкой «Добавить раздел» . 3. В настоящий момент есть возможность добавить до 5 разделов. 4. Можно добавлять свои разделы и удалять их по мере необходимости.
Проверка соответствия реальной структуры сайта и добавление новых разделов
Выгрузка данных Для выгрузки данных о страницах раздел «Индексирование» «Статистика» . В выпадающем меню разделов сайта выбираем: Если у вас небольшой сайт (до 5000 страниц) выбирайте корневой раздел (домен сайта). Если сайт большой, в меню выбирайте раздел, который планируете изучать. Иначе файл выгрузки может получиться очень объемным.
Выгрузка данных Нажимаем кнопку «Скачать архив загруженных страниц»
Исследование данных выгрузки В полученном архиве - файл с расширением. tsv. Задаем в документе фильтрацию ( «Данные» - «Фильтрация» ) и приступаем к анализу данных.
Страницы с кодом ответа отличным от 200 В колонке «http_code» поочередно просматриваем все значения, отличные от « 200» . Самые распространенные коды ответов: 30 X – коды ответов серверного перенаправления с одной страницы на другую 40 X – коды ответов несуществующих страниц 50 X – коды ответов ошибок сервера «-» – Не поддерживаются основным индексирующим роботом поиска Яндекса Подробнее с кодами ответа вы можете ознакомиться на данной странице Справочник по кодам статуса HTTP https: //yandex. ru/support/webmaster/error-dictionary/http-codes. xml? lang=ru Коды ответов в таблице – это коды, полученные поисковой системой на момент посещения страницы, и на момент выгрузки данных, код может отличаться. Поэтому, обязательно смотрите данные из колонки «last_access» .
Страницы с кодом ответа 200, не участвующие в поиске Изучаем страницы, которые отдавали код ответа 200 (существуют) Яндексу, но не участвуют в поиске. Для этого выставляем в колонке «http_code» значение « 200» , а в колонке «searchable» значение « 0» . Поочередно просматриваем, какие страницы исключены из индекса поисковой системы.
«Мусорные» страницы с кодом ответа 200, участвующие в поиске Изучаем какие страницы присутствуют в выдаче поисковых систем в настоящий момент. Цель такого изучения – поиск страниц, которые в индексе присутствовать не должны, как пример: • • • Технические дубликаты Мусорные страницы Страницы c UTM-метками Страницы из предыдущей структуры Страницы поиска и фильтрации И прочие нестандартные страницы
Наиболее распространенные ошибки Частые ошибки при анализе сайта и пути их решения: 302 код - ресурс временно перемещен. В этом случае страница не удаляется из индекса поисковых систем, и может создавать дубль основной страницы. Если страница переносится на новый url, обязательно ставим 301 редирект. 404 код ресурс не найден. Такой код может быть у страниц, которые были целенаправленно удалены с сайта. Если 404 код отдают страницы, которые существуют, проверяйте все ли нормально со страницами и отправляйте эти страницы в очередь переобхода поисковой системой ( «Новый вебмастер» - «Инструменты» - «Переобход страниц» ).
Наиболее распространенные ошибки 50 X коды ошибок на стороне сервера. Подобных ошибок на сайте быть не должно. Если на сайте установлена Яндекс. Метрика, можно посмотреть отчет по адресу: «Отчеты» - «Стандартные отчеты» - «Мониторинг» - «Результаты проверки» . Если Аптайм менее 99, 5% в месяц, стоит задуматься о смене сервера. Удалённые страницы, отдающие код ответа 200. Часто бывает так, что страница была удалена с сайта, но она продолжает отдавать код ответа 200 (существует). Старайтесь сделать так, чтобы удалённые страницы всегда отдавали код ответа 404.
Спасибо за внимание!
Скачать презентацию Быстрое исследование индексации сайта через новый Вебмастер beta
Быстрое исследование индексации сайта через новый Вебмастер.pptx