Панель Вебмастера Яндекс – что это такое?
Каждый человек, который занимается продвижением сайтов, должен знать, для чего нужен Яндекс Вебмастер.
Яндекс Вебмастер – бесплатный кабинет вебмастера для аналитики, сбора статистики, поиска ошибок и прочих полезных функций. В панели Вебмастера Яндекс можно следить за индексацией страниц в поисковике Яндекса.
История появления Вебмастера
Первая версия панели Вебмастера стала доступна 19 октября 2007 года. О запуске сервиса рассказал Александр Садовский (руководитель отдела веб-поиска, Яндекс) на заседании клуба seo-оптимизаторов. Доступ к сервису для закрытого бета-тестирования предоставлялся по приглашениям. Официальная дата открытия сервиса для широкой аудитории - 21 декабря 2007 года.
Если я ничего не путаю, то выглядел он в то время примерно так:
А в 2015 году вышла бета-версия нового Яндекс Вебмастер:
Сервис Яндекс Webmaster
Отсутствие данных в разделе «Мои сайты» не помешает нам осмотреть функционал сервиса.
Обзор функций
Фатальные ошибки
Фатальные ошибки включают в себя самые серьезные проблемы, которые напрямую влияют на продвижение сайта. Такие как:
- Сайт закрыт к индексации в файле robots.txt;
В вашем файле robots..txt) обнаружен запрет на индексацию всего сайта. Выглядеть эта строчка будет так: «Disallow: /» или «Disallow: *». Возможно, это сделано специально, пока сайт разрабатывается, главное не забыть потом убрать 🙂 - Не удалось подключиться к серверу из-за ошибки DNS;
Упал сервер или сбились настройки DNS. Может вы там где-то ковырялись? 🙂 - Главная страница сайта возвращает ошибку;
Возможна проблема с хостингом или с файлами на сервере. - Обнаружены нарушения или проблемы с безопасностью.
Яндекс отыскал какую-то опасность на сайте, к примеру, поймали какой-то вирус, что является угрозой для посетителя сайта. Не круто, короче.
Критичные ошибки
- Большое количество неработающих внутренних ссылок;
Проверьте работоспособность ссылок на сайте, какие-то из них не работают. Можно их найти с помощью Sreaming Frog SEO Spider . - Долгий ответ сервера.
Посмотрите, нет ли у вас плагинов, которые сильно нагружают ваш хостинг? Возможно, посещаемость вашего ресурса резко выросла и вам стоит задумать о смене тарифа на хостинге. Я, кстати, beget.ru использую 🙂
Возможные проблемы
- Нет используемых роботом ;Создайте файл Sitemap.xml или закиньте в Файлы Sitemap в разделе «Индексирование».
- Обнаружены ошибки в файлах Sitemap;Проверьте свои файлы на ошибки. Возможно, есть 404-страницы или другие проблемы.
- Некорректно настроено отображение несуществующих файлов и страниц;Вероятно, на сайте некорректно настроен возврат HTTP-кода 404 Not Found.
- Ошибки в файле robots.txt;Тут может быть гора ошибок, проверяйте файл с помощью анализа robots.txt в разделе «Инструменты».
- Главная страница перенаправляет на другой сайт;Без комментариев… 🙂
- Большое количество страниц-дублей;Яндекс нашел дубли . Нужно работать над качеством сайта. Найдите технические ошибки или закройте страницы в robots.txt.
- Не найден файл robots.txt;Срочно найдите его и покажете Яндекс Вебмастеру 🙂
- Отсутствуют теги
;Срочно заполните на эти теги. Лучше заполнять на основе запросов. - Отсутствуют
;Тоже заполните. Это важно. - Файлы Sitemap давно не обновлялись;Постов не выкладываете? Тогда пофиг 🙂 Иначе проверьте настройки Sitemap.xml.
- Форматы рекламы не соответствуют рекомендациям IAB Russia.Реклама может мешать пользователям работать с вашим ресурсом.
- Не задана региональная принадлежность сайта;
- Сайт не зарегистрирован в Яндекс. Справочнике;
- Файл favicon не найден;
- Сайт не оптимизирован для мобильных устройств;
- Ошибка счётчика Яндекс.Метрики.
Безопасность и нарушения
Яндекс регулярно проверяет безопасность и нарушения на сайтах.
Таблица фильтров по группам:
Также можно настроить фильтры:
- регион;
- устройство;
- дата;
- показатель.
- общие показатели;
- показы на позициях;
- клики с позиций;
- CTR на позициях;
- средняя позиция показа в ТОПах;
- средняя позиция клика в ТОПах.
Фильтрация по запросам из топ-1:
Все запросы и группы
В разделе представлены поисковые запросы, по которым сайт располагается на первых 50 позициях результатов поиска Яндекса. Показатели являются усредненными за последние 7 дней.
Для каждого запросы можно посмотреть:
- показы;
- клики;
- позиция;
Помимо статистики запросов можно добавлять свои запросы, например, по которым планируете продвигать сайт.
Добавить запросы можно двумя способами:
- ручками;
- файлом.
Яндекс Вебмастер может подбирать поисковые запросы, соответствующие тематике вашего сайта, для привлечения дополнительного трафика.
Предложенные запросы можно использовать в качестве условия таргетирования при ведении рекламы.
Индексирование в Яндекс Вебмастер
Раздел содержит в себе:
- Статистика обхода;
- Страницы в поиске;
- Структура сайта;
- Проверить статус URL;
- Важные страницы;
- Переобход страниц;
-
Страницы в поиске
Раздел отображает страницы сайта, которые участвуют в поиске Яндекса.
Страница может не попасть в результаты поиска, если она дублирует контент другой страницы, содержит спам или вирусы, перенаправляет на другой URL, при ее скачивании произошла ошибка.
Структура сайта
Сервис отображает разделы сайта, которые содержат не меньше 10 страниц и составляют больше 1% от общего числа страниц, загруженных в базу поиска.
При удалении пользовательского раздела из структуры сайта информация о нем в базе поиска сохраняется.
У меня добавлен раздел сайта /yandex-webmaster/ вручную. Самостоятельно можно добавить до 5 разделов.
Проверить статус URL
Вы можете проверить, знает ли робот об определенной странице сайта, права на который вы подтвердили .
В поле URL можно ввести полный URL страницы или путь от корня сайта, начинающийся с «/» .
Как правило, сбор и обработка информации занимают до 2 минут. Иногда это может занять несколько часов. Как только обработка данных завершится, статус проверки изменится на «проверено» .
Моя страница роботом обходится и в поиске появляется.
Мониторинг важных страниц
Вы можете отслеживать индексирование наиболее важных страниц сайта и наиболее популярных - рекомендованных Яндекс.Вебмастером. Для этих страниц можно настроить уведомления .
Статья не завершена. Продолжу дописывать позже 🙂
В июле поступил на продвижение новый сайт, созданный на вордпресс. Пока делался аудит сайта, проиндексированные страницы все были исключены из поиска Яндекс. Почему? Ответ нашла в панели яндекс вебмастер. Смотрите на восклицательный знак в красном треугольнике.
Как оказалось, была одна фатальная ошибка, которая и стала причиной исключения сайта целиком из поиска. Сайт показался Яндексу дорвеем.
Проблема оказалась в том, что Яндекс посчитал сайт дорвеем. Почему? Ведь никаких внешних ссылок на сайте не было. Загружались страницы, которые и должны были загружаться.
Оказывается, Яндекс считает сайт дорвеем не только тогда, когда он перенаправляет на другие сайта. Но и тогда, когда внутри самого сайта оказывается слишком много редиректов. Откуда могли взяться редиректы? Ответ так же нашелся в панели яндекс вебмастер.
Как оказалось, вордпресс генерит дубли страниц, и перенаправляет с них на страницы с ЧПУ
После исправления ошибок, это будет отдельный пост, была нажата кнопка Я ВСЕ ИСПРАВИЛ. Нажимать повторно эту кнопку можно только через 30 дней. Поэтому советую тщательно проверить ваш сайт, который посчитали дорвеем, исправить все ошибки и только после этого можно смело отправлять ресурс на проверку.
10 августа в панели вебмастера появилась информация, что фатальных ошибок нет. Т.е. сайт перестал считаться дорвеем.
Ну и приятный бонус — сайт появился в поиске по некоторым запросам.
Не так давно Яндекс поменял алгоритмы определения полезных и бесполезных сайтов. Все малополезные сайты, на его взгляд, он отмечает фатальной ошибкой.
Сообщение об ошибки выглядит так:
Сайт может угрожать безопасности пользователя, или на нём были обнаружены нарушения правил поисковой системы. Наличие этой проблемы негативно сказывается на положении сайта в результатах поиска.
При переходе подробнее можно увидеть следующее:
Всё это звучит как приговор и радоваться не приходится:
Что делать?
Понять в чем же причина довольно сложно, потому что ошибка имеет общий вид и вбирает в себя всевозможные специальные и случайные нарушения.
От Яндекса есть ссылки на инструкцию, что делать. Там общие черты и всевозможные причины:
Малополезный контент
Некачественные сайты
Бессмысленно писать в Яндекс поддержку. Они отвечают, но типовыми сообщениями. А когда ты всё же добиваешься человеческого ответа, то он не обнадеживает и нередко звучит следующим образом (своими словами пересказ слов поддержки):
Всё это хорошо, но иногда это полнейшая чушь и вот почему. Вы можете хоть тысячу полезных страниц создать для сайта, но если он имеет технические недочеты, всё это это будет насмарку. Потому что, если сайт нормальный и не создан для спама, причина может быть в технических проблемах сайта. Но ответят они вам так, что вы не поймёте. Так что лучше сосредоточится на технических моментах, которые нередко возникают по вине движка и тщательно перепроверить свой сайт.
Убираем мобильные редиректы
Потом смотрим файл.htaccess, там не должно быть на другие сайты.
В том числе надо избегать любых мобильных редиректов, в том числе и на свои сайты. Яндекс может за такой редирект понизить в выдаче, влепив фатальную ошибку, приняв его за вредоносный скрипт.
Проверьте плагины кэширования. Например, плагин кэширования на одном из моих сайтов внёс в файл .htaccess следующую мобильную переадресацию:
RewriteCond %{HTTP_USER_AGENT} ^.*(\bCrMo\b|CriOS|Android.*Chrome\/[.0-9]*\s(Mobile)?
|\bDolfin\b|Opera.*Mini|Opera.*Mobi|Android.*Opera|Mobile.*OPR\/+|Coast\/+|Skyfire|Mobile\sSafari\/[.0-9]*\sEdge|IEMobile|MSIEMobile|fennec|firefox.*maemo|
(Mobile|Tablet).*Firefox|Firefox.*Mobile|FxiOS|bolt|teashark|Blazer|Version.*Mobile.*Safari|
Safari.*Mobile|MobileSafari|Tizen|UC.*Browser|UCWEB|baiduboxapp|baidubrowser|
DiigoBrowser|Puffin|\bMercury\b|Obigo|NF-Browser|NokiaBrowser|OviBrowser|OneBrowser|TwonkyBeamBrowser|SEMC.*Browser|
FlyFlow|Minimo|NetFront|Novarra-Vision|MQQBrowser|MicroMessenger|
Android.*PaleMoon|Mobile.*PaleMoon|Android|blackberry|
\bBB10\b|rim\stablet\sos|PalmOS|avantgo|blazer|elaine|
hiptop|palm|plucker|xiino|Symbian|SymbOS|Series60|
Series40|SYB-+|\bS60\b|Windows\sCE.*(PPC|Smartphone|Mobile
|{3}x{3})|Window\sMobile|Windows\sPhone\s+|WCE;|Windows\sPhone\s10.0|Windows\sPhone\s8.1|
Windows\sPhone\s8.0|Windows\sPhone\sOS|XBLWP7|
ZuneWP7|Windows\sNT\s6\.\;\sARM\;|\biPhone.*Mobile|\biPod|\biPad|
Apple-iPhone7C2|MeeGo|Maemo|J2ME\/|\bMIDP\b|\bCLDC\b|webOS|
hpwOS|\bBada\b|BREW).*$
Такая штука может не понравиться Яндексу. Лучше этого избегать.
Если ошибок на сайте не видно, переадресаций и вирусов нет, следует обратить внимание на количество рекламы. Возможно Яндексу не нравится, что несколько рекламных блоков видны на одном пространстве экрана монитора. Следует уменьшить часть рекламных блоков.
Неправильный файл robots.txt
Это чуть ли не основная причина большинства проблем. Очень важно запретить все лишние страницы на сайте. Для этого делаем .
После того как всё исправили. Из того, что казалось, нужно исправить, отправляем сайт на проверку. И ждём месяц в надежде, что это было недоразумение.
Можно даже обойтись без этой кнопки. Если конкретно те ошибки, из-за которых Яндекс поставил бан исправлены, сайт может вылезти из-под санкций чуть ли не через несколько дней после исправления.
Раздел содержит решения часто встречающихся проблем категории «Фатальные» , выявленных при диагностике сайта в Яндекс.Вебмастере. Проблемы этой категории ведут к исключению отдельных страниц или всего сайта из результатов поиска.
Главная страница сайта возвращает ошибку
Если вы получили такое сообщение, выполните следующее:
После внесения изменений дождитесь очередного посещения робота. Также вы можете отправить страницу на переобход - робот обойдет ее в течение двух недель.
Если в результате проверки страница отвечает кодом 200 OK и проблем с доступностью содержимого нет, то предупреждение в Яндекс.Вебмастере пропадет в течение нескольких дней.
Не удалось подключиться к серверу из-за ошибки DNS
Раз в сутки индексирующий робот обращается к DNS-серверам, чтобы определить IP-адрес сервера, на котором находится сайт. Если на сайте некорректно настроены DNS-записи, робот не получает IP-адрес сайта. Поэтому сайт не может быть проиндексирован и добавлен в результаты поиска.
Проверьте корректность ответа сервера индексирующему роботу. Если сайт по-прежнему недоступен, обратитесь к хостинг-провайдеру для корректировки DNS-записей вашего домена. Когда доступ к сайту появится, информация в Яндекс.Вебмастере обновится в течение нескольких дней.
Проблема с доступом к сайту может быть кратковременной. Если при повторной проверке ответа сервера ошибок не обнаружено, дождитесь обновления информации в Вебмастере, это должно произойти в течение нескольких дней.
Если доменное имя не было продлено вовремя, сайт становится недоступен для индексирования. Продлите регистрацию домена. После этого сообщение в Яндекс.Вебмастере пропадет в течение нескольких дней.
Сайт закрыт для индексации в файле robots.txt
Несколько раз в сутки индексирующий робот запрашивает файл robots.txt и обновляет информацию о нем в своей базе. Если при очередном обращении робот получил запрещающую директиву, в Яндекс.Вебмастере появляется соответствующее предупреждение.
Проверьте содержимое файла robots.txt . Если запрет по-прежнему присутствует, удалите его из файла. Если вы не можете сделать это самостоятельно, обратитесь к хостинг-провайдеру или регистратору доменного имени. После снятия запрета данные в Яндекс.Вебмастере обновляются в течение нескольких дней.
Если доменное имя не было продлено вовремя, файл robots.txt будет содержать запрещающие директивы для робота. Продлите регистрацию домена. После этого сообщение в Яндекс.Вебмастере пропадет в течение нескольких дней.
Обнаружены нарушения или проблемы с безопасностью
Если найдено нарушение правил поиска Если найдена угроза безопасностиНа странице Диагностика → Безопасность и нарушения выполните следующее:
Когда вы решите проблему:
Убедитесь, что проблема устранена. Если при проверке сервис повторно обнаружит угрозу, вы сможете сообщить о ее устранении только через месяц. Дальше этот период будет увеличиваться и может составить три месяца.
В интерфейсе Яндекс.Вебмастера на странице Диагностика → Безопасность и нарушения нажмите кнопку Я все исправил . Это даст дополнительный сигнал алгоритмам Яндекса о том, что сайт нужно перепроверить. Если проверка завершена успешно, со временем ограничения будут сняты, а информация о нарушениях перестанет отображаться.