Обновлённая статистика обхода

хм. а где общее количество проиндексированных страниц?

Лайк!

как раз зашел в яндекс вебмастер, а тут новости от яндекса :)
главное чтобы все было на пользу :)
время покажет :)

Вопрос. клики в поиске висят в виджете с 25 января — 25 февраля 2017. Как сделать этот виджет обновляемым подскажите. Он как будто завис.

В выгружаемом файле адреса страниц относительные - я надеюсь, это баг?

Это круто, но когда обновите раздел "поисковые запросы", там данные месячной давности, от 25 февраля. В то время, как в вебмастере Гугла информация по запросам показывается регулярно и с отставанием всего лишь 3 дня - займитесь импортозамещением :)

У меня пока работает криво :(
"наладится все! со временем" :)

Норм

Благодарности!

Ссылки не обновляются. Поисковые запросы не обновляются. Зато выкатывают что то новое. Сделайте по человечески то что уже реализовали. Спасибо за понимание!

Очень много разделов пишет, что был код ответа 200, а стал N/A - документ не содержит текста. Хотя там текста от 2 до 4 тыс. символов без пробелов. (описание категории товарной) При чём текст уник. В чём проблема...

А почему робот обходит страници которые закрыты в роботс?

Вот бы вы еще раздел "Поисковые запросы" сделали пошустрее. Месяц никаких обновлений.

После изменений все дубли страниц проиндескировались заново, а нормальные страницы удалились, как не уникальные... в htaccess все настроено и уже несколько лет все было нормально, а теперь геморрой приходится разгребать и вручную удалять и снова переиндексировать. Когда чехарда закончится? Робот яндекса не умеет читать канонические страницы? не умеет читать htaccess ? 

Поначалу несколько непонятно, но если посидеть, подумать и разобраться, то пойдёт

Было бы совсем замечательно если бы график из "индексирование"-"страницы в поиске"-"история" поместили в "сводке". Причем, в самом верху! Это наиболее общая из важной информации, а далее уже идет уточнение - все что сейчас выводится.

Как всегда - не очень понятно, очередной квест, но разобраться можно.
Удобно, спасибо!
Будем надеяться на то что этот сервис будет работать оперативнее "кликов в поиске" ;)

с 26.02.17 не обновляется статистика запросов в вебмастере кто знает че за Х? сайт http://24spektr.ru 

Проблема следующая - переместили в архив страницы с продукцией, которую перестали выпускать, запретили в robots.txt в вебмастере внесли их в инструмент "удаление URL", на данный момент робот их обходит, в разделе статистика обходов помечает как 404 или 301. Вопросы:
1 могут ли 15 страниц с ответом 404 (из общего количества страниц сайта 100)  повлечь снижение  позиций всего сайта или страниц с ответом 200?
2 как можно корректно удалить из поиска и запретить к обходу удаленные или перемещенные в архив страницы?

Да, виджет с историей обхода на главной дашборда - несомненно классная штука. Мне понравилось и за это спасибо, ребятки.


Однако, присоединюсь к голосам многих вебмастеров на тему важности ускоренного обновления виджетов "Клики в поиске(популярные запросы)" и "Последние ссылки". Пожалуй, это было бы даже важнее реализовать в первую очередь.


Спасибо команде Яндекса за труд. У вас всё получится!

А когда будет работать статистика по "кликам в поиске"? Там инфа за 25 февраля. И было бы здорово сделать возможным её для выгрузки - в форматах XLS и CSV.


Спасибо.

Как то не очень удобно смотреть теперь.

Отличное решение, огромный плюс в карму за политику открытости. Этот инструмент в виде Истории обхода + Страницы в поиске реально помогают многое увидеть.

Это очень крутая функция, очень за вас приятно, однако:


На сайте 2 версии языка RU и для остальных EN
Язык определяется по звголовку HTTP_ACCEPT_LANGUAGE , который устанавливается как правило от языка браузера. т.е. все русские видят Русские буквы в бройзере и соответственно у меня. А не русские бройзеры видят EN.
А Яндекс такой негодник, при лазании в интернетах, даже не пытается показывать язык. Поэтому в индекс начинает лезть Английская версия.
Вот такой ресерч и повод Господа-товарищи.


Уж почините вашего бота, что бы он Русский был, а не непойми какой. Это бурж Гуглу я покажу EN, а вам RU. 

Кажется обновление раз в сутки. Но написано раз в несколько часов, посмотрим ещё.

на дашборд нужно вернуть историю страниц в поиске, как было до этого, чтоб наблюдать общую картину того, что происходит (с десятками сайтов это более важно).


В идеале конечно лучше было бы настраивать виджеты на дашборде, как в метрике

А почему история запросов в ВМ зависла на 25-м февраля? Уже больше месяца ничего не обновляется, печально....

Дима, спасибо! :) 
Теперь будем думать, как вытащить из этого отчёта полезную для нас информацию и применить.
Ю. Хаит

👍

ну что можно сказать, наконец-то дождались)

Раньше было куда удобнее отслеживать страницы с 404 ошибкой, чтобы исправить ситуацию после переезда сайта. Теперь приходится фильтровать, что не удобно. Лучше враг хорошего!

Добавьте в  - Индексирование / Структура сайта - кнопочку "Удалить раздел". А то получается добавить можно, а удалить нельзя. Это я к чему веду... Определенный раздел, который закрыт от индекса, каким то образом в него попал, и это получается (на сегодняшний день), более 8 тыс.  станиц (дублей),  потом робот удалит дубли на свое усмотрение и может быть беда... А поштучно URL - лы :) удалять, ну как то абсурдно...

Верните график с кол-во загруженных и проиндексированых страниц, сейчас стало мега неудобно!

Лучше б ссылки индексировали внешние, а не графики перерисовывали. Последний апдейт по ссылкам - 2 февраля (до этого стабильно обновлялась информация)

Очень полезно! Спасибо команде Я.Вебмастер! :)

Вот смотрю на это все и поражаюсь... Поражаюсь тому как Яндекс не умеет расставлять приоритеты. Зачем эта возня на месте? Какие то инструменты полу-необходимые для вебмастеров. 


Почему не делаете то что действительно важно? То за что вас реально будут хвалить и выражать благодарность? Итак из года в год. 


Например:


1) Где оперативность? Сделали виджет "клики в поиске" - так он должен обновляться каждый день хотя бы - чтобы нам было это хоть как то полезно. Внешние и внутренние ссылки хотя бы с недельной задержкой. Вот тогда это было бы круто и все бы хвалили Яндекс. Зачем делать ради того, чтобы сделать?


2) Инструмент - "поисковые запросы" - зачем он вообще? Если нет опять той же оперативности в обновлении данных. Это должно быть так - увидел CTR 5% - позиция такая то - ага - поменял title - через день зашел - посмотрел как изменилось. Опять же - дескрипшеном напрямую управлять нельзя. Руки вебмастеров связаны. Смысл этих всех таблиц?


3) Сделали свой очередной недоалгоритм Баден - Баден - лишь бы уколоть добропорядочных вебмастеров и владельцев сайтов. Что получили? Негатив. Поверьте, уважаемые сотрудники Яндекс, если бы вы сделали качественный алгоритм - негатива бы почти не было. Почему негатив - потому что непрофессионально сделано или вы какие то другие цели преследуете. Так хотя бы выходили на обратную связь с нами. Мы бы помогали вам находить выход из этой ситуации. Вы бы открыли бы линию горячую по приему примеров некачественной выдачи. Вот так делается цивилизованно в мире. Так нет - молчание. Понимаете - уже накипело. Уже край.


4) Основная причина постоянного ухудшения качества поиска на мой взгляд и взгляд многих других экспертов в том, что яндекс доверился искусственному интеллекту - то есть машинному обучению. Это была самая большая и роковая ошибка, которая привела к текущим плачевным результатам не то что в СНГ уже и в России. Почему нейронные сети это плохо? Потому что они плохо поддаются последующему обслуживанию. Непонятно, что откуда возникает и почему нейронная сеть решила именно так. Недавно работники Google заявили (https://www.seonews.ru/events/geri-ilsh-iskusstvennyy-intellekt-ne-budet-upravlyat-algoritmami-google/), что они не будут полностью переходить на машинное обучение - потому что непонятно почему та или иная нейронная сеть приняла именно такое решение. Отладка очень сложна таких алгоритмов.  Вы думаете разработчики алгоритмов Гугл - глупее вас?


Вот выпустили Баден - Баден - ну и что? где качество? А как сейчас исправить то что наворотили? Наверняка чешут голову разработчики, смотрят в черный ящик под названием нейронная сеть и ничего понять не могут. Вот и вся правда.

Выгрузка понравилась... А за какой период она будет сохранятся?

Ситуация такова все г......о сайты которые вообще не о чем просто в топе а все наши проделаные работы в .опе вывод один либо вернут все обратно либо плати директ и директ уже минимум 1800 платеж а не которые 360 искали чтоб кого то получить в день полный беспредел надеюсь хватит ума вернуть все обратно

Приятно, что сотрудники Яндекса постоянно работают над улучшением работы Вэбмастера. По сравнению с первоначальной версией улучшения очевидны, стало работать более удобнее, есть практически вся необходимая информация. Но как поется в песне: «сделать нам предстоит больше, чем сделано».


Самое главное мое пожелание - это более оперативное и более полное обновление информации. Часто приходят на мейл оповещения об очередном обновлении, а заходишь в панель и практически ничего нового.


Далее, хотелось бы, как писали выше, управлять созданной роботами структурой сайта. Например, в настоящее время в структуре моего сайта ydoma.info робот создал 7 разделов:
Два раздела это две страницы сайта которые выражены 900 url-ами. На страницах есть <link rel="canonical"…, но эта запись ботами игнорируется. Хотелось, чтобы все эти страницы-дубли, по факту ведущие на одну и туже страницу можно было бы самостоятельно заменить адресом одной правильной.
5 разделов не существуют уже более 6 месяцев, а некоторые больше года, и составляют более 36 000 не существующих страниц. Однако в структуре они после всех обновлений не исчезают, даже более того, некоторые появились совсем недавно. Хотелось бы иметь возможность по своему усмотрению удалять подобные разделы оптом.


Хотелось бы еще, чтобы проверка рекомендаций диагностики выполнялась в течении обещанных 14 дней, а не месяцами.

Что значит термин робот обошёл???подскажите новичку!

просто сделали ПЛОХО

Всем привет! Яндекс выкатив новые изменения в вебмастер своё слово не исполнил а именно "Теперь данные в этом разделе обновляются раз в несколько часов, что позволяет отслеживать изменения важных страниц еще до того, как они попали в поиск" Данные за сегодняшнее число не появились. Вчера страницы подал на переобход, в этом обновленном разделе не появились, хотя в вебмастере стоит статус "Робот обошел". Косяк ребята, нужно исправлять, а то получиться как с Кликами в поиски инфа будет месячной давности

В разделе "Статистика обхода" вижу множество станиц с utm-метками. Что мне сделать что бы  робот не обходил такие страницы и не видеть эти url(ы) в этом разделе? Добавить в robots.txt директиву 
Disallow: /*utm_source


?

Отлично!!! молодцы!!!

Отлично, яндекс не стоит на месте.

Маразмтично имхо бот ваш работает!
Страницы в WebMasterYandex  то пишет,  что удали то обратно добавил при том при всё, что страница как была в поиске так и осталась, причин для её "отбрасывания" объективных не нет и быть не может, а время потеряно и не отреагировать тоже не могу в следствии чего пустая трата времени которого всегда и так не хватает!


WebMasterYandex - некоторые инструменты работают как китайская лампочка ... то потухнет то погаснет!

сделайте уже что-то с этим или уберите чтобы не маячило перед глазами!


с уважением

Странно, но у меня данные не обновляются ни по одному сайту. Какие то старые данные там. У всех так? Вернее говоря написано сегодняшнее число но данные высвечиваются недельной давности. Это глюк такой?

Интересен еще такой случай, выставлен на страницах каноникал, но почему то робот не всегда на него реагирует? Иной раз видит и ставит что положено, а иной раз оставляет без изменений. Так и должно быть?

Простите, но оффтоп:
Сделайте в меткрике кнопки для сайтов как-то ближе к названиям сайтов, а то я нажал на кнпоочку удаления например или Вебмастера или Директа, и не ясно я для того сайта нажал или нет:  https://i.gyazo.com/e48b743db9164829a038a368197e443a.png

А если я удаляю счетчик, то как бы не хотелось бы ошибиться и удалить другой сайт.

Это 10+! Что может быть прогрессивнее возможности работать на опережение с ресурсами? Спасибо за постоянные улучшения, поддержку!

А есть возможность в новом интерфейсе получить список всех загруженных страниц в виде файла с параметром для каждой страницы, где было бы видно, какие страницы попали в поиск, какие нет. Раньше это было, теперь мне не удаётся получить такую выгрузку.

Это ведёт только к одному - более оперативному обновлению базы поиска)

Добрый день.
Подскажите пожалуйста если настроен last-modified на сервере, в статистике обхода будут отображаться статусы 304 Not Modified ? Или эти страницы не включаются в статистику обхода?

как посмотреть количество страниц в поиске на данный момент ?

Структура сайта => Пользовательские разделы => Добавить раздел.
Добавил раздел. Появилось сообщение: "Данные о разделе скоро появятся". "Скоро" это когда? Через неделю, через месяц или позже? Короче, не появляются данные. Почему?

Вот какая разница какая панель!?Если она не работает корректно!Два месяца пишут о проблеме, проблема видимо не решаема!Меня другое волнует и заботит, после ваших плясок не совсем понятно с чем из почти 90000 страниц в поиске выкидывает 60000 и через неделю возвращает, вот это проблема!А как будет выглядеть панель хоть всеми цветами радуги,толку от неё она как не работала со времён создания так и не работает!

Очень круто что обновили функционал вебмастера , реально удобно.
Но есть и минусы....как теперь посмотреть  количество страниц которое участвует в поиске Яндекс? , раньше можно было примерно посмотреть при помощи оператора " site: " , сейчас я так понял его отключили.
В вебмастере тоже нет такой инфы . 
Если в разделе "страницы в поиске" http://prntscr.com/ev2ark выгрузить все , и потом отсортировать по  event  = ADD скрин http://joxi.ru/v294gyNS3kEDEm , это будут актуальные данные по количеству страниц в поиске  на данный момент . 
Очень надеюсь на ответ))) 
С уважением Ваш фанат

Кто подскажет, почему изменился тИЦ (был 0 до февраля, стал 10, 13 апреля снова - 0), если ссылки остались на своих местах?
Новые ссылки, тем более на не трастовых сайтах, не размещал

У меня вопрос про карту сайта. В разделе страниц в поиске - исключенные страницы на сайте seodu.ru  страница карты sitemap.xml висит со статусом недостаточно качественная. Сама карта сайта валидацию проходит без ошибок. Есть у кого такое тоже? Или мне у себя косяк искать?

Ребят, сделали наглядно и красиво, только есть вопрос по отображению "обновившихся" страниц.


У меня, как и у Евгения выше, настроен  last-modified на сайте и 304 Not Modified я отдаю правильно, проверял. И если ваш робот на 304-статус не реагирует, как тогда вы помечаете обновившиеся страницы? По своему внутреннего алгоритму - если на странице изменился контент, то делаем ее обновившейся и выводим  +1 в статистике обхода?



Я это все к тому, что уже с февраля настроил время обновления страниц и много страниц обновил (т.е. добавил уникального контента на 1000-1500 знаков), но в статистике ни разу не видел ни одной обновившейся страницы...
 
P/S: Коллеги-владельцы сайтов, подскажите, как у вас с выводом обновившихся страниц? Выводятся? Правильно все? Или это только у меня такие проблемы возникли?

Почему в "Статистике обхода" "Последние изменения" датированы 08.04.2017, а последний принудительный "Переобход страниц" проводился 21-24.04. 2017? Когда эти изменения появятся в отчёте?

Я только начинаю понимать что - то в данной теме, очень для меня это тяжело. Сижу почти сутками, но успеть одному за всем, да еще учиться? Я восхищаюсь специалистами Яндекса. Webmaster Yandex.ru незаменимый инструмент для вебмастера, мне лично очень помогает. Удача Вам команда. Спасибо за все.

У меня за неделю резко упала статистика  обхода страниц сайта, но вот  компоненты резко поднялась(pdf файлы), с чем это может быть связано.  А на сайте pr-cy.ru, для мониторинга,  показывает что видимость в яндексе существенно упала.Из-за  чего это может быть?