Блог Яндекса для вебмастеров

Неканонические страницы в Поиске

4 июля, 19:35

Часто на сайтах присутствуют страницы с разными URL, но с одинаковым или очень похожим содержанием. С помощью атрибута rel=«canonical» вебмастера могут указать, какая страница является «канонической» — предпочтительной для индексации и появления в результатах поиска. Остальные, неканонические версии как правило в поиск не попадают.

Наши исследования показывают, что страницы, размеченные как неканонические могут быть полезны, а их наличие в поиске может влиять на качество и полноту ответа на запрос пользователя. Например, если для темы форума владелец сайта указал канонической страницу с началом ветки, то многие важные и нужные ответы, которые были даны пользователями позже, в поиск не попадают. Другой пример: бывает, что какое-то литературное произведение разбито на страницы и в качестве канонической прописана первая страница. В результате сайт не находится по запросу-цитате, соответствующей тексту за пределами первой странице. Поэтому теперь в поиске неканонические страницы будут появляться чаще.

Они будут показаны в том случае, если они более релевантны запросу и их контент существенно отличался от канонической версии во время сканирования роботом. В Вебмастере такие страницы можно увидеть на странице «Страницы в поиске» с пометкой «Неканоническая». Помимо этого статуса мы начали показывать статусы «Каноническая» и «Каноническая страница не указана» для всех страниц, попавших в поиск. 


Если канонические страницы настроены на сайте без ошибок, то никаких дополнительных действий от вебмастера не требуется. Для сайтов, имеющих много неканонических страниц, которые сильно отличались от канонических, возможен прирост количества страниц в Поиске. Впрочем, канонические страницы по-прежнему попадают в поиск гораздо чаще и имеют более высокий приоритет при показе в результатах поиска. Объем трафика для каждого конкретного сайта существенно не изменится.

Команда Поиска

P. S. Подписывайтесь на наши каналы
Блог Яндекса для Вебмастеров
Канал Яндекса о продвижении сайтов на YouTube
Канал для владельцев сайтов в Яндекс.Дзен

122 комментария
Качмарик Валерий
4 июля, 20:31
Об этом нужно было задуматься изначально.
Мазаев Константин
4 июля, 21:34
Качмарик Валерий,
Даже в Битрикс по прежнему нет базовой функции включения канонических URL, за 35 900 рублей для редакции ИМ. 3 года работа "кипит".
Мазаев Константин,
а какую именно страницу битриксоиды должны были считать канонической, да еще и писать под это базовую функцию?


<link rel="canonical" href="https://<?=SITE_SERVER_NAME.$APPLICATION->GetCurPage()?>"/>



в header.php , если хотите чтобы каноническими была просто без GET-параметров, и всё.
Обновлено 5 июля, 04:47
Виталий Вайти
9 июля, 09:18
Spawn,
такой способ будет некорректен при использовании в каталоге с умным фильтром.
Виталий Вайти
9 июля, 09:18
Мазаев Константин,
на какой платформе есть из коробки?
Виталий Вайти,
например, в Drupal, канониклы контролируются на уровне ядра и если надо переопределяются.
Учитываются системные пути контента, ЧПУ и ещё много всего, включая историю изменений урлов.

Хотите статью почему мы считаем Drupal самым удобным для SEO движком?
Обновлено 10 июля, 10:54
mail@woib.ru
10 июля, 13:42
Виталий Вайти,
да почти во всех нормальных есть "из коробки", да и в чем сложность самим настроить?
Виталий Вайти,
вроде как считается, что страницы пагинации, результаты поиска по сайту, и результаты фильтрации каноническими делать не стоит.
Но в общем я пример скорее для примера приводил.
anapagorkogo11
4 июля, 21:39
Вот от этого умного поиска я и страдаю..на моем сайте есть две разные по смыслу статьи 1 описывает конкретно разное жилье на курортах а 2 коттеджи, но Яндекс считает фразу жилье и дом одинаковой и как тут быть? если обе эти статьи должны выдаваться в поиске под разным значением
svetishe2009
5 июля, 10:28
anapagorkogo11,
уже сколько лет страдаю на эту тему, но не как сайтовладелец, а при поиске информации для себя лично или для наполнения чужих сайтов. 
В том году делала большо-о-о-ой каталог оборудования - а там у всего подряд по несколько модификаций. И как же задолбал  поиск своим "умом"! Мало того, что все модификации валив кучу (а что, похоже же), так еще когда часть заполнена и надо двигаться дальше, упорно на новые (тоже похожие, по его мнению) запросы вываливает отсмотренное на той неделе. 
Реально хотелось биться головой о клавиатуру - причем и инвизибл-режим использовался, и история не копилась, и "понимайте меня буквально, я не зря ставлю кавычки", и вообще... Впоминаю с ужасом и регулярно сталкиваюсь с подобным, пусть и не в таких масштабах.
Обновлено 5 июля, 10:29
svetishe2009,
Согласен. Тут как с поиском, так и с сайтами. Когда ищешь, например (в примере несуществующий продукт), "синий телефон на ведроид", то находит красный телефон. Синий где-то на несколько позиций ниже на другом сайте или вообще его нет. При этом открыв "красный телефон на ведроид" можно перейти на страницу с "синим телефоном".
Елена Першина
Сотрудник Яндекса8 июля, 10:21
anapagorkogo11,
а можно пример?
an.mamina2015
4 июля, 23:00
Интересный момент. Раньше амп страницы вылетали из поиска как неканонические. Теперь они стабильно помечаются как недостаточно качественные. Интересно бы узнать, чем именно амп страница некачественнее, чем, например, турбо?
an.mamina2015,
Так AMP = Гугл, а Турбо = Яндекс. При чем тут взаимосвязь AMP и Яндекс...
an.mamina2015
5 июля, 18:06
admice7,
при том, что страницы одинаковые по контенту, но тем не менее амп по неизвестным причинам засчитываются как некачественные. Ладно, раньше были неканонические, это понятно, в принципе, нормально, что яндекс выкидывает амп из своего поиска, но зачем с такой формулировкой выпинывать начал? 
Виктор Каргин
5 июля, 10:35
an.mamina2015,
на данный момент, видно, что под статусом "недостаточно качественная" может скрываться что угодно, вплоть до 302 редиректа. Так что не стоит искать смысла там, где его нет

Виктор Каргин,
только сегодня столкнулся с некачественной страницей, потому что на нее ведет 302 редирект О_о Хоть бы помечали в чем она некачественная, приходится в саппорт писать, ответа ждать, хотя исправить все дело 2 минут.
Виктор Каргин
5 июля, 14:07
wwwwmaster,
302 редирект, кстати. видно в выгрузке у таких страниц. Лайфхак таксказать
an.mamina2015
5 июля, 18:07
Виктор Каргин,
логично) Проще плюнуть на это, чем мозг себе воспалять)
maksimov@mtg-biz.ru
5 июля, 10:39
an.mamina2015,
интересно, зачем амп вообще отдавать роботу Яндекса))
an.mamina2015
5 июля, 18:09
maksimov@mtg-biz.ru,
даже не знаю, умела бы от него ампы закрывать - закрыла бы, чтобы вообще там не ковырялся.
maksimov@mtg-biz.ru
5 июля, 18:19
an.mamina2015,
так для ампов отдельные страницы же? Можете посмотреть, как у нас сделано: mtg-biz.ru/robots.txt .
А без работы с robots.txt SEO заниматься опасно.. Да и вообще опасно - может утечь то, что не должно.
an.mamina2015
5 июля, 18:35
maksimov@mtg-biz.ru,
благодарю от души!!!! Пошла себе реализовывать недостающие запреты.
Елена Першина
Сотрудник Яндекса8 июля, 10:23
an.mamina2015,
больше всего похоже на то, что воспринимаются как дубль. Но лучше через поддержку уточнить. 
Николай
4 июля, 23:00
В разделе «Страницы в поиске» страницы указываются как канонические (это верно, везде rel=canonical), но в разделе «Сводка», в виджете «Обновления в поиске до 1 июля» у этих же страниц написано «Канонический адрес не указан». Доработайте пожалуйста виджет, чтобы в обоих случаях отображалось одинаковая (и достоверная) информация.
АлиПросто
5 июля, 10:30
Николай,
очень правильно подмечено!!!
maksimov@mtg-biz.ru
5 июля, 10:43
Николай,
тоже самое. Например: https://mtg-biz.ru/about_company/news/?PAGEN_1=93 . Но, скорей всего, проблема только в отображении в "Сводке", т.к. "Страницы в поиске" всё ОК.
Елена Першина
Сотрудник Яндекса8 июля, 10:45
Николай,
спасибо, смотрим.
На всех страниц настроен каноникал,в вебмастере вылетело сообщение «Канонический адрес не указан»...как это понимать?
АлиПросто
5 июля, 10:31
kleveragro,
Посмотрите в ВМ раздел - Страницы в поиске. Там правильно всё указано!
m.kislov@clever-as.ru
4 июля, 23:23
То есть, теперь нельзя гарантированно контролировать выдачу необходимых страниц? Яндекс и сейчас зачастую считает дублями разные по содержанию страницы, так с какой бы радости он стал корректно определять не дубли при уж точно схожем, или одинаковом контенте?


Короче, ребята, избавляемся от дублей, явных и не очень.
Елена Першина
Сотрудник Яндекса8 июля, 13:17
m.kislov@clever-as.ru,
дубли и так не будут попадать. Вопрос о том, что дублями не является. 
Раньше, когда Яндекс обходил по популярности Апорт и Рамблер, был лидером рунета, попадали В поиск .


Сейчас с 4мя обьявлениями директа неотличимых от органики и 5ю сервисами Яндекса, попадают НА поиск?


Почему вы пишите: как правило НА поиск не попадают 
позже, На поиск не попадают
канонические страницы по-прежнему попадают НА поиск гораздо чаще
 
Но и так:  их наличие В поиске может
И так: прирост количества страниц В Поиске (кстати, почему-то с большой буквы тут слово Поиск)
страниц, попавших В поиск. 
на странице «Страницы В поиске» 
finutmag,
ты что написать то хотел?
cyberbonus,

Да хотел спросить про предлоги. Почему пишут в посте: попадают На поиск, а не В поиск?



Елена Першина
Сотрудник Яндекса8 июля, 14:19
finutmag,
вообще и так, и так используем предлоги. Но поправили на "в" ) 
Наконец то вы это поняли!
И 10 лет не прошло... :)
У меня canonical везде прописан, но в вебмастере показываются страницы на которых якобы нет canonical, хотя он там есть. Что за бред?
stashbk,
у меня такая же ерунда вылетела.....может баг у яндекса
kleveragro,
а у меня всё норм: https://yadi.sk/i/pSyCtJKzPRvqhw 
Может у вас на сайте с тегами баг?
АлиПросто
5 июля, 10:33
kleveragro,
Посмотрите через раздел - Страницы в поиске. Там правильно указано всё
АлиПросто
5 июля, 10:33
stashbk,
Посмотрите через раздел - Страницы в поиске. Там правильно указано всё
Елена Першина
Сотрудник Яндекса8 июля, 13:20
stashbk,
в поддержку нам напишите? 
Борисыч
5 июля, 09:37
Прописаны канонические ссылки. У этих канонических ссылок статус стоит статус "неканоническая"....
АлиПросто
5 июля, 10:33
Борисыч,
Посмотрите через раздел - Страницы в поиске. Там правильно указано всё
biplane-studio
5 июля, 09:38
уже 2 месяца как, а они только отписались...
maksimov@mtg-biz.ru
5 июля, 10:48
biplane-studio,
смотрю почти каждый день. Сегодня только появилось.
Виктор Каргин
5 июля, 10:39
А подскажите, чето теперь делать с листингами товаров в интернет-магазинах? Они, как форум, будут показываться в индексе?
Ваша предыдущая рекомендация - указывать канонической первую страницу для листингов теперь недействительна или как?
С фоурмами и статьями, поделенными на страницы и так было всё понятно ранее. Хорошо, что внесли ясность. Но основная часть сайтов, над которыми работают специалисты - коммерческие, а коммерческие минимум на половину - это интернет-магазины. И вот их вы как-то ловко обошли стороной в примерах
Геннадий Ичкерин
5 июля, 10:52
Виктор Каргин,
Красавчик, плюсую, единственный важный вопрос по новому функционалу
kirillskripko
5 июля, 13:15
Виктор Каргин,
присоединюсь к комментарию - дайте комментарий (сорян за тавтологию но тем не менее)
Обновлено 5 июля, 13:15
telecom-sales
5 июля, 23:35
Виктор Каргин,
 ИМ замерли в ожидании...
Елена Першина
Сотрудник Яндекса8 июля, 14:57
Виктор Каргин,
Рекомендации не изменились. Для листингов имеет смысл указывать канонической первую страницу. Неканонические страницы при этом могут попадать в поиск, но это не означает, что все неканонические страницы попадут на поиск. Если вебмастер не хочет, чтобы неканонические страницы листингов попадали в поиск, можно использовать для этого, например, директиву Clean-param https://yandex.ru/support/webmaster/robot-workings/clean-param.html.
Елена Першина,
Отличная новость. Для меня было бы полезно такое нововведение. Объясню: 
Чаще всего  у интернет-магазинов  при наполнении страниц товаром используются шаблонные анкоры для карточек товара. 
У меня  категория "холодильные шкафы"  вмещает в себя: 

-холодильные шкафы
-морозильные шкафы
-комбинированные шкафы
-медицинские холодильные шкафы
-холодильные шкафы для икры
-холодильные шкафы для вина и так далее ....
При поиске товаров пользователь на сайте пользуется фильтром товаров.


Если забить в поиск яндекса "купить холодильный шкаф для вина" то в выдаче показывается не категория товара, а любой холодильный шкаф для вина на усмотрения Яндекса. Так как у меня эти шкафы начинаются с 5 страницы, возможно по данному запросу пользователю будет полезно попасть именно на 5-ю страницу этой категории. 


Елена, я всё правильно понял? Или это мои мечты? 
Елена Першина
Сотрудник Яндекса10 июля, 10:37
windows.bel,
нововведение как раз про то, чтобы лучше находилось подобное, да.
А автоматический определять canonical, пока не умеете? У меня вообще все страницы не каноничные показывает.
Елена Першина
Сотрудник Яндекса8 июля, 13:31
Амиль,
умеем,  но если вдруг с этим есть проблемы, то через поддержку постараемся помочь. 
Максим Медведев
5 июля, 14:30
Отличное обновление. 
Сайт на битриксе, в коде указан тег для канонического урла уже неизвестно сколько лет. Сегодня захожу в вебмастер в сводку и вижу новые страницы, которые были добавлены на днях и... тадам: "Канонический адрес не указан". Открываю страницы, проверяю, все есть. 
Молодцы!
Илья Журавлёв
5 июля, 14:52
В исходном коде указан тег Canonical, в Вебмастере пишет: "Канонический адрес не указан". ???
Елена Першина
Сотрудник Яндекса8 июля, 10:20
Илья Журавлёв,
будем рады подсказать, но через форму обратной связи Вебмастера. Нужно больше информации о том, почему не видим канонический адрес. Напишите нам? 
support@hackoff.ru
5 июля, 18:04
Несомненно заметил данные пометки в ВебМастере НО!...
Уважаемые товарищи тестируйте прежде чем выкладывать в продакшен свои поделки!
Вот реально увидев ваши пометки, что "Каноническая страница не указана" в то время когда она указана и с первых минут запуска сайта всё время была там... начинаешь ковыряться... ЧтоЖешь я сделал не так ... а всё так ... просто у Вас алерт ложно сработал.... а я потратил время на проверки в пустую и такое не в первый раз и не только с данным новшеством!
Честное слов... я негодую!

Елена Першина
Сотрудник Яндекса8 июля, 13:33
support@hackoff.ru,
проверим этот момент, спасибо!
support@hackoff.ru,
 один в один, стоит алерт на смену канонических... приходит уведомление, что сменился на пустой... я на сайт, а там все ок... пишу в поддержку, отвечают, что "...с Вашим сайтом все хорошо, не обращайте внимания..."
Ну как же так?
Моё мнение проще. Не должно быть никаких ни rel ни canonical ни прочей ереси. Есть понятие релевантность. Если запрос более релевантен "здесь", то ненужно его насильно заставлять направлять "туда".  Понятие дубль может появляться только при полном совпадении контента и заголовков страниц, а также полное совпадение скрытого веса страницы. В обычном случае это физически не возможно, т.к. вес у страниц всегда разный, разное внутреннее, а  может и внешнее продвижение, вложение, количество внутренних ссылок и т.п.., задача яндекса выбрать лишь более подходящее из двух в этом случае. Другой вопрос, что у яндекса мощностей не хватает держать такой огромный горячий индекс постоянно в памяти. Вот и отсеивают якобы ненужное.
russ-diablo,
Как вы себе представляете это, с технической стороны?
Амиль,
Это уже реализовано в яндексе и прекрасно работает. Суть в  том, чтобы не выбирать, а индексировать всё подряд. Про огромный индекс - не знаю, может оно нормально будет работать. Я лишь предположил, что он может не умещаться в памяти и т.п. и возможно както заметно повлияет на скорость. Сейчас индекс тоже не маленький. Видимо его разбивают на небольшие кластеры и т.п.. понятия не имею как оно там выглядит в биг дате.
Этот пост противоречит этому посту https://yandex.ru/blog/platon/2878 ,
в котором написано, что нужно прописать canonical, а остальное закрыть в robots.txt
Как же Яндекс тогда будет выдавать Неканонические страницы в Поиске, если они явно запрещены для индексации.
platon
Сотрудник Яндекса16 июля, 09:24
maxim888,
информация об использовании атрибута rel="canonical" для страниц пагинации из поста https://yandex.ru/blog/platon/2878 в данный момент уже не актуальна. Мы постараемся поправить это на странице https://yandex.ru/blog/platon/2878 , спасибо, что обратили внимание.
Что же касается страниц сортировки товаров по цене, популярности и т.д., индексирование таких ссылок все еще можно ограничить при помощи директив в robots.txt: clean-param для ссылок с get-параметрами и disallow для полного запрета посещения ссылок.
Не пойму что Яндекс хочет. Рекомендуется ставить этот каноникал или только если дубли? У меня нет дублей, но и каноникал я не ставил.
Стоит добавить каноникал? Мне не сложно если нужно, секунд 10 потрачу.


И как быть с тегом base href?
<base href="https://webmaster.yandex.ru/blog/nekanonicheskie-stranitsy-v-poiske"/>

У меня он проставлен. Он вообще нужен?
Елена Першина
Сотрудник Яндекса8 июля, 13:36
krovliclub,
тут лучше на сайт индивидуально посмотреть - напишите в поддержку?
В Яндексе похоже забыли про свой пост про "тексты оптимизировались..." Читаешь эту новость и видишь только одно "Тексты канонировались канонировались да не выканонировались" 
Елена Першина
Сотрудник Яндекса8 июля, 13:36
masova.spb,
не забыли. Мы и тут, и там - про качественные тексты. 
g.abraamian2018
5 июля, 22:54
Только что заметил еще одну новинку в поиске . Появился новый оранжевый значок молнии в выдаче с пометкой быстрый сайт его можно увидеть рядом со страницами сервисов яндекса например метрики
лучшее враг хорошего )
Поддерживаю товарища, который высказал мысль, что на фиг эти каноникал не каноникал. Отражает текст запрос юзера - гуд, не отражает - не гуд. А то слишком мудрено получается.
"страницы, размеченные как неканонические могут быть полезны" - вы уверены что это верно написано? Если страница неканоническая, то в чём проблема проиндексировать?
"В результате сайт не находится по запросу-цитате, соответствующей тексту за пределами первой странице." - не верное склонение.
Хорошо было бы переписать данный материал в более понятном виде и местами более простым языком. Ну и конечно контролировать склонение...
Добрый день, я так и не понял, надо их ставить или нет ( конкретно для меня


вот пример, есть одна страница сайта, но с добавлением одного параметра, она меняет контент, т.е.


нормальное состояние, на ней отображается полноценный контент (текст, картинки, определенный виджет, и т.д.)
https://site.com/apple.html



но есть и, которая отображается на других сайтах в iframe, но без текста и т.д. только виджет
https://site.com/apple.html?widget=1
 
мне тут как быть, ставить 
<link href="https://site.com/apple.html" rel="canonical" />



или в обще это все убрать?


уже поднадоело, смотреть как там все прыгает в истории обхода, то N / a ⇒ 200, то 200 => N/a и т.д. что-то постоянно все прыгает, и судя по показателем посетителей все меньше и меньше.


Сайт древний 6 лет ему, куча контента, даже грустно смотреть на стату с показателями в 300 уников(


Сорян за последнюю часть ) , наболело
izhtrade,
это что происходит все страницы, ушли в дуболь ...
izhtrade,
убрал эту ерунду, повелся на красивые слова, реально все страницы ушли в дубли, причем, есть конкретная страница про "яблоки", а система говорит, что это дубль страницы "паровозов", ну ппц
Елена Першина
Сотрудник Яндекса10 июля, 10:33
izhtrade,
Если содержимое таких страниц будет в значительной мере отличаться, использовать атрибут rel="canonical" нет необходимости, так как в этом случае он, скорее всего, не будет учитываться поисковой системой. При этом, если страницы вида https://site.com/apple.html?widget=1 не содержат какого-то контента, который может быть интересен пользователю в поиске, их индексирование можно ограничить при помощи других методов. Например, страницы с get-параметрами, как в примере выше, можно ограничить при помощи директивы Clean-param в robots.txt: https://yandex.ru/support/webmaster/robot-workings/clean-param.html .
Что же касается дублей страниц, изменения, о которых мы написали, не должны привести к признанию страниц дублирующими: если робот не учел атрибут, это означает, что содержимое страниц в достаточной мере различается, чтобы они могли участвовать в поиске отдельно друг от друга. Если какие-то ссылки, контент которых отличается, были исключены из поиска как дубли, напишите, пожалуйста, об этом через форму обратной связи Яндекс.Вебмастера: https://yandex.ru/support/webmaster-troubleshooting/site-indexing/bad-indexing/missing-reasons.html . Будем разбираться.
Trueinsurance
8 июля, 18:26
Ну ладно к слову. Автомобильный каталог куча технической документации Audi Q3 AT и Audi Q3 MT робот считает их одинаковыми по факту совершенно две разные модификации, начиная от типа коробки заканчивая компановкой. Как быть?
Елена Першина
Сотрудник Яндекса9 июля, 11:14
Trueinsurance,
в поддержку нам написать - и еще раз убедиться, что документация правда разная.
Обновлено 9 июля, 23:22
Trueinsurance
9 июля, 11:45
Елена Першина,
Елена, Ваши коллеги из автору должны понимать о чем я. Естественно контент разный по ряду параметров. А по какому адресу в поддержку писать и в каком контексте?
Елена Першина
Сотрудник Яндекса9 июля, 23:23
Trueinsurance,
через форму обратной связи Вебмастера, ссылка внизу страницы сервиса. 
Люди добрые, у меня нет этого нет этого атрибута. Интернет магазин driptip.ru. Прочитал вроде всё, но так и не понял. Нужно ставить этот атрибут или нет?
Елена Першина
Сотрудник Яндекса10 июля, 10:34
drip tip,
Стоит ли ставить атрибут, решать вам как владельцу сайта. В такой ситуации рекомендуем оценить, если ли на сайте страницы, контент которых полностью или практически полностью совпадает с содержимым других страниц. Например, можно проверить в Яндекс.Вебмастере, не были ли исключены те или иные страницы как дубли. Если такие страницы есть, можно использовать атрибут rel="canonical", чтобы явно сообщить поисковой систем, какая из страниц-дублей должна быть в поиске. Рекомендуем также ознакомиться с рекомендациями из нашего поста: https://yandex.ru/blog/platon/dubli-kak-ikh-izbezhat-voprosy-i-otvety . Возможно, это поможет определить, для каких случаев нужен атрибут.
Severinov.Aleksandr
8 июля, 21:24
Приветствую.
Я, возможно многого недопонимаю, но что-то уже через край.
У меня один сайт. ОДИН. До того, как он стал известен Яндексу - он стал https и от рождения был без www. Однако Яндекс сообщает: «Главное зеркало Вашего сайта изменилось на www. В поиске Вам светит борода. Срочно добавьте в панель вебмастера сайт с www и укажите, что он - НЕ ГЛАВНОЕ ЗЕРКАЛО.»
Нет. Ну это нормально? Нафигаказебаян?! Его там и не было. Зачем высасывать из пальца???
Победили www. Добавили в панель несуществующий в принципе сайт и указали, что он плохой ))). Натыкали редиректов всяких. Теперь под всеми страницами: «Канонический адрес не указан»...
Понимаете - ну не нужен мне ни второй придуманный Вами сайт, ни третий, ни двадцать третий. В работе ОДИН - https://sitename.ru... с первого дня. Это не дубли на «моих сайтах», это - Ваши выдумки.
Придумайте, в конце концов, механизм с кнопкой - «ЭТО МОЙ ЕДИНСТВЕННЫЙ САЙТ», вместо механизма «это мое главное зеркало».
==================================================
Однажды на хабре прочитал статейку про ошибочную директиву в коде какого-то там месенджера. Так вот он использовал несколько лишних тактов процессора. На миллионах устройств суммарно этот промах за месяц сжирал энергии столько, сколько ГЭС не всякая дает. Представляете, какое умопомрачительное количество человеко-часов поглощает яндекс с такой сумасшедшей переоптимизацией? Каждый день десяток лет от жизней нашего брата...

У Вас робот то Вам еще подчиняется? Или с нами уже проще управляться, чем с ним? )))))))))))
Обновлено 8 июля, 21:27
Елена Першина
Сотрудник Яндекса9 июля, 11:12
Severinov.Aleksandr,
Добрый день! Это не придуманный сайт - он есть).  А вот почему зеркало изменилось - это лучше у поддержки Вебмастера напрямую уточнить. 
Приветствую!
Как всегда только сарказм :) . Делаем сайты для людей, бла-бла-бла.
Мои доблестные Платоны :))), стоящие на страже поиска.
А вы реально подумали, перед тем, как это делать? Или просто не смогли?
https://www.born-spb.ru/catalog/videokamery.html

Это страница листинга категории, там внизу по пагинации, можно перейти на 14!!!! страниц, вы себе реально представляете смысл в выдаче этих страниц? Про дополнительную индексацию я молчу. Что пользователю может дать!!! в выдаче страница категории номер 2, если с одного сайта все равно будет в выдаче 1 страница? Может разумно предположить, что человек!!! начнет с первой!!! Где самые топовые товары, а потом уже пойдет куда ему надо, через фильтр или через пагинацию. Вы бы лучше ввели, дополнительный тег, заместо каноникала (который единственный позволяет убрать из выдачи кучу мусора, думаете в роботе все смогут грамотно закрыть от индекса все не нужное?). Аналог прева от гугла, для четкого разделения - что это пагинация!!! Это решение.
born762,
Я вам отвечу откуда тут ноги растут. На "мега крутой" толоке есть такое задание - DbD попарное сравнение сайтов. Так вот там как раз и проскакивают все эти многостраничные примеры (сам лично видел). И сколько не писал платонам и админам толоки - им до одного места. У них в порядке вещей выгружать в топ 404 страницы, а вместо основной версии давать на десктоп мобильные версии сайта. То же самое и с этой темой. Весь их хваленый интеллект сводиться к проплачиванию ответов от кучи не всегда адекватных толокеров, которые, кстати, и продвигают все проекты яндекса.   
Елена Першина
Сотрудник Яндекса9 июля, 16:09
born762,
не переживайте, по пагинации правила старые ) 
Елена Першина,
можно уточнить где можно почитать последние рекомендации по пагинации? Статья платона про пагинацию вредительская какая-то, там в комментах несколько раз все меняется с ног на голову, предыдущие утверждения опровергаются или противоречат друг  другу. Надо каноникал на первую или на саму себя ставить в пагинациях листинтов?
Обновлено 9 июля, 16:50
born762,
гугл уже 5 лет не использует prev-next 
pavel.nagovitsin
9 июля, 18:45
Коллеги, а что по поводу межхостового canonical? Он стал обрабатываться? Ситуации бывают разные, например у меня на 1 сайте есть поддомен, на котором абсолютно другая информация, т.е. он отличается от основного вида деятельности. Но, есть общие страницы филиалов и акций, могу ли я указать на таких страниц каноникал на другой домен/поддомен? 
platon
Сотрудник Яндекса16 июля, 12:40
pavel.nagovitsin,
межхостовый атрибут rel="canonical" в данный момент все еще не поддерживается. В рамках групп сайтов http/https, а также с www и без www атрибут можно использовать как указание на главное зеркало (подробнее об этом здесь: https://webmaster.yandex.ru/blog/samye-populyarnye-voprosy-pro-pereezd-sayta-na-segodnyashniy-den ), но исключить ссылки из поиска как неканонические страниц другого сайта возможности нет.
Здравствуйте, в разделе страницы сайта высвечивается что канонический адрес не указан для site.ru/index.php и почему то две страницы в поиске site.ru и site.ru/index.php. на мой взгляд такие страницы как index.php не должны быть в поиске если уже присутствует страница без этого. Каким образом я могу прописать каноникал для index.php? Заранее спасибо, с уважением
Arcadik,
index.php закрыть в robots.txt
mail@woib.ru
10 июля, 13:48
Подскажите, как решить проблему: оптимизировал сайт-каталог, переехал на https (301 редиректы, каноникалы всё ок), убрал одну лишнюю заглавную категорию (каталог, в пути была /catalog), у всех товаров и категорий изменился адрес (без /catalog). Поставил 301 редирект и каноникал корректный. Должно-быть всё хорошо по логике, но уже больше месяца страницы со старого http переходят на новый, позиции просели сильно, многие вылетели. С http на https переходит по 5-10 страниц в день! Это ппц как медленно
Елена Першина
Сотрудник Яндекса11 июля, 10:39
mail@woib.ru,
из такого описания тут не понять, к сожалению, в чем проблема. Давайте на реальном примере разберемся, напишите нам в поддержку? 
То то яндекс проиндексировал все мои amp страницы при подключении и стал их показывать вместо обыкновенных страниц моего сайта, от большого ума наверное. Потом я все исправила, но честно говоря не ожидала, что Яндекс не воспринимает тег canonical.
Елена Першина
Сотрудник Яндекса11 июля, 11:15
l.shikowa,
а почему у вас amp и обычные страницы сайта по контенту не совпадают? 
ruslan.filonow
12 июля, 21:53
Добрый день. Еще проблема такая, 


Отсутствуют метатеги <Description>
На многих страницах сайта отсутствуют или некорректно заполнены метатеги Description. Это может негативно повлиять на представление сайта в результатах поиска.


Эта ошибка уже 4 месяца не пропадает... Как быть? На переобход можно только 20 добавлять. В карте сайта есть. А страниц 2500.
Елена Першина
Сотрудник Яндекса13 июля, 20:23
ruslan.filonow,
можно в поддержку об этом написать. Но вообще, если все поправили, то переживать не нужно. Робот при переобходе данные обновит. Информация о проблеме может обновляться с задержкой, к сожалению. 
maksimov@mtg-biz.ru
15 июля, 10:32
Не знаю, как написать в ТП.


В последнее время стали приходить уведомления об отсутствии тега canonical для важных страниц. Естественно, такая проблема может быть и для "не важных" страниц - просто уведомления не доходят.

См. скрины. Что может быть не так. Проверял версию для ПК и мобильную - всё ОК.


https://yadi.sk/i/Iaym-t7savu5DQ

https://yadi.sk/i/8idpLUVU12ckPw
Обновлено 15 июля, 10:33
Елена Першина
Сотрудник Яндекса15 июля, 12:41
maksimov@mtg-biz.ru,
внизу Вебмастера есть ссылка на обратную связь - если через неё напишите, сможем помочь. 
maksimov@mtg-biz.ru
15 июля, 12:55
Елена Першина,
вы не поверите. Я всё облазил и не нашёл, как вам написать по данному вопросу. Ссылка на Обратную связь ведёт на список разделов)).
Нашёл только в "Другой вопрос о сервисе Яндекс.Вебмастер" - запрятано основательно))
Про мобильную версию сразу нашёл, как написать. Написал, благодарю! ;)
maksimov@mtg-biz.ru
15 июля, 12:55
Елена Першина,
а-то вообще не понимаю, почему так любит сайт Г и не любит Я(((.
Елена Першина
Сотрудник Яндекса15 июля, 13:11
maksimov@mtg-biz.ru,
начните с нашей Диагностики в Вебмастере - посмотрите, что нам не нравится. 
Обновлено 15 июля, 13:32
maksimov@mtg-biz.ru
15 июля, 13:22
Елена Першина,
одна рекомендация только: "Сайт не оптимизирован для мобильных устройств". Доработали сайт, отправлял на повторную проверку, далее "Веб-мастер" сообщает, что не соответствует всё-равно и самое главное - "главная" же страница. При том, что проверку проходит.


Подробности в сегодняшнем тикете: 19071507101541643 .


Второе - это канонические страницы. Подробности также в сегодняшнем тикете: 19071509553144043 .
страницы моего сайта неканонические, а мертвого вот уже как года 2 сайта видимо канонические, раз Яндекс выдает его первым на страницы
Елена Першина
Сотрудник Яндекса17 июля, 19:44
vilim.a,
слова - это хорошо, реальные примеры - еще лучше. 
Обновлено 17 июля, 19:44
autolombard-express.ru
17 июля, 12:33
добрый день! у меня был переход на протокол htpps  на новом сайте . В данный момент в вебмастере все стр. указаны "канонический адрес не указан" . В старой версии http вообще нет стр в поиске. Это может быть проблемой для меня...Ни одного ключа нет в поиске по запросам. Хотя работа над сайтом идёт...
Елена Першина
Сотрудник Яндекса17 июля, 19:45
autolombard-express.ru,
вопрос конкретно в чем и задали ли вы его в поддержку? какой номер тикета? 
superseeder2011
18 июля, 20:57
Елена Першина,

Добрый день, Елена.
Простите меня, бестолкового. Если Вас не затруднит, не могли бы Вы повториться?
Есть информационный сайт с разделами. Есть и постраничная навигация. На каждой такой странице выводится 5 анонсов, заголовок статьи и кнопка "читать полностью".
Я поставил каноническую ссылку на первую страницу раздела. В файле robots.txt и мета-тегом noindex follow пагинация не закрыта.
Всего 1 вопрос. Правильно ли я поступил?
Некоторые страницы пагинации присутствуют в выдаче. Насколько я понимаю, сей факт не является ошибкой?
Спасибо!
Обновлено 18 июля, 20:59
platon
Сотрудник Яндекса19 июля, 12:58
superseeder2011,
если какие-то страницы, на которых был установлен атрибут rel="canonical", попали в поиск, рекомендуем проверить информацию о страницах в разделе "Страницы в поиске". Инструмент покажет, был ли обработан атрибут на страницах: если у ссылок указана информация о том, что атрибут не указан, возможно, в настройках атрибута есть какие-то проблемы и стоит проверить указания. Если атрибут обработан корректно, но страницы попали в поиск, это действительно не ошибка. Это означает, что контент неканонических и канонической страницы в существенной мере отличается, поэтому неканонические ссылки могут быть полезны пользователям и были включены в поиск.
superseeder2011
19 июля, 18:43
platon,

Я благодарен Вам за ответ.
В Яндекс.Вебмастере ряд страниц, попавших в поисковую выдачу, отмечены, как неканонические. 
Атрибут указан. Каноническая ссылка ведёт на первую страницу раздела Wordpress. И Яндекс видит этот атрибут (директиву).
Вы оперативно предоставили ответ. Но позвольте мне немного углубиться в проблему. Пожалуйста, поймите, что в этом важно разобраться единожды.
Как наиболее грамотно - не для Вебмастера, а для поисковой системы Яндекс? Указывать каноническую ссылку на первую страницу раздела, как Вы рекомендовали в Вебинаре, или на саму себя? Если я не ошибаюсь, в последнем случае ВСЕ страницы пагинации попадут в индекс? 
Просто ответьте хотя бы односложно:
1). Мы по-прежнему рекомендуем указывать каноникал на первую страницу каталога (рубрики/раздела).
2). Мы не рекомендуем Вам указывать каноническую ссылку на саму себя.
Спасибо!

Обновлено 19 июля, 18:44
platon
Сотрудник Яндекса20 июля, 12:27
superseeder2011,
1. В случае страниц пагинации мы в данный момент не рекомендуем указывать атрибут rel="canonical" на первую страницу каталога, однако окончательное решение принимать вам как владельцу сайта. Если вы уверены, что такие страницы не содержат контента, который может быть полезен и интересен пользователю, вы можете использовать атрибут.
2. По желанию, вы можете как прописать атрибут rel="canonical" с указанием на самих себя, так и не указывать его совсем. И в том, и в другом случае страницы будут рассматриваться как канонические и смогут индексироваться в обычном режиме.
superseeder2011
20 июля, 19:01
platon,

Называется, "приплыли".
В таком случае, удалите Вебинар, который в настоящий момент потерял актуальность.
Вебмастера до сих пор реализуют каноникал на начало раздела.
Легче продать сайт, чем мотать себе нервы с очередной неразберихой.
Кстати, Елена Першина, постом выше, заявляет, что рекомендации с директивой каноникал остались прежними.
Вот тут что написано!
https://webmaster.yandex.ru/blog/nekanonicheskie-stranitsy-v-poiske#5d232f9ffe85c6002f6856ca



Елена Першина
Сотрудник Яндекса 8 июля, 14:57
Виктор Каргин, Рекомендации не изменились. Для листингов имеет смысл указывать канонической первую страницу. Неканонические страницы при этом могут попадать в поиск, но это не означает, что все неканонические страницы попадут на поиск. Если вебмастер не хочет, чтобы неканонические страницы листингов попадали в поиск, можно использовать для этого, например, директиву Clean-param https://yandex.ru/support/webmaster/robot-workings/clean-param.html.


Извините, но это полный дурдом!



Обновлено 20 июля, 19:04
suslov.reserve
вчера, 02:41
platon,
Допустима ли следующая стратегия или система? 
1. Считаем, что с высокой вероятностью страницы пагинации не несут полезного контента для пользоваьелей поиска, но при этом среди них может существать отличное от нуля количество страниц с полезезным контентом. Например всего имеется N страниц пагинации, из них K << N полезных.
2. Тогда используется "мягкий" вариант фильтрации - устанавливается canonical на первую страницу и если робот сочтет, что полезного контента какой либо из мтраниц нет, и та или иная страница схожа с первой, то они склеются, а если робот посчитает, что i-я страница пагинации может быть полезна для каких то специфических поисковых запросов, под которые нет канонических посадочных страниц, то такая страница проиндексируется и будет участвовать в поиске по этим запросам.
suslov.reserve
вчера, 02:57
platon,
В качестве примера:


Имеется в целом однородный каталог товаров, но в ряде случаев могут возникать компактные группировки товаров с экзотическими признаками, под которые, в связи с их экзотичностью и редкими запросами на поиск таких товаров, не создавались специальные посадочные страницы. Но так как их все таки могут искать, такие компактные группировки могут быть релевантнее первой страницы каталога, для людей ищущих именно такие экзотические товары. Причем экзотичность может быть просто какой то небольшой особенностью, например хромированной ручкой регулировки громкости.
Демьян
19 июля, 19:03
Яндекс 13 июля добавил в индекс страницы site.ru/page/1/ - site.ru/page/500/
с Припиской


Страница попала в поиск, поскольку во время её сканирования роботом её содержимое существенно отличалось от содержимого страницы по адресу https://site.ru, который был указан в атрибуте rel="canonical" в исходном коде. Исправьте или удалите атрибут canonical, если он указан некорректно. Робот отследит изменения автоматически.


теги на на таких страницах (для примера https://site.ru/page/3/ ) -
<link rel='prev' href='https://site.ru/page/2/' />
<link rel='next' href='https://site.ru/page/4/' />
<link rel="canonical" href="https://site.ru/" />
Попали в поиск именно страницы навигации с главной. С категориями ничего не случилось
Что с этим делать? Спасибо
Обновлено 19 июля, 19:05
platon
Сотрудник Яндекса20 июля, 12:28
Демьян,
если такие страницы были включены в поиск, это означает, что их содержимое в достаточной степени отличалось между собой, из-за чего неканонические ссылки были включены в поиск. В таком случае, возможно, эти страницы навигации могут содержать полезный для пользователей контент, и исключать их из поиска нет необходимости.
Если же вопрос их отсутствия в выдаче очень важен, и вы уверены, что они не несут полезной пользователям информации, вы можете ограничить их индексирование, например, запретив в robots.txt сайта.
Здравствуйте


Всё по классике - у контентного сайта есть главные категории, посты в них имеют короткий анонс в виде части начала описания каждого поста. Каждая такая категория разбита на страницы и согласно правил канонической прописана первая страница. Но по сути каждая отдельная страница в категории отличается друг от друга (что логично, анонсы то у постов разные). С одной стороны я согласен (и я ранее считал, что он так и делает), что поисковик должен видеть не только первую страницу, а все страницы категории и вычислять из них суммарную релевантность, но возникает несколько вопросов:

1. почему вебмастер говорит "Исправьте или удалите атрибут canonical, если он указан некорректно?" Т.е. Яндекс ожидает что я теперь должен убрать тег канноникал со всех страниц пагинации?


2. Что делать с главными метатегами? Как правило все последующие страницы дальше 1-й имеет тот же самый Тайл и дескрипшен, за той лишь разницей, что в Тайтле я дописываю "| Страница №" а дескрипшен остается тот же. Как Яндекс будет смотреть на эти дубли?