Блог Яндекса для вебмастеров

Неканонические страницы в Поиске

Часто на сайтах присутствуют страницы с разными URL, но с одинаковым или очень похожим содержанием. С помощью атрибута rel=«canonical» вебмастера могут указать, какая страница является «канонической» — предпочтительной для индексации и появления в результатах поиска. Остальные, неканонические версии как правило в поиск не попадают.

Наши исследования показывают, что страницы, размеченные как неканонические могут быть полезны, а их наличие в поиске может влиять на качество и полноту ответа на запрос пользователя. Например, если для темы форума владелец сайта указал канонической страницу с началом ветки, то многие важные и нужные ответы, которые были даны пользователями позже, в поиск не попадают. Другой пример: бывает, что какое-то литературное произведение разбито на страницы и в качестве канонической прописана первая страница. В результате сайт не находится по запросу-цитате, соответствующей тексту за пределами первой странице. Поэтому теперь в поиске неканонические страницы будут появляться чаще.

Они будут показаны в том случае, если они более релевантны запросу и их контент существенно отличался от канонической версии во время сканирования роботом. В Вебмастере такие страницы можно увидеть на странице «Страницы в поиске» с пометкой «Неканоническая». Помимо этого статуса мы начали показывать статусы «Каноническая» и «Каноническая страница не указана» для всех страниц, попавших в поиск. 


Если канонические страницы настроены на сайте без ошибок, то никаких дополнительных действий от вебмастера не требуется. Для сайтов, имеющих много неканонических страниц, которые сильно отличались от канонических, возможен прирост количества страниц в Поиске. Впрочем, канонические страницы по-прежнему попадают в поиск гораздо чаще и имеют более высокий приоритет при показе в результатах поиска. Объем трафика для каждого конкретного сайта существенно не изменится.

Команда Поиска

P. S. Подписывайтесь на наши каналы
Блог Яндекса для Вебмастеров
Канал Яндекса о продвижении сайтов на YouTube
Канал для владельцев сайтов в Яндекс.Дзен

195 комментариев
Качмарик Валерий
4 июля, 20:31
Об этом нужно было задуматься изначально.
Мазаев Константин
4 июля, 21:34
Качмарик Валерий,
Даже в Битрикс по прежнему нет базовой функции включения канонических URL, за 35 900 рублей для редакции ИМ. 3 года работа "кипит".
Мазаев Константин,
а какую именно страницу битриксоиды должны были считать канонической, да еще и писать под это базовую функцию?


<link rel="canonical" href="https://<?=SITE_SERVER_NAME.$APPLICATION->GetCurPage()?>"/>



в header.php , если хотите чтобы каноническими была просто без GET-параметров, и всё.
Обновлено 5 июля, 04:47
Виталий Вайти
9 июля, 09:18
Spawn,
такой способ будет некорректен при использовании в каталоге с умным фильтром.
Виталий Вайти
9 июля, 09:18
Мазаев Константин,
на какой платформе есть из коробки?
Виталий Вайти,
например, в Drupal, канониклы контролируются на уровне ядра и если надо переопределяются.
Учитываются системные пути контента, ЧПУ и ещё много всего, включая историю изменений урлов.

Хотите статью почему мы считаем Drupal самым удобным для SEO движком?
Обновлено 10 июля, 10:54
mail@woib.ru
10 июля, 13:42
Виталий Вайти,
да почти во всех нормальных есть "из коробки", да и в чем сложность самим настроить?
Виталий Вайти,
вроде как считается, что страницы пагинации, результаты поиска по сайту, и результаты фильтрации каноническими делать не стоит.
Но в общем я пример скорее для примера приводил.
rxb.web,
Да, нужна эта статья.
Сумраков Петр
15 августа, 06:10
rxb.web,
пригодилась бы такая статья.
Виталий Вайти,
У МЕНЯ ПРОБЛЕМА С УМНЫМ ФИЛЬТРОМ, МОГЛИ БЫ МНЕ ПОМОЧЬ НАСТРОИТЬ КОРРЕКТНО? 
НАПИШИТЕ МНЕ СЮДА НА ПОЧТУ  YVERENNUJ@MAIL,RU
БУДУ БЛАГОДАРЕН !
anapagorkogo11
4 июля, 21:39
Вот от этого умного поиска я и страдаю..на моем сайте есть две разные по смыслу статьи 1 описывает конкретно разное жилье на курортах а 2 коттеджи, но Яндекс считает фразу жилье и дом одинаковой и как тут быть? если обе эти статьи должны выдаваться в поиске под разным значением
Светлана К.
5 июля, 10:28
anapagorkogo11,
уже сколько лет страдаю на эту тему, но не как сайтовладелец, а при поиске информации для себя лично или для наполнения чужих сайтов. 
В том году делала большо-о-о-ой каталог оборудования - а там у всего подряд по несколько модификаций. И как же задолбал  поиск своим "умом"! Мало того, что все модификации валив кучу (а что, похоже же), так еще когда часть заполнена и надо двигаться дальше, упорно на новые (тоже похожие, по его мнению) запросы вываливает отсмотренное на той неделе. 
Реально хотелось биться головой о клавиатуру - причем и инвизибл-режим использовался, и история не копилась, и "понимайте меня буквально, я не зря ставлю кавычки", и вообще... Впоминаю с ужасом и регулярно сталкиваюсь с подобным, пусть и не в таких масштабах.
Обновлено 5 июля, 10:29
Светлана К.,
Согласен. Тут как с поиском, так и с сайтами. Когда ищешь, например (в примере несуществующий продукт), "синий телефон на ведроид", то находит красный телефон. Синий где-то на несколько позиций ниже на другом сайте или вообще его нет. При этом открыв "красный телефон на ведроид" можно перейти на страницу с "синим телефоном".
Елена Першина
Сотрудник Яндекса8 июля, 10:21
anapagorkogo11,
а можно пример?
Елена Першина,
извините что залез в ваш разговор, но хочу привести пример(по поводу качества поиска). Недавно на сайте ввел теги для НЧ запросов, например "маленькие гейзерные кофеварки" и "большие гейзерные кофеварки", если забить в поиске данные запросы, вы никогда не найдете ни больших гейзеров ни маленьких, ЯП будет вам выдавать все что угодно, рейтинги, каталоги, видео, фото, но только не специально созданные страницы 100% релевантные запросу. То есть страницы которые я создал, причем в первой же десятке наш сайт с "рейтингом гейзерных кофеварок", но ни мне ни тому кто ищет не нужен рейтинг. почему так происходит, не понятно. Вот эти страницы, попробуйте найти их в поиске. Я понимаю что там нет описания, но там есть то что ищет пользователь и кстати конкуренции по ним так же нет.
Маленькие и большие
an.mamina2015
4 июля, 23:00
Интересный момент. Раньше амп страницы вылетали из поиска как неканонические. Теперь они стабильно помечаются как недостаточно качественные. Интересно бы узнать, чем именно амп страница некачественнее, чем, например, турбо?
an.mamina2015,
Так AMP = Гугл, а Турбо = Яндекс. При чем тут взаимосвязь AMP и Яндекс...
an.mamina2015
5 июля, 18:06
Denis,
при том, что страницы одинаковые по контенту, но тем не менее амп по неизвестным причинам засчитываются как некачественные. Ладно, раньше были неканонические, это понятно, в принципе, нормально, что яндекс выкидывает амп из своего поиска, но зачем с такой формулировкой выпинывать начал? 
Виктор Каргин
5 июля, 10:35
an.mamina2015,
на данный момент, видно, что под статусом "недостаточно качественная" может скрываться что угодно, вплоть до 302 редиректа. Так что не стоит искать смысла там, где его нет

Виктор Каргин,
только сегодня столкнулся с некачественной страницей, потому что на нее ведет 302 редирект О_о Хоть бы помечали в чем она некачественная, приходится в саппорт писать, ответа ждать, хотя исправить все дело 2 минут.
Виктор Каргин
5 июля, 14:07
wwwwmaster,
302 редирект, кстати. видно в выгрузке у таких страниц. Лайфхак таксказать
an.mamina2015
5 июля, 18:07
Виктор Каргин,
логично) Проще плюнуть на это, чем мозг себе воспалять)
maksimov@mtg-biz.ru
5 июля, 10:39
an.mamina2015,
интересно, зачем амп вообще отдавать роботу Яндекса))
an.mamina2015
5 июля, 18:09
maksimov@mtg-biz.ru,
даже не знаю, умела бы от него ампы закрывать - закрыла бы, чтобы вообще там не ковырялся.
maksimov@mtg-biz.ru
5 июля, 18:19
an.mamina2015,
так для ампов отдельные страницы же? Можете посмотреть, как у нас сделано: mtg-biz.ru/robots.txt .
А без работы с robots.txt SEO заниматься опасно.. Да и вообще опасно - может утечь то, что не должно.
an.mamina2015
5 июля, 18:35
maksimov@mtg-biz.ru,
благодарю от души!!!! Пошла себе реализовывать недостающие запреты.
Елена Першина
Сотрудник Яндекса8 июля, 10:23
an.mamina2015,
больше всего похоже на то, что воспринимаются как дубль. Но лучше через поддержку уточнить. 
Николай
4 июля, 23:00
В разделе «Страницы в поиске» страницы указываются как канонические (это верно, везде rel=canonical), но в разделе «Сводка», в виджете «Обновления в поиске до 1 июля» у этих же страниц написано «Канонический адрес не указан». Доработайте пожалуйста виджет, чтобы в обоих случаях отображалось одинаковая (и достоверная) информация.
АлиПросто
5 июля, 10:30
Николай,
очень правильно подмечено!!!
maksimov@mtg-biz.ru
5 июля, 10:43
Николай,
тоже самое. Например: https://mtg-biz.ru/about_company/news/?PAGEN_1=93 . Но, скорей всего, проблема только в отображении в "Сводке", т.к. "Страницы в поиске" всё ОК.
Елена Першина
Сотрудник Яндекса8 июля, 10:45
Николай,
спасибо, смотрим.
На всех страниц настроен каноникал,в вебмастере вылетело сообщение «Канонический адрес не указан»...как это понимать?
АлиПросто
5 июля, 10:31
kleveragro,
Посмотрите в ВМ раздел - Страницы в поиске. Там правильно всё указано!
m.kislov@clever-as.ru
4 июля, 23:23
То есть, теперь нельзя гарантированно контролировать выдачу необходимых страниц? Яндекс и сейчас зачастую считает дублями разные по содержанию страницы, так с какой бы радости он стал корректно определять не дубли при уж точно схожем, или одинаковом контенте?


Короче, ребята, избавляемся от дублей, явных и не очень.
Елена Першина
Сотрудник Яндекса8 июля, 13:17
m.kislov@clever-as.ru,
дубли и так не будут попадать. Вопрос о том, что дублями не является. 
Раньше, когда Яндекс обходил по популярности Апорт и Рамблер, был лидером рунета, попадали В поиск .


Сейчас с 4мя обьявлениями директа неотличимых от органики и 5ю сервисами Яндекса, попадают НА поиск?


Почему вы пишите: как правило НА поиск не попадают 
позже, На поиск не попадают
канонические страницы по-прежнему попадают НА поиск гораздо чаще
 
Но и так:  их наличие В поиске может
И так: прирост количества страниц В Поиске (кстати, почему-то с большой буквы тут слово Поиск)
страниц, попавших В поиск. 
на странице «Страницы В поиске» 
finutmag,
ты что написать то хотел?
cyberbonus,

Да хотел спросить про предлоги. Почему пишут в посте: попадают На поиск, а не В поиск?



Елена Першина
Сотрудник Яндекса8 июля, 14:19
finutmag,
вообще и так, и так используем предлоги. Но поправили на "в" ) 
Наконец то вы это поняли!
И 10 лет не прошло... :)
У меня canonical везде прописан, но в вебмастере показываются страницы на которых якобы нет canonical, хотя он там есть. Что за бред?
stashbk,
у меня такая же ерунда вылетела.....может баг у яндекса
kleveragro,
а у меня всё норм: https://yadi.sk/i/pSyCtJKzPRvqhw 
Может у вас на сайте с тегами баг?
АлиПросто
5 июля, 10:33
kleveragro,
Посмотрите через раздел - Страницы в поиске. Там правильно указано всё
АлиПросто
5 июля, 10:33
stashbk,
Посмотрите через раздел - Страницы в поиске. Там правильно указано всё
Елена Першина
Сотрудник Яндекса8 июля, 13:20
stashbk,
в поддержку нам напишите? 
Борисыч
5 июля, 09:37
Прописаны канонические ссылки. У этих канонических ссылок статус стоит статус "неканоническая"....
АлиПросто
5 июля, 10:33
Борисыч,
Посмотрите через раздел - Страницы в поиске. Там правильно указано всё
biplane-studio
5 июля, 09:38
уже 2 месяца как, а они только отписались...
maksimov@mtg-biz.ru
5 июля, 10:48
biplane-studio,
смотрю почти каждый день. Сегодня только появилось.
Виктор Каргин
5 июля, 10:39
А подскажите, чето теперь делать с листингами товаров в интернет-магазинах? Они, как форум, будут показываться в индексе?
Ваша предыдущая рекомендация - указывать канонической первую страницу для листингов теперь недействительна или как?
С фоурмами и статьями, поделенными на страницы и так было всё понятно ранее. Хорошо, что внесли ясность. Но основная часть сайтов, над которыми работают специалисты - коммерческие, а коммерческие минимум на половину - это интернет-магазины. И вот их вы как-то ловко обошли стороной в примерах
Геннадий Ичкерин
5 июля, 10:52
Виктор Каргин,
Красавчик, плюсую, единственный важный вопрос по новому функционалу
kirillskripko
5 июля, 13:15
Виктор Каргин,
присоединюсь к комментарию - дайте комментарий (сорян за тавтологию но тем не менее)
Обновлено 5 июля, 13:15
telecom-sales
5 июля, 23:35
Виктор Каргин,
 ИМ замерли в ожидании...
Елена Першина
Сотрудник Яндекса8 июля, 14:57
Виктор Каргин,
Рекомендации не изменились. Для листингов имеет смысл указывать канонической первую страницу. Неканонические страницы при этом могут попадать в поиск, но это не означает, что все неканонические страницы попадут на поиск. Если вебмастер не хочет, чтобы неканонические страницы листингов попадали в поиск, можно использовать для этого, например, директиву Clean-param https://yandex.ru/support/webmaster/robot-workings/clean-param.html.
Елена Першина,
Отличная новость. Для меня было бы полезно такое нововведение. Объясню: 
Чаще всего  у интернет-магазинов  при наполнении страниц товаром используются шаблонные анкоры для карточек товара. 
У меня  категория "холодильные шкафы"  вмещает в себя: 

-холодильные шкафы
-морозильные шкафы
-комбинированные шкафы
-медицинские холодильные шкафы
-холодильные шкафы для икры
-холодильные шкафы для вина и так далее ....
При поиске товаров пользователь на сайте пользуется фильтром товаров.


Если забить в поиск яндекса "купить холодильный шкаф для вина" то в выдаче показывается не категория товара, а любой холодильный шкаф для вина на усмотрения Яндекса. Так как у меня эти шкафы начинаются с 5 страницы, возможно по данному запросу пользователю будет полезно попасть именно на 5-ю страницу этой категории. 


Елена, я всё правильно понял? Или это мои мечты? 
Елена Першина
Сотрудник Яндекса10 июля, 10:37
windows.bel,
нововведение как раз про то, чтобы лучше находилось подобное, да.
Елена Першина,
А как будут индексироваться карточки товаров со страниц пагинации, если закрыть их через Clean-Param? Про канонические страницы вы писали в https://yandex.ru/blog/platon/2878, что они сканируются Яндексом (т.е. бот идет по внутренним ссылкам), но не включаются в индекс. Теперь, если мы закроем пагинацию через  Clean-Param, то робот, используя эту директиву, загрузит только 1-ую страницу? Получается он не станет обходить товары со 2-ой и далее страниц?
devetyarov.d.n
25 июля, 10:39
dosyainred,
 Очень верное замечание, если мы закроем страницы пагинации, то они они будут позиционироваться как битые ссылки! И все товары, которые находятся на таких страницах будут как минимум просядать в поиске, да и сайту в целом будет очень дурно... Проверено на своей шкуре...
platon
Сотрудник Яндекса25 июля, 11:53
dosyainred,
отвечу за Елену. Директива Clean-param не запрещает индексирование страниц, она только указывает, что такие ссылки должны индексироваться по адресам без Get-параметров, при этом робот может посещать их, проверяя на доступность. В такой ситуации стоит убедиться, что ссылки на карточки товаров указаны в файле sitemap сайта, так как роботу может потребоваться какое-то время, чтобы обнаружить ссылки на эти страницы из других источников. Тогда сами карточки товаров смогут индексироваться в обычном режиме.
windows.bel,
так Вы же можете оптимизировать эту страницу пагинации, как Вам хочется или выделить отдельную подкатегорию, или страничку умного фильтра. Зачем ждать милости от природы, точнее от Яндекса?) Можно же ему помочь. 
miss.eirene,
Всё правильно, только тогда нужно пилить фильтр, чтобы при выборе фильтра менялся title, Description и url  иначе появятся много дублей. 
А автоматический определять canonical, пока не умеете? У меня вообще все страницы не каноничные показывает.
Елена Першина
Сотрудник Яндекса8 июля, 13:31
Амиль,
умеем,  но если вдруг с этим есть проблемы, то через поддержку постараемся помочь. 
Максим Медведев
5 июля, 14:30
Отличное обновление. 
Сайт на битриксе, в коде указан тег для канонического урла уже неизвестно сколько лет. Сегодня захожу в вебмастер в сводку и вижу новые страницы, которые были добавлены на днях и... тадам: "Канонический адрес не указан". Открываю страницы, проверяю, все есть. 
Молодцы!
Илья Журавлёв
5 июля, 14:52
В исходном коде указан тег Canonical, в Вебмастере пишет: "Канонический адрес не указан". ???
Елена Першина
Сотрудник Яндекса8 июля, 10:20
Илья Журавлёв,
будем рады подсказать, но через форму обратной связи Вебмастера. Нужно больше информации о том, почему не видим канонический адрес. Напишите нам? 
support@hackoff.ru
5 июля, 18:04
Несомненно заметил данные пометки в ВебМастере НО!...
Уважаемые товарищи тестируйте прежде чем выкладывать в продакшен свои поделки!
Вот реально увидев ваши пометки, что "Каноническая страница не указана" в то время когда она указана и с первых минут запуска сайта всё время была там... начинаешь ковыряться... ЧтоЖешь я сделал не так ... а всё так ... просто у Вас алерт ложно сработал.... а я потратил время на проверки в пустую и такое не в первый раз и не только с данным новшеством!
Честное слов... я негодую!

Елена Першина
Сотрудник Яндекса8 июля, 13:33
support@hackoff.ru,
проверим этот момент, спасибо!
support@hackoff.ru,
 один в один, стоит алерт на смену канонических... приходит уведомление, что сменился на пустой... я на сайт, а там все ок... пишу в поддержку, отвечают, что "...с Вашим сайтом все хорошо, не обращайте внимания..."
Ну как же так?
Моё мнение проще. Не должно быть никаких ни rel ни canonical ни прочей ереси. Есть понятие релевантность. Если запрос более релевантен "здесь", то ненужно его насильно заставлять направлять "туда".  Понятие дубль может появляться только при полном совпадении контента и заголовков страниц, а также полное совпадение скрытого веса страницы. В обычном случае это физически не возможно, т.к. вес у страниц всегда разный, разное внутреннее, а  может и внешнее продвижение, вложение, количество внутренних ссылок и т.п.., задача яндекса выбрать лишь более подходящее из двух в этом случае. Другой вопрос, что у яндекса мощностей не хватает держать такой огромный горячий индекс постоянно в памяти. Вот и отсеивают якобы ненужное.
russ-diablo,
Как вы себе представляете это, с технической стороны?
Амиль,
Это уже реализовано в яндексе и прекрасно работает. Суть в  том, чтобы не выбирать, а индексировать всё подряд. Про огромный индекс - не знаю, может оно нормально будет работать. Я лишь предположил, что он может не умещаться в памяти и т.п. и возможно както заметно повлияет на скорость. Сейчас индекс тоже не маленький. Видимо его разбивают на небольшие кластеры и т.п.. понятия не имею как оно там выглядит в биг дате.
Этот пост противоречит этому посту https://yandex.ru/blog/platon/2878 ,
в котором написано, что нужно прописать canonical, а остальное закрыть в robots.txt
Как же Яндекс тогда будет выдавать Неканонические страницы в Поиске, если они явно запрещены для индексации.
platon
Сотрудник Яндекса16 июля, 09:24
maxim888,
информация об использовании атрибута rel="canonical" для страниц пагинации из поста https://yandex.ru/blog/platon/2878 в данный момент уже не актуальна. Мы постараемся поправить это на странице https://yandex.ru/blog/platon/2878 , спасибо, что обратили внимание.
Что же касается страниц сортировки товаров по цене, популярности и т.д., индексирование таких ссылок все еще можно ограничить при помощи директив в robots.txt: clean-param для ссылок с get-параметрами и disallow для полного запрета посещения ссылок.
platon,
что же тогда правильно делать со страницами пагинации для интернет-магазинов, если информация в посте https://yandex.ru/blog/platon/2878 неактуальна? Может, дадите актуальные рекомендации на этот счет? 
platon
Сотрудник Яндекса6 августа, 12:50
miss.eirene,
вы все еще вполне можете использовать атрибут rel="canonical" на страницах пагинации с указаниями на первую страницу каталога. При этом, если контент страниц будет различаться, такие страницы смогут попасть в поиск. Если же вы абсолютно уверены, что такие страницы не будут интересны пользователям и не должны участвовать в поиске, их индексирование можно ограничить другими способами: в robots.txt сайта или при помощи мета-тега noindex. Но необходимо учитывать, что в таком случае контент страниц пагинации не сможет попасть в базу поиска.
platon,
Спасибо за комментарий. Наличие текста на 1 странице и его отстутствие на страницах пагинации будет считаться различием в данном случае? Будут ли при этом индексироваться ссылки на карточки товара, размещенные на страницах пагинации, которые являются неканоническими, либо закрыты от индексации? При том, что в карте сайта ссылки есть на все карточки товара? 
platon
Сотрудник Яндекса9 августа, 09:00
miss.eirene,
да, дополнительный текст на одной из страниц будет рассматриваться как различие в контенте, поэтому такие ссылки могут попасть в выдачу.
Если на карточки товаров ведут внешние ссылки из других источников, например, из файлов sitemap, то они смогут индексироваться и участвовать в поиске, даже если индексирование страниц пагинации будет ограничено.
Не пойму что Яндекс хочет. Рекомендуется ставить этот каноникал или только если дубли? У меня нет дублей, но и каноникал я не ставил.
Стоит добавить каноникал? Мне не сложно если нужно, секунд 10 потрачу.


И как быть с тегом base href?
<base href="https://webmaster.yandex.ru/blog/nekanonicheskie-stranitsy-v-poiske"/>

У меня он проставлен. Он вообще нужен?
Елена Першина
Сотрудник Яндекса8 июля, 13:36
krovliclub,
тут лучше на сайт индивидуально посмотреть - напишите в поддержку?
В Яндексе похоже забыли про свой пост про "тексты оптимизировались..." Читаешь эту новость и видишь только одно "Тексты канонировались канонировались да не выканонировались" 
Елена Першина
Сотрудник Яндекса8 июля, 13:36
masova.spb,
не забыли. Мы и тут, и там - про качественные тексты. 
g.abraamian2018
5 июля, 22:54
Только что заметил еще одну новинку в поиске . Появился новый оранжевый значок молнии в выдаче с пометкой быстрый сайт его можно увидеть рядом со страницами сервисов яндекса например метрики
лучшее враг хорошего )
Поддерживаю товарища, который высказал мысль, что на фиг эти каноникал не каноникал. Отражает текст запрос юзера - гуд, не отражает - не гуд. А то слишком мудрено получается.
Антон Викторович
8 июля, 14:51
"страницы, размеченные как неканонические могут быть полезны" - вы уверены что это верно написано? Если страница неканоническая, то в чём проблема проиндексировать?
"В результате сайт не находится по запросу-цитате, соответствующей тексту за пределами первой странице." - не верное склонение.
Хорошо было бы переписать данный материал в более понятном виде и местами более простым языком. Ну и конечно контролировать склонение...
Добрый день, я так и не понял, надо их ставить или нет ( конкретно для меня


вот пример, есть одна страница сайта, но с добавлением одного параметра, она меняет контент, т.е.


нормальное состояние, на ней отображается полноценный контент (текст, картинки, определенный виджет, и т.д.)
https://site.com/apple.html



но есть и, которая отображается на других сайтах в iframe, но без текста и т.д. только виджет
https://site.com/apple.html?widget=1
 
мне тут как быть, ставить 
<link href="https://site.com/apple.html" rel="canonical" />



или в обще это все убрать?


уже поднадоело, смотреть как там все прыгает в истории обхода, то N / a ⇒ 200, то 200 => N/a и т.д. что-то постоянно все прыгает, и судя по показателем посетителей все меньше и меньше.


Сайт древний 6 лет ему, куча контента, даже грустно смотреть на стату с показателями в 300 уников(


Сорян за последнюю часть ) , наболело
izhtrade,
это что происходит все страницы, ушли в дуболь ...
izhtrade,
убрал эту ерунду, повелся на красивые слова, реально все страницы ушли в дубли, причем, есть конкретная страница про "яблоки", а система говорит, что это дубль страницы "паровозов", ну ппц
Елена Першина
Сотрудник Яндекса10 июля, 10:33
izhtrade,
Если содержимое таких страниц будет в значительной мере отличаться, использовать атрибут rel="canonical" нет необходимости, так как в этом случае он, скорее всего, не будет учитываться поисковой системой. При этом, если страницы вида https://site.com/apple.html?widget=1 не содержат какого-то контента, который может быть интересен пользователю в поиске, их индексирование можно ограничить при помощи других методов. Например, страницы с get-параметрами, как в примере выше, можно ограничить при помощи директивы Clean-param в robots.txt: https://yandex.ru/support/webmaster/robot-workings/clean-param.html .
Что же касается дублей страниц, изменения, о которых мы написали, не должны привести к признанию страниц дублирующими: если робот не учел атрибут, это означает, что содержимое страниц в достаточной мере различается, чтобы они могли участвовать в поиске отдельно друг от друга. Если какие-то ссылки, контент которых отличается, были исключены из поиска как дубли, напишите, пожалуйста, об этом через форму обратной связи Яндекс.Вебмастера: https://yandex.ru/support/webmaster-troubleshooting/site-indexing/bad-indexing/missing-reasons.html . Будем разбираться.
Ну ладно к слову. Автомобильный каталог куча технической документации Audi Q3 AT и Audi Q3 MT робот считает их одинаковыми по факту совершенно две разные модификации, начиная от типа коробки заканчивая компановкой. Как быть?
Елена Першина
Сотрудник Яндекса9 июля, 11:14
TRUE,
в поддержку нам написать - и еще раз убедиться, что документация правда разная.
Обновлено 9 июля, 23:22
Елена Першина,
Елена, Ваши коллеги из автору должны понимать о чем я. Естественно контент разный по ряду параметров. А по какому адресу в поддержку писать и в каком контексте?
Елена Першина
Сотрудник Яндекса9 июля, 23:23
TRUE,
через форму обратной связи Вебмастера, ссылка внизу страницы сервиса. 
Люди добрые, у меня нет этого нет этого атрибута. Интернет магазин driptip.ru. Прочитал вроде всё, но так и не понял. Нужно ставить этот атрибут или нет?
Елена Першина
Сотрудник Яндекса10 июля, 10:34
drip tip,
Стоит ли ставить атрибут, решать вам как владельцу сайта. В такой ситуации рекомендуем оценить, если ли на сайте страницы, контент которых полностью или практически полностью совпадает с содержимым других страниц. Например, можно проверить в Яндекс.Вебмастере, не были ли исключены те или иные страницы как дубли. Если такие страницы есть, можно использовать атрибут rel="canonical", чтобы явно сообщить поисковой систем, какая из страниц-дублей должна быть в поиске. Рекомендуем также ознакомиться с рекомендациями из нашего поста: https://yandex.ru/blog/platon/dubli-kak-ikh-izbezhat-voprosy-i-otvety . Возможно, это поможет определить, для каких случаев нужен атрибут.
Severinov.Aleksandr
8 июля, 21:24
Приветствую.
Я, возможно многого недопонимаю, но что-то уже через край.
У меня один сайт. ОДИН. До того, как он стал известен Яндексу - он стал https и от рождения был без www. Однако Яндекс сообщает: «Главное зеркало Вашего сайта изменилось на www. В поиске Вам светит борода. Срочно добавьте в панель вебмастера сайт с www и укажите, что он - НЕ ГЛАВНОЕ ЗЕРКАЛО.»
Нет. Ну это нормально? Нафигаказебаян?! Его там и не было. Зачем высасывать из пальца???
Победили www. Добавили в панель несуществующий в принципе сайт и указали, что он плохой ))). Натыкали редиректов всяких. Теперь под всеми страницами: «Канонический адрес не указан»...
Понимаете - ну не нужен мне ни второй придуманный Вами сайт, ни третий, ни двадцать третий. В работе ОДИН - https://sitename.ru... с первого дня. Это не дубли на «моих сайтах», это - Ваши выдумки.
Придумайте, в конце концов, механизм с кнопкой - «ЭТО МОЙ ЕДИНСТВЕННЫЙ САЙТ», вместо механизма «это мое главное зеркало».
==================================================
Однажды на хабре прочитал статейку про ошибочную директиву в коде какого-то там месенджера. Так вот он использовал несколько лишних тактов процессора. На миллионах устройств суммарно этот промах за месяц сжирал энергии столько, сколько ГЭС не всякая дает. Представляете, какое умопомрачительное количество человеко-часов поглощает яндекс с такой сумасшедшей переоптимизацией? Каждый день десяток лет от жизней нашего брата...

У Вас робот то Вам еще подчиняется? Или с нами уже проще управляться, чем с ним? )))))))))))
Обновлено 8 июля, 21:27
Елена Першина
Сотрудник Яндекса9 июля, 11:12
Severinov.Aleksandr,
Добрый день! Это не придуманный сайт - он есть).  А вот почему зеркало изменилось - это лучше у поддержки Вебмастера напрямую уточнить. 
Приветствую!
Как всегда только сарказм :) . Делаем сайты для людей, бла-бла-бла.
Мои доблестные Платоны :))), стоящие на страже поиска.
А вы реально подумали, перед тем, как это делать? Или просто не смогли?
https://www.born-spb.ru/catalog/videokamery.html

Это страница листинга категории, там внизу по пагинации, можно перейти на 14!!!! страниц, вы себе реально представляете смысл в выдаче этих страниц? Про дополнительную индексацию я молчу. Что пользователю может дать!!! в выдаче страница категории номер 2, если с одного сайта все равно будет в выдаче 1 страница? Может разумно предположить, что человек!!! начнет с первой!!! Где самые топовые товары, а потом уже пойдет куда ему надо, через фильтр или через пагинацию. Вы бы лучше ввели, дополнительный тег, заместо каноникала (который единственный позволяет убрать из выдачи кучу мусора, думаете в роботе все смогут грамотно закрыть от индекса все не нужное?). Аналог прева от гугла, для четкого разделения - что это пагинация!!! Это решение.
born762,
Я вам отвечу откуда тут ноги растут. На "мега крутой" толоке есть такое задание - DbD попарное сравнение сайтов. Так вот там как раз и проскакивают все эти многостраничные примеры (сам лично видел). И сколько не писал платонам и админам толоки - им до одного места. У них в порядке вещей выгружать в топ 404 страницы, а вместо основной версии давать на десктоп мобильные версии сайта. То же самое и с этой темой. Весь их хваленый интеллект сводиться к проплачиванию ответов от кучи не всегда адекватных толокеров, которые, кстати, и продвигают все проекты яндекса.   
Елена Першина
Сотрудник Яндекса9 июля, 16:09
born762,
не переживайте, по пагинации правила старые ) 
Елена Першина,
можно уточнить где можно почитать последние рекомендации по пагинации? Статья платона про пагинацию вредительская какая-то, там в комментах несколько раз все меняется с ног на голову, предыдущие утверждения опровергаются или противоречат друг  другу. Надо каноникал на первую или на саму себя ставить в пагинациях листинтов?
Обновлено 9 июля, 16:50
born762,
гугл уже 5 лет не использует prev-next 
pavel.nagovitsin
9 июля, 18:45
Коллеги, а что по поводу межхостового canonical? Он стал обрабатываться? Ситуации бывают разные, например у меня на 1 сайте есть поддомен, на котором абсолютно другая информация, т.е. он отличается от основного вида деятельности. Но, есть общие страницы филиалов и акций, могу ли я указать на таких страниц каноникал на другой домен/поддомен? 
platon
Сотрудник Яндекса16 июля, 12:40
pavel.nagovitsin,
межхостовый атрибут rel="canonical" в данный момент все еще не поддерживается. В рамках групп сайтов http/https, а также с www и без www атрибут можно использовать как указание на главное зеркало (подробнее об этом здесь: https://webmaster.yandex.ru/blog/samye-populyarnye-voprosy-pro-pereezd-sayta-na-segodnyashniy-den ), но исключить ссылки из поиска как неканонические страниц другого сайта возможности нет.
Здравствуйте, в разделе страницы сайта высвечивается что канонический адрес не указан для site.ru/index.php и почему то две страницы в поиске site.ru и site.ru/index.php. на мой взгляд такие страницы как index.php не должны быть в поиске если уже присутствует страница без этого. Каким образом я могу прописать каноникал для index.php? Заранее спасибо, с уважением
Ann,
index.php закрыть в robots.txt
mail@woib.ru
10 июля, 13:48
Подскажите, как решить проблему: оптимизировал сайт-каталог, переехал на https (301 редиректы, каноникалы всё ок), убрал одну лишнюю заглавную категорию (каталог, в пути была /catalog), у всех товаров и категорий изменился адрес (без /catalog). Поставил 301 редирект и каноникал корректный. Должно-быть всё хорошо по логике, но уже больше месяца страницы со старого http переходят на новый, позиции просели сильно, многие вылетели. С http на https переходит по 5-10 страниц в день! Это ппц как медленно
Елена Першина
Сотрудник Яндекса11 июля, 10:39
mail@woib.ru,
из такого описания тут не понять, к сожалению, в чем проблема. Давайте на реальном примере разберемся, напишите нам в поддержку? 
То то яндекс проиндексировал все мои amp страницы при подключении и стал их показывать вместо обыкновенных страниц моего сайта, от большого ума наверное. Потом я все исправила, но честно говоря не ожидала, что Яндекс не воспринимает тег canonical.
Елена Першина
Сотрудник Яндекса11 июля, 11:15
l.shikowa,
а почему у вас amp и обычные страницы сайта по контенту не совпадают? 
ruslan.filonow
12 июля, 21:53
Добрый день. Еще проблема такая, 


Отсутствуют метатеги <Description>
На многих страницах сайта отсутствуют или некорректно заполнены метатеги Description. Это может негативно повлиять на представление сайта в результатах поиска.


Эта ошибка уже 4 месяца не пропадает... Как быть? На переобход можно только 20 добавлять. В карте сайта есть. А страниц 2500.
Елена Першина
Сотрудник Яндекса13 июля, 20:23
ruslan.filonow,
можно в поддержку об этом написать. Но вообще, если все поправили, то переживать не нужно. Робот при переобходе данные обновит. Информация о проблеме может обновляться с задержкой, к сожалению. 
maksimov@mtg-biz.ru
15 июля, 10:32
Не знаю, как написать в ТП.


В последнее время стали приходить уведомления об отсутствии тега canonical для важных страниц. Естественно, такая проблема может быть и для "не важных" страниц - просто уведомления не доходят.

См. скрины. Что может быть не так. Проверял версию для ПК и мобильную - всё ОК.


https://yadi.sk/i/Iaym-t7savu5DQ

https://yadi.sk/i/8idpLUVU12ckPw
Обновлено 15 июля, 10:33
Елена Першина
Сотрудник Яндекса15 июля, 12:41
maksimov@mtg-biz.ru,
внизу Вебмастера есть ссылка на обратную связь - если через неё напишите, сможем помочь. 
maksimov@mtg-biz.ru
15 июля, 12:55
Елена Першина,
вы не поверите. Я всё облазил и не нашёл, как вам написать по данному вопросу. Ссылка на Обратную связь ведёт на список разделов)).
Нашёл только в "Другой вопрос о сервисе Яндекс.Вебмастер" - запрятано основательно))
Про мобильную версию сразу нашёл, как написать. Написал, благодарю! ;)
maksimov@mtg-biz.ru
15 июля, 12:55
Елена Першина,
а-то вообще не понимаю, почему так любит сайт Г и не любит Я(((.
Елена Першина
Сотрудник Яндекса15 июля, 13:11
maksimov@mtg-biz.ru,
начните с нашей Диагностики в Вебмастере - посмотрите, что нам не нравится. 
Обновлено 15 июля, 13:32
maksimov@mtg-biz.ru
15 июля, 13:22
Елена Першина,
одна рекомендация только: "Сайт не оптимизирован для мобильных устройств". Доработали сайт, отправлял на повторную проверку, далее "Веб-мастер" сообщает, что не соответствует всё-равно и самое главное - "главная" же страница. При том, что проверку проходит.


Подробности в сегодняшнем тикете: 19071507101541643 .


Второе - это канонические страницы. Подробности также в сегодняшнем тикете: 19071509553144043 .
страницы моего сайта неканонические, а мертвого вот уже как года 2 сайта видимо канонические, раз Яндекс выдает его первым на страницы
Елена Першина
Сотрудник Яндекса17 июля, 19:44
vilim.a,
слова - это хорошо, реальные примеры - еще лучше. 
Обновлено 17 июля, 19:44
autolombard-express.ru
17 июля, 12:33
добрый день! у меня был переход на протокол htpps  на новом сайте . В данный момент в вебмастере все стр. указаны "канонический адрес не указан" . В старой версии http вообще нет стр в поиске. Это может быть проблемой для меня...Ни одного ключа нет в поиске по запросам. Хотя работа над сайтом идёт...
Елена Першина
Сотрудник Яндекса17 июля, 19:45
autolombard-express.ru,
вопрос конкретно в чем и задали ли вы его в поддержку? какой номер тикета? 
Комментарий удалён
platon
Сотрудник Яндекса19 июля, 12:58
superseeder2011,
если какие-то страницы, на которых был установлен атрибут rel="canonical", попали в поиск, рекомендуем проверить информацию о страницах в разделе "Страницы в поиске". Инструмент покажет, был ли обработан атрибут на страницах: если у ссылок указана информация о том, что атрибут не указан, возможно, в настройках атрибута есть какие-то проблемы и стоит проверить указания. Если атрибут обработан корректно, но страницы попали в поиск, это действительно не ошибка. Это означает, что контент неканонических и канонической страницы в существенной мере отличается, поэтому неканонические ссылки могут быть полезны пользователям и были включены в поиск.
Комментарий удалён
platon
Сотрудник Яндекса20 июля, 12:27
superseeder2011,
1. В случае страниц пагинации мы в данный момент не рекомендуем указывать атрибут rel="canonical" на первую страницу каталога, однако окончательное решение принимать вам как владельцу сайта. Если вы уверены, что такие страницы не содержат контента, который может быть полезен и интересен пользователю, вы можете использовать атрибут.
2. По желанию, вы можете как прописать атрибут rel="canonical" с указанием на самих себя, так и не указывать его совсем. И в том, и в другом случае страницы будут рассматриваться как канонические и смогут индексироваться в обычном режиме.
Комментарий удалён
suslov.reserve
21 июля, 02:41
platon,
Допустима ли следующая стратегия или система? 
1. Считаем, что с высокой вероятностью страницы пагинации не несут полезного контента для пользоваьелей поиска, но при этом среди них может существать отличное от нуля количество страниц с полезезным контентом. Например всего имеется N страниц пагинации, из них K << N полезных.
2. Тогда используется "мягкий" вариант фильтрации - устанавливается canonical на первую страницу и если робот сочтет, что полезного контента какой либо из мтраниц нет, и та или иная страница схожа с первой, то они склеются, а если робот посчитает, что i-я страница пагинации может быть полезна для каких то специфических поисковых запросов, под которые нет канонических посадочных страниц, то такая страница проиндексируется и будет участвовать в поиске по этим запросам.
suslov.reserve
21 июля, 02:57
platon,
В качестве примера:


Имеется в целом однородный каталог товаров, но в ряде случаев могут возникать компактные группировки товаров с экзотическими признаками, под которые, в связи с их экзотичностью и редкими запросами на поиск таких товаров, не создавались специальные посадочные страницы. Но так как их все таки могут искать, такие компактные группировки могут быть релевантнее первой страницы каталога, для людей ищущих именно такие экзотические товары. Причем экзотичность может быть просто какой то небольшой особенностью, например хромированной ручкой регулировки громкости.
platon
Сотрудник Яндекса22 июля, 10:56
superseeder2011,
мы подумаем над тем, что делать с вебинаром, спасибо, что обратили внимание.
Для страниц пагинации вполне возможно использовать атрибут rel="canonical" с указанием на первую страницу, но не стоит пугаться, если такие страницы попадут в поиск: это означает, что их контент в существенной мере отличался.
Окончательное же решение о том, оставлять ли в поиске такие страницы, принимать вам как владельцу сайта. Если вы уверены, что эти страницы в выдаче не нужно, можно использовать другие средства ограничения их индексирования: например, директиву Clean-param или Disallow в robots.txt сайта.
platon
Сотрудник Яндекса23 июля, 08:36
suslov.reserve,
да, такая система вполне допустима.
Демьян
19 июля, 19:03
Яндекс 13 июля добавил в индекс страницы site.ru/page/1/ - site.ru/page/500/
с Припиской


Страница попала в поиск, поскольку во время её сканирования роботом её содержимое существенно отличалось от содержимого страницы по адресу https://site.ru, который был указан в атрибуте rel="canonical" в исходном коде. Исправьте или удалите атрибут canonical, если он указан некорректно. Робот отследит изменения автоматически.


теги на на таких страницах (для примера https://site.ru/page/3/ ) -
<link rel='prev' href='https://site.ru/page/2/' />
<link rel='next' href='https://site.ru/page/4/' />
<link rel="canonical" href="https://site.ru/" />
Попали в поиск именно страницы навигации с главной. С категориями ничего не случилось
Что с этим делать? Спасибо
Обновлено 19 июля, 19:05
platon
Сотрудник Яндекса20 июля, 12:28
Демьян,
если такие страницы были включены в поиск, это означает, что их содержимое в достаточной степени отличалось между собой, из-за чего неканонические ссылки были включены в поиск. В таком случае, возможно, эти страницы навигации могут содержать полезный для пользователей контент, и исключать их из поиска нет необходимости.
Если же вопрос их отсутствия в выдаче очень важен, и вы уверены, что они не несут полезной пользователям информации, вы можете ограничить их индексирование, например, запретив в robots.txt сайта.
Комментарий удалён
platon
Сотрудник Яндекса25 июля, 08:23
superseeder2011,
если такие страницы проиндексированы и участвуют в поиске, по возможности, описание для этих страниц действительно лучше указать.
Здравствуйте


Всё по классике - у контентного сайта есть главные категории, посты в них имеют короткий анонс в виде части начала описания каждого поста. Каждая такая категория разбита на страницы и согласно правил канонической прописана первая страница. Но по сути каждая отдельная страница в категории отличается друг от друга (что логично, анонсы то у постов разные). С одной стороны я согласен (и я ранее считал, что он так и делает), что поисковик должен видеть не только первую страницу, а все страницы категории и вычислять из них суммарную релевантность, но возникает несколько вопросов:

1. почему вебмастер говорит "Исправьте или удалите атрибут canonical, если он указан некорректно?" Т.е. Яндекс ожидает что я теперь должен убрать тег канноникал со всех страниц пагинации?


2. Что делать с главными метатегами? Как правило все последующие страницы дальше 1-й имеет тот же самый Тайл и дескрипшен, за той лишь разницей, что в Тайтле я дописываю "| Страница №" а дескрипшен остается тот же. Как Яндекс будет смотреть на эти дубли?
platon
Сотрудник Яндекса23 июля, 08:37
izvsupp,
1. Это предупреждение не обязательно говорит об ошибке, оно носит информативный характер. Если вы специально установили атрибут, удалять его в такой ситуации нет необходимости.
2. Мета-теги могут учитываться роботом, однако при проверке страниц и признании их дублями учитывается все содержимое страниц, поэтому, если в целом контент будет отличаться, они не должны быть признаны дублирующими. Какой же контент указывать в тегах <title> и <description>. решать вам как владельцу сайта.
platon,
А если у страниц пагинации,что были закрыты каноникалом, title такой как у 1ой страницы, и сейчас эти страницы Яндекс массово закидывает в индекс - получается ошибка с дублированием одного title на многих страницах? Надо теперь в любом случае делать уникальные title на случай, если Яндекс решит, что контент все же отличается?
platon
Сотрудник Яндекса25 июля, 11:54
dosyainred,
стоит ли менять данные в тегах <title> и <description>, решать вам как владельцу сайта. Если страницы пагинации были включены в поиск, это означает, что их содержимое в данный момент уже в достаточной мере различается, и они не будут признаны дублирующими.
Здравствуйте. В какой-то момент стали добавляться страницы пагинации интернет-магазина в индекс, на второй и последующей стоял canonical на раздел. Они попали в индекс как неканонические и с последним апдейтом сайт улетел за ТОП-100. За последнее время кроме добавления/удаления товаров никаких критических изменений не производилось, соответственно я полагаю, что причина выпадения за ТОП-100 в резком приросте страниц за счет пагинации, которые по факту бесполезны на поиске.


Как с этим быть? 
Обновлено 23 июля, 10:40
Елена Першина
Сотрудник Яндекса23 июля, 14:39
inpointby,
напишите нам в поддержку Вебмастера, пожалуйста. Скорее всего, с canonical это не связано. 
Елена Першина,
Отписал в техподдержку. Получил ответ: "Благодарим за письмо. Мы проверим, нет ли проблем с ранжированием вашего сайта, и при необходимости внесем соответствующие изменения в наши алгоритмы."


Это значит, что мне еще напишут или что? Просто я даже не знаю куда копать, в поисках причины)
platon
Сотрудник Яндекса24 июля, 08:39
inpointby,
а можете, пожалуйста, номер обращения прислать? Тоже посмотрю.
platon,
Да, конечно.
Ticket#19072300004954963
platon,
только что проверил, позиции вернулись) 
platon
Сотрудник Яндекса25 июля, 08:34
inpointby,
искренне рад за вас :)
inpointby,
а поделиться с читателями? В чем же ж была проблема?
Добрый день!


Есть сайт с пагинацией главной страницы. На каждой отдельной странице canonical указывает на главную страницу сайта.


И они полезли в поиск)


Скажите, пожалуйста, можно ли их закрыть метатегом  noindex follow? (тем самым зпретив их индексацию)
Или лучше через robots.txt это сделать?


Спасибо! 
platon
Сотрудник Яндекса25 июля, 08:28
dmdzen,
если вы уверены, что такие страницы не будут интересны пользователям и их содержимое не должно индексироваться, вы можете запретить их индексирование как при помощи мета-тега noindex, так и в robots.txt сайта. Кажется, что в такой ситуации проще будет запретить при помощи директивы в robots.txt, ведь директива Disallow (или Clean-param) позволяет запретить сразу большой массив однотипных ссылок, и роботу будет достаточно обработать robots.txt, чтобы узнать о запрете.
platon,
Спасибо за ответ.
То есть, можно не закрывать от индексации и оставить canonical , который ведет на главную страницу сайта? Это не будет катастрофой? 
Голова уже кругом идет после прочтения комментов =)
platon
Сотрудник Яндекса29 июля, 08:38
dmdzen,
да, атрибут rel="canonical" вполне можно оставить. Если контент неканонических страниц будет существенно совпадать с канонической, они будут исключены из поиска. Если контент будет различаться - страницы с таким атрибутом смогут участвовать в поиске как обычные страницы.
Комментарий удалён
superseeder2011,
 Почему же Гугл так жестоко обойдется с сайтом?
devetyarov.d.n
25 июля, 19:10
dmdzen,
Закрой и посмотри что будет происходить с сайтом. У каждой поисковой системы свои фишки и алгоритмы, нужно искать золотую середину.
Комментарий удалён
superseeder2011,
Интересная мысль.
Думаю, что пока стоит остановиться на варианте с canonical,  который указывает на главную страницу. Тем более, что (судя по комментам и самой статье), такое решение тоже имеет полное право на жизнь для Вордпресс с категориями и пагинацией.
Вы сами на каком варианте остановились, если не секрет?
Комментарий удалён
superseeder2011,
Спасибо за ответ. У себя оставил так-же оставил, как у Вас (каноникал ссылается на главную)
Мне тоже прилетело, что нет описания в Дескрипшенах. Но я просто прописал их в рубриках, а они подтянулись на все другие страницы пагинации. Да, не уникально. Но как их уникализировать, да и так ли это вообще критично - непонятно.
Обновлено 25 июля, 21:12
Комментарий удалён
Елена Першина
Сотрудник Яндекса26 июля, 14:37
superseeder2011,
из вашего описания сложно понять, что реально случилось с сайтом, но уверена, что это никак не связано с изменениями в обработке канонических страниц. Так что тут лучше с поддержкой Вебмастера через обратную связь продолжить общение. 
А как быть с товаром? Например модель техники может отличаться на одну или две цифры обозначающие мощность. И цена у них разная. И по сути это разный товар. Как с ним быть? Клиент ищет технику мощностью 8 кВт, а ему каноническая предлагается которая на 6 кВт. Это же ерунда...Пользователь может подумать что есть на 6 кВт а на 8 нет на этом сайте и не кликнет.
Или та же техника может отличаться какой то доп. функцией встроенной. Например пульт управления на корпусе, у другой такой-же модели пульт дистанционный, цена тоже разная и по сути это разный товар. Но в названии отличие только в двух буквах, при технических характеристиках полностью одинаковых и описании.
Как быть?
Обновлено 23 июля, 11:36
Елена Першина
Сотрудник Яндекса23 июля, 14:50
sauna-life,
тут как и раньше, ничего не меняется.
Елена Першина,
все так же не совершенно ? :)
Елена Першина
Сотрудник Яндекса23 июля, 21:31
sauna-life,
все также хорошо, если все корректно настроено ) 
Елена Першина,
а по-моему сильно не хорошо.. ваш же Маркет требует "Каждый товар должен быть представлен на отдельной странице сайта, с которой можно перейти к оформлению заказа." и страницы товара с комбобоксом выбора характеристики, от которой меняется цена товара заворачивает при модерации. О какой хорошести канонических страниц карточек товаров вообще идет речь, если Яндекс своими же сервисами заставляет плодить чуть ли не дубли или заплатки под свои сервисы?
"размеченные как неканонические могут быть полезны, а их наличие в поиске может влиять на качество и полноту ответа на запрос пользователя"
Категорически не согласен с такими выводами.
Так к примеру тот же WP генерирует кучу дублирующих страниц, которые по сути являются спамом, индексируются роботами Яндекса и попадают в поиск. Ни кто с этим ничего сделать не может. И даже применение специальных плагинов типа "All In One SEO Pack" проблему кардинально не решают и как-либо избавится от дубликатов (неканонических страниц), убрать, удалить их из поиска не удаётся. Так и болтаются гирями на "ногах сайта".
П.э. категорически не разделяю выводов автора. 
Елена Першина
Сотрудник Яндекса25 июля, 11:21
aacc-tmsk,
никто не говорит, что все неканонические страницы полезны, речь об отдельных примерах. 
aacc-tmsk,
 читайте, учите, как раз с этим все решается...
При включении в поиск страниц doc и pdf  появляется коммент: "каноническая страница не указана" .
На что-то влияет? Надо что-то предпринимать?
platon
Сотрудник Яндекса29 июля, 08:39
do-site,
указывать атрибут rel="canonical" в такой ситуации не обязательно, это сообщение носит информативный характер. Если страницы или документы не будут содержать атрибута, они будут по умолчанию рассматриваться как канонические и смогут индексироваться в обычном режиме.
Вопрос насчет "Отсутствуют метатеги <Description>".


Все проблемы из-за категорий. 
Например, есть страница site.ru/novinki/ и у нее есть определенный дискрипшн.
У страницы site.ru/novink/page/2/ и site.ru/novink/page/3/ тоже должен быть тот же дискрипшн, что и у site.ru/novinki/


У категорий стоит  rel="canonical"  вместе с rel='prev' и rel='next'. Подскажите пожалуйста, как должно все быть, а то предупреждение недавно появилось в вебмастере.
platon
Сотрудник Яндекса6 августа, 12:51
mamikonars,
правильно ли я понимаю, что предупреждение об отсутствии мета-тега description появилось после того, как неканонические страницы пагинации были включены в поиск? Мы рекомендуем устанавливать данный мета-тег для всех страниц, которые могут участвовать в поиске и отображаться по запросам пользователей. Какое именно описание указать, решать уже вам как владельцу сайта. Если вы считаете, что описание корневой страницы раздела site.ru/novinki/ подходит и для страниц пагинации, то его можно использовать и для этих страниц.
platon,
в декабре 2015-го писали - ставьте canonical на 1-ую страницу пагинации. Сейчас вебмастер пишет "Страница попала в поиск, поскольку во время её сканирования роботом её содержимое существенно отличалось от содержимого страницы по адресу __url__, который был указан в атрибуте rel="canonical" в исходном коде. Исправьте или удалите атрибут canonical, если он указан некорректно. Робот отследит изменения автоматически." - по сути говорит теперь обратное, мол снимай canonical, танцуй с бубном, чтобы контент страниц пагинаций имел свои title, дескрипшены и т.п. и не воспринимался поисковиком как дубликат существующей на сайте страницы. Может уже пора определиться как правильно?
А надо ли на Главной странице прописывать, что она является Главной ?
На остальных уже прописано, что они не канонические.
Спасибо.
platon
Сотрудник Яндекса9 августа, 08:59
spectrdirect,
указывать атрибут rel="canonical" на главной странице с указанием на саму себя не обязательно: если атрибут будет отсутствовать, то страница все равно будет считаться канонической и индексироваться как обычно. По желанию, такой атрибут можно и указать, на индексирование страницы это повлиять не должно.
Не хочу умничать. Позволю себе высказать осторожное мнение. Возможно, что Платоны и участники обсуждения со мной не согласятся.
Что мы имеем в настоящее время? Всё, о чём я напишу, касается информационных ресурсов и моих личных наблюдений.
1. Почти всегда, при очередном посещении страниц пагинации роботом, он информирует о том, что контент на неканонической странице существенно отличается от канонической. Как результат, со временем, все неканонические страницы пагинации попадут в поисковую выдачу.
Вывод: нет никакого смысла указывать каноникал на начало раздела. Кстати, Гугл (Андрей Липатцев) также считает это решение ошибочным.
Итог: прописываем каноникал для страниц пагинации информационного ресурса "сам на себя".
2. Неканонические страницы робот посещает намного реже, чем канонические, не так ли? В таком случае, внутренние ссылки, расположенные на страницах пагинации, будут сканироваться относительно редко. А это не есть хорошо.
3. У меня возник всего один вопрос. К Платонам.
Я указал каноникал "сам на себя". Теперь все без исключения страницы пагинации попадут в индекс. А их, простите, более 2000.
Я точно не знаю, насколько они могут быть полезны для посетителей органической выдачи.
Какова вероятность того, что после их индексации Яндекс сочтёт их недостаточно качественными, понизив релевантность действительно важных документов?

Обновлено 9 августа, 23:26
platon
Сотрудник Яндекса12 августа, 10:01
superseeder2011,
канонические страницы вполне могут оцениваться алгоритмом на предмет включения их в результаты поиска, но сложно сказать, какова вероятность их исключения, поскольку учитывается очень большое число разных факторов. При этом исключение страниц пагинации, если такое произойдет, не должно как-то повлиять на участие в поиске тех страниц, которые были проиндексированы и включены в поиск.
platon,

Я всего лишь хотел подчеркнуть, что на неканонические страницы робот заходит значительно реже, чем на канонические.
Поэтому я и решил последовать Вашему первому совету, который Вы мне дали.
Вы писали, что в настоящий момент Вы не рекомендуете указывать каноникал на первую страницу.


platon
Сотрудник Яндекса20 июля, 12:27
superseeder2011, 1. В случае страниц пагинации мы в данный момент не рекомендуем указывать атрибут rel="canonical" на первую страницу каталога, однако окончательное решение принимать вам как владельцу сайта. Если вы уверены, что такие страницы не содержат контента, который может быть полезен и интересен пользователю, вы можете использовать атрибут.
2. По желанию, вы можете как прописать атрибут rel="canonical" с указанием на самих себя, так и не указывать его совсем. И в том, и в другом случае страницы будут рассматриваться как канонические и смогут индексироваться в обычном режиме.
Обновлено 12 августа, 19:54
Добрый день!
Смущает момент в связи с этим обновлением.
Есть довольно крупный интернет-магазин, у которого на страницах пагинации и страницах с гет-параметрами сортировки и фильтрации в листингах были прописаны атрибуты canonical на страницы без параметров. И все было хорошо, проблем с индексацией никогда не было.


После этого обновления в индекс стали массово залетать все эти страницы с пометкой "Страница попала в поиск, поскольку во время её сканирования роботом её содержимое существенно отличалось от содержимого страницы по адресу..." https://yadi.sk/i/omM7biYVKQABRA , а через какое-то время все эти страницы стали также массово вылетать как недостаточно качественные: https://yadi.sk/i/eV2APL5UNyUTOQ 


В связи с этим вопрос: требуется ли что-то делать, чтобы избежать проблем? Ведь, как мы знаем, большое количество некачественных страниц на сайте ведет к негативным последствиям с точки зрения ПС.
a.korelyakov,
Аналогичная проблема.
В панели Вебмастера стали появляться страницы пагинации, удалённые из выдачи и помеченные как недостаточно качественные.
Если таких страниц будет много, тоже боюсь, что мы потеряем трафик.
platon
Сотрудник Яндекса17 августа, 08:09
a.korelyakov,
пожалуйста, напишите моим коллегам в поддержку https://yandex.ru/support/webmaster-troubleshooting-info/site-indexing/bad-indexing/low-quality.html#low-quality , посмотрят, что да как.
В конце 15-го года Платон, отвечая на вопрос "Что делать со страницами пагинации и сортировки товаров?" написал:


"Если в какой-либо категории на вашем сайте находится большое количество товаров, могут появиться страницы пагинации (порядковой нумерации страниц), на которых собраны все товары данной категории. Если на такие страницы нет трафика из поисковых систем и их контент во многом идентичен, то советую настраивать атрибут rel="canonical" тега <link> на подобных страницах и делать страницы второй, третьей и дальнейшей нумерации неканоническими, а в качестве канонического (главного) адреса указывать первую страницу каталога, только она будет участвовать в результатах поиска."


Теперь вот смотрю свежие изменения по проектам, где на страницах пагинации новостей, каталогов и т.п. настроены канонические адреса, и вижу, что теперь они добавлены в поиск с комментом  "Страница попала в поиск, поскольку во время её сканирования роботом её содержимое существенно отличалось от содержимого страницы по адресу ___url____, который был указан в атрибуте rel="canonical" в исходном коде. Исправьте или удалите атрибут canonical, если он указан некорректно. Робот отследит изменения автоматически."


Ясен пень, что страницы пагиназции не идентичны первой - на любом сайте! Может быть пора подвести какой-то итог? Рекомендация все еще ставить canonical на 1-ую? Или убирать canonical? Вы там сами-то в итоге определились как лучше?
platon
Сотрудник Яндекса23 августа, 09:02
orlov-evgeny,
вы вполне можете оставить атрибут rel="canonical" на страницах пагинации. При этом необходимо учитывать, что такие страницы могут попасть в поиск, если их содержимое в существенной мере отличается.
Ребят подскажите пожалуйста заметил что у конкурента аж 3 сайта висят в топ 5 по сео выдачи на один ключевой запрос, как это вообще возможно ?

Обновлено 23 августа, 19:45
platon
Сотрудник Яндекса26 августа, 07:48
Miport.ru,
напишите об этом моим коллегам в поддержку - посмотрят, что да как.
Я несколько в шоке. Все страницы моего сайта удалены из поиска, кроме одной, потому что они, по мнению робота, одинаковые. У меня нет одинаковых страниц! Просто я тексты писала для людей, а не для роботов.
platon
Сотрудник Яндекса30 августа, 12:29
silberwe,
напишите, пожалуйста, моим коллегам в саппорт https://yandex.ru/support/webmaster-troubleshooting/site-indexing/bad-indexing/missing-reasons.html
У меня интернет магазин. Стандартный и таких же еще сотни три есть подобных.
Сейчас в вебмастере  добавленно все три версии
https
http
www
Содержимое везде одинаковое совершенно. Как прописать канонические страницы и надо ли вообще делать это в моем случае?
Редиректы нужны в robots.txt прописывать в таком случае?


Что то совсем запутался с этими сложностями)


Спасибо
platon
Сотрудник Яндекса2 сентября, 10:59
petrov66ua,
рекомендуем определить, какой из сайтов вы хотите видеть в результатах поиска. Например, если индексироваться и участвовать в поиске должен сайт с https, то рекомендуем настроить редирект 301 с остальных двух сайтов с http и с www на него, чтобы явно указать роботу, по какому адресу сайт должен быть в поиске. Редиректы настраиваются не в robots.txt, как правило, их можно настроить в файле .htaccess или в панели Администратора сайта.
А уже в рамках сайта с https вы можете использовать атрибут rel="canonical" с указанием так же страниц с https в качестве канонических, как посчитаете нужным.
platon,
Ну а если содержимое везде на 100% одинаковое - как понять какой сайт я хочу видеть в поиске?))
Для Яндекса что лучше? Мне абсолютно не принципиально какой сайт будет в поиске - а Яндексу как поисковой системе есть разница?
Домену уже более 7 лет и обратных ссылок размещено больше на http. Но потом, с год назад примерно, переехал на https и ссылки стал размещать на эту версию. В .htaccess прописан 301 редирект на https


Для Яндекса - как источник траффика для моего сайта - предпочтительней https или тоже не совсем принципиально - с учетом того что содержимое полностью одинаковое? 
В карте сайта сейчас прописано https
Нужно делать еще карты на http и www или нет?


И еще - с появлением быстрых ссылок в панели трафик уменьшился и сильно уменьшился. Это просто совпадение?


Спасибо
platon
Сотрудник Яндекса2 сентября, 16:11
petrov66ua,
мы со своей стороны рекомендуем использовать безопасный протокол https: https://webmaster.yandex.ru/blog/https-kak-znak-kachestva-sayta
Сайты же с www и без www индексируются в одинаковом режиме, поэтому вы можете выбрать любой из этих вариантов на свое усмотрение. Что касается файла sitemap, то его нужно размешать по тому адресу, по которому сайт будет участвовать в поиске. Если сайт индексируется по адресу https://site.ru, то и sitemap должен быть по адресу вида https://site.ru/sitemap.xml .
Про трафик - лучше уточнить у моих коллег в саппорте.
platon,
Спасибо
Травы Байкала Системный Администратор
11 сентября, 16:08
Что-то я не понял утверждения про невозможность на битриксе устанавливать канонические URL. У меня интернет-магазин на типовом решении сделан. В настройках инфоблока прописываю путь для канонических адресов, в настройках модуля ставлю галочку "использовать канонические адреса", вот и всё. Или Вы что-то другое имеете ввиду под каноническими адресами. Кстати, замечу что там при привязки товара к нескольким разделам можно выбирать основной, который будет использоваться как канонический.
На сайте около 100 страниц и все указаны как канонические, мне кажется или это бред? Или я что то не понимаю...
platon
Сотрудник Яндекса12 сентября, 12:56
NVT,
опишите, пожалуйста, ситуацию подробнее. Лучше сделать это в заявке через форму обратной связи: https://yandex.ru/support/webmaster-troubleshooting/site-indexing/bad-indexing/missing-pages.html . 
Здравствуйте! Подскажите, пожалуйста, в итоге страницы пагинации для интернет-магазина нужно помечать атрибутом canonical на основной раздел или нет? Потому что в этом видео https://www.youtube.com/watch?v=2vIrCNnsCoo Вы говорите о том, что canonical настраивать нужно, а теперь, как я понимаю, не нужно. В итоге как правильно?
platon
Сотрудник Яндекса14 сентября, 12:00
packmarket.ru.ya,
по желанию, вы вполне можете указывать атрибут rel="canonical" на страницах пагинации с указанием на первую страницу каталога в качестве канонической. При этом нужно учитывать, что если содержимое неканонических страниц будет отличаться, они смогут попасть в поиск. Вы также можете просто убрать атрибут, чтобы страницы могли индексироваться в обычном режиме.
Можете внести ясность, вот например у меня первая страница категории каноничная, 2я и дальше неканоничные с указанием canonical, если на первой странице встречаются например тапочки серые и черные, а на второй красные, а на третьей желтые. Если человек ищет желтые тапочки, то ему не выведет эту категорию, так как каноничной нет в поиске или же выведет каноничную первую, на которой нет такого товара или же всё нормально отработает?
platon
Сотрудник Яндекса15 сентября, 09:28
Indeferend,
если неканонические страницы в поиске не участвуют, отображаться в поиске по запросам они не смогут.
В ЯД для всех страниц пишет каноническая страница не указана. Прописал везде rel=canonical ....результат тот же самый хотя ни одной дублирующей страницы нет на сайте, главное зеркалопрописано