Последствия алгоритма королева. Алгоритм Королёв - Яндекс запустил новый поиск на основе нейронных сетей. Чем отличается от алгоритма «Палех»

Поисковой алгоритм «Королёв» – алгоритм Яндекса нового поколения. Система с помощью сигналов нейронной сети совмещает семантику запросов пользователей и той информации, которую они ищут. С помощью новой версии ответы на запросы в Яндексе стали более точными и релевантными, а количество соответствующей информации для сложных запросов увеличилось.

Больше видео на нашем канале - изучайте интернет-маркетинг с SEMANTICA

Например, вы увидели картину, с кричащим человеком. Она вам очень понравилась, и вы решили найти ее в интернете. Но вы не знаете ни имени автора, ни названия самой картины, поэтому вы делаете следующий запрос:

Конечно, полотно не называется «картина, где человек кричит», но поисковик все равно помог нам найти именно то, что мы искали. В этом и есть принцип работы алгоритма «Королёв» – система ищет не только название материала, но и сам текст, размещенный на странице.

Такой же алгоритм работает и в Google, но уже под другим названием RankBrain.

Чем отличается от алгоритма «Палех»

Новый алгоритм «Королев» – это усовершенствованная версия предыдущего алгоритма компании, который носил название « ». Он был представлен в ноябре 2016 года и стал первым шагом в сторону семантического поиска. Его основная задача – лучше понять содержание контента на страницах.

В «Палехе» также использовались нейронные сети для поиска информации, но именно в «Королёве» увеличено их влияние на распределение сайтов поиске. Вот в чем отличия этих алгоритмов:

• В «Королеве» встроена система сравнения смыслов запросов. В Яндексе привели пример запросов «ленивая кошка из монголии» и «манул». Целью двух этих запросов является найти информацию о мануле, и новый алгоритм Яндекса «Королёв» удовлетворит оба варианта поиска
• В «Палехе» нейронные сигналы вступали в действие уже на последних этапах распределения информации, и останавливались примерно на 150 первых документах. Из-за такой схемы поиска терялось довольно много документов, особенно сложных, которые могли быть именно теми, что пользователь искал. «Королёв» ранжирует информацию уже на стадии индексирования, что приводит к вычислению 200 тысяч(!) документов.

После выпуска «Королева» поисковик смотрит не только на заголовок страницы, но и на ее содержание, на текст.

В чем суть работы и обучаемости нейронной сети

Яндекс не достиг бы таких высоких показателей без прямой связи с пользователями. Новый алгоритм совершенствуется и обучается с помощью обезличенной поисковой статистики. Система статистики учитывает, с какого запроса пользователь зашел на ту или иную страницу. Если он провёл на ней много времени, тогда вполне резонно предположить, что это именно та страница, которую он искал. Это значит, что поисковик выдал правильный ответ на вопрос пользователя.

Люди являются главными помощниками машин в этом дела. Яндексу нужна реальная оценка качества поиска от своих пользователей, поэтому они создали специальную платформу – . Пользователи сервиса анализируют и оценивают работу поисковой системы. Они помогают компании улучшать качество работы алгоритма и получают за это денежное вознаграждение.

Раньше этим занимались нанятые работники – асессоры, но с ростом рынка спроса их стало катастрофически не хватать. Это и есть основной причиной создания Толоки.

На данный момент численность участников Толоки составляет больше миллиона человек.

С помощью алгоритма «Королев» Яндекс существенно сможет улучшить качество поиска. Люди сами делают свои запросы в Яндексе лучше, и чем больше людей будет привлечено в данный проект, тем меньше неудач в поиске на нас ждет в будущем.

Принцип работы нового алгоритма «Королёв»

Так же как и в алгоритме прошлого поколения «Палех», текст сайта с помощью нейросети преобразуется в смысловые векторы. «Королёв» высчитывает градиенты страниц не в тот момент, когда вы делаете запрос, а намного раньше, на этапе индексирования. Как только сайт проходит индексирование, к нему уже прикрепляются некоторые ключевые слова, которые поспособствуют дальнейшему упрощению поиска информации. Поэтому, когда вы вводите информацию, Яндекс уже выдает семантически схожие страницы.

Также система способна устанавливать связь между данным единичным запросом и другими запросами, которые способствуют попаданию пользователя на эту же страницу.

Влияет ли алгоритм на выдачу и нужно ли предпринимать какие-то действия, чтобы оптимизировать контент под «Королева»

Да, данный алгоритм в некоторой мере изменил поиск в Яндексе. Вот некоторые точные данные о том, насколько сильные есть изменения:

Как видим, изменение не являются феноменально большими. Особые изменение произошли в возрасте документов. В топ-100 поиска свежие документы теперь будут появляться намного чаще.

Оптимизировать статьи под «Королёв» нет смысла, потому что система учится определять смысл текста самостоятельно, а это значит, что в скором будущем в работе оптимизаторов значимость текстовой оптимизации снизится.

Вчера Яндекс на своей презентации официально объявил о запуске нового алгоритма «Королёв».

Рассказываю как это происходило и что нового дал нам новый алгоритм Яндекса.

Вот самая трансляция данной презентации:

Я не буду мусолить весь этот пафос который был не презентации и скажу суть:

1. Алгоритм «Королёв» запустили не вчера, а эдак 2-6 месяцев назад . Я думаю всем понятно, чтобы вот взять и запустить за секунду новый алгоритм невозможно.

Т.е. новый алгоритм Яндекса действует давно, просто всё это время шло его тестирование и отладка.

2. Это вовсе не новый алгоритм. Вовсе нет. Это алгоритм Палех в котором просто сделали возможность сравнения не 150, а 2000 результатов.

Ну, а а конкретно о различии Королёва и Палеха нам официально всё разъяснил сотрудник Яндекса:

По сути ничего не поменялось. Был просто пафос Яндекса и больше ничего.

Если говорить честно, то никакого нового алгоритма нет. Просто нет и всё. Даже поиск по органике остался прежним.

Если был бы внедрён новый алгоритм, но мы бы увидели колебания по трафику. Но этих колебаний нет.

Да, впринципе и искать то нечего.

Вот так выглядит в настоящее время выдача Яндекса:

А что собственно вы ищите своим поиском?!

Сверху 4 позиции Директа + 5-я позиция Маркет, потом 4 позиции Директа снизу, справа Яндекс.Маркет + Яндекс.Баян.

Что то тут искать?

Какой к хуям алгоритм ранжирования сайтов? Что тут ранжировать?

Я даже нарисовал новый логотип Яндекса:

А Королёв тут причём? Вам до Королёва как до Луны. Подмазались под великого человека.

Я вообще не понимаю, что произошло. Было обычный пафос Яндекса и всё. Никакого глобального изменения в алгоритме ранжирования сайтов нет.

Теперь пройдёмся по самой презентации этого алгоритма.

За месяц до презентации Яндекс объявил, что вы можете подать заявку, чтобы вживую в планетарии посмотреть эту презентацию.

Я лично заполнял заявку. Да и много кто заполнял. И всем нам пришёл отказ.

Всё на самом деле оказалось проще:

Просто собрали своих сотрудников, родственников, знакомых, подруг и знакомых своих знакомых.

Зачем вообще мы подавали на что то заявки?! Ну теперь понятно кого вы набираете на работу в Яндекс.

Но по видимому набрали слишком много знакомых и многие из них тупо спали:

Вот это человек пришёл на место Саши Садовского:

После того, как 22-го августа был презентован новый алгоритм Яндекса «Королёв», у многих SEO-специалистов возникли опасения касательно возможного падения посещаемости у сайтов. С другой стороны, если у одних сайтов поисковый трафик упадёт, значит у других будет прирост.

Но давайте разберёмся вместе, всё ли так страшно.

Кстати, говоря, опираясь на данные Яндекс Метрики, мы видим, что многие пользователи вводят запрос «Как включить Яндекс Королёв?» и заходят на нашу статью. На самом деле ничего включать не надо , это новая система ранжирования уже работает для всех автоматически.

Что такое алгоритм Яндекса «Королёв»?

В сущности «Королёв» — это прокачанная версия Палеха , работа которого базируется на распознавании смысла с помощью нейросети. Если Палех мог распознавать только заголовки и обрабатывал до 150-ти документов, то «Королёв» оценивает весь текст на странице и может обрабатывать свыше 200 тысяч страниц.

В официальном блоге, также говорится о том, что изменения касаются не только применения нейросети для поиска не по словам, а по смыслу, но и самой архитектуры индекса поисковой выдачи.

Как работает алгоритм «Королёв»

По заверению создателей алгоритма, он позволит перейти на совершенно иной уровень понимания смысла запросов пользователей. Теперь будет оцениваться вся страница сайта с семантическим вектором поисковых запросов.

Когда пользователь вводит запрос, поисковой машине требуется понять, какая страница и с каким заголовком соответствует ему больше всего. Для этого запрос и заголовок преобразуются в перемножение векторов, и чем больше получится результат, тем больше релевантность страницы запросу. В момент формирования ответа на запрос происходит мгновенное преобразование текста заголовков и запросов в векторы и их сравнение. Это позволяет выявить возможные связи по смыслу, но при этом требует огромных вычислительных мощностей. Так работает Палех.

Что было сделано, чтобы улучшить его работу? В алгоритме «Королёв» осуществляется предварительное вычисление векторов , что позволяет не нагружать сервера во время самого запроса, а брать уже готовый результат. Кроме того, как уже говорилось выше, «Королёв» преобразует в семантический вектор не только заголовок страницы, но и всё её содержание.

Но стоит понимать, что «Королёв» – это не революционный алгоритм ранжирования сайтов, который перевернёт выдачу Яндекса с ног на голову. Это комплекс из уже внедрённых решений, усовершенствованный с помощью нейросетей и пользовательского опыта.

Что ждёт индустрию после выхода «Королёва»?

На данный момент никаких глобальных изменений в результатах выдачи не наблюдается и вряд ли они наметятся в ближайшем будущем. Например, в поиске по прежнему есть множество страниц, которые отвечают на синонимичные запросы «интерьер кухни» и «дизайн кухни», с помощью разных страниц, где есть прямое вхождение ключа.

Реальные перемены наступят, когда не нужно будет под один «большой» запрос собирать базу низкочастотных запросов , писать под них текст от 10 000 символов.

22 августа 2017 года Яндекс официально заявил о запуске нового поискового алгоритма «Королёв» (назван в честь города, как и большинство предыдущих поисковых алгоритмов). В его основе лежит механизм распознавания сложных запросов, который работает по принципу самообучаемой нейронной сети. Это значит, что Яндекс должен определять подходящие по смыслу документы, даже если они не содержат слов из запроса.

Чем он отличается от «Палеха»?

Ещё в ноябре 2016 года Яндекс запустил предшественника «Королёва» - поисковый алгоритм «Палех». Основное отличие нового алгоритма, помимо улучшения технической реализации, - возможность распознавать схожие «смыслы» по всему документу, а не только заголовку (Title), который появляется в окне браузера.

Для чего внедрили алгоритм «Королёв»?

В Яндексе давно задумывались над проблемой определения релевантных документов по большому пулу низкочастотных запросов, которые задаются не совсем естественным языком. Это большой список запросов типа:
— [на какой картине плавятся часы]
— [где придумали одеколон]
— [в каком фильме писатель сходит с ума отеле]

Основная проблема - подходящие документы могли не содержать слов из запроса. Чтобы её решить и показывать более подходящую выдачу, было задумано создание алгоритма «Королёв» - самообучающейся нейронной сети. Как заверяют в самом Яндексе, нейронная сеть на основе машинного обучения будет совершенствоваться в понимании «смыслов», которые подразумевает человек при вводе запросов.

Как работает этот алгоритм на практике?

Описанный Яндексом подход звучит, конечно, хорошо, но гораздо интереснее посмотреть на конкретные результаты в выдаче.

Для начала возьмём запрос, который сам Яндекс рекламировал:
[картина где небо закручивается]

В объектных ответах справа Яндекс правильно определил, что мы подразумевали своим запросом. Он также указал верные ответы в Яндекс.Картинках. Остальная выдача состоит из новостей о новом алгоритме. Становится очевидным: в данной ситуации Яндекс пользуется традиционными методами определения релевантности и для выдачи алгоритм «Королёв» не работает.

Попробуем по-другому и зададим следующий запрос:
[где появился первый парламент]

В данном случае можно увидеть интересную выдачу. В объектных ответах появилось значение «Англия». В самой же выдаче есть разные сайты, которые содержат слова из запроса.

Алгоритм в объектных ответах работает, если мы хотим знать:
— где появилось слово «парламент»;
— где появился первый представительный и законодательный орган, который называется «парламент».

Алгоритм не работает:
— если мы хотим знать, где появился вообще первый законодательный орган.

Принято считать, что первый парламент появился в Исландии, но назывался он не «парламент», а «альтинг». В выдаче (на скриншоте выше) можно увидеть и правильный ответ на наш запрос. Он появился только потому, что в заголовке статьи есть слова из запроса.

Важно понять:
поисковик может понять запрос, только если каждое слово обладает одним понятным смыслом.

Если слово обладает несколькими смыслами, как в нашем случае «парламент», могут возникать проблемы.

Проведём ещё один эксперимент:
[песня про теракт в уоррингтоне]

Запрос максимально конкретный и на него может быть только один конкретный ответ - песня «Zombie» группы The Cranberries.

Если немного поменять запрос и указать [песня про теракт в 1993 году] , можно увидеть, что поисковик выдачу разделяет: часть ответов о песне, часть — о теракте. Яндекс не совсем понимает, о чём именно мы хотим получить информацию.

Если сделать запрос ещё более общим, то правильного ответа не будет совсем:
[песня про теракт в англии]

Выдача полностью состоит из новостей о теракте, а о заявленном смысле речи не идёт.

Теперь наберём запрос:
[фильм в котором писатель сходит с ума в отеле]

В этом случае можно увидеть, что алгоритм работает. Яндекс понимает, что мы хотим найти и, при этом, указывает, что у данного запроса есть два смысла (два интента): фильм «Сияние» и фильм «1408». Тут также важно, что слова из запроса не встречаются на страницах. В этом случае алгоритм работает.

Теперь попробуем набрать запрос:
[фильм в котором траволта танцует]

Варианты с наиболее популярными фильмами есть в объектных ответах, но не в выдаче.

Ответы становятся более конкретными, если модифицировать запрос:
[фильм в котором траволта танцует молодой]

Правильный вариант можно увидеть только в виде объектного ответа и страницы Википедии. Остальная выдача далека от нужного результата.

Ещё раз изменим запрос и наберём:
[фильм в котором траволта танцует в баре]

Как мы видим, алгоритм даёт сбой. Это происходит потому, что на данный запрос крайне сложно дать однозначный ответ. Например, в фильме «Криминальное чтиво» танцы происходят в ресторане, в фильме «Лихорадка субботнего вечера» - в клубе. Но есть фильм «Майкл», в котором Траволта как раз танцует в баре. Если несколько раз протестировать выдачу с целью найти необходимый фильм, начнут появляться релевантные результаты.

Какие выводы можно из этого сделать?

• Алгоритм показывает свою работу в выдаче только на страницах больших информационных сайтов (типа Википедия или Кинопоиск) и в объектных ответах.
• Алгоритм понимает только простые запросы, которые содержат один смысл.
• «Королёв» лучше работает при поиске популярной информации (например, по запросу «фильм» он покажет наиболее популярный, наиболее известный - тот, о котором информации в индексе больше всего).
• Алгоритм работает только с информационными запросами.
• Алгоритм действительно самообучаемый и при повторных обращениях результаты становятся лучше.

Для SEO алгоритм сейчас даёт мало. По большинству запросов большое значение имеет текстовый фактор. Там, где работает новый алгоритм, Яндекс отдаёт предпочтение более известным сайтам, например, Википедии. Небольшим проектам будет тяжело с ними конкурировать. Возможность высоко ранжироваться по таким запросам появится только когда у алгоритма будет более полная база знаний о желаниях и предпочтениях пользователей. Но для этого уже сейчас нужно:
— создавать текстовый контент, который содержит как можно больше слов, определяющих тематику страницы;
— улучшать поведенческие факторы, чтобы поисковик точно знал, что страница будет полезной пользователю.

Вчера вечером, в присутствии нескольких тысяч вебмастеров и двух космонавтов, Яндекс объявил о запуске нового алгоритма под названием «Королев». Никогда раньше компания не заявляла об изменении алгоритма с таким размахом: презентация в стиле Apple, прямая связь с космосом, огромный зал Московского планетария, online-трансляция, и пост-релизы в крупных изданиях Рунета. Не удивительно, что такой мощный PR вызвал бурную реакцию SEO-сообщества и очередной всплеск эмоций по отношению к «кровожадному Яндексу, который страстно желает загнать всех в Директ».

Давайте разберемся, что же произошло на самом деле и чего нам ждать от очередных нововведений.

Чего ждать от Королева в ближайшей перспективе?

Основное отличие Королева от предыдущих алгоритмов заключается в том, что ранжируемый документ может считаться релевантным запросу даже в том случае, если сам запрос в теле документа ни разу не содержится (логическое продолжение Палеха, который делал тоже самое, только для Title).

Нейронная сеть выявляет смысловые взаимосвязи между разными словами и фразами, сохраняет их в отдельную базу. На эти взаимосвязи и опирается алгоритм при формировании ответа на конкретный запрос. В итоге ТОПовые страницы могут давать четкий ответ на вопрос пользователя, но при этом не содержать ни слова из самого запроса.

Этот факт вызывает много вопросов и домыслов со стороны вебмастеров. Как теперь оптимизировать тексты? Как распределять запросы по страницам? Стоит ли ожидать просадок позиций и трафика в ближайшее время?

Выводы делать еще рано, но склоняюсь к мнению, что в ближайшей перспективе большинство специалистов не увидят никакой разницы, потому что:

1) Для коммерческих тематик мало что поменяется

Из примеров, которые приводились в презентации и пресс-релизах, видно, что алгоритм работает прежде всего с информационными НЧ, которые отражают смысл вылетевших из головы названий и терминов:

– картина где небо закручивается (ВанГог)

– ленивая кошка из монголии (Манул)

– фильм про человека, который выращивал картошку на другой планете («Марсианин»)

Сложно представить, что пользователь будет искать по такому запросу какой-то товар, например «смартфон с логотипом надкушенное яблоко» или «транспортное средство в виде планки с двумя колесами по бокам» .

2) Изменения затрагивают в первую очередь многословные запросы

Судя по презентации, основная задача алгоритма – лучше понимать смысл уточняющих запросов. Как правило, это запросы, состоящие из 5 и более слов. Нужно ли использовать нейронные сети, чтобы понять смысл запросов типа «снять квартиру в Москве », «рулонные шторы в спальню » или «такси в аэропорт »? Думаю, вопрос риторический.

Как определить, повлиял ли «Королев» на мои сайты?

Судя по количеству задач на проверку позиций в SEOlib , сегодня все вебмастера ринулись проверять, как сказался новый алгоритм на ранжировании их сайтов.

Согласно презентации, алгоритм был запущен раньше и уже некоторое время работает в основном поиске. Поэтому динамику нужно оценивать не за последние сутки, а за последние несколько недель.

Более того, влияние нового алгоритма неправильно диагностировать только по позициям. Если за последние несколько месяцев у вас просаживаются или скачут позиции по СЧ/НЧ, уверена на 99%, что проблема не в «Королеве» (если нужна помощь в поиске причин, отправьте нам заявку – постараемся помочь).

Как проверить? Посмотрите, изменился ли у вас трафик с Яндекса по НЧ-хвосту (см. в Я.Метрике отчет «Ключевые слова» – «Другие»). Если он значительно упал или вырос, то вы счастливый обладатель последствий «Королева».

Как оптимизировать тексты под Королев?

Для информационников, собирающих трафик по НЧ запросам, этот вопрос актуален как никогда. Но прошло очень мало времени, чтобы составлять конкретные инструкции или давать точечные рекомендации по текстам.

Пока могу дать только один совет. Если вы уже запланировали работу копирайтеров на месяцы вперед, возьмите таймаут на 2-4 недели и займитесь пересмотром ТЗ. Не можете остановить конвейер? Тогда пишите богатые на семантику тексты, чтобы повысить вероятность заполучить счастье:

«Другая важная особенность «Королёва» в том, что помимо сопоставления смысла запроса и страницы, он учитывает ещё и смысл других запросов, которым страница релевантна» . Пруфлинк

Думаю, в очень скором будущем появятся сервисы для автоматизации процесса, и эпоха кластеризаторов сменится эпохой LSI-анализаторов.

Есть основания предполагать, что со временем Яндекс будет расширять влияние «Королева» на коммерческие и короткие запросы. Наверное, этому стоит радоваться. Ведь тогда не нужно будет баллансировать между необходимостью оптимизировать текст вхождениями и риском получить Баден-Баден. Чтобы не случилось, все к лучшему.

Если ваш сайт просел в Яндексе или Google, и вы не можете установить причину – обращайтесь, постараемся помочь.