Эволюция не по Дарвину: все алгоритмы Яндекса с 2007 по 2023 год

Алгоритмы — это набор формул и факторов, по которым поисковая система определяет релевантность страниц в соответствии с введенным запросом пользователя. Говоря простым языком, это совокупность определенных параметров, которые учитывает поисковик при распределении мест в выдаче на заданный запрос пользователя.

Когда я еще не была знакома с SEO, мне было интересно, как поисковик составляет рейтинг веб-страниц, как решает, какой сайт попадет в ТОП, какому место на 10-ой, 25-ой или 100-ой странице поисковой выдачи. Так вот, за это отвечают поисковые алгоритмы. У Яндекса начиналось все с того, что поисковик учитывал количество ключевых запросов и их расположение на странице. Достаточно было высчитать число ключей в текстах конкурентов и добавить больше у себя, и вы были бы на вершине выдачи. Но такая стратегия не устроила разработчиков поисковика, ведь результаты должны быть более объективными. С этого и началась активная работа над поисковыми алгоритмами.

Стоит отметить, что у каждого поисковика свои алгоритмы, и они отличаются друг от друга. Регулярно Яндекс, Google или другая система обновляет алгоритмы, совершенствует их, выпускает новые. Предлагаю воспроизвести хронологию поисковых алгоритмов Яндекса с самого первого. В нашем блоге вы уже могли познакомиться с Королевым, Палехом, Минусинском, Баден-Баденом и многими другими. В этой же статье я постараюсь кратко рассказать про все алгоритмы российской поисковой системы Яндекс по порядку с указанием названия, даты анонса и описанием смысла. Но для начала сводная таблица:

Дата выпуска	Название алгоритма
2 июля 2007 года	Версия 7
декабрь 2007- январь 2008 гг	«Версия 8» и «Восьмерка SP1»
16 мая 2008 год, 2 июля 2008 года	Магадан и Магадан 2.0
11 сентября 2008 года	Находка 7
Анонс был выпущен 10 апреля 2009 года, далее в течение года было проведено 5 обновлений алгоритма	Арзамас/Анадырь 7
17 ноября 2009 года	Снежинск 7
22 декабря 2009 года	Конаково 7
10 марта 2010 года	Конаково 1.1 (он же Снежинск 1.1)
сентябрь 2010 года	Обнинск
15 декабря 2010 года	Краснодар
17 августа 2011 года	Рейкьявик
12 декабря 2012 года	Калининград
30 мая 2013 года	Дублин
12 марта 2014 года	Без ссылок
5 июня 2014 года	Острова
1 апреля 2015 года	Объектный ответ
15 мая 2015 года	Минусинск
14 сентября 2015 года	Многорукие бандиты Яндекса
2 февраля 2016 года	Владивосток
2 ноября 2016 года	Палех
23 марта 2017 года	Баден-Баден
22 августа 2017 года	Королев
19 ноября 2018 года	Андромеда
17 декабря 2019 года	Вега
сентябрь 2020	YATI
10 июня 2021	Y1
5 августа 2022	Мимикрия
Август 2023	Обновление алгоритма для определения неоригинальности контента

Таблица 1. Хронология алгоритмов Яндекса с датами выпуска

Версия 7 (2 июля 2007 года)

До этой даты про внутреннюю работу системы Яндекс было мало что известно. Нововведения появлялись постоянно: стали учитываться ссылки, поисковик научился индексировать изображения, мета-теги, PDF и RTF документы и другие форматы, появился ТИЦ, стал учитываться региональный поиск и еще много всего.

Но началом истории алгоритмов считается Версия 7, когда 2.07.2007 г. господин Садовский на специальном форуме для Вебмастеров сделал анонс, что Яндекс представил новую формулу ранжирования. Предполагалось, что по ряду запросов релевантность станет лучше.

«Версия 8» и «Восьмерка SP1» (декабрь 2007— январь 2008 гг)

Одни из самых первых алгоритмов Яндекса, после появления которых авторитетные и трастовые ресурсы получили огромное преимущество в ранжировании. Также был внедрен фильтр «Прогонов», который боролся с накруткой ссылочных факторов.

Далее Яндекс стал внедрять новые алгоритмы с периодичностью 1-2 раза в год, что интересно, названия алгоритмам присваивались по принципу игры в города. Каждому новому алгоритму разработчики давали имя города первая буква, которого была последней в названии предшествующего. Самым первым стал Магадан.

Магадан и Магадан 2.0 (16 мая 2008 год, 2 июля 2008 года)

Этот алгоритм имел особую значимость, его можно считать своего рода революцией поисковой выдачи. Выделю основные изменения:

1. Факторы ранжирования были увеличены в 2 раза.
2. Была расширена база аббревиатур, синонимов, транслитераций. Яндекс стал переводить слова, индексировать сайты на других языках и представлять в выдаче ресурсы на английском, немецком и других языках. Стали учитываться переведенные или транслитерованные адреса страниц.
3. Расширены классификаторы документов. Яндекс стал лучше различать одни типы страниц и ссылок от других.
4. Добавлены факторы, которые отслеживали контент на уникальность.
5. Добавлены факторы, классифицирующие коммерческие и геозависимые запросы. С появлением алгоритма, к примеру, пользователям из Новосибирска реже стали попадаться ресурсы из Уфы и других городов.
6. Анализ текстов и семантического ядра стал более тщательным.

С приходом Магадана выдача стала значительно чище, а вот продвигать сайты и выводить их в ТОП стало гораздо труднее.

Находка (11 сентября 2008 года)

С анонсом можно ознакомиться здесь. Основные особенности алгоритма:

1. Учет стоп-слов (знаков препинаний, местоимений, междометий и т.д.) в ключевых запросах, качество выдачи по таким поисковым запросам значительно выросло.
2. Внедрен абсолютно новый подход к машинному обучению.
3. Заметно был расширен тезаурус (словари Яндекса), к примеру, поисковик научился понимать слова, обозначающее одно и то же при слитном и раздельном написании. К примеру, «сельхоз техника» и «сельхозтехника» стало считаться равносильным запросом.

Арзамас/Анадырь (анонс был выпущен 10 апреля 2009 года, далее в течение года было проведено 5 обновлений алгоритма)

Основные изменения:

1. Снятие омонимии. Было улучшено ранжирование по запросам, имеющим несколько значений. К примеру, пользователь вводил запрос «фото львов», при этом не понятно, что именно ему требовалось фотографии животных или изображения города Львов. Яндекс усовершенствовал выдачу многозначных слов, учитывая историю других пользователей и частотность слов.
2. Стал учитываться регион пользователя, результаты выдачи у пользователей из разных городов отличались. Было определено 19 регионов, в которые не входили Москва, Санкт-Петербург и Екатеринбург.
3. Запросы стали разделяться на геозависимые и независимые от географии пользователя. Определяя зависимость запроса от его нахождения, применялась новая формула ранжирования. К примеру, если пользователь вводил «недорогое кафе», в выдаче показывались ресурсы с учетом города, если же запрос общий геонезависимый, то принципы ранжирования не менялись.

Так ресурсам был присвоен регион, который определялся исходя из IP хостинга, контактов на сайте или данных из Яндекс.Каталога.

Рис.1. Региональная формула ранжирования

Кроме того, нововведения коснулись popunder, clickunder рекламы, к которым после прихода Арзамаса поисковик стал относиться очень негативно, наличие такой рекламы отрицательно влияло на ранжирование. Также была усовершенствована формула ранжирования сайтов по запросам, которые включают много слов.

Снежинск (17 ноября 2009 года)

Алгоритм, в рамках которого впервые был запущен новый метод машинного обучения Matrixnet. Он во много раз увеличил количество факторов ранжирования, тем самым улучшив качество поиска.

Рис.2. Матрикснет

С запуском Снежинска поисковая выдача была сильно изменена. Внедрили дополнительные региональные факторы ранжирования, стали работать фильтры АГС. Кроме того, были понижены в выдаче страницы, содержащие объемные тексты с высокой плотностью ключевых запросов.

Конаково, 22 декабря 2009 года

Расширен учет геофактора — теперь региональное ранжирование стало не только для 19 крупнейших регионов, которые изначально были определены при алгоритме Арзамас, но еще и для 1250 российских городов.

Конаково 1.1 (он же Снежинск 1.1), 10 марта 2010 года

Была улучшена формула ранжирования для геонезависимых запросов. Значительный рост после запуска алгоритма Снежинск 1.1 был у информационных некоммерческих ресурсов. Выросли позиции у энциклопедий, интернет-журналов, сайтов с обзорами и прочих инфоресурсов.

Обнинск, сентябрь 2010 года

Основная цель Обнинска — улучшение ранжирования по геонезависимым запросам, которых, по данным Яндекса, до 70 % от общего количества.

Рис.3. Анонс алгоритма «Обнинск»

Основные изменения:

1. Перенастройка формулы, повышение производительности и совершенствование факторов ранжирования для геонезависимых запросов.
2. Сложность формулы ранжирования достигла 280 МБ (в сравнении с 2006 годом она составляла 0,02 килобайта, в июле 2010 года — 120 Мбайт).
3. Снижено влияние на ранжирование искусственных SEO-ссылок.
4. ыл расширен словарь транслитерации, улучшилось качество выдачи на запросы, введенные на английском языке.
5. Появилась возможность определять авторство текстов.

Краснодар (15 декабря 2010 года)

Главным внедрением алгоритма стала технология «Спектр», которая могла классифицировать запросы под разные потребности и разделять на разные категории. Всего было выделено 60 категорий.

Рис.4 Технология «Спектр»

Так, например, по запросу пользователя «Наполеон» нельзя было понять, что он хочет найти рецепт торта или узнать информацию о великом французском полководце. Исходя из истории других пользователей, поисковик определял, что 70 процентов искали биографию и все, что касается Наполеона Бонапарта; 30 процентов — рецепты торта. Поэтому в результатах выдачи выдавалось 7 страниц о полководце Наполеоне и 3 о приготовлении тортов.

Среди основных нововведений:

1. Распределение запросов по категориям (товары, фильмы, поэты, города и пр.).
2. Улучшение ранжирования по поисковым запросам, зависимым от региона.
3. Впервые Яндекс проиндексировал соцсеть Вконтакте.
4. Внедрение расширенных сниппетов для определенных видов организаций.

Рейкьявик, 17 августа 2011 г

Первый шаг к персонализированной выдаче. Основным новшеством стал учет языковых предпочтений пользователей. Так, поисковая система стала изучать, что чаще выбирает пользователь при вводе запроса на латинском, страницы на английском или же отечественные сайты. Если ранее он предпочитал в основном англоязычные ресурсы в сравнение с русским контентом, то в будущем система стала выдавать ему такие сайты чаще.

Дополнительные нововведения в Рейкьявике:

1. Появилась новая формула для поисковых запросов с опечатками, появилась выдача по запросам с исправлением и в неизменном варианте с опечаткой.
2. В Яндекс.Вебмастере был запущен инструмент, позволяющий закрепить права на авторство текстов. В нем можно было сразу добавить свой текст и указать, что именно ваш ресурс является первоисточником.
3. Появилась возможность добавления информации об организации в Яндекс.Справочник
4. Появились колдунщики (математический, онлайн-игр).

Калининград, 12 декабря 2012 года

Глобальные перемены в поиске, значительная персонализация выдачи для поисковых подсказок и запросов.

Поисковая система стала учитывать историю и интересы пользователя и выдавать предпочтительные для пользователя варианты как в подсказках, так и в результатах поиска. Так, например, при вводе запроса «Гарри Поттер», любителям кино — предлагались фильмы о Гарри Поттере, а вот тем, кто любит читать — книги Джоан Роулинг.

Рис.5. Персонализация выдачи по запросу «Сталкер»

Такой подход значительно усложнил работу оптимизаторов, ведь выдача стала уникальной для каждого пользователя. Теперь в продвижении начали учитываться многие факторы: ссылочный профиль, контент, оптимизация под ключевые запросы, дизайн и юзабилити ресурса, работа с социальными платформами.

Дублин, 30 мая 2013 года

Разработчики Яндекса не остановили работу над совершенствованием персонализации выдачи, и если при Калининграде учитывались долгосрочные интересы пользователей, то после внедрения Дублина система стала учитывать его предпочтения в режиме реального времени. Т.е. выдача формировалась на основе текущей сессии, исходя из сиюминутных поисковых запросов.

Рис.6. Учет сиюминутных запросов пользователей

Далее игра в «Города» Яндексом прекращается, и алгоритмам присваиваются названия без определенной последовательности, хотя наименования населенных пунктов еще встречаются.

Без ссылок, 12 марта 2014 года

Заложен фундамент по отмене ссылочного продвижения. Ряд ссылочных факторов перестал учитываться для определенных запросов в Москве. Пока алгоритм задел только ресурсы, работающие в области недвижимости, туризма, электроники и бытовой техники.

Острова, 5 июня 2014 года

Был обновлен дизайн поисковой выдачи, появились так называемые «острова». Они представляли собой интерактивные ответы, появляющиеся прямо на странице результатов выдачи — пользователь мог воспользоваться ими без перехода на сам сайт. С помощью островных сервисов можно было узнать прогноз погоды, найти авиабилеты, узнать курс валют и не только.

Позже инструмент был признан неуспешным и закрыт. Сейчас же «острова» действуют для сервисов самого Яндекса.

Рис.7. Пример «острова» в поисковой выдаче Яндекса

Объектный ответ, 1 апреля 2015 года

Снова изменения пришлись на дизайн страницы выдачи. Справа от основных результатов по запросу стала показываться карточка (блок) с информацией о запрашиваемом объекте. Яндекс сформировал собственную базу, в которой хранится свыше нескольких десятков миллионов объектных карточек.

Рис.8. Объектный ответ в поисковой выдаче Яндекса

Минусинск, 15 мая 2015 года

Пессимизация сайтов с большим количеством SEO-ссылок с некачественной ссылочной массой. После запуска данного алгоритма многие сайты, занимающие высокие позиции в поиске, значительно «просели», был наложен фильтр, который владельцы сайтов могли снять путем удаления ссылок, но после снятия фильтра редко у кого получалось восстановить прежние позиции.

Рис.9. Падение трафика после наложения фильтры Минусинск

После запуска Минусинска SEO-отрасль подверглась большим изменениям. Биржи SEO-ссылок практически остались без работы. Теперь в продвижении нужно было делать упор на внутреннюю оптимизацию (тех.параметры, качество контента, дизайн, юзабилити и пр.). Что касается ссылок, то они по-прежнему учитываются в продвижении, но речь идет исключительно о естественных ссылках.

Покупные — табу, которое приведет к очень негативным последствиям со стороны Яндекса. К естественным ссылкам стоит относить ссылки с ресурсов, схожих по тематике, путем размещения статей, ссылки с каталогов сайтов, с отзовиков, блогов, форумов и т.д.

О том, какие ссылки являются естественными и безопасными для Минусинска, мы уже рассказывали в одной из наших статей.

Многорукие бандиты Яндекса, 14 сентября 2015 года

Экспериментальный алгоритм, в рамках которого была проведена рандомизация поисковой выдачи. Так в ТОП попадали сайты, которые ранее были на низких позициях, к трастовым ресурсам, занимавшим первые позиции, подмешивались сайты-новички. Стратегия была введена с целью анализа поведенческих особенностей.

Владивосток, 2 февраля 2016 года

Доля мобильного трафика стала значительно расти, пользователей, которые искали информацию через планшеты, смартфоны или другие девайсы, становилось с каждым днем все больше. Яндекс запустил алгоритм, выявляющий сайты на мобилопригодность. В анонсе говорилось, что теперь адаптация ресурса под мобильную выдачу стала еще одним важным фактором в ранжировании. Кстати, об алгоритме Владивосток мы тоже упоминали в своем блоге.

Рис.10. Проверка сайта на адаптацию под мобильные устройства в Яндексе

Палех, 2 ноября 2016 года

После внедрения алгоритма Яндекс научился понимать сложные запросы пользователей. При этом поиск стал проводиться не формально по словам, входящих в состав запроса, а по смыслу запроса и заголовка (Title) страницы. Т.е. теперь Яндекс мог находить нужные ответы на запрос пользователя, даже если на странице совсем не содержалось соответствующих ключевых слов. Теоретически понять немного трудно, попробую привести пример.

Допустим, вы введете запрос «фильм про Джека Воробья», поисковая система по смыслу найдет соответствующие результаты:

Рис.11. Пример результата выдачи при Палехе

Более развернуто мы уже рассказывали о Палехе.

Именно после запуска Палеха многие оптимизаторы поняли, что акцент нужно в первую очередь делать не на вхождении ключевых запросов, а на смысловую и техническую уникальность текста. Чтобы не роботы видели оптимизированные тексты, а пользователи с интересом изучали контент.

Баден-Баден, 23 марта 2017 года

Алгоритм Яндекса, запущенный в целях борьбы с переоптимизированным контентом. Поисковик стал понижать страницы или полностью сайты, в которых обнаруживал тексты с избытком ключевых слов, со скрытым контентом, мелким шрифтом. Такой контент поисковая система не считала полезным для пользователей, а написанным только для влияния на ранжирование. О том, как не попасть под Баден-Баден, как правильно писать тексты на сайт. мы писали много раз. Чтобы понять основную суть алгоритма, рекомендую к прочтению одну из таких статей.

Рис.12. Пример переоптимизированного текста, представленный Яндексом

Королев, 22 августа 2017 года

Усовершенствованный алгоритм Палеха, который научился давать ответы на сложные и многозначные запросы. Ориентируясь на смысловую составляющую запроса, поисковик стал сопоставлять не только заголовки, как это было при его предшественнике Палехе, но и в целом содержимое всей страницы. Система искусственного интеллекта стала учитывать поисковую статистику, мнение ассесоров и толокеров, а также оценки самих пользователей.

Допустим, вы введете запрос «фильм, в котором все кладут телефоны на стол». Вуаля — Яндекс сразу же выдает название фильма, при этом на страницах с описанием нет ключевых фраз «фильм, в котором все кладут телефоны на стол». Всё просто, искусственный интеллект. Так можно задавать сложные запросы, уточнять то, что-то в формате разговорной речи.

Рис.13. Применение Королева при вводе сложного запроса

Подробная статья о Королеве в нашем блоге, в ней мы рассказывали, как стал работать алгоритм, пояснили разницу между Королевым и Палехом, привели примеры.

Андромеда, 19 ноября 2018 года

Глобальный алгоритм от Яндекса, который внедрил множество интересных и весьма нужных нововведений. Был запущен новый алгоритм ранжирования Яндекс Proxima. Большая часть изменений коснулась колдунщиков и Яндекс-сервисов.

Итак, изучим основные модернизации:

1. Появились специальные значки качества, которые стали влиять на место в поисковой выдаче.

   Рис.14. Примеры знаков качества в Яндексе

2. Улучшился сервис быстрых ответов Яндекса, который позволяет оперативно решать нужные задачи пользователей.

   Рис. 15. Пример быстрых ответов

3. Появление Яндекс.Коллекций — инструмента, позволяющего сохранять в одном место все необходимое пользователю.

Это лишь краткий обзор алгоритма Андромеда, с более подробным можно ознакомиться в нашей статье.

Вега, 17 декабря 2019 года

Яндекс Вега – важное нововведение, касающееся пользовательских запросов, в рамках которого произошли следующие изменения:

1. Если ранее по алгоритму Палех поисковик мог определять запросы по словам и по смыслу, то теперь при Веге будут выявляться близкие по смыслу страницы. Поисковая выдача формируется на смысловых кластерах.
2. Внедрена технология пререндеринга SERP по запросу, что ускорит выдачу результатов поиска.
3. Добавлена экспертность в ассесорские оценки с целью улучшения выдачи по тематикам.
4. Улучшена гиперлокальность. Теперь результаты поиска будут формироваться не только на уровне города, но и микрорайона.

Yati, сентябрь 2020 года

Новая технология оценки текстов от Яндекс – YATI (Yet Another Transformer with Improvements), в основу которой легли алгоритмы «Палех» и «Королев». Более подробно о взаимосвязи с предшественниками можно ознакомиться в статье.

YATI – «архитектура нейросетей-трансформеров». Главная задача алгоритма – повысить точность выдачи. Теперь поисковые роботы учитывают до 10 предложений целиком, а именно:

1. Смысл заголовков
2. Фрагменты текста
3. Структуру текста
4. Контекст

Это все сопоставляется со смыслом запроса пользователя и отдается предпочтение наиболее релевантному сайту.

Сейчас необходимо уделить внимание семантическому ядру и качеству текста на сайте, поскольку неинтересные для поиска страницы будут снижать релевантность действительно важных страниц сайта.

В результате нововведений алгоритмы стали лучше сопоставлять смысловую связь между запросами пользователей и текстовыми документами. По словам специалистов Яндекс, технология показала рекордный уровень в качестве поиска.

Y1, 10 июня 2021 года

Завершает хронологию поисковых алгоритмов – Y1. Это большое обновление поиска (+2000 улучшений) с использованием технологий YaTI и YaLM на основе нейросетей-трансформеров. Главная задача обновления – сэкономить время пользователя.

Основные изменения:
Яндекс порадовал пользователей существенным апгрейдом, выкатив обновленные функции.

1. Быстрые ответы – теперь имеют более широкую направленность, да и самих ответов в поисковой выдаче стало больше.
2. Поиск фрагментов видео – основная суть в том, что поисковая система анализирует видео и включает видео ролик с момента, где начинается ответ на запрос пользователя.
3. Оценка по отзывам – алгоритмы самостоятельно анализируют отзывы, а пользователю сразу показывают визуальную шкалу оценок.
4. Поиск с помощью камеры – умная камера Яндекс, которая распознает различные объекты

Мы уже развернуто писали об изменениях в выдаче после внедрения Y1. Самый важный вывод – стандартных работ по SEO уже недостаточно, для продвижения необходимо тщательно прорабатывать контент на сайте, а также применять комплексный подход (омниканальность).

Мимикрия, 5 августа 2022 года

Пока еще мало известно о новом алгоритме «Мимикрия», но суть ее проста: Яндекс понижает позиции тех сайтов, кто копирует текстовый или графический контент с известных ресурсов.

Оценка происходит по нескольким критериям:

• текстовый контент,
• оптимизация страниц под навигационные запросы
• и, естественно, визуальная составляющая

Если ваш сайт использует логотип, фавикон, сниппет и фирменный стиль одного из популярных сайтов, он в зоне риска. Подробнее о новом алгоритме читайте в этой статье.

Обновление алгоритма для определения неоригинальности контента, август 2023 год

Разработчики Яндекса подтвердили, что в конце лета доработали алгоритм, который определяет заимствованный и неоригинальный контент на сайтах. Он будет занижать позиции тех сайтов, которые используют скопированную или переписанную информацию с других ресурсов, не представляющую ценность для пользователей.

Цитирование и заимствование контента возможно, но оно не должно составлять основной контент сайта.

Яндекс также отметил, какое заимствование считает приемлемым:

• авторские (предоставленные производителем, создателем, организатором) описания товаров, услуг, событий, организаций, компьютерных программ, инструкций к применению и руководств по эксплуатации;
• тексты литературных и фольклорных произведений, песен, анекдотов, цитат и афоризмов;
• тексты законов, указов и других нормативных актов, стандартов, шаблонов документов;
• цитирование своего текста из других источников (блогов, социальных сетей), пресс-релизов, опубликованных в других источниках.

Для устранения нарушения необходимо удалить неоригинальный контент и уведомить об этом разработчиков Яндекса в Вебмастере. Обычно наказание снимается в течение 30 дней после внесенных изменений.

Вывод

В этой статье собрана вся хронология алгоритмов поисковой системы. Зачем я это сделала? Чтобы вы понимали, как ведется работа поисковика. А самое главное, чтобы вы знали, как правильно продвигать свои сайты, на что смотрит поисковик, что появилось нового, а что уже в далеком прошлом. Теперь вы знаете, что написать оптимизированные тексты и «навешать» внешних ссылок совсем недостаточно, а скорее и вовсе во вред. Если же вникать в процесс продвижения вам совсем некогда, а попасть в ТОП выдачи все же хочется, обращайтесь к нашим специалистам.