История алгоритмов Яндекса (первая часть истории)

Поисковая система Яндекс пользуется популярностью среди Россиян. Почему? Все просто — высокое качество поиска, совмещенное с удобством интерфейса. За последнее отвечают специалисты студии Артемия Лебедева, которые разрабатывают простой и удобный дизайн, согласовывают расположение элементов. Но как же быть с выдачей, кто или что формирует её? Ведь пользователям не столь важны дизайн, удобство и большое количество функций, если само качество поиска будет плохим. Главная цель — найти информацию и если она не выполнена, значит человек перейдет к другим методам и инструментам достижения поставленной задачи. Так система Рамблер, ранее соперничающая с Яндексом, растеряла своих «поклонников» из-за чрезмерного внимания к сопутствующим компонентам (почта, новости и прочее), в ущерб развитию качества.

Алгоритм поиска яндекс

История важна в любом деле. Мы помним Великую Отечественную Войну и не допускаем проявления фашизма, уважаем ветеранов и гордимся их подвигами. Мы знаем, какие бывают последствия голода и холода. Именно знания помогают не допускать ошибок и заранее предвидеть возможные угрозы. Тактика ведения боя, сложенная многолетними сражениями, сформировала принципы обороны и нападения. В SEO та же война, война за позиции в ТОПе. Тут идут в действие все методы, ведь результат не только победа, но и признание и деньги. Именно поэтому просто необходимо знать как совершенствовалась система, что было сделано в процессе. Вы будете владеть основами, которые укажут верное направление. Вооружен знаниями — значит защищен.

Первые упоминания о версиях Яндекса

Первое известие о поисковом алгоритме системы датируется 02.07.2007 под названием «Версия 7». До этого момента конечно же были сделаны важные доработки, которые безусловно изменяли выдачу, но вот называть и тем более фиксировать их никто даже и не собирался. О семерке неизвестно почти ничего — она послужила только лишь началом фиксирования изменений. В последующем 20.12.2007 вышла версия 8, апгрейд которой под кодом 8sp появился спустя уже несколько недель. В восьмёрке был обновлен алгоритм ранжирования, улучшен поиск по «витальным ответам»(т.е. если набрать tekseo, то будет показан сайт оптимизатора, а не расширен поиск по SEO тематики), добавлены новые факторы (более лучшее изучение ссылки, страницы, сайта и типа запроса), а также повышено качество определения ссылочного веса (различие спамной гиперссылки от качественной стало яснее проявляться). Нам не так интересны данные редакции, да и информации на них очень мало. Ниже мы рассмотрим действительно стоящие, и главное полные превосходных усовершенствований алгоритмы.

Магадан, технология «Прюнинг»

17.01.2008 разработчики Yandex решили начать игру в города. Отныне все последующие редакции будут названы в честь Российских городов, каждый из которых будет начинаться с последней буквы предыдущей версии. Были внесены значительные изменения в сам механизм обработки информации, среди которых:
— Слова в URL адресе приобрели вес (ссылка tekseo.su/zametki/seo-tekhnologii.php значимее tekseo.su/48978/46541.php);
— Фамилии и географические адреса теперь знакомы и не требуют расшифровки (по фамилии Жуков не производится поиск жуков и прочих насекомых, а Севастополь — это город, а не репер Сева в тополе);
— Старославянские слова теперь знакомы и анализируемы. Дореволюционная тематика влилась в поисковую базу;
— Внедрен параллельный поиск;
— Факторы ранжирования дополнились сотней-другой новых показателей;
— Влились в поисковую базу зарубежные ресурсы. Это привело к резкой конкуренции по иностранных фразам;
— Молодые доменные имена перестали быть изгоями. ПС начала относиться к ним с большим доверием и уважением;
— В ранжировании появилось намного большее количество внутренних страниц;
— Страницы и ссылки теперь классифицируются по типам;
— Внедренная технология алгоритма «Прюнинг» увеличила почти в двое качество и скорость расшифровки информационного потока;
— Внедрены в действие правила:
— — измененные слова определяются как равные (оптимизация страницы = оптимизировать страницу);
— — понимание транслитерации (SEO = СЕО);
— — Расшифровка аббревиатур (SEO = search engine optimization);
— знак плюса прикрепился к словам (программирование на языке С+);
— Улучшен анализ сложных и удаленных друг от друга ключевых слов.

Магадан 2.0

Мелкие доработки не стоит сильно афишировать — так решили 02.07.2008 г. оптимизаторы поискового алгоритма Яндекс и выпустили версию 2.0. Было уделено внимание уникальности и неповторимости текста. Начали наказывать за копипасты. Первая попытка классификации запросов. Порнографические ресурсы попали под особый контроль. Также поисковая выдача стала различна, в зависимости от направленности целей пользователя — выделились цели покупки, продажи и нахождения информации.

Находка

Не знаю, чем руководствовались сотрудники компании при выборе города на букву «Н», но на смену 11.09.2008 пришёл не Новосибирск, не Новгород и даже не Нижневартовск, а ранее неизвестная для меня Находка. И нашли они в ней следующие изменения:
— Еще более лояльное отношение к молодым и неокрепшим доменам;
— Ранжирование различно в единственном (SEO оптимизация запроса) и множественном (SEO оптимизации запросов) числе;
— Переработано машинное обучение:
— — Коммерческие проекты стали ниже ранжироваться;
— — Внутренние страницы все больше стали светиться в ТОПах;
— — Учитывает не только уникальность текста, но и точность и тошнотность ключевых фраз;
— Словарь связей многократно расширен и дополнен, раздельно написанный слова стали одинаково учитываться с равными по смыслу (роза ветров = розаветров)
— Википедия появилась на высоких позициях, при малой выдачи, либо неполной её соответствии по искомой фразе;
— Лучшее ранжирование по запросам, содержащим союзы, предлоги и прочие вспомогательные компоненты русского языка.

Арзамас (Анадырь)

То ли не определились 10.04.2009г. господа с городом, то ли оптимизаторы в интернете дали прозвище, но у данного поискового алгоритма история знает двойное название. Стоит заметить, что предпочтение все же отдаётся Арзамасу.
— Появилась собственная выдача для городов Москва, Санкт-Петербург, которая была полностью непохожа чем для России в отдельности;
— Слова омонимы (разные по значению, но одинаковые по звучанию) теперь понятны не только самому пользователю, но и Яндексу. К примеру, если вы ищите «ремонт Ленина», то в результатах окажутся сайты с информацией о ремонте памятника великому вождю, ремонте улицы, станции метро и возможно какого-либо магазина с аналогичным названием. Но стоит дополнить «ремонт улицы Ленина» и мы получим контент только по улице, т.е. фраза «Ленин» не будет расшифровываться по всем примерам;
— Дополнение выдачи картинками позволило расширить границы восприятия. Теперь графические изображения по искомым фразам разместились в самом начале ранжирования сайтов;
— Продажные ссылки утратили свою былую силу;
— Важность контента (текста, картинок) начало преобладать перед другими факторами (гиперссылки).
— Недавно зарегистрированные доменные имена не могут занимать высокие позиции. Введен возрастной показатель (чем старше, тем большее доверие со стороны ПС);
— Различная выдача по городам привела к необходимости присвоения сайту региона, который зависит от IP адреса хостинга, контактной информации на проекте, доменного имени (к примеру, domen.msk.ru принадлежит Москве), размещения в каталоге Яндекс, внешних ссылок, поведенческих факторов и прочих составляющих;
— Появившиеся подсказки об ошибках в введенных запросах поиска начали учитывать пользовательские настройки (браузера и операционной системы) при определении языка;
— Всплывающая реклама и прочие мешающие восприятию контекста элемента резко начали понижать сайт в поиске. Для этого введены специальные фильтры.

Арзамас 1.1

История данного поисковый алгоритм Яндекса произошла 17.06.2009. Была изменена формула ранжирования для России. В неизменном виде осталась технология для Екатеринбурга, Питера, Москвы.

Арзамас 1.2

17.07.2009 запомнилось выделением запросов на геозависимые и геоНЕзависимые. Разработчики решили что должны четко быть разграничены сами поисковые фразы, которые объединяют информацию общую — для всей России, и целевую — для каждого отдельно взятого региона. Это актуально ещё только для москвичей, питерцев и екатерингбурцев.

Арзамас 1.3 (+16 городов)

Прошлая версия «прошивки» помогла определиться с дальнейшими целями — выделением ещё большего количества независимых городов. 20.08.2009 к миллионикам присоединились:
— Новосибирск;
— Красноярск;
— Омск;
— Ростов-на-Дону;
— Краснодар;
— Нижний Новгород;
— Уфа;
— Пермь;
— Казань;
— Самара;
— Челябинск;
— Иркутск;
— Барнаул;
— Воронеж.
Теперь по фразе «заказать пиццу» жители увидят местные магазины и пекарни, а ездить в центр не придется через Москву 🙂

Арзамас 1.5 от 23.09.2009

Куда делась редакция 1.4 даже не спрашивайте — понятия не имею. Возможно она была не удачная и её тут же втихую заменили, а возможно она и не выжила, просуществовав только в бета версии. Так или иначе, стоит только догадываться. В данном же историческом поисковом алгоритме была изменена формула ранжирования геоНЕзависимых запросов, которая совместно с классификатором определяли принадлежность слова к тому или иному региону. К примеру «Поохотиться на уток» — тут не важно где, ведь важнее сам процесс, а вот купить ружьё все же удобнее поблизости к дому. Справедливо было замечено, что указание самого города в поисковой фразе приводило, да и приводит по сей день, к геоНЕзависимости.

Арзамас 1.5 SP от 28.09.2009

Не прошло и недели, а на свет появилась «заплатка», которая опять же улучшила региональное ранжирование всех выше обозначенных регионов, оставив без внимания лишь Москву. Но самое важное тут даже не это а то, что подключили АГС — 17, которые много порубил плохих ресурсов, его и прозвали от этого «АнгиГовноСайт». Работая как 30 миллиметровый автоматический гранатомёт (отсюда и официальное его название), всего за несколько недель выдача значительно очистилась и обновилась.

Продолжение истории алгоритмов Yandex в следующих публикациях…