Aлгоритм Google - эволюция с с 1998 по 2022

Крупнейший поисковик Google способен эффективно обработать информацию основных форматов (Word, PDF, Exel и пр.). Чтобы поисковая выдача была максимально качественной, каждый год Google вносит в свои алгоритмы поиска более полутысячи обновлений. Львиная доля этих изменений достаточно незначительна. Но где-то 5-6 раз в год запускаются нововведения существенно меняющие выдачу. В этой статье мы рассмотрим значимые изменения поисковых алгоритмов Google с самого основания поисковика в 1998 году.

Алгоритмы поисковой выдачи Google

1998 - запуск Google

• Алгоритм ранжирования (ссылочный) запущен впервые. Именно в тот период изобретен Page Rank. Его алгоритм был основан на передаче ссылочного веса. То есть чем больше ресурсов ссылается на страницу, тем лучше PR и выше место в поисковой выдаче. А также, чем выше PR страниц, которые ссылаются на сайт, тем больший вес передают ссылки. 4 сентября 2001 года алгоритм был запатентован компанией Google Inc.

2000 - Google тулбар

• Google запустил TBPR (Toolbar PageRank). Именно тогда впервые пошла речь об оптимизации под поисковики, именуемой нынче SEO.

2001 год - Хилтоп (Hilltop)

• Компания Google представляет широкой общественности новую разработку – алгоритм под названием Hilltop, который позволяет наиболее точно рассчитать уровень PR. Данный алгоритм читает географию и степень новизны того или иного документа. После этого Google начинает оповещать веб-мастеров о том, чтобы они не оставляли ссылки на подозрительных веб-сайтах и «линко-помойках».
• При расчете Page Rank учитывает динамический ранг документа. Тогда же Google разделил для коммерческих и некоммерческих запросов результаты выдачи.

2002 -  Впервые зафиксирован ап

• Первый апдейт Google. Изменения незначительные, но отличались от привычного апа Page Rank.

2003 год

• Бостон (Boston) Первый ап, который имел официальное название. Небольшие изменения алгоритма, старт апов ежемесячно.
• Кассандра (Cassandra) - Базовое влияние ссылок, скрытые ссылки и тексты наносят ресурсам вред.
• Доминик (Dominic) - Google по-другому начинает учитывать и оценивать обратные ссылки. Впервые были замечены боты под названием Freshbot и Deepcrawler.
• Эсмеральда (Esmerelda) - В последний раз происходит ежемесячный ап выдачи. С этого момента запускается индикатор изменений, которые уже ожидались.
• Фриц (Fritz) - С этого момента выдача начинает обновляться ежедневно, а не ежемесячно.
• Сопли (известно как Supplemental Index) - С этого периода Google начинает индексировать больше документов.
• Флорида (Florida) - Постепенно отмирают старые приемы SEO. Очень много сайтов теряют свои выгодные позиции. Заниматься продвижением становится значительно сложнее. Этот алгоритм изменяет выдачу, удалив перенасыщенные ключевыми словами страницы, а также страницы с неуникальным контентом и сайты с покупными внешними ссылками.

2004 год

• Остин (Austin) - Выходит дополнение к знаменитой Флориде. Google продолжает борьбу с невидимым текстом и переспамом ключевиков.
• Бренди (Brandy) - Масса изменений. Google начинает различать синонимы. Анализ ключевых слов проводится уже по-другому.

2005 год

• Nofollow - Google запустил параметр nofollow (и это совместно с Microsoft и Yahoo). Основная цель – борьба со спамом, но также он оказал большое влияние на ссылки.
• Аллегра (Allegra) - Не совсем понятные изменения в привычном ранжировании. Предполагалось, что Google наказывал за сомнительные (возможно, покупные) ссылки.
• Бурбон (Bourbon) - Говорили, что Бурбон затронул дублированный контент (то есть произошло противостояние между www и без www). Но особо нововведений так никто и не ощутил.
• Карты сайтов в формате XML - Карты сайтов HTML заменили на формат XML. Это разрешило веб-мастерам ускорять индексацию, благодаря вскармливанию карт через панель веб-мастера.
• Персонализированный поиск - Google начал использовать историю поисковых запросов с учетом персональных предпочтений. Небольшой эффект был, однако Google решил продолжить использование истории для приложений.
• Гиллиган (Gilligan) - Серьезных изменений не было – так заявили в Google. Выдача по-прежнему обновляется ежедневно, а вот тулбарный PR – раз в квартал.
• Места и карты (Google Local/Maps) - Нововведение затронуло региональное SEO. Вся информация с карт соединены в LBC.
• Джаггер (Jagger) - Цель обновления - ссылочные фермы, взаимные, покупные и сомнительные ссылки.
• Большой папочка (или Big Daddy) - Обновились технические основы: канонизация, редирект 301/302 и прочее.

2006 год

• Сопли (опять) - Теперь удалены изменения в фильтре страниц. Очень похоже на штраф, однако в Google это не подтвердили.
• Ложная тревога - Очень сильно сдвинулись позиции. Хотя сотрудники Google уверяют, что изменений никаких нет.

2006 год

• Austin - Этот алгоритм начинает учитывать трастовость ресурса и значительно понижает в выдаче менее трастовые ресурсы. После этого молодые сайты, которые не успели набрать траст, не могут попасть в ТОП-5.

2007 год

• Обновление (ап) всемирного поиска - Очень неординарное обновление. Google начал интегрировать новости, видео, фотографии и прочее, изменив формат.
• Баффи (Buffy) - Небольшие изменения при апе.

2008 год

• Дьюи (Dewey) - Сильные колебания в марте и начале апреля. Интернетом ходили упорные слухи, что Google пытается увеличить свое влияние.
• Появление в поиске выпадающего меню - Впервые появилось выпадающее меню, задача которого - подсказывать пользователю поисковый запрос.

2009 год

• Винс (Vince) - Крупные бренды получили большое преимущество (по наблюдениям оптимизаторов). А Каттс уверял, что изменения совсем незначительные.
• Rel – canonical: тег получил новую трактовку - Теперь канонические теги получили поддержку. Об этом сообщили Google, Yahoo и Microsoft. Разрешило веб-мастерам посылать роботам канонические сигналы.
• Превью Кофеина (Caffeine) - Google сообщил о планирующемся изменении в инфраструктуре. Из новшеств – формирование выдачи в реальном времени, расширенный индекс, скорость сканирования и индексация. С этого момента контент и частота обновления веб-ресурса становятся наиболее значимыми. Внутренняя оптимизация (т.е. внутренняя перелинковка и удобство пользования) повышает доверие Google к сайту. Вводятся санкции за спам и технические проблемы. Так, сайт, который долго грузится и содержит битые ссылки, может быть понижен в выдаче.
• Поиск в реальном времени - Отныне поиск в условиях реального времени перестал быть фантазией: происходит очень быстрая индексация, появляется Твиттер, новости – и все это объединено в общую ленту. Обновляется она уже прямо здесь и сейчас.

2010 год

• Google Places (обновление) - Еще в 2009-м Места (Places) были частью Карт Google. Однако для регионов теперь - после запуска в апреле 2010 - появились дополнительные возможности.
• Апдейт May Day - Изменен алгоритм, который влиял на запросы с большим количеством слов (длинный хвост).
• Кофеин (Caffeine) - Это обновление значительно повысило скорость поиска Google - индексация и сканирование проходят на новом уровне.
• Апдейт брендов - Один из очень необычных апов Google. Теперь в выдаче может быть несколько раз один домен (ранее страницы единого домена не могли размещаться на одной странице).
• Мгновенный Google - Это дополнение позволило показывать результаты выдачи в том момент, пока пользователь набирал запрос.
• Мгновенный просмотр - Иконка увеличительного стекла появилась в выдаче. Она позволяла пользователю, не переходя по ссылке, смотреть страницы разных сайтов в Google.
• Социальные сигналы - Соцсигналы из Twitter и Facebook теперь учитываются поисковиками Bing и Google при ранжировании.
• Негативные отзывы - Google стал учитывать отзывы пользователей и компаний при ранжировании после того, как New York Times разгромила на своих страницах DecorMyEyes.

2011 год

• Overstock.com - За применение черного SEO был наказан большой и известный сайт Overstock.com. Через месяц такая то же случилось и с JCPenny.
• Ап власти - Скандальные дела о переспаме получили ответ от Google – им стал этот апдейт. Он коснулся четверти всех поисковых запросов.
• Фермер Панда (Panda) - Относится к самым большим апам, который затронул 12% сайтов, которые были в выдаче Google. Изменения коснулись слабого контента, а также ферм контента. В апреле пожаловало и в Европу.
• Кнопка +1 - Google презентовал свою кнопку +1, что стало своеобразным ответом соревнованию между Facebook и Твиттер. Отныне с ее помощью пользователи способны влиять на поисковую выдачу.
• Панда, версия 2.0 - Все запросы на английском языке затронул этот новый ап. Теперь учитываются новые факторы – такие, как блокировка сайтов через Хром или через поиск. По сути Панда - это «мусорщик» собственной выдачи Google. Алгоритм обязан очистить выдачу от дорвеев, сателлитов, сайтов только для размещения рекламы и ссылок, а также от сайтов с не уникальным содержанием. Учитываются ошибки в тексте (стилистика, грамматика, орфография), соответствие тегов и мета-тегов (title, h1 и пр.) страницы к ее содержимому, перенасыщение контента ключевыми словами.
• Панда 2.1 - Не очень значимые обновления в Панде.
• Schema.org - Yahoo, Google и Microsoft представили веб-мастерам набор новых HTML-тегов. Именно они привели к тому, что поиск обогатился новыми результатами.
• Панда 2.2 - Это новое обновление сделано вне реального времени и отдельно от главного индекса.
• Google + - Поисковик Google запустил собственную социальную сеть. Всего за 14 дней в ней зарегистрировалось более 10 000 000 пользователей.
• Панда 2.3 - Ап Панды, как считали некоторые веб-мастера.
• Панда 2.4 - Панда стала международной. Теперь она не затрагивает только языки Японии, Кореи и Китая. 6-9% запросов в мире подверглись изменениям.
• Расширенные ссылки - Google сделал обновление для запросов, связанных с брендами.
• Пагинация - Для улучшения борьбы с дублирующим контентом Google представил два новых параметра: rel=prev и rel=next. Улучшены страницы «Показать все» и автоматическая канонизация.
• 516 - Эрик Шмидт - гендиректор Google - сообщил, что в 2010-м году было всего 516 обновлений. Что интересно, так как протестировано более 13 000 апдейтов.
• Панда 2.5 - Еще один нечеткий ап Панды. Но некоторые сайты пожаловались на крупные потери.
• Flux (Панда слабеет) - В Твиттере Мэтт Каттс сообщил, что с этого момента Панда ослабеет на 2%.
• Шифрование запросов - Google заявил, что отныне поисковые запросы будут кодироваться (шифроваться). Веб-мастера столкнулись с проблемами при работе с популярными ключевиками.
• Свежесть (Freshness) - Google сообщил о нововведениях, которые коснутся четверти всей выдачи. Но повлияют только на свежий контент.
• 10 апов - Мэтт Каттс показал список последних десяти нововведений, чтобы, по его словам, вести открытую политику. Сроки и скрытый смысл неясны.
• Панда 3.1 - Панда продолжает слабеть, хотя обновления были. Официальная Панды 3.0 не была запущена, поэтому эту многие называют 3.1.
• Декабрьская 10 - Вторая часть 10-ти обновлений. Затронули припаркованные домены, поиск по блогам, фотографиям, изображениям и пр. Сроки неясны.

2012 год

• Поиск и ваш мир - Большие изменения, на формирование человекозависимых результатов поиска. Информация из соц. сетей добавлена в выдачу. Наконец-то появились кнопки для отмены выдачи на основе персональных предпочтений.
• Панда 3.2 - Google подтвердил обновление данных алгоритма Panda по борьбе с web-спамом, однако особых изменений в его работе замечено не было.
• Page Layout Algorythm - Также известен, как «Baby Panda» или «Top Heavy». Алгоритм проводит анализ полезности контента сайта на первом экране (без прокрутки). Сайты, содержащие обильную рекламу на первом экране стали ранжироваться ниже.
• Штраф за размещение рекламы - Отныне Google наказывает за изобилие рекламы в самой верхней части сайтов. Говорили, что почти также работает и Панда.
• Январская 30 - Представлен список из 30-ти пунктов новых изменений, например, расширенные сниппеты, релевантные страницы.
• Панда 3.3 - Очередной ап Панды. Google обновил базу данных, вследствие чего алгоритм стал быстрореагирующим и более точным.
• Венеция (Venice) - Google стал учитывать региональность пользователей для формирования естественной выдачи. Пользователям, находящимся в разных регионах стали выдаваться разные результаты в ленте поисковой выдачи.
• Февральская 40 - Новый список из 40 изменений от Google, к примеру, обновление Google bar, улучшение сниппетов для видео каналов и пр.
• Панда 3.4 - Данный апдейт, основной целью которого является понижение позиций сайта с низким уровнем контента, отразился на 1.6% поисковых запросов, хотя принцип индексирования остался тем же.
• Мартовская 50 - Очередная порция обновлений из 50 изменений, в которые вошло также улучшение релевантности поиска по изображениям, улучшение подхода к индексации символов, запуск расширенных ссылок сайта в мобильном поиске и пр.
• Пингвин (Penguin) - Стартовал новый алгоритм, затронувший 3.1% поисковых запросов, направленный на борьбу с поисковым спамом, способный учитывать как внешние, так  и внутренние факторы. Большинство сайтов, использующих спам-методы были понижены в поиске Google или удалены из него. Также «Penguin» наделён способностью анализировать количество/качество/скорость изменения ссылочной массы.
• Апрельская 52 - Поисковик начинает учитывать данные предыдущих запросов пользователя для формирования выдачи. Индекс поисковой системы увеличился на 15%, улучшился поиск по регионам, изменилось формирование сниппета. И это лишь немногие из 52х апрельских изменений.
• Граф Знаний (Knowledge Graph) - Отныне вступает в силу алгоритм, подразумевающий использование базы знаний для улучшения результатов выдачи с использованием семантического поиска информации из разных источников.
• Пингвин 1.1 - Апдейт «Пингвина», который после анонсирования  заставил волноваться многих оптимизаторов, однако был незначительным. Обновление данных затронуло всего 0,1% поисковых запросов.
• Майская 39 - Google подвёл итоги своей деятельности в мае и предоставил 39 изменений. К примеру, поиск и ранжирование нового контента, успешная работа над усовершенствованием системы усечённых заголовков и т.д.
• Панда 3.7 - Это обновление «Панды» затронуло владельцев веб-сайтов, попавших под «Панду» более ранних версий. Изменения в выдаче также были замечены посетителями различных  поисковых форумов. В среднем было затронуто около 1% запросов.
• Панда 3.9 - Очередное обновление данного алгоритма, направленного на удаление из выдачи сайтов, содержащих контент низкого качества, как и предыдущие две версии он затронул около 1% запросов.
• Июньская/Июльская 86 - Двухмесячное молчание от Google вылилось в 86 изменений. К их числу относится кэширование HTML5 для мобильных устройств, улучшение релевантности выдачи в ТОПе, улучшение обработки «длинного хвоста» запросов, масштабное обновление алгоритма Freshness и т.д.
• DMCA Penalty (Pirate) - С этого момента Google наказывает веб-сайты за использование контента, нарушающего авторские права.
• Панда 3.9.1/3.9.2 - Анонсированные и сравнительно небольшие апы алгоритма Panda с обновлением базы данных, которые затронули от 0.7% до 1% поисковых запросов.
• Панда 4.0 - После этого обновления поисковый алгоритм стал более совершенным, изменился подход к обнаружению «некачественных» сайтов, изменился алгоритм ранжирование англоязычной выдачи. После апдейта стало известно, что выдача, которая была затронута «Пандой» для разных стран имела разные показатели. К примеру, англоязычная изменилась на 7.5%.
• Августовская/Сентябрьская 65 - Запоздалые ежемесячные обновления алгоритмов поиска от Google в этот раз «вылились» в 65 пунктов, среди которых есть возможность более точного авто заполнения в поисковых подсказках, усовершенствование сниппетов, создание более релевантных title страницы, обновление «Knowledge Graph» и т.д.
• Панда 21/22 - Google обновил базу данных поискового алгоритма. Внесённые изменения затронули от 1 до 1.1% поисковых запросов.
• Панда 23 - Серьёзных изменений при 23м обновлении алгоритма не было – так заявили в Google. Однако ап затронул 1.3% англоязычных запросов.

2013 год

• Панда 24/25 - 24е и 25 обновление алгоритма затронуло от 1 до 1.2% поисковых запросов в Google.
• Пингвин 2.0 - Ап затронул запросы на разных языках, включая 2.3% англоязычных. Благодаря новой технологии «Пингвин» лучше стал находить веб-спам, причём, чем его больше на сайте – тем ниже ранжируется веб-ресурс.
• Колибри - Произошло «очеловечивание» поиска. Отныне Google выдаёт более релевантные результаты, формируя выдачу, не опираясь на ключевые слова, а пытаясь найти синонимы поискового запроса.
• Пингвин 2.1 - Как и прежде Google реагирует на подозрительные сайты и анкор-листы. Данное обновление повлияло на ранее попадавшие под алгоритм сайты и затронуло всего 1% запросов.

2014 год

• Панда 4.0 - Наиболее серьёзное обновление поискового алгоритма, затронувшее 7.5% поисковых запросов.
• Голубь - Отныне при получении геозависимых запросов Google выдаёт наиболее информативные, локальные результаты поиска для пользователя.
• Панда 4.1 - Обновление сформировалось на основе обобщения всех жалоб и комментариев от пользователей апдейтом Panda 4.
• Пингвин 3.0 - Данный ап от Google в очередной раз дал понять, что поисковик не приветствует веб-спам. Многие сайты просели в выдаче. В свою очередь англоязычные запросы по данным MOZ были затронуты менее чем на 1%.

2015 год

• С 21.04.15 года Google начинает мотивировать мобильный контент и запускает new алгоритм Mobilegeddon. Теперь в мобильной выдаче приоритет у сайтов имеющих адаптированную версию сайта. Появился инструмент проверки мобильной версии сайта.

2016-2017

• Google Possum - Задачи «Опоссума» – разнообразить локальную выдачу, ухудшить ранжирование спам контента – исключить отображение нескольких похожих страниц одной компании в результатах поиска. Если в соседних или даже одном здании располагается сразу несколько организаций с одинаковым родом деятельности, Google не отфильтрует одну из них.
• Сам Google в 2016 году предупреждал, а 2017 году заявлял, о необходимости перехода на протокол HTTPS и что станет помечать сайты, собирающие данные и продолжающие работать на незащищенном протоколе HTTP, что и сделал. Причем для всех сайтов, а не только собирающих данные и оплату.

2018 год

• Google Speed Update (mobile) - В качестве фактора ранжирования интернет-ресурсов выступает скорость загрузки их мобильной версии. Сайты с популярным и качественным контентом, даже если на мобильных устройствах скорость их загрузки невысокая, не понижаются в поисковой выдаче.
• Google Medic Update - В основном это обновление затронуло сайты, посвященные здоровью и медицинским вопросам, в меньшей мере – финансовые и юридические ресурсы. Благодаря внедрению «Нейронных соответствий», созданных с применением искусственного интеллекта , Google пытается «понять» связь между словами в пользовательском запросе и определить скрываемые за фразой понятия. Статьи с рерайтом и некачественным контентом опустились в поисковом выдаче, а тексты, написанные специалистами (врачами) фактически не пострадали.

2019 год

• Google Bert - Основанный на нейронных сетях алгоритм BERT интерпретирует не только содержимое введенных фраз, но и цель пользователя – пытается понять речь человека. BERT изучает смысл каждого слова, исходя из окружающих его слов. В основном он используется для длинных низкочастотных запросов.

2020 год

• Core Update - Масштабное обновление охватившее все направления, но больше всего изменения сказались на медицинских и финансовых сайтах. Обновление призвано повысить релевантность результатов поиска для пользователей, особенно в YMYL тематиках.
• Core Update - Очередное обновление основного алгоритма, официальных ответов по поводу того, что включено и что затронет обновление отсутствуют. Но при детальном рассмотрении обновления, видно влияние на ранжирование скорости хостинга, плагинов и темы сайта, а также адаптивности дизайна. Дополнительно идет упор на борьбу с дезинформирующими постами, например, на волне эпидемии коронавируса.

2021 год

• Google Passage Ranking - С обновлением passage ranking Google теперь может использовать искусственный интеллект для индексации не только страниц, но и отдельных отрывков (абзацев, предложений) с этих страниц. Это означает, что определенные отрывки могут отображаться как избранный фрагмент. Цель в том, чтобы быстро ответить на очень конкретные запросы, вместо того, чтобы заставлять пользователя изучать целевую страницу.
• «About this Result» - В обновлении “Об этом результате” от февраля 2021 года Google предоставляет дополнительный контекст для отдельных результатов поиска, чтобы пользователи могли определить, какие результаты будут для них наиболее полезными.
• 100% ориентация на мобильные устройства при индексации - С ростом мобильного трафика в 2010-х годах Google начал уделять больше внимания удобствам для мобильных, как одному из факторов ранжирования в 2015 году . Годом позже была введена индексация, ориентированная на мобильные устройства, которая относится к тому, когда Google сканирует – и, следовательно, ранжирует – страницы вашего сайта в соответствии с мобильной версией этого контента.
• Product Reviews - Целью обновления “Обзор товаров” Google за апрель 2021 года является поощрение для заполнения карточек товаров, которые не просто обобщают список продуктов, но, скорее, предоставляют подробные данные, тонкий анализ и оригинальный контент.
• MUM - Многозадачная унифицированная модель (MUM) – это модель естественного языка, которая значительно мощнее, чем BERT от октября 2019 года (представления двунаправленного кодировщика из трансформеров). MUM создан для того, чтобы “помогать вам, когда нет простого ответа”. Цель MUM – использовать контекстную информацию из разных источников, чтобы дать исчерпывающие ответы на сложные вопросы.
• Обновление ссылочного спама - Вам следует быть особенно осторожными со злоумышленниками, если ваш сайт обеспечивает взаимодействие с пользователем через комментарии, форумы и т. д.
• Page Experience - В дополнение к индексации мобильной версии сайтов, Google также представил определенный набор показателей посредством обновления опыта пользователя под названием Core Web Vitals. Это не новые показатели, а скорее новые приоритетные факторы для количественной оценки опыта пользователя страницы.
• Обновление заголовков страниц - Уже более десяти лет Google настраивает заголовки страниц в поисковой выдаче в соответствии с запросом. Но начиная с 16 августа люди начали замечать, что Google радикально меняет заголовки страниц, часто во вред. Неделю спустя Google подтвердил, что представил новую систему, которая больше не будет корректировать заголовки в соответствии с запросами, а будет лучше представлять страницу в целом.

2022 год

• Важность взаимодействия с пользователем в этом году увеличилась более чем вдвое (11% → 5%)
• Первый фактор — это постоянный выпуск интересного контента, который в 2022 году оставался на уровне 26%, что важно, учитывая большую долю пользовательского опыта. Google продолжает вознаграждать заслуживающих доверия людей, которые предоставляют высококачественную информацию, позволяя им работать в течение нескольких дней после публикации информации на основе целевых ключевых слов, которые они используют.
• Чтобы узнать код статуса новостного веб-сайта, может потребоваться более 6 месяцев, но публикация согласованного контента, который он использует для достижения этой позиции, является наиболее важным фактором в алгоритме Google.
• Ключевые слова в метатегах заголовков в нашем списке были сокращены больше, чем любой другой фактор (22% 17 17%), потому что Google увеличил автоматическое создание метатегов при определенных условиях. Это уникальный фактор, и выбор правильных ключевых слов для каждой страницы вашего веб-сайта является необходимым условием для ранжирования. Хотя это менее важно, чем в прошлом году, это все же необходимо.
• Значение Niche Expertise немного увеличилось (13% → 12%), и это показывает важность Hub and Spoke SEO, в котором страницы высокого уровня, ориентированные на ключевые слова, классифицируются на другие страницы, которые нацелены на связанные ключевые слова, связаны и связаны.
• Обратные ссылки уменьшились очень незначительно (15% → 16%), что указывает на постепенное снижение фактора, который когда-то был выше. Хотя это по-прежнему четвертый по важности фактор в алгоритме, он напоминает о времени, когда искусственный интеллект Google еще не развился для оценки качества и подлинности веб-контента и нуждался в других веб-сайтах для этого.