Google исполняется 28 лет: почему PageRank изменил интернет сильнее, чем сама поисковая строка

До Google интернет уже умел искать, но плохо понимал важность информации

В середине 1990-х интернет рос быстрее, чем развивались способы навигации по нему. Существовали каталоги сайтов и поисковые системы, которые в основном ориентировались на совпадение слов в документах. Проблема была не в отсутствии информации, а в ее количестве.

Если пользователь вводил запрос, поисковик мог найти тысячи страниц с нужными словами, но не всегда понимал, какая из них действительно полезна. Владельцы сайтов быстро научились использовать особенности таких систем: добавлять популярные ключевые слова, создавать страницы с большим количеством повторов и другими способами пытаться подняться выше в выдаче.

В своей работе «The Anatomy of a Large-Scale Hypertextual Web Search Engine» Сергей Брин и Ларри Пейдж описали именно эту проблему. Они отмечали, что обычный поиск по ключевым словам плохо справлялся с огромным количеством страниц и требовался способ использовать дополнительную структуру самого интернета. В качестве такой структуры они предложили анализ ссылок между страницами.

Фото: Google

PageRank превратил ссылки в систему рекомендаций

До появления PageRank ссылка воспринималась в основном как технический элемент навигации. Страница ссылалась на другую страницу, чтобы пользователь мог перейти дальше. Брин и Пейдж предложили рассматривать ссылки как своеобразные голоса доверия.

Но важен был не сам факт ссылки. Ссылка с неизвестного сайта и ссылка с ресурса, который сам имеет высокий авторитет, не должны иметь одинаковый вес.

Именно это стало основой PageRank. Алгоритм оценивал важность страницы через структуру ссылок всего интернета. Если на страницу ссылались другие значимые ресурсы, ее рейтинг повышался. Если важная страница ссылалась на другой сайт, она передавала часть своего веса.

В оригинальной работе Google PageRank описывался как объективная оценка значимости страницы на основе графа ссылок. Авторы сравнивали эту идею с научными публикациями, где количество и качество цитирований помогают оценивать влияние работы.

Фото: King of Hearts

Главное изменение Google было не в поиске, а в выборе

Пользователь редко думает о том, что поисковик не просто находит страницы. Он постоянно принимает решения о порядке их отображения.

Именно здесь Google изменил интернет сильнее, чем любая отдельная функция интерфейса. До этого поиск чаще отвечал на вопрос "где встречается это слово?". Google постепенно начал отвечать на другой вопрос: "какая информация наиболее вероятно нужна пользователю?".

Это изменение стало фундаментальным. Интернет перестал быть огромной библиотекой без каталога и начал превращаться в систему, где алгоритмы оценивают авторитет источников.

При этом PageRank не был единственным фактором. Google использовал анализ текста, структуру документов, скорость загрузки, качество страниц и множество других сигналов. Но именно идея учитывать связи между сайтами дала компании преимущество на раннем этапе.

Почему PageRank невозможно было просто скопировать

После успеха Google идея анализа ссылок стала известна всем конкурентам. Однако сам алгоритм был только частью системы.

Проблема заключалась в масштабе. Чтобы оценивать миллиарды страниц, требовалась инфраструктура для постоянного сканирования интернета, хранения огромных объемов данных и быстрого пересчета результатов.

Кроме того, успех Google был связан с тем, что компания смогла построить цикл улучшения качества. Чем больше людей использовали поиск, тем больше данных получала система о поведении пользователей. Эти данные позволяли корректировать алгоритмы и находить слабые места.

Со временем SEO-индустрия начала адаптироваться к правилам Google. Владельцы сайтов стали изучать алгоритмы, строить ссылки, анализировать запросы и оптимизировать страницы. Получилась своеобразная гонка между поисковиками и теми, кто хотел влиять на выдачу.

Когда алгоритм начал определять, что мы считаем важным

Главный парадокс Google заключается в том, что компания создавалась для организации информации, но постепенно сама стала одним из главных фильтров доступа к ней.

Если раньше человек мог выбирать книгу в библиотеке или сайт из каталога, то теперь большая часть пользователей видит только первые результаты поисковой выдачи.

Это принесло огромные преимущества. Найти инструкцию, научную статью, техническую документацию или решение проблемы стало намного проще. Но одновременно возник вопрос: кто определяет правила сортировки информации и насколько нейтральны эти правила.

Алгоритмы поиска никогда не были простым зеркалом интернета. Они всегда являлись системой оценки. Менялись только методы оценки: от ссылок и ключевых слов к поведению пользователей, машинному обучению и большим языковым моделям.

От PageRank к искусственному интеллекту: поиск перестал быть списком ссылок

Сегодня Google постепенно меняет саму идею поиска. Пользователь все чаще получает не список страниц, а готовый ответ.

AI Overviews и другие функции на базе генеративного ИИ создают краткие объяснения по запросам, используя информацию из нескольких источников. Google прямо указывает, что такие ответы должны помогать быстрее понять тему и содержать ссылки для дальнейшего изучения.

Фото: Polomad5

Это следующий этап той же идеи. Если PageRank отвечал на вопрос "какая страница заслуживает внимания?", современные ИИ-системы пытаются ответить на вопрос "какую информацию нужно собрать и объяснить пользователю?".

Но здесь возникает новая проблема. В эпоху классического поиска пользователь видел источник и самостоятельно оценивал его. В ИИ-поиске между человеком и информацией появляется дополнительный слой интерпретации.

Google признает, что генеративные ответы могут содержать ошибки, поэтому компания продолжает развивать механизмы проверки и ссылки на первичные материалы.