но общность интересов и родство умов заставили их крепко сдружиться. И, что для нас важнее, обоих все больше интересовало устройство Всемирной паутины.
В 1996 году Сергей и Ларри уже вместе разрабатывали будущую поисковую машину для интернета. В общежитской комнате Ларри они поставили несколько компьютеров, которые самостоятельно собрали из найденных там и сям деталей, а комнату Сергея превратили в офис, где можно было продумывать идеи и испытывать программы. В работе, которую Сергей и Ларри написали сообща еще студентами, рассказывается о том, что в конце 1990-х Всемирная паутина разрасталась так быстро, что поисковые машины не справлялись со своей задачей. Одна из первых машин – разработанная в 1994 году World Wide Web Worm – индексировала лишь чуть больше 100 тысяч страниц. В 1997 году другая поисковая система, AltaVista, хвасталась тем, что обрабатывает десятки миллионов запросов в день, тогда как в Паутине можно разыскивать и индексировать уже сотни миллионов страниц. Из-за такого огромного количества страниц, нуждавшихся в индексации, пользователь просто не мог найти то, что искал. Говоря словами Брина и Пейджа, “в ноябре 1997 года лишь одна из четырех главных коммерческих поисковых машин находит сама себя (показывает собственную страницу поиска в числе первых десяти результатов в ответ на запрос с ее собственным именем)”.
Так как же находятся нужные иголки в таком необозримом стогу сена? Есть некоторые очевидные идеи, помогающие понять, как можно выявить нужные пользователю веб-страницы, – по ключевым словам, которые он вводит в строку поиска. Но те же самые ключевые слова содержат бесчисленные страницы. Если искомые ключевые слова часто появляются на какой-то странице, это еще не значит, что именно их разыскивает большинство пользователей. Возможно, здесь полезно свернуть с основной дорожки и приглядеться к содержанию различных страниц. Было испытано множество вариаций этой темы, но все равно, похоже, ничего не получалось. Тут уж легко было сдаться и решить, что Паутина слишком разрослась и индексирование страниц и любая осмысленная навигация по ним – задача в принципе непосильная.
Прорыв, который совершили Брин и Пейдж, произошел благодаря их интересу к сетевому устройству Паутины: она содержит уйму полезной информации, ведь такое устройство не случайно. Одни веб-страницы связаны с другими веб-страницами, которые имеют для них важность. Так как же Брин и Пейдж поняли и использовали эту информацию? Главная догадка заключалась в том, что лучший способ выявить ту страницу, которую пользователь захочет увидеть в первую очередь, – это посмотреть на те веб-страницы, откуда тянутся связи к этой самой веб-странице. Если к какой-либо странице тянутся связи от других важных веб-страниц, значит, скорее всего, это важная страница. Нельзя судить о странице просто по числу ее связей с другими страницами: вопрос заключается в том, связана ли она с теми страницами, которые сами имеют множество связей. В очень многих областях гораздо важнее иметь друзей “с хорошими связями”, чем просто иметь много друзей.
