Секрет Google: «дешево и быстро»

комментарии (1)
версия для печати

Выступая на тринадцатой ежегодной конференции IBM Centers for Advanced Studies, Крейг Невилл-Маннинг (Craig Nevill-Manning), возглавляющий научные проекты Google, раскрыл некоторые секреты механизма работы поисковика. Оказывается, компания не тратит больших средств на «железки». «Дешевое оборудование дает возможность совершать больше вычислительных операций по каждому запросу», — начал объяснение Невилл-Маннинг. Затем он рассказал, что программный продукт пишется с учетом вероятных сбоев в работе техники, поэтому удобней, чтобы техника эта была проще.

Компания Google применяет компьютеры, очень похожие на обычные домашние ПК. Их можно купить дешево, поэтому поисковая службы может себе позволить избыточный парк. Наличие запаса — это необходимость, так как один день работы здесь приблизительно равен 40 машинным годам. «У каждого сервера множество близнецов», — продолжает Невилл-Маннинг. Таким образом, Google компенсирует использование недорогой аппаратуры, обеспечивая многократное дублирование на всех уровнях систем серверов, которые используются в информационных центрах компании. В результате получается множество идентичных друг другу центров в разных уголках земного шара.

Подобная подстраховка позволяет снизить скорость технического обслуживания машин, бывает даже, что некоторые компьютеры неделями не подключены к Сети. У компании есть система мониторинга, с ее помощью специалисты все время следят за состоянием аппаратуры и программных приложений, без промедлений узнавая о сбоях. «Благодаря нашей особой организации, потребности срочного ремонта не возникает. Чинить можно неторопливо, а это тоже экономия», — завершает объяснение ученый.

Кажется, все просто и ясно. И все же обеспечивать каждый запрос адекватными результатами, не теряя при этом оперативности, не так уж легко. Представитель Google признался корреспонденту журнала PCWorld, что самых больших временных затрат требует обновление индексного сервера, на котором хранится 390 млн. изображений. Вот почему компания наняла большую команду специалистов и поручила им исследование по проблеме повышения качества восстановления данных.

Каждый запрос, который поступает в поисковую службу, должен пройти через несколько отдельных серверов, в том числе индексный сервер и информационные серверы — на них находятся краткие сводки о результатах поисковой операции. И все эти серверы продублированы.

Что касается качества результатов поиска (который на Google занимает сравнительно мало времени), то Невилл-Маннинг сказал так: «Если тратить на обработку запроса лет пять, то тогда результаты станут гораздо точней и будут лучше соответствовать интересам каждого конкретного пользователя».

Другие