Google Directory

Google Directory — это веб-каталог, разработанный компанией Google, который представлял собой иерархическую, отредактированную человеком коллекцию ссылок на веб-сайты, сгруппированных по тематическим категориям. Проект функционировал с 2000 по 2011 год и базировался на данных Open Directory Project (ODP, также известного как DMOZ). В отличие от основного поискового алгоритма Google, который автоматически индексировал страницы, Google Directory полагался на ручную модерацию и классификацию ссылок редакторами-добровольцами.

История

Предпосылки и запуск

В конце 1990-х годов, когда интернет только начинал активно развиваться, веб-каталоги, составляемые вручную, были популярным способом навигации по сети. Крупнейшим из них был Yahoo! Directory, а также Open Directory Project, запущенный в 1998 году. Google, основанный в 1998 году, к 2000 году уже стал ведущей поисковой системой благодаря алгоритму PageRank.

В апреле 2000 года Google запустил Google Directory, используя данные ODP. Каталог был доступен по адресу directory.google.com. Основной идеей было объединение автоматического поиска с ручной классификацией: пользователь мог сначала выбрать категорию, а затем искать внутри неё, или же просматривать подкатегории вручную.

Развитие и особенности

Google Directory отличался от других каталогов тем, что для каждой ссылки отображался её PageRank — показатель авторитетности страницы по версии Google. Это позволяло пользователям видеть, какие сайты в рамках категории считаются наиболее значимыми. Кроме того, в каталоге использовалась технология Google для ранжирования результатов внутри категорий.

Со временем каталог обновлялся реже, чем основной поиск Google. К середине 2000-х годов, с развитием алгоритмов автоматического поиска и увеличением объёма веба, ручные каталоги стали терять актуальность. Пользователи всё реже использовали иерархическую навигацию, предпочитая прямой поиск по ключевым словам.

Закрытие

В 2011 году Google объявил о закрытии Google Directory. Официальной причиной было названо снижение популярности сервиса и желание сосредоточиться на других продуктах. 20 июля 2011 года каталог был окончательно отключён. Последняя доступная версия базы данных была зафиксирована в марте 2011 года. В настоящее время при попытке перейти по адресу directory.google.com происходит перенаправление на главную страницу поиска Google.

Структура и принцип работы

Иерархия категорий

Google Directory был организован в виде дерева категорий. Верхний уровень включал около 15 основных разделов, таких как:

• Arts (Искусство)
• Business (Бизнес)
• Computers (Компьютеры)
• Games (Игры)
• Health (Здоровье)
• Home (Дом)
• News (Новости)
• Recreation (Отдых)
• Reference (Справочники)
• Regional (Регионы)
• Science (Наука)
• Shopping (Покупки)
• Society (Общество)
• Sports (Спорт)
• World (Мир)

Каждая категория делилась на подкатегории. Например, внутри категории Science могли быть подкатегории Biology, Physics, Chemistry и т.д., которые, в свою очередь, делились дальше. Максимальная глубина вложенности могла достигать 10-15 уровней.

Модерация и редакторы

Контент для Google Directory поставлялся из Open Directory Project. Редакторами ODP были добровольцы со всего мира, которые проверяли и добавляли ссылки. Каждая ссылка проходила проверку на соответствие тематике категории, качество контента и отсутствие спама. Google не нанимал собственных редакторов для этого каталога, а лишь лицензировал данные ODP.

Поиск внутри каталога

Пользователь мог либо просматривать категории вручную, либо использовать строку поиска, которая искала только по названиям и описаниям сайтов в рамках выбранной категории. Результаты поиска ранжировались с учётом PageRank, что отличало Google Directory от других каталогов, где порядок часто был алфавитным или хронологическим.

Преимущества и недостатки

Преимущества

• Качество контента: Все ссылки проходили ручную проверку, что снижало вероятность попадания в каталог спама или низкокачественных сайтов.
• Структурированность: Иерархическая структура позволяла быстро находить сайты по тематике, особенно в узких нишах, где автоматический поиск мог выдавать много шума.
• PageRank: Отображение PageRank давало пользователю дополнительную информацию о значимости сайта.
• Мультиязычность: Каталог включал разделы на разных языках (категория World), что делало его полезным для неанглоязычных пользователей.

Недостатки

• Медленное обновление: Ручная модерация приводила к тому, что новые сайты появлялись в каталоге с задержкой в недели или месяцы.
• Ограниченный охват: По оценкам, в лучшие годы Google Directory содержал около 4-5 миллионов ссылок, что было ничтожно мало по сравнению с миллиардами страниц в индексе основного поиска Google.
• Зависимость от ODP: Качество каталога напрямую зависело от активности добровольцев ODP, которая со временем снижалась.
• Субъективность: Редакторы могли удалять или не добавлять сайты по субъективным причинам, что вызывало критику со стороны веб-мастеров.

Влияние и наследие

Роль в развитии SEO

Google Directory был важным инструментом для специалистов по поисковой оптимизации (SEO) в начале 2000-х годов. Попадание в каталог считалось положительным сигналом для ранжирования в основном поиске Google, так как ссылка из авторитетного каталога увеличивала PageRank сайта. Многие веб-мастера стремились добавить свои сайты в ODP, чтобы затем они появились в Google Directory.

Сравнение с современными сервисами

После закрытия Google Directory ручные веб-каталоги практически исчезли как массовый сервис. Их место заняли автоматические системы, такие как:

• Поисковые системы (Google, Яндекс, Bing) — основной инструмент навигации.
• Социальные закладки (Delicious, Pinterest) — позволяют пользователям самим классифицировать ссылки.
• Википедия — энциклопедический проект, который также использует ручную модерацию, но в более узкой тематике.

Тем не менее, идея тематических каталогов сохранилась в виде отраслевых справочников (например, каталоги медицинских сайтов или юридических фирм), которые поддерживаются профессиональными сообществами.

Наследие ODP

Open Directory Project, на котором базировался Google Directory, был закрыт в 2017 году. Однако его данные были переданы в архив и используются некоторыми проектами, такими как Curlie (попытка возродить ODP). Google Directory остаётся примером того, как крупная поисковая система пыталась сочетать автоматические алгоритмы с человеческой модерацией, но в итоге отказалась от этого подхода в пользу полностью автоматизированного поиска.

Интересные факты

• Google Directory был одним из первых продуктов Google, который не был основан на собственном алгоритме, а использовал сторонние данные.
• На момент закрытия каталог содержал более 4 миллионов ссылок, распределённых по 1,5 миллионам категорий.
• В некоторых странах, например в России, Google Directory был популярен среди пользователей, которые искали сайты на русском языке, так как категория World/Russian была хорошо структурирована.
• PageRank, отображаемый в Google Directory, был одним из немногих способов для веб-мастеров узнать этот показатель, так как Google перестал публиковать его в панели инструментов в 2016 году.

Источники

• Официальный блог Google: "A fall spring-clean" (2011) — объявление о закрытии Google Directory.
• Архив Open Directory Project (DMOZ) — описание структуры и принципов работы.
• Статья "Google Directory: The Rise and Fall of a Web Directory" на сайте Search Engine Journal.
• Материалы конференции по поисковым системам (2002) — анализ использования веб-каталогов.
• Книга "The Google Story" (2005) — история развития продуктов Google.