Fast Search & Transfer

Fast Search & Transfer (также известная как FAST или Fast Search & Transfer ASA) — норвежская компания, специализировавшаяся на разработке программного обеспечения для корпоративного поиска и анализа данных. Компания была основана в 1997 году, а в 2008 году была поглощена корпорацией Microsoft. Наибольшую известность получила благодаря созданию поисковой платформы FAST ESP (Enterprise Search Platform), которая использовалась крупными организациями для поиска по внутренним и внешним информационным массивам, а также благодаря технологиям, лёгшим в основу поискового движка Microsoft SharePoint.

История

Основание и ранние годы

Компания Fast Search & Transfer была основана в 1997 году в Тронхейме, Норвегия, группой исследователей и разработчиков, включая Джона Лейка (John Lægreid) и Оле Йохана Далсгорда (Ole Johan Dalsgaard). Изначально проект был выделен из Норвежского университета естественных и технических наук (NTNU), где велись работы в области информационного поиска и обработки больших объёмов данных. Название компании отражало её основную специализацию — быстрый поиск и передача данных.

Первые продукты FAST были ориентированы на корпоративный сегмент: системы для поиска по документам, базам данных, веб-сайтам и другим источникам неструктурированной информации. В 1999 году компания выпустила свою первую коммерческую версию поискового движка — FAST Data Search.

Выход на рынок и IPO

В начале 2000-х годов FAST стала одним из лидеров на рынке корпоративного поиска, конкурируя с такими компаниями, как Autonomy, Endeca, Google Search Appliance и IBM OmniFind. В 2001 году компания провела первичное публичное размещение акций на Ослоской фондовой бирже (Oslo Børs) под тикером FAST. IPO привлекло значительные инвестиции, что позволило FAST расширить географию продаж и усилить научно-исследовательскую базу.

Разработка FAST ESP

Ключевым продуктом компании стала платформа FAST ESP (Enterprise Search Platform), выпущенная в 2004 году. FAST ESP представляла собой масштабируемую систему корпоративного поиска, способную обрабатывать миллиарды документов и поддерживать сложные запросы на естественном языке. Платформа включала модули для индексации, ранжирования результатов, анализа текста, семантического поиска и интеграции с различными источниками данных (файловые системы, базы данных, веб-серверы, системы управления контентом).

FAST ESP активно использовалась правительственными учреждениями, финансовыми организациями, медиакомпаниями и промышленными предприятиями. Среди клиентов FAST числились такие организации, как BBC, Reuters, NASA, Министерство обороны США, а также ряд крупных банков и страховых компаний.

Поглощение корпорацией Microsoft

В январе 2008 года корпорация Microsoft объявила о приобретении Fast Search & Transfer за 1,2 миллиарда долларов США. Сделка была завершена в апреле 2008 года. Основной целью Microsoft было усиление своих продуктов в области корпоративного поиска и управления контентом, в частности, интеграция технологий FAST в платформу Microsoft SharePoint. После поглощения FAST продолжила работу как дочернее предприятие, а её технологии были постепенно интегрированы в линейку продуктов Microsoft, включая SharePoint Server 2010 и последующие версии.

Постпоглощение и наследие

После поглощения бренд FAST был постепенно выведен из употребления. Технологии FAST ESP легли в основу поискового компонента Microsoft SharePoint — SharePoint Search, а также были использованы в облачных сервисах Microsoft, таких как Microsoft Search (Bing for Business) и Microsoft 365. В 2010 году Microsoft выпустила FAST Search Server 2010 for SharePoint — самостоятельный продукт, основанный на технологиях FAST, который позволял организациям разворачивать высокопроизводительный поиск на базе SharePoint. В последующих версиях SharePoint (2013, 2016, 2019) функциональность FAST была интегрирована непосредственно в ядро платформы.

Классификация продуктов

Продукты Fast Search & Transfer можно разделить на несколько категорий в зависимости от функционального назначения:

• Платформы корпоративного поиска — FAST ESP, FAST Search Server 2010 for SharePoint.
• Инструменты для анализа данных — FAST Data Search, FAST Insight (для бизнес-аналитики).
• Поисковые движки для веб-сайтов — FAST Web Search, FAST Site Search.
• Модули для семантического анализа — FAST Entity Extraction, FAST Taxonomy Manager.

Устройство и характеристики

Архитектура FAST ESP

FAST ESP строилась на модульной архитектуре, включающей следующие основные компоненты:

• Индексатор (Indexer) — отвечает за сбор данных из различных источников, их анализ и построение поискового индекса. Поддерживал инкрементальную индексацию (обновление только изменённых данных).
• Поисковый движок (Query Engine) — обрабатывал пользовательские запросы, выполнял поиск по индексу и ранжировал результаты. Поддерживал сложные запросы с использованием логических операторов, фразового поиска, поиска по полям и синонимов.
• Модуль ранжирования (Ranking Module) — определял порядок выдачи результатов на основе алгоритмов, учитывающих релевантность, частоту терминов, авторитетность источников и пользовательские настройки.
• Модуль семантического анализа (Semantic Analysis Module) — позволял извлекать сущности (имена, даты, места, организации), классифицировать документы по темам и строить таксономии.
• Модуль интеграции (Integration Module) — обеспечивал подключение к различным источникам данных через коннекторы (SQL, LDAP, файловые системы, веб-серверы, системы управления контентом).

Ключевые характеристики

• Масштабируемость — система могла обслуживать кластеры из сотен серверов, обрабатывая до 10 миллиардов документов и более 1000 запросов в секунду.
• Скорость — время ответа на запрос составляло менее 0,5 секунды для большинства типовых сценариев.
• Поддержка языков — FAST ESP поддерживала более 50 языков, включая русский, с возможностью настройки морфологического анализа и стемминга.
• Безопасность — реализована поддержка разграничения доступа на уровне документов и запросов (интеграция с Active Directory и другими системами аутентификации).

Применение

Корпоративный поиск

Основное применение продуктов FAST — организация поиска по внутренним информационным ресурсам крупных организаций. FAST ESP использовалась для поиска по документам, электронной почте, базам данных, веб-сайтам, системам управления контентом (например, SharePoint, Documentum, FileNet) и другим источникам. Система позволяла сотрудникам быстро находить нужную информацию, что повышало эффективность работы.

Поиск на веб-сайтах

FAST также поставляла решения для поиска по веб-сайтам, включая интернет-магазины, новостные порталы и корпоративные сайты. Эти решения поддерживали функции автодополнения запросов, фильтрации результатов по категориям, а также интеграцию с системами аналитики.

Анализ данных и бизнес-аналитика

Модули FAST Insight и FAST Entity Extraction использовались для анализа больших объёмов неструктурированных данных, извлечения ключевых сущностей и построения отчётов. Это позволяло организациям выявлять тенденции, мониторить упоминания брендов и проводить конкурентный анализ.

Государственные и оборонные структуры

Благодаря высокой производительности и возможностям настройки безопасности, FAST ESP применялась в правительственных учреждениях и оборонных ведомствах, в том числе в Министерстве обороны США и NASA. Системы использовались для поиска по секретным и конфиденциальным документам, а также для анализа разведывательной информации.

Примеры внедрений

• BBC — FAST ESP использовалась для поиска по архивам новостных материалов, включая текстовые статьи, аудио- и видеозаписи.
• Reuters — система применялась для поиска по финансовым новостям и аналитическим отчётам.
• NASA — FAST ESP обеспечивала поиск по научным публикациям, технической документации и данным космических миссий.
• Министерство обороны США — система использовалась для поиска по разведывательным данным и оперативной документации.

Критика

Несмотря на технологические преимущества, продукты FAST подвергались критике по нескольким направлениям:

• Сложность внедрения и настройки — FAST ESP требовала высокой квалификации администраторов и разработчиков, что увеличивало стоимость владения.
• Высокая стоимость лицензий — по сравнению с некоторыми конкурентами (например, Google Search Appliance), лицензирование FAST было дорогим, что ограничивало её применение в среднем и малом бизнесе.
• Интеграция с Microsoft — после поглощения часть функциональности FAST была утрачена или переработана, что вызвало недовольство некоторых клиентов, привыкших к гибкости оригинальной платформы.

Интересные факты

• Название компании «Fast Search & Transfer» было выбрано не случайно: оно отражало две ключевые функции системы — быстрый поиск (Fast Search) и быструю передачу данных (Transfer) между различными источниками.
• Технологии FAST легли в основу не только SharePoint Search, но и некоторых других продуктов Microsoft, включая Bing for Business и Microsoft Search в Microsoft 365.
• В 2007 году, за год до поглощения, FAST была признана одним из лидеров рынка корпоративного поиска по версии аналитической компании Gartner.

Источники

• Fast Search & Transfer ASA. Annual Report 2007.
• Microsoft Corporation. Press Release: Microsoft to Acquire Fast Search & Transfer, January 8, 2008.
• Gartner. Magic Quadrant for Enterprise Search, 2007.
• История компании Fast Search & Transfer на сайте NTNU (Норвежский университет естественных и технических наук).
• Документация Microsoft FAST Search Server 2010 for SharePoint.