Anthropic Claude 3

Claude 3 — это семейство мультимодальных больших языковых моделей (LLM), разработанное американской компанией Anthropic. Модели семейства Claude 3 предназначены для обработки и генерации текста, анализа изображений (в формате загружаемых файлов) и выполнения широкого круга интеллектуальных задач, включая перевод, реферирование, написание кода и ответы на вопросы. Семейство включает три модели разной мощности и стоимости: Claude 3 Haiku (самая быстрая и лёгкая), Claude 3 Sonnet (баланс скорости и качества) и Claude 3 Opus (самая мощная и дорогая). Модели были анонсированы 4 марта 2024 года и стали доступны через API Anthropic, а также в веб-интерфейсе и мобильном приложении. Компания Anthropic не зарегистрирована в России, и её сервисы официально не представлены на территории РФ.

История создания

Anthropic была основана в 2021 году бывшими сотрудниками OpenAI, включая Дарио Амодеи и Дэниелу Амодеи. Основной миссией компании заявлена разработка безопасных и полезных систем искусственного интеллекта, с особым акцентом на интерпретируемость и контроль поведения моделей (концепция «конституционного ИИ»). Первая версия модели Claude была выпущена в марте 2023 года, а Claude 2 — в июле 2023 года.

Работа над семейством Claude 3 началась в 2023 году. 4 марта 2024 года Anthropic официально представила три модели нового поколения. По заявлениям компании, при разработке особое внимание уделялось улучшению мультимодальных способностей (возможности анализировать изображения и документы), увеличению длины контекста (до 200 000 токенов) и снижению количества отказов в ответах на безвредные запросы. Выход Claude 3 был воспринят как ответ на модели GPT-4 от OpenAI и Gemini от Google.

Архитектура и технические характеристики

Мультимодальность

Все три модели Claude 3 являются мультимодальными — они способны обрабатывать как текст, так и изображения. Пользователь может загрузить в модель фотографию, диаграмму, график, отсканированный документ или рукописный текст, и модель проанализирует визуальную информацию. Однако модели не генерируют изображения — они только анализируют загруженные.

Длина контекста

Максимальная длина контекста для всех моделей семейства составляет 200 000 токенов (около 150 000 слов или примерно 300–400 страниц текста). Это позволяет обрабатывать большие документы, книги или длинные диалоги. В тестах Anthropic заявляет, что модель способна эффективно работать с контекстом длиной до 1 миллиона токенов в экспериментальном режиме.

Окно знаний

Модели обучены на данных, актуальных до начала 2023 года. Точная дата среза знаний не раскрывается, но известно, что Claude 3 не имеет доступа к интернету в реальном времени (за исключением функции поиска через интеграции, например, через API с плагинами).

Производительность

Anthropic опубликовала результаты бенчмарков, согласно которым Claude 3 Opus превосходит GPT-4 и Gemini Ultra по ряду тестов, включая математические рассуждения (GSM8K), многоязычное понимание (MMLU) и визуальное понимание (MMMU). Однако независимые исследования (например, от компании Artificial Analysis) показывают, что разница в производительности между топовыми моделями невелика и зависит от конкретной задачи.

Модели семейства

Claude 3 Haiku

• Назначение: быстрые и дешёвые ответы для задач с низкой задержкой.
• Скорость: самая быстрая модель в семействе, способна обрабатывать до 1000 токенов в секунду.
• Цена: $0.25 за миллион входных токенов, $1.25 за миллион выходных токенов (по состоянию на март 2024).
• Применение: чат-боты, модерация контента, обработка коротких запросов, автоматизация.

Claude 3 Sonnet

• Назначение: баланс между скоростью, качеством и стоимостью.
• Скорость: примерно в два раза быстрее Claude 3 Opus при сопоставимом качестве для многих задач.
• Цена: $3 за миллион входных токенов, $15 за миллион выходных токенов.
• Применение: написание кода, анализ документов, перевод, создание контента.

Claude 3 Opus

• Назначение: максимальное качество ответов для сложных интеллектуальных задач.
• Скорость: самая медленная модель, но с наилучшими показателями в бенчмарках.
• Цена: $15 за миллион входных токенов, $75 за миллион выходных токенов.
• Применение: научные исследования, сложное программирование, анализ больших объёмов данных, творческие задачи.

Функциональные возможности

Обработка текста

Claude 3 поддерживает все стандартные операции LLM: генерация текста, ответы на вопросы, реферирование, перевод, написание кода на различных языках программирования (Python, JavaScript, C++, Java и др.), анализ тональности, извлечение информации.

Анализ изображений

Модель может анализировать загруженные изображения, включая фотографии, диаграммы, графики, таблицы и рукописные тексты. Например, Claude 3 способен распознать текст на фотографии, описать изображение, извлечь данные из графика. Важно: модель не распознаёт лица и не идентифицирует людей, что соответствует политике безопасности Anthropic.

Безопасность и конституционный ИИ

Anthropic использует подход «конституционного ИИ» (Constitutional AI). Модель обучается следовать набору принципов (конституции), которые определяют, какие ответы считаются безопасными и полезными. Это позволяет снизить количество вредных, предвзятых или опасных ответов. В Claude 3 также реализованы механизмы фильтрации контента и защиты от «джейлбрейков» (попыток обойти ограничения).

Ограничения

• Модель не имеет доступа к интернету (без специальных интеграций).
• Не может выполнять действия в реальном мире (например, отправлять email, управлять устройствами).
• Не поддерживает генерацию изображений.
• В некоторых случаях может давать неверные или вымышленные ответы (галлюцинации), особенно в малоизвестных областях.

Применение

В бизнесе

• Автоматизация поддержки: обработка запросов клиентов, генерация ответов.
• Аналитика: анализ документов, отчётов, контрактов.
• Разработка: написание кода, ревью кода, генерация документации.

В образовании

• Обучение: создание учебных материалов, объяснение сложных концепций.
• Проверка знаний: генерация тестов и задач.

В науке

• Обработка данных: анализ научных статей, извлечение фактов.
• Генерация гипотез: помощь в формулировании исследовательских вопросов.

В творчестве

• Написание текстов: создание статей, сценариев, поэзии.
• Перевод: перевод текстов на разные языки.

Критика и ограничения

Стоимость

Высокая цена на модель Opus ($15 за миллион входных токенов) делает её недоступной для многих индивидуальных пользователей и малых компаний. Для сравнения, GPT-4 Turbo стоит $10 за миллион входных токенов.

Региональные ограничения

Anthropic не предоставляет доступ к своим сервисам в ряде стран, включая Россию. Для использования API требуется IP-адрес из разрешённого региона, а также банковская карта, выпущенная в одной из поддерживаемых стран.

Проблемы с безопасностью

Несмотря на внедрение конституционного ИИ, независимые исследователи (например, команда из Центра безопасности ИИ) обнаружили, что некоторые «джейлбрейки» всё же могут обходить ограничения модели. Anthropic регулярно обновляет защитные механизмы.

Галлюцинации

Как и все большие языковые модели, Claude 3 подвержен галлюцинациям — генерации правдоподобных, но неверных фактов. Особенно это проявляется в малоизвестных или спорных темах.

Доступность и интеграции

Claude 3 доступен через:

• Веб-интерфейс (claude.ai) — для индивидуальных пользователей (бесплатный доступ к Sonnet, ограниченный доступ к Opus по подписке).
• API — для разработчиков и бизнеса (доступен через Amazon Bedrock, Google Cloud Vertex AI и напрямую).
• Мобильное приложение — для iOS и Android (с ограничениями по регионам).

Интересные факты

• Название «Claude» не имеет официальной расшифровки; по словам представителей Anthropic, это просто имя, которое звучит дружелюбно и нейтрально.
• Модель Claude 3 Opus стала первой моделью, которая превзошла GPT-4 в тесте MMLU (Massive Multitask Language Understanding), набрав 86.8% против 86.4% у GPT-4.
• В тесте на понимание визуальной информации (MMMU) Claude 3 Opus набрал 59.4%, что выше, чем у GPT-4V (56.8%) и Gemini Ultra (59.1%).
• Anthropic использует модель Claude 3 для внутреннего тестирования безопасности других своих моделей, что является частью подхода «красной команды» (red teaming).

Источники

• Anthropic. «The Claude Model Family». Официальный блог Anthropic, 4 марта 2024.
• Anthropic. «Claude 3: A New Generation of AI». Официальный сайт Anthropic, 2024.
• Artificial Analysis. «Claude 3 Opus vs GPT-4: Performance Comparison». Artificial Analysis, март 2024.
• Thompson, B. «Claude 3: Anthropic’s Answer to GPT-4». Stratechery, 5 марта 2024.
• Metz, C. «Anthropic Unveils Claude 3, Its Most Advanced A.I. Models». The New York Times, 4 марта 2024.