Aya (языковая модель для ИИ)

2024: Анонс продукта

13 февраля 2024 года некоммерческая исследовательская лаборатория Cohere for AI, созданная компанией Cohere в 2022 году, представила открытую большую языковую модель (LLM) под названием Aya. Утверждается, что это первое решение данного класса с поддержкой более 100 языков.

Aya создана в рамках масштабного проекта, стартовавшего в январе 2023 года. В нем приняли участие более 3000 исследователей из 119 стран. Цель — разработка модели генеративного искусственного интеллекта (ГенИИ), основанной на вкладе людей со всего мира. Отмечается, что к началу 2024 года большинство LLM ориентированы прежде всего на английский язык. Однако только около 5% жителей мира говорят по-английски в своих странах.

𝓲

Cohere

LLM и искусственный интеллект в целом изменили глобальный технологический ландшафт, но многие сообщества по всему миру остались без поддержки из-за языковых ограничений существующих моделей. Этот разрыв препятствует внедрению и использованию ГенИИ в глобальном масштабе и потенциально может еще больше усугубить ситуацию, — говорят участники проекта.

Aya дает возможность решить проблему. Эта модель поддерживает 101 язык. В их число входят арабский, болгарский, эстонский, французский, ирландский, иврит, индонезийский, итальянский, японский, китайский, португальский, шведский, а также русский и английский. Утверждается, что Aya точно следует инструкциям и генерирует ответы значительно более высокого качества, нежели некоторые другие открытые модели.ИТ-директор «Роснефти» Дмитрий Ломилин выступит на TAdviser SummIT 28 ноября

В целом, как подчеркивают участники проекта, новая модель и набор данных для обучения призваны помочь «исследователям раскрыть мощный потенциал LLM для десятков языков и культур, которые в значительной степени игнорируются большинством других моделей, доступных на рынке».^[1]

Примечания