«Яндекс» выложил в открытый доступ новую языковую модель Alice AI Foundation LLM (версию претрейн), созданную с нуля. Модель отлично справляется с программированием и логическими рассуждениями, а в работе с русским языком и фактологией для русскоязычных пользователей превосходит многие зарубежные аналоги.
По заявлению «Яндекса», открытая модель Alice AI Foundation LLM превосходит более крупные аналогии, не требуя высоких вычислительных ресурсов для инференса. Модель распространяется по лицензии Apache 2.0, что позволяет использовать её как в научных исследованиях, так и в коммерческих продуктах. Этот экспериментальный проект служит тестовым полигоном для архитектуры будущей единой рассуждающей модели «Яндекса», которая ляжет в основу агентных функций «Алисы AI» для автономного выполнения задач.
Архитектурно нейросеть построена по принципу Mixture of Experts (MoE) с 80 млрд общих параметров, из которых при обработке запроса активируются только 3 млрд. Это обеспечивает высокую скорость и экономичность. Акцент на логических рассуждениях и сценариях работы агентов позволил добиться отличных результатов в кодинге и сложных задачах:
-
Математика: в олимпиадных задачах модель дели равенство с Qwen3.5-35B-A3B-Base.
-
Программирование: превосходит Nvidia Nemotron-3-Super-120B-Base, имея вчетверо меньше активных параметров.
-
Фактологические знания: обгоняет DeepSeek-V4-Flash-Base (284 млрд параметров, 13 млрд активных), а по качеству ответов выходит на уровень предыдущей закрытой Alice AI LLM, уступая ей по размеру в три раза, а по активным параметрам — в семь раз.
Для объективной проверки знаний, актуальных для русскоязычных пользователей, «Яндекс» создал два новых бенчмарка:
-
WikiWebFacts — проверяет знания дат, терминов, событий и персоналий по энциклопедиям и популярным поисковым запросам.
-
HardMultiQA — построен на анонимизированных запросах к «Алисе AI» и тестирует модель в редких и узких тематиках.
Ускорить разработку вдвое удалось благодаря доработке оптимизатора обучения и модернизации процессов пайплайна подготовки обучающих данных.
Бенчмарки: yandex/AliceAI-Foundation-80B-A3B-Base · Hugging Face
Тех. отчет на хабре: Открываем AliceAI-Foundation-80B-A3B-Base — новую языковую модель Яндекса, обученную с нуля / Хабр