Сегодня мы делимся подробным техрепортом о разработке нового семейства моделей Alice AI, включая базовую текстовую модель, мультимодальную модель и специализированные решения для поиска. В разделе, посвященном Alice AI LLM, мы акцентируем внимание на Alignment с использованием RL и Reward Modeling, минимизируя количество разрозненных RL-стадий. Это позволяет нам более эффективно управлять качеством, используя аспектную формулировку. Модель Alice AI LLM Search теперь поддерживает многократные обращения к поиску с фильтрацией источников. Мы также достигли значительного ускорения инференса, используя новые подходы, такие как YaFSDP и YCCL. К ноябрю, согласно исследованию Mediascope, Alice AI вышла на первое место по популярности среди россиян. Модель доступна для разработки на платформе Yandex AI Studio, что открывает новые возможности для создания AI-решений.