По итогам тестирования модель GigaChat PRO получила 53,7 балла из 100, а GigaChat Lite — 50,4 балла. Результат ближайшего конкурента оказался хуже более чем на два балла.
Благодаря обновлениям GigaChat PRO и GigaChat Lite теперь точнее отвечают на вопросы по экономике, медицине, химии, биологии и другим наукам, а также стали лучше разбираться в сложных терминах. Кроме того, в нейросети Сбера появились персонажи для выполнения специализированных задач.
GigaChat PRO доступна в веб-версии, «Телеграме» и «ВКонтакте». Разработчики и бизнес также могут использовать все модели Сбера через GigaChat API.
Бенчмарк MERA (multimodal evaluation for russian-language architectures, открытый бенчмарк для русского языка для оценки фундаментальных моделей) — набор из 21 задачи, который проверяет широкий спектр навыков искусственного интеллекта — от общих знаний до программирования. Этот тест позволяет объективно оценивать способности современных языковых моделей. Чем больше баллов набирает AI, тем лучше он справляется с различными задачами. В создании тестов MERA участвовали компании Альянса в сфере AI, а также Skoltech AI и НИУ ВШЭ.
Источник: Газета.ру
Статья была вам полезна?
Да
Нет
Другие новости
Ретейлерам может потребоваться более 50 000 складских роботов в ближайшие годы
20 ноября
1 мин
В России может появиться самый длинный беспилотный коридор для грузовиков
20 ноября
1 мин
Эксперты ожидают, что рынок инженерного ПО и ИТ-услуг вырастет почти вдвое к 2030 году
19 ноября
1 мин
Власти направят свыше 5,5 трлн рублей на развитие транспортного комплекса в РФ в течение трёх лет
19 ноября
1 мин
В поездах ВСМ могут внедрить беспилотные технологии
18 ноября
1 мин
В Москве площадь новых офисов выросла почти на четверть в 2026 году
17 ноября
1 мин