Lomovka
Российский ИИ обошел OpenAI и Nvidia в работе с задачами на русском языке.
По результатам тестирования российские модели совершили вдвое меньше ошибок, чем зарубежные решения OpenAI и Nvidia, и продемонстрировали достаточную точность для применения в основных специализированных бизнес-сценариях в ключевых отраслях экономики России. Тестирование проводилось на более чем 12 тысячах размеченных аудиозаписей общей длительностью около 38 часов. Выборка включала речь без выраженных помех, а также записи с акустическим шумом и фоновой речью,— рассказали в MWS AI (входит в МТС Web Services).
Нейросети сравнивали по WER (Word Error Rate) - показателю, который отражает количество ошибок при распознавании слов относительно числа слов в эталонной расшифровке.
Отмечается, что по итогам тестирования, средний WER для GigaAM от «Сбера» составил 7,4% - около 7,4 ошибки на каждые 100 слов эталонной расшифровки. Это более чем в два раза меньше, чем у Nvidia Parakeet с результатом 15,8%, и более чем в три раза меньше, чем у Nvidia Nemotron с результатом 25,5%.
#Россия #ИИ #сравнение
Подпишись! Если у вас установлено приложение,
вы можете сразу перейти в канал