Первые состязания в грамотности между искусственным интеллектом и человеком прошли в Новосибирском государственном университете. Результат получился лучше, чем ожидали разработчики.
Открытая система «Писец», разработанная научным сотрудником Лаборатории прикладных цифровых технологий Международного научно-образовательного математического центра НГУ Иваном Бондаренко, получила от преподавателя оценку между тройкой и четверкой.
Как сообщили в НГУ, разработчикам «Писца» было важно собрать статистику о разнообразии совершаемых им ошибок, чтобы в дальнейшем усовершенствовать систему. В итоге «Писец» вполне удовлетворительно расставил запятые и разбил текст на абзацы, однако галлюцинаций (термин программистов, обозначающий неверное семантическое значение слова) избежать не удалось.
Работу ИИ проверяла Людмила Буднева – старший преподаватель кафедры источниковедения литературы и древних языков Гуманитарного института НГУ.
«Из 276 слов диктанта «Писец» пропустил 6, пять из которых стояли в конце предложения, причем в этих случаях он не ставил точку, но следующее предложение начинал с заглавной буквы, – сообщила Буднева. – В одном месте пропустил предлог «в», шедший предпоследним в предложении. Еще 7 слов им было услышано неверно.
В итоге специалистами был сделан следующий вывод: в тех местах, где «Писец» все слова услышал верно, он написал диктант хорошо — на границе между тройкой и четверкой. Такого результата его разработчики не ожидали.
Фото из открытых источников