За стенами Московского государственного университета им. М. В. Ломоносова провели эксперимент, попытавшись установить, насколько уникальными являются тексты, сгенерированные самыми популярными ИИ-моделями. В итоге удалось установить, что более 80% текстов проходят проверку уникальности с результатом 75% и выше. Об исследовании заявили в пресс-службе учебного заведения.
В ходе эксперимента были протестированы четыре чат-бота. Им поставили задачу составить ответы на письменные задания из пособий по изучению английского языка. Результаты, которые были представлены в разных форматах, оценивались по пяти параметрам, включая плагиат, лексическое разнообразие и так далее.
«Были выбраны большие языковые модели, которые по бенчмаркам из предыдущих исследований показывают лучшие результаты в аргументации и рассуждениях. 80% сгенерированных текстов прошли проверку на уникальность с результатом более 75%», — сообщили в пресс-службе МГУ.
Российские специалисты отметили, что использованные ими модели позволяют задействовать больше входных данных. В итоге получаются максимально креативные результаты. Но распространение больших языковых моделей требует разработки методов адаптации нейросетей к решению актуальных методических задач, считают авторы.
«Важным направлением для дальнейшего исследования представляется изучение формулировок наиболее успешных запросов (промтов) и, как результат, выявление способов формирования эффективных стратегий интеракции с технологиями ИИ в рамках профессиональной компетенции студентов», — уточнили в университете.
