Крупный научно-практический эксперимент провели сотрудники РТУ МИРЭА, чтобы выявить влияние искусственного интеллекта на объективность оценки знаний студентов. Об этом сообщает «РТ на русском». Результаты показали, что нейросеть неспособна самостоятельно создать новый научный или творческий продукт.

Более 200 студентов и 20 преподавателей поучаствовали в эксперименте. Половина учащихся была выбрана методом слепого отбора. Им предложили написать научно-практическую работу на конкретную тему с использованием нейросетей: ChatGPT, Ai search, Gerwin AI, «Балабоба» и TurboText. Тем временем эксперты должны были выявить работы, написанные с помощью искусственного интеллекта.

В итоге эксперимента преподавательский состав безошибочно определил 96% работ, написанных ИИ. Что касается оставшихся 4% — оказалось, что студенты потратили много времени на редактирование текста нейросетей.

Среди критериев, по которым удалось определить сгенерированные тексты, 86% преподавателей отметили стилистические и орфографические особенности текста. Среди них — исключительная грамотность, отсутствие опечаток, а также большое число самоповторов. В более чем 72% случаев работы содержали грубые фактические и логические ошибки. В более чем 67% рефератов повествование отклонялось от темы и содержало «пустые» выражения, не несущие смысла.

«В целом все тексты, созданные нейросетью, представляли компиляцию тезисов и предложений из написанных ранее научных трудов и работ и не содержали оригинальных суждений и выводов», — уточнили в РТУ МИРЭА.

Как отметил ректор вуза Станислав Кудж, результаты эксперимента говорят о том, что современный уровень развития нейросетей не ставит под сомнение качество аттестации и проверки уровня знаний студентов высших учебных заведений.

«Несмотря на резонанс темы, в том числе в средствах массовой информации, искусственный интеллект в настоящее время не может заменить опыта и квалификации преподавательского состава. Тем более нейросеть неспособна создать принципиально новый научный или творческий продукт, так как её работа строится исключительно на переработке заложенных в неё человеком знаний. О несовершенстве технологии заявили и студенты — участники эксперимента», — добавил Кудж.