Научно-практический эксперимент, проведённый в РТУ МИРЭА, доказал неспособность нейросетей создавать новый научный и творческий продукт, 1 июня сообщает RT.

В рамках эксперимента половина участвующих в нем студентов должна была написать научно-практические работы с использованием технологий нейросети, в том числе сервисов ChatGPT, Ai search, Gerwin AI, «Балабоба» и TurboText, а преподаватели должны были выявить работы, написанные с использованием нейросетей.

Для разбиения студентов на две группы использовали метод слепого отбора. В эксперименте приняли участие более 200 студентов и 20 преподавателей.

В результате преподаватели смогли безошибочно определить 96% работ, написанных нейросетями. В отношении 4% невыявленных преподавателями научно-практических работ, которые были написаны с помощью нейросетей, было выяснено, что студенты потратили существенное количество часов на редактирование результата, выданного ИИ.

Выяснилось, что 72% работ содержали грубые фактические и логические ошибки. В более чем 67% работ повествование отклонялось от темы и работы содержали много выражений, не несущих смысла. Также преподаватели отметили стилистические и орфографические особенности текста — например, исключительную грамотность, отсутствие опечаток, но при этом тесты содержали большое число самоповторов.

«В целом все тексты, созданные нейросетью, представляли компиляцию тезисов и предложений из написанных ранее научных трудов и работ и не содержали оригинальных суждений и выводов», — уточнили в РТУ МИРЭА.

По словам ректора вуза Станислава Куджа, эксперимент на практике доказал, что современный уровень развития нейросетей не проблематизирует возможность качественно проверить и оценить знания студентов высших учебных заведений.

Также, по мнению Куджа, эксперимент на практике показал, что современный уровень развития нейросетей не позволяет создавать новый научный продукт.

«Тем более нейросеть неспособна создать принципиально новый научный или творческий продукт, так как её работа строится исключительно на переработке заложенных в неё человеком знаний», — сказал Кудж.