Нейросеть не смогла сдать экзамен в вуз
В московском физтехе (МФТИ) проверили, сможет ли генеративная нейросеть Chat GPT-4 Turbo поступить в их вуз? Для этого ИИ нужно было решить ряд сложных и простых задачек.
Планку поступления уствновили в 85 баллов – такой проходной балл в этот престижный институт. Нейросеть успешно решила простые задачки, где нужно просто подставить формулу. Сложные задачи вызвали у искусственного интеллекта трудности. Нейросеть провалилась с расчетами, путалась в терминах и формулировке ответов, иногда делала нелогичные выводы. Оценку ей поставили где-то между четверкой и тройкой (выше 36 по шкале перевода результатов ЕГЭ в оценки).
Кстати, это не первый экзамен, который сдавал Chat GPT в последнее время. За ЕГЭ по литературе нейросеть получила тройку (55 баллов), так как не справилась с творческим заданием.
Удовлетворительный результат она заслужила и на вступительном экзамене по истории в Уральском федеральном университете. Там, где ответ однозначный, отвечала хорошо. А где необходимы рассуждения — нейросеть не справлялась.
Где нейросеть действительно имеет успех, так это при выявлении нарушителей на ЕГЭ: следит за сдающими экзамен и, если кто подозрительно шевельнулся — например, полез за шпаргалкой, сразу передает сигнал организаторам. Так, в Рособрнадзоре — ведомстве, отвечающем за выпускные экзамены, в прошлом году она пресекла более 200 случаев. Хотя, число 200 не выглядит внушительным в данном контексте. Определенно нарушителей должно быть гораздо больше.