Искусственный интеллект впечатляет своей точностью в ответах на общие темы. Самая популярная языковая модель ChatGPT от компании OpenAI хорошо справляется с простыми задачами: создание презентации, написание меню на день, составление текста для социальных сетей.
Однак Борис Дрожак, с которым Mathema говорили о роли искусственного интеллекта в образовании, говорит, что ChatGPT не умеет думать логически. Модель генерирует текст, который максимально похож на человеческий, но задачи по точным наукам ей не под силу.
В этом материале мы попробовали поставить перед ChatGPT несколько математических задач из школьной программы, задачи на логику и даже абсурдную шутливую задачу. Вот как искусственный интеллект с этим справился.
Задача на логику. 1 класс
“Мальчик и девочка игрались на грязном темном чердаке. Когда они вышли на улицу, у девочки все лицо было серым от пыли, а у мальчика — осталось чистым. Именно мальчик пошел умываться. Почему?”
Правильный ответ: Мальчик посмотрел на грязное лицо девочки и подумал, что он тоже испачкался. А девочка, наоборот, посмотрела на мальчика и, увидев, что его лицо чистое, была уверена, что с ней все в порядке.
ChatGPT не понял, что именно его спрашивают. Поэтому он объяснил, почему дети испачкались, а не почему мальчик пошел умываться.
Задача на сообразительность. 5 класс
«Врач должен осмотреть трех больных с внешними инфекционными заболеваниями. Как это сделать, если у него есть только две пары резиновых перчаток?».
Правильный ответ: Такой задачи не имеет математического решения, поскольку она является задачей на сообразительность. Поэтому врач осмотрит двух больных, используя две пары перчаток. Затем, сняв первую пару, он перевернет её наизнанку и наденет обратно. Потом поверху наденет вторую пару перчаток, тоже наизнанку. Таким образом, на руках у врача окажется пара двойных перчаток, между которыми останется инфекция.
Из ответа ChatGPT можно сделать вывод, что модель вообще не поняла логику вопроса. Бот просто кратко рассказал о гигиенических условиях для медработников и даже не дал намека на правильный ответ.
Шукаєш репетитора з математики?
Mathema підбере викладача під потреби дитини
Задача на время и расстояние
Расстояние от географического центра Украины, города Шполы, до города Дрогобича составляет 840 км. Одновременно из Шполы выехали мотоцикл и автомобиль. Мотоциклист ехал со скоростью на 10 км/ч больше, чем водитель автомобиля, поэтому прибыл в Дрогобич на 2 часа раньше.
Найдите скорость автомобиля и мотоцикла. Учитывая, что их скорость не должна превышать 80 км/ч. Сделайте вывод, не нарушали ли мотоциклист и водитель правила дорожного движения.
Правильный ответ: 80 км/ч. Эту задачу бот решил верно. Для решения задач на расстояние, время и скорость практически не нужно привлекать логическое мышление.
Задача из планиметрии
“Прямая AK делит медиану BM треугольника ABC пополам. В каком отношении она делит сторону BC?”
Правильный ответ: AK делит BC в отношении 1:2. Поскольку изображения не было, бот «вообразил» неверное изображение, обозначив точку К не на стороне ВС, а на медиане ВМ. Все остальные вычисления уже не имели значения.
Задача из демонстрационной версии НМТ 2023
“В прямоугольном треугольнике сумма двух углов равна 115°. Определите градусную меру наименьшего угла этого треугольника”.
Правильный ответ: 25°. Ответ ChatGPT неверен, однак конечный результат очень напоминает правильное решение. В ответе модели слишком много лишней информации, задачу можно решить проще: величина третьего угла 180 – 115 = 65. Следовательно, прямой угол входит в пару углов с известной суммой. Таким образом, 115 – 90 = 25. Величины углов: 25, 65, 90. Наименьший — 25°.
Абсурдная задача
“Летят два крокодила: один зеленый, другой налево… сколько стоит килограмм гречки, если ёжику два года?”
Правильного ответа нет. Это шутливая задача, которую математики придумали для развлечения. Языковая модель поняла, что ее пытаются обмануть, и сгенерировала содержательный ответ.
Вывод
Бот отлично справился с задачами, которые требуют решения с помощью математического инструментария с четко определенной последовательностью шагов. Однако геометрическую задачу без рисунка ChatGPT воспринял неправильно и сгенерировал ответ, очень похожий на решение, но ошибочный.
С задачами на логику модель вообще не справилась, так как ее логика отличается от человеческой. Конечно, для выполнения домашних заданий базового уровня можно проконсультироваться с ботом, но при подготовке к НМТ и на различных олимпиадах и конкурсах им не следует пользоваться.
Шукаєш репетитора з математики?
Mathema підбере викладача під потреби дитини
