494
ChatGPT отвечает неправильно на 52% вопросов программирования
— Технологии&Авто
Популярный ИИ-сервис ChatGPT дает 52% неправильных ответов на вопросы, касающиеся программирования.
Об этом говорится в исследовании Университета Пердью, недавно представленном на конференции Computer-Human Interaction.
Для исследования просмотрели более 517 вопросов в Stack Overflow.
«Мы обнаружили, что 52% ответов ChatGPT содержат дезинформацию, 77% ответов более многословны, чем ответы людей, а 78% ответов имеют разную степень несоответствия», — написали они.
Читайте также: Нейросети для бизнеса 2024. Что умеет искусственный интеллект?
Особенно беспокоит то, что многие программисты используют для консультаций именно ChatGPT. Исследователи обнаружили, что 35% предпочитают ChatGPT и не замечают ошибок 39%.
«Дальнейшие полуструктурированные интервью показали, что вежливый язык, сформулированные исчерпывающие ответы в стиле учебника являются одними из основных причин, которые сделали ответы ChatGPT более убедительными, поэтому участники склонны ему доверять», — пишут исследователи.
Отметим, что за полтора года трафик Stack Overflow снизился примерно на 35%. И заметное падение началось после релиза ИИ-чата ChatGPT. В ответ на это Stack Overflow анонсировал OverflowAI — комплекс функций, работающих на основе искусственного интеллекта.
Также Stack Overflow даже решил запретить использование ChatGPT на платформе, заявив, что сомневается в точности таких ответов.
Тем не менее, это не помогло, и Stack Overflow уволил 28% персонала.
По материалам: ITC.ua
Поделиться новостью
