ChatGPT-generated help produces learning gains equivalent to human tutor-authored help on mathematics skills
by Zachary A. Pardos, Shreya Bhandari
Authoring of help content within educational technologies is labor intensive, requiring many iterations of content creation, refining, and proofreading. In this paper, we conduct an efficacy evaluation of ChatGPT-generated help using a 3 x 4 study design (N = 274) to compare the learning gains of ChatGPT to human tutor-authored help across four mathematics problem subject areas. Participants are randomly assigned to one of three hint conditions (control, human tutor, or ChatGPT) paired with one of four randomly assigned subject areas (Elementary Algebra, Intermediate Algebra, College Algebra, or Statistics). We find that only the ChatGPT condition produces statistically significant learning gains compared to a no-help control, with no statistically significant differences in gains or time-on-task observed between learners receiving ChatGPT vs human tutor help. Notably, ChatGPT-generated help failed quality checks on 32% of problems. This was, however, reducible to nearly 0% for algebra problems and 13% for statistics problems after applying self-consistency, a “hallucination” mitigation technique for Large Language Models.
Moscow.media
Частные объявления сегодня
Пожар в центре Москвы локализован на площади 600 квадратных метров
Мытищинский форсаж: часть вторая
КАК АНТАГОНИСТ МОЖЕТ ИЗМЕНИТЬ МИР ИЛИ ИСТОРИЯ ОДНОГО МОСКОВСКОГО РЭПЕРА.
Совладелец «ТЕХНОНИКОЛЬ» Игорь Рыбаков запустил на Дальнем Востоке бизнес-клуб «Эквиум»
Открой для себя свои Курилы
Выставка «Интерткань» представляет участников раздела «Пряжа и нити»
Переподготовка "ПГС: проектирование зданий (расчётно-конструктивный раздел)”
Гала-закрытие I Международного фестиваля «Мир классического романса» состоится в Капелле Санкт-Петербурга
Leeloo Dolls UK: The Epitome of Realism and Diversity
Sky Sports issue grovelling apology to Nottingham Forest after Gary Neville’s ‘Mafia gang’ outburst
Leeloo Dolls: Your Premier Destination for Realistic Sex Dolls
An iconic Michael Jordan photo will be on Tyler Reddick's car as he races through Chicago
Когда лежать на пляже скучно: названы семь регионов России для активного туризма
Родные просторы... Старая Устьевская ГЭС на реке Вруда
Ученые создали мышь с иммунитетом человека
Мимо прошла... Я о грозе ?
Dead Space x Battlefield 2042 crossover event looks fun, even if it isn't quite what Dead Space fans have been hoping for
Escape From Tarkov studio Battlestate Games has put a bounty on cheaters
Macrumors: «В iPhone 17 Slim будет 8 ГБ ОЗУ, а стоить он будет больше Pro Max»
The internet is not a free-for-all—we shouldn't let big tech companies wish copyright out of existence
Менеджер модельных Показов для Платного участия в Дизайнерских Показах.
Росгвардейцы обеспечили безопасность на футбольном матче в Москве
Мытищинский форсаж: часть вторая
Ансамбль ранней музыки из Москвы выступит на фестивале «Довмонт Псковский»
Мытищинский форсаж: часть вторая
Совладелец «ТЕХНОНИКОЛЬ» Игорь Рыбаков запустил на Дальнем Востоке бизнес-клуб «Эквиум»
Уедет жить в Лондон: невеста Лепса поступила в заграничный колледж
Tele2 модернизировала сеть на транспортных узлах по всей России
Уедет жить в Лондон: невеста Лепса поступила в заграничный колледж
Волны жары будут накрывать Россию втрое чаще
Вдова Юрия Шатунова показала фото с выпускного сына в Германии
"Сибирь наша, мы пришли за своим". Что мигранты реально думают, но мало кто говорит
Медведев пообещал выложиться на 100 процентов в матче Уимблдона с Синнером
Уроженка Москвы выбила с Уимблдона первую ракетку мира
Теннисистки из Тольятти закончили выступление на турнире в Уимблдоне
Россиянка Шнайдер проиграла американке Наварро на Уимблдоне
Аналитик Хадсон заявил, что санкции США и ЕС против РФ дали обратный эффект
АМЕРИКА ПОДГОТАВЛИВАЕТ ЕВРОПУ ДЛЯ ПЕРЕСЕЛЕНИЙ?! СЕНСАЦИЯ СПОСОБНА НАПРАВИТЬ США И ЕВРОПУ ТВОРИТЬ ДОБРО.
Новосибирский актёр Кологривый сыграет предводителя гномов в приключенческой комедии
Армия Китая показала тройной пистолет-сеткомет для борьбы с FPV-дронами
Музыкальные новости
СМИ: Моди обсудит с Путиным в Москве быстрые переводы в отсутствии SWIFT
Москва на такое не подписывается // Чем завершился сбор автографов в поддержку кандидатов в депутаты Мосгордумы
«С детства знаю рецепт от любви с первого взгляда – посмотреть второй раз». Юрий Лоза рассказал о личном в шоу «Вкусно с Анфисой Чеховой»
В Перми откроется Stars Coffee от Тимати
Москва на такое не подписывается // Чем завершился сбор автографов в поддержку кандидатов в депутаты Мосгордумы
Мытищинский форсаж: часть вторая
Певец Шаляпин признался, что спал с бабушками ради квартиры в Москве
Менеджер модельных Показов для Платного участия в Дизайнерских Показах.
В Каргополе развернулся «Театр народной жизни»
Певец Жуков подал в суд за права на фонограммы песен группы "Руки вверх"
Собянин: москвичи активно помогают жителям новых регионов
Тысяча сердец в небе, Газманов, Лепс и Shaman: в Москве подвели итоги выставки «Россия»
Автобус насмерть прижал своего водителя к эвакуатору в Москве
Водитель врезался в столб и разбился насмерть на севере Москвы
Пенсионерку на велосипеде сбили в Кстовском районе
Московские производитель разработал устройство для идентификации объектов на расстоянии до 15 метров
The Economic Times: Путин и Моди обсудят быстрый перевод денег между странами
Путин на следующей неделе планирует принять участие в Парламентском форуме БРИКС
СМИ: Моди обсудит с Путиным в Москве быстрые переводы в отсутствие SWIFT
Путин встретится с премьер-министром Индии Моди 8 и 9 июля
В Ростове стартовал зумба-тур против рака груди
В Москве врачи борются за жизнь младенца, выпавшего из окна 11-го этажа
Врач посоветовала, как пережить аномальную жару
Врач Тяжельников: Быть на улице более 15 минут без одежды опасно из-за солнца
Бастрыкин потребовал доклад об изнасиловании сотрудницы «Матч ТВ» в Москве
Мытищинский форсаж: часть вторая
Трое мигрантов задержаны по подозрению в изнасиловании сотрудницы «Матч-ТВ»
В Ростове стартовал зумба-тур против рака груди
Сергей Собянин. Главное за день
Собянин утвердил субсидии для компаний, работающих в приоритетных отраслях
Собянин: москвичи активно помогают жителям новых регионов
Собянин: Детский Черкизовский парк стал отличным местом для спорта и отдыха
Биолог Мейнцер: из-за жары в Москве могут появиться медузы
Врач посоветовала, как пережить аномальную жару
Tesla разорвало на части при массовом ДТП в центре Москвы
Многоразовый мангал и экологичная тара: москвичам рассказали об организации экопикника
АМЕРИКА ПОДГОТАВЛИВАЕТ ЕВРОПУ ДЛЯ ПЕРЕСЕЛЕНИЙ?! СЕНСАЦИЯ СПОСОБНА НАПРАВИТЬ США И ЕВРОПУ ТВОРИТЬ ДОБРО.
Аналитик Хадсон заявил, что санкции США и ЕС против РФ дали обратный эффект
Инвесторы приступили к освоению 11 столичных промзон в 2024 году
Вдова Юрия Шатунова показала фото с выпускного сына в Германии
Зачем россияне вживляют чипы себе под кожу
Собянин: Утвержден проект участка метро от «Липовой рощи» до «Ильинской»
Мимо прошла... Я о грозе ?
В Архангельской области появились станции зарядки электротранспорта
Люська ВЦЕПИЛАСЬ во Влада мертвой хваткой и поехала СОБИРАТЬ ШЕЛКОВИЦУ!
Выставка-настроение «Семья, согретая любовью, всегда надежна и крепка»
В Крыму 12-летняя родственница чиновника на электросамокате сбила коляску с ребенком, но ей ничего не будет
Глава Симферополя ходит на работу в рубашке polo итальянского дизайнера
Бастрыкин поручил доложить о расследовании изнасилования сотрудницы "Матч ТВ"
В Якутске нашли пропавшего молодого человека с редким заболеванием. Его мать просит горожан не давать ему денег — он притворяется глухонемым
Уедет жить в Лондон: невеста Лепса поступила в заграничный колледж
Почти 100 пассажиров SSJ 100 в Пулково эвакуировали из-за задымления двигателя
