Создан новый инструмент для проверки достоверности ИИ
Группа ученых из Корнеллского университета, Университета Вашингтона и Института искусственного интеллекта Аллена разработала новый инструмент для оценки фактической точности больших языковых моделей (LLM), названный WILDHALLUCINATIONS. Описание инструмента опубликовано на сервере arXiv.
LLM, такие как ChatGPT, популярны для создания текстов, однако их недостатки становятся очевидными: модели часто делают неточные утверждения, которые называют «галлюцинациями». Причиной таких ошибок является качество данных, используемых для обучения моделей, обычно это текст из интернета.
Ученые разработали инструмент, который позволяет оценить точность популярных LLM, проверяя их ответы на факты. В ходе тестирования WILDHALLUCINATIONS обнаружил, что многие обновленные модели не продемонстрировали значительного улучшения точности. Модели лучше справлялись с запросами на основе информации из информационных энциклопедических источников, но испытывали трудности с данными о знаменитостях и финансовых вопросах.
Новости России
Москва
ИТ-заёмщикам — ставки меньше 6%: «Выберу.ру» составил рейтинг лучших ИТ-ипотек в августе 2024 года
Читайте также:
00:00
00:00
00:00
Вчера 23:55
Moscow.media
Частные объявления сегодня
Финальная в сезоне «Гонка Героев» в Москве. Партнер – ENERGY
Представители СЛД «Узловая» филиала «Московский» компании «ЛокоТех-Сервис» поощрены наградами Дорпрофжела
XVI Международный военно-музыкальный фестиваль «Спасская башня» пройдет на Красной площади
“Кирилл Вечер & Tassy”–музыкальный дуэт из Владимирской области.
Российская туристка в Турции вышла из отеля и пропала: начались поиски россиянки
В центральной части России начинается жара до +37 градусов: какой погоды ожидать россиянам в своем регионе 20-22 августа?
Можно ли умереть, если объесться шоколадом?
Dricus du Plessis asks if Sean Strickland wants to ‘cry again,’ says Robert Whittaker more deserving of title shot
Trump blasts Harris on inflation
Lewis Hamilton reveals F1 retirement plan as he admits ‘I don’t know how much longer I can go’ ahead of Ferrari move
Women's T20 WC may be shifted out to UAE; Bangladesh still keen to host
DатаРу представит новую линейку гибридных систем хранения данных «ДатаРу ОС» для бизнеса
Портативный ТСД корпоративного класса Saotron RT-T70
Boba Tasty Drink Recipe 1.2.4
Crostic – Кроссворд Пазлы Дня 5.3
Найди это – игры со спрятанным 3.26.0
Masters of Albion — Питер Молиньё анонсировал духовного наследника всех своих игр
Депутат Гасан Османов подарил родной школе спортивный инвентарь
Место на кладбище: как получить?
XVI Международный военно-музыкальный фестиваль «Спасская башня» пройдет на Красной площади
Финальная в сезоне «Гонка Героев» в Москве. Партнер – ENERGY
О радио будущего на Московском индустриальном медиафоруме
XVI Международный военно-музыкальный фестиваль «Спасская башня» пройдет на Красной площади
СК возбудил уголовное дело после гибели бармена на калужском фестивале
Финальная в сезоне «Гонка Героев» в Москве. Партнер – ENERGY
Вице-губернатор Ольга Кузнецова встретилась со студентами стройотрядов, работающими на строительной площадке морского порта «Лавна»
День Государственного флага отметят в Ленинском округе
Большое испытание: пскович, забросивший футбол, попал в главную медиакоманду России
Главу управления цифровой трансформации ФСИН Тимченко арестовали за взятку
Новая победа щелковских футболистов
Соболенко стала победительницей турнира категории WTA 1000 в Цинциннати
Двумя сетами завершился финал Соболенко — Пегула в Цинциннати
Соболенко выиграла шестой «тысячник» в карьере
Медведев показал, как его семью встретили в Нью-Йорке перед US Open. Видео
Суд заключил под стражу начальника управления трансформации ФСИН Тимченко по делу о взятке
День Государственного флага отметят в Ленинском округе
Путин и Воробьев открыли новый детский медицинский центр в Подмосковье
Подмосковные компании получили 61 миллиард рублей льготных займов от ФРП России
Музыкальные новости
Криду выписали штраф после концерта с участием Киркорова, Тимати и Джигана
Суд Москвы отклонил жалобу по иску третьей жены Градского по доле в наследстве
Слушатели Радио Romantika посетят концерт Нюши на корабле
Большой театр кукол открывает новый сезон: премьеры и фестивали для Петербуржцев
Место на кладбище: как получить?
О радио будущего на Московском индустриальном медиафоруме
Финальная в сезоне «Гонка Героев» в Москве. Партнер – ENERGY
XVI Международный военно-музыкальный фестиваль «Спасская башня» пройдет на Красной площади
Враг пытался атаковать Москву. Собянин рассказал о сбитом БПЛА
Лучшие боксёры России сразятся в Петербурге за призы спортивного общества «Динамо»
В Кремле пройдет праздничный концерт «День знаний в кругу семьи»
10 сентября «Авторадио» разыграет автомобиль
В центре Москвы частично ограничат движение
В России могут подешеветь электрокары: с чем это связано
В Москве мальчик поджег парковку с десятью автомобилями
Галина Янко: дороги мира, на которых можно встретить призраков
Публицист Белов: Баку оказался для Москвы большим союзником, чем все «братья»
Путин заявил о масштабных совместных планах сотрудничества России и КНР
Путин заявил о планах сотрудничества России и Китая на многие годы вперед
Аксенов уверен, что Путин поможет Крыму деньгами на переправу
Почти 4 тысячи заболевших COVID-19 выявили в столице за неделю
Почти 4 тыс. случаев заболевания коронавирусом выявили в Москве за неделю
Верховный суд отказался перенести в Москву из Петушков рассмотрение дела адвокатов Навального
Верховный суд отказался вернуть дело адвокатов Навального на рассмотрение в Москву
Осужденный за участие в "московских протестах" Константин Котов привлечен по делу о донатах ФБК
Верховный суд не перенес рассмотрение дела адвокатов Навального в Москву
Гигиенист клиники «Мегастом» Инна Гришина: что делать при воспалении десен
Строить будущее, сберегая прошлое. Боткинскую больницу модернизировали
SHOT: в Москве хирурги спасли пациентку с 30-килограммовой опухолью
Врач-стоматолог Татьяна Сумцова: какие опасности подстерегают после удаления зубов мудрости
Удары по Киеву сочли бессмысленными из-за подземных бункеров Зеленского и его приспешников
Пентагон ответил на критику Зеленского в связи с поставками оружия Киеву
Теннисистка Дарья Семянова снялась для обложки нового трека Данила Барановского
Заполярные спортсмены завоевали медали этапа Кубка России по скайраннингу
Финальная в сезоне «Гонка Героев» в Москве. Партнер – ENERGY
Росгвардейцы завоевали серебро на международном футбольном турнире в Москве
Лукашенко принял спикера парламента Пакистана во Дворце независимости
Сергей Собянин. Главное за день
Собянин: силы ПВО ликвидировали в Подольске летевший на столицу дрон
Сергей Собянин включил в программу реновации восемь новых площадок
Враг пытался атаковать Москву. Собянин рассказал о сбитом БПЛА
Синоптик Шувалов рассказал, сколько в Москве продержится аномально теплая погода
Четвертый месяц лета: синоптики сделали заявление - холода наконец-то уйдут
В России могут подешеветь электрокары: с чем это связано
Экоцентр — место, где экология соединилась с искусством
Подмосковные компании получили 61 миллиард рублей льготных займов от ФРП России
В Подольске на фестивале «Славянское подворье» пройдет выставка-пристройство кошек и собак
Эталон международных отношений: что обсуждали Путин и Ли Цян на встрече в Кремле
День Государственного флага отметят в Ленинском округе
Портативный ТСД корпоративного класса Saotron RT-T70
Портативный сканер штрих-кодов Heroje H133U на базе CMOS-матрицы
Экспедиция ВИР продолжает исследование растительных культур Поморья
Святейший Патриарх Московский и всея Руси посетил Соловки
Выставка-гордость «Курская дуга: символ мужества и героизма»
22 августа телевизионная мачта в Оренбурге окрасится в цвета триколора
Час Патриотизма «Вьется над Россией флаг ее судьбы».
Выставка зрительских симпатий «И в каждом кадре скрыто мастерство»
Синоптик Шувалов рассказал, сколько в Москве продержится аномально теплая погода
Суд заключил под стражу начальника управления трансформации ФСИН Тимченко по делу о взятке
Спецсвязь обновляет автопарк: 100 новых «Москвичей 3»
Главу управления цифровой трансформации ФСИН Тимченко арестовали за взятку