Добавить новость
ru24.net
Все новости
Февраль
2024

Можно ли управлять искусственным интеллектом?

0

Доктор Роман Ямпольский (Roman Yampolskiy), эксперт по безопасности искусственного интеллекта, предупреждает о беспрецедентных рисках, связанных с искусственным интеллектом, в своей книге «ИИ: необъяснимое, непредсказуемое, неконтролируемое» (“AI: Unexplainable, Unpredictable, Uncontrollable”). В ходе обширного обзора Ямпольский обнаруживает отсутствие доказательств того, что ИИ можно безопасно контролировать, указывая на потенциальную возможность ИИ вызывать экзистенциальные катастрофы.

Он утверждает, что присущая системам искусственного интеллекта непредсказуемость и повышенная автономность создают серьезные проблемы для обеспечения их безопасности и соответствия человеческим ценностям. В книге подчеркивается острая необходимость расширения исследований и разработок в области мер безопасности ИИ для смягчения этих рисков, пропагандируя сбалансированный подход, отдающий приоритет человеческому контролю и пониманию.

Согласно обширному обзору, в настоящее время нет доказательств того, что ИИ можно безопасно контролировать, и без доказательств того, что ИИ можно контролировать, его не следует разрабатывать, предупреждает исследователь.

Несмотря на признание того, что проблема управления ИИ может быть одной из наиболее важных проблем, стоящих перед человечеством, она остается плохо понятой, плохо определенной и плохо исследованной, объясняет доктор Роман Ямпольский.

В своей будущей книге эксперт по безопасности ИИ Ямпольский рассматривает способы, с помощью которых ИИ может кардинально изменить общество, не всегда в нашу пользу.

Он объясняет: «Мы столкнулись с почти гарантированным событием, которое может привести к экзистенциальной катастрофе. Неудивительно, что многие считают это самой важной проблемой, с которой когда-либо сталкивалось человечество. Результатом может быть процветание или вымирание, и судьба Вселенной висит на волоске».

Неуправляемый сверхинтеллект

Доктор Ямпольский провел обширный обзор научной литературы по ИИ и заявил, что не нашел доказательств того, что ИИ можно безопасно контролировать – и даже если будет какой-то частичный контроль, его будет недостаточно.

Он объясняет: «Почему так много исследователей полагают, что проблема управления ИИ разрешима? Насколько нам известно, этому нет доказательств. Прежде чем приступить к созданию управляемого ИИ, важно показать, что проблема разрешима. Это, в сочетании со статистикой, которая показывает, что развитие сверхинтеллекта ИИ является почти гарантированным событием, показывает, что мы должны поддерживать значительные усилия по обеспечению безопасности ИИ».

Он утверждает, что наша способность создавать интеллектуальное программное обеспечение намного превосходит нашу способность контролировать или даже проверять его. После всестороннего обзора литературы он предположил, что передовые интеллектуальные системы никогда не смогут быть полностью управляемыми и поэтому всегда будут представлять определенный уровень риска, независимо от пользы, которую они приносят. Он считает, что целью сообщества ИИ должна быть минимизация такого риска при максимизации потенциальной выгоды.

Каковы препятствия?

ИИ (и сверхинтеллект) отличаются от других программ своей способностью изучать новое поведение, корректировать свою работу и действовать полуавтономно в новых ситуациях.

Одна из проблем, связанных с обеспечением безопасности ИИ, заключается в том, что возможные решения и неудачи сверхразумного существа по мере того, как оно становится более способным, бесконечны, поэтому существует бесконечное количество проблем безопасности. Просто спрогнозировать проблемы невозможно и устранить их с помощью обновлений безопасности может быть недостаточно.

В то же время, объясняет Ямпольский, ИИ не может объяснить то, что он решил, и/или мы не можем понять данное объяснение, поскольку люди недостаточно умны, чтобы понять реализованные концепции. Если мы не понимаем решений ИИ и у нас есть только «черный ящик», мы не сможем понять проблему и снизить вероятность будущих аварий.

Например, системам искусственного интеллекта уже поручено принимать решения в таких сферах, как здравоохранение, инвестирование, трудоустройство, банковское дело и безопасность, и это лишь некоторые из них. Такие системы должны быть способны объяснить, как они пришли к своим решениям, в частности, чтобы продемонстрировать, что они свободны от предвзятости.

Ямпольский объясняет: «Если мы привыкнем принимать ответы ИИ без объяснения причин, по сути, рассматривая его как систему Oracle, мы не сможем сказать, начнет ли он давать неверные или манипулятивные ответы».

Контролируя неконтролируемое

По мере увеличения возможностей ИИ его автономность также увеличивается, но наш контроль над ним уменьшается, объясняет Ямпольский, а увеличение автономности является синонимом снижения безопасности.

Например, чтобы сверхинтеллект избежал получения неточных знаний и устранить любую предвзятость своих программистов, он мог бы игнорировать все такие знания и заново открыть/доказать все с нуля, но это также устранило бы любую прочеловеческую предвзятость.

«Человечество стоит перед выбором: станем ли мы подобны младенцам, о которых заботятся, но не контролируют, или мы отказываемся от полезного опекуна, но остаемся ответственными и свободными».

Он предполагает, что можно найти точку равновесия, в которой мы пожертвуем некоторыми возможностями в обмен на некоторый контроль за счет предоставления системе определенной степени автономии.

Согласование человеческих ценностей

Одним из предложений по контролю является создание машины, которая бы точно следовала человеческим приказам, но Ямпольский указывает на возможность противоречивых приказов, неправильного толкования или злонамеренного использования.

Если бы ИИ действовал скорее как советник, он мог бы обойти проблемы с неправильной интерпретацией прямых приказов и возможностью злонамеренных приказов, но автор утверждает, что для того, чтобы ИИ был полезным советником, он должен иметь свои собственные высшие ценности.

«Большинство исследователей безопасности ИИ ищут способ привести будущий сверхинтеллект в соответствие с ценностями человечества. ИИ, ориентированный на ценности, будет предвзятым по определению, предвзятость в пользу человека, хорошая или плохая, по-прежнему остается предвзятостью. Парадокс ИИ, ориентированного на ценности, заключается в том, что человек, явно приказывающий системе ИИ что-то сделать, может получить «нет», в то время как система пытается сделать то, что на самом деле хочет человек. Человечество либо защищают, либо уважают, но не то и другое», — объясняет он.

Минимизация риска

По его словам, чтобы свести к минимуму риск ИИ, он должен быть модифицируемым с возможностью «отменить», ограниченным, прозрачным и простым для понимания на человеческом языке.

Он предлагает разделить весь ИИ на контролируемый и неконтролируемый, ничего не следует снимать с повестки дня и ограничивать моратории и даже рассматривать возможность частичного запрета на определенные типы технологий ИИ.

Вместо того, чтобы разочаровываться, автор книги заключает: «Скорее, это повод для большего числа людей копать глубже и увеличивать усилия и финансирование исследований в области безопасности ИИ. Возможно, мы никогда не добьемся 100% безопасного ИИ, но мы можем сделать ИИ более безопасным пропорционально нашим усилиям, что намного лучше, чем ничего не делать. Нам нужно использовать эту возможность с умом».

Авторы другого исследования утверждают, что искусственный интеллект предсказывает успех антидепрессанта сертралина уже через неделю.

Запись Можно ли управлять искусственным интеллектом? впервые появилась Medical Insider.




Moscow.media
Частные объявления сегодня





Rss.plus



Токсиколог Кутушов назвал привычку ставить много будильников опасной для здоровья

Соцфонд проиндексирует пенсии работающим пенсионерам в феврале

Филиал № 4 ОСФР по Москве и Московской области напоминает: В Московском регионе 11,4 тысячи пап находятся в отпуске по уходу за ребенком

Грибная охота: токсиколог Кутушов рассказал, как избежать отравления и собирать только безопасные грибы


«Мы не могли нормально работать»: как Азербайджан препятствовал оказанию помощи Красного Креста во время блокады Нагорного Карабаха. Фоторяд

Российский турист прилетел на Кубу и был отправлен назад в Россию по этой причине

От мечты к реальности: как KPI помогут достичь целей компании

Деловые мероприятия на выставке «Интерткань-2024. Осень» 10-12 сентября


Snell shines, Chapman plays hero as SF Giants rally for needed win

‘We’ll be woken up at 4am every DAY’ slam locals over £200m expansion of major UK airport… but some can’t wait

League One side Birmingham make £10m bid for Premier League striker that will shatter division’s transfer record

Crew of doomed Bayesian superyacht say they ‘saved who they could’


Bluetooth-сканер штрих-кодов SAOTRON P04 на базе CMOS-матрицы

Соцфонд проиндексирует пенсии работающим пенсионерам в феврале

Прогулки над облаками...

ЗА ГРАНИЦУ С ЧИСТЫМ ЗОЛОТОМ


Дедушка Мороз, ты подарки нам принес? 1.22.1

Risk of Rain 2 creators weigh in on Gearbox's first DLC without them: 'It's great to see new content for the game, but it's hard to see growing pains of the new team in real time'

Doomsday: Last Survivors 1.33.0

Asus ROG Zephyrus G16 (2024) GA605 review


Як встановити ручки на планці для дверей

Як вибрати накладний замок


Филиал № 4 ОСФР по Москве и Московской области информирует: В Московском регионе 11,4 тысячи пап находятся в отпуске по уходу за ребенком

Заместитель управляющего ОСФР по г. Москве и Московской области Алексей Путин об индексации работающим пенсионерам

Радио привлекает внимание к социальным темам и меняет мир

Филиал № 4 ОСФР по Москве и Московской области напоминает: В Московском регионе 11,4 тысячи пап находятся в отпуске по уходу за ребенком




Радио привлекает внимание к социальным темам и меняет мир

Токсиколог Кутушов назвал привычку ставить много будильников опасной для здоровья

Грибная охота: токсиколог Кутушов рассказал, как избежать отравления и собирать только безопасные грибы

Сергей Иванов предложил расширить программу субсидированных перелётов


Лесной пожар ликвидировали в городском округе Ступино

ТАСС: задержанного за взятку генерала Муминджанова отправили в Москву

Русская школа как кузница величия государства Российского

Радио привлекает внимание к социальным темам и меняет мир


Теннисист Медведев прошел в третий круг US Open в Нью-Йорке

Тиафу об Арене Артура Эша: «Я всегда мечтал играть на этом корте. Тут я лучшая версия себя»

Теннисист Рублев проиграл Димитрову в матче четвертого круга US Open

Джокович проиграл в третьем круге US Open и впервые с 2017 года завершит год без титула на турнире Большого шлема


Радио привлекает внимание к социальным темам и меняет мир

Лесной пожар ликвидировали в городском округе Ступино

Детское радио приглашает в мир безопасного контента

ТАСС: задержанного за взятку генерала Муминджанова отправили в Москву


Музыкальные новости

У дома в Москве, где жил Юрий Шатунов, высадили белые розы

Концерт группы «Интонация» состоялся в Пскове. ФОТО

Placebo не выступят в Казахстане и Грузии

«Бал соблазнов»: Киркоров спел на 50-летии уральского бизнесмена за 10 миллионов



Радио привлекает внимание к социальным темам и меняет мир

Филиал № 4 ОСФР по Москве и Московской области напоминает: В Московском регионе 11,4 тысячи пап находятся в отпуске по уходу за ребенком

Заместитель управляющего ОСФР по г. Москве и Московской области Алексей Путин об индексации работающим пенсионерам

ТАСС: задержанного за взятку генерала Муминджанова отправили в Москву


Росгвардейцы обеспечили охрану общественного порядка на Дне города Клин

Источник 360.ru: в Бибирево водитель Hyundai сбил подростка на переходе

Грибная охота: токсиколог Кутушов рассказал, как избежать отравления и собирать только безопасные грибы

"Спартак" в меньшинстве вырвал победу в матче против "Рубина"


Жительница Ленобласти угнала машину в Москве

Сын генерала Муминджанова оказался владельцем BMW и квартиры в элитном ЖК Москвы

Водитель Mercedes избил мужчину и переехал его в Москве

В КХЛ может появиться новый клуб из Москвы, России нашли замену на ОИ. Итоги дня в хоккее


Путин назвал развитие связей с Монголией одним из приоритетов РФ

Эксперт: В Монголии Москве интересны модернизация ТЭС и проект «Союз Восток»

Заместитель управляющего ОСФР по г. Москве и Московской области Алексей Путин об индексации работающим пенсионерам

Путин рассказал о работе над трехсторонними отношениями с КНР и Монголией





Собянин назвал лично лекарств, произведенных по офсетным контрактам

В госпитальной школе подмосковного онкодиспансера прозвенел первый звонок

Педиатр Константинова: пример семьи имеет большое значение в борьбе с ожирением у детей

Собянин: Более 2,4 млн упаковок лекарств получил город по офсетным контрактам



Губернатор Орловской области Андрей Клычков встретился со студентам Мезенского педколледжа

Все на футбол! «НАШЕ Радио» устроит в Москве спортивный праздник

Новый персонаж сериала «Команда МАТЧ» Шоня стал талисманом «Матч ТВ»

Дмитрий Черышев: Денис не завершил карьеру и ведёт переговоры с клубами


Лукашенко советует молодежи в регионах не стремиться в Минск

"Если попробуют более жёстко, погибнет вся планета": Лукашенко предупредил США



Собянин открыл школу на юго-западе Москвы после реконструкции

Сергей Собянин. Главное за день

Собянин назвал лично лекарств, произведенных по офсетным контрактам

Собянин: В 2025 году завершится обновление 50 зданий школ


Синоптик Ильин: аномальная жара в Москве связана с антициклоном

Птицы массово гибнут на пруду в Новой Москве

"Просто Михалыч" во второй раз покажет сибирский характер столичным нуворишам

В воскресенье еще потеплеет: с чем связана аномальная жара в Москве в сентябре


Лесной пожар ликвидировали в городском округе Ступино

ГПМ Радио на Московском медиафестивале

В Сочи подвели итоги конкурса национальной патриотической песни «Красная гвоздика» имени Иосифа Давыдовича Кобзона

Русская школа как кузница величия государства Российского


Архангельские работодатели жалуются на старение населения в регионе

В Ярославской области выполнен ремонт магистрального трубопровода

Ревнивый муж залил зеленкой бывшего мэра Архангельска на съемках фильма

Близкая Арктика: что посмотреть в Архангельской области


Встреча друзей «Храм науки, мечтаний, чудес»

Выставка крымского имени «Тайны души и творчества Алемдара Караманова»

Выставка-обращение «Наш мир без террора»

1 и 2 сентября филиал РТРС «РТПЦ Республики Мордовия» и Министерство образования Республики Мордовия проведут совместную акцию, приуроченную ко Дню знаний и началу нового учебного года.


Вместе теплее: большой коллектив Мособлгаза встретил профессиональный праздник

«Понимает два языка и хочет победить»: как собаки таможни стран СНГ соревнуются в Казани

Жители Кирово-Чепецкого района мечтают о мобильном интернете

Милонов призвал россиянок искать себе пару в церкви












Спорт в России и мире

Новости спорта


Новости тенниса
Людмила Самсонова

Теннисистка Самсонова вышла в четвертый круг US Upen






Камчатка скорбит по жертвам крушения Ми-2

Как я обращался в клининговую компанию «Золушка» за профессиональной уборкой: когда сказка стала реальностью, а реальность — сказкой

ГПМ Радио на Московском медиафестивале

Сергей Романов представил обновлённую социальную сеть SocialAppe 2024