Исследование показало, что люди не смогут управлять сверхразумными машинами.

Международная группа ученых продемонстрировала, что управление сверхразумным искусственным интеллектом невозможно.

Работа в Journal of Artificial Intelligence Research опубликована. Опасность, которая может исходить от сверхразумного ИИ, как известно, в красках описана в блокбастерах о терминаторе
. Представители разных научных дисциплин, в том числе специалисты из центра людей и машин института развития человека Макса планка, решили проверить, насколько человек способен управлять сверхинтеллектуальными роботами.
"Сверхразумная машина, которая управляет миром - звучит как научная фантастика. Но уже есть роботы, выполняющие определенные важные задачи независимо. При этом программисты вообще не понимают, как они этому научились. В результате возникает вопрос: может ли этот процесс в какой-то момент стать неконтролируемым и опасным для человечества? " - говорит один из авторов исследования Мануэль себриан, руководитель группы цифровой мобилизации в центре людей и машин института Макса планка.

Чтобы ответить на этот вопрос, ученые использовали моделирование и теоретические расчеты. Как выяснилось, даже если заложить в сверхразумную машину данные об этических принципах и ограничить ее связи с внешним миром (например, отключить доступ в интернет), это не спасет человечество от рисков того, что подобная система выйдет из-под контроля.
Дело в том, что, согласно теории информатики, любой из алгоритмов такого сдерживания - будь то программы об этических принципах или ограничение доступа к внешнему миру - уязвим и при определенных обстоятельствах вполне способен отключить сам себя. Поэтому специалисты делают вывод, что управлять сверхразумным ИИ человек попросту не сможет и ситуация рано или поздно может выйти из-под контроля.

"Мы утверждаем, что полное сдерживание в принципе невозможно из-за фундаментальных ограничений, присущих самому вычислению. Сверхразум будет содержать программу, которая включает в себя все программы, осуществляемые при помощи универсальной машины тьюринга, потенциально столь же сложной, как состояние мира", - заключают исследователи. vk. cc/bX4qWa.