Роботы учатся намного лучше, если добавить звук

Ученые обучали робота, например, стирать картинку с доски ластиком или переворачивать бублик на сковородке не только с помощью видео, но и с помощью аудио. Звук помог боту лучше выполнить некоторые задачи.

Группа робототехников из Стэнфордского университета и Исследовательского института Toyota выяснила, что добавление аудиоданных к визуальным данным при обучении роботов способствует улучшению их навыков обучения. Об этом сообщает TechXplore. 

Исследователи обратили внимание, что при обучении роботов на базе ИИ их практически всегда «кормят» большим объемом визуальной информации, полностью игнорируя сопутствующее звуковое сопровождение. Ученые задались вопросом, улучшится ли процесс обучения, если роботов оснастить микрофонами и позволить им собирать данные о том, как должен звучать выполняемый процесс.

Например, если робота обучают открывать коробку хлопьев и наполнять миску, ему может быть полезно слышать звуки открытия коробки и хлопьев, сыплющихся в посуду. Чтобы проверить эту гипотезу, исследователи разработали и провели четыре эксперимента по обучению роботов.

В первом эксперименте робот учился переворачивать бублик на сковороде с помощью лопатки. Во втором нужно было стирать изображение на белой доске ластиком. В третьем — пересыпать игральные кости из одной чашки в другую. В четвертом — выбрать нужный по размеру скотч из трех образцов и закрепить провод на пластиковой полоске с его помощью.