Дмитрий Суцилов
Игрок со стажем.

Роботы компании DeepMind овладели самообучением

Фото: Популярная Механика.
Фото: Популярная Механика.

Ну вот, мы все ближе и ближе к тому сценарию, который описан во множестве голливудских блокбастеров — роботизированному апокалипсису. DeepMind, сестринская компания Google, отвечает за умнейший ИИ представленный на сегодняшний день. Она смогла внедрить в своих роботов программу самообучения.


Роботы пока не смогли достичь больших высот в самообучении. Сейчас в мире существует лишь такой ИИ, который может определить, является ли что-то, к примеру, музыкальной пластинкой или нет. Такой способ не концентрирует робота на сравнении с почти бесчисленным количеством вещей, предназначение которых роботу только предстоит узнать.

Решение этой проблемы было предоставлено компанией DeepMind, которая смогла составить абсолютно новую обучающую парадигму, предназначенную для роботов с искусственным интеллектом. Методика получила название "Запланированное вспомогательное управление (SAC-X)". Новая парадигма преподносит роботам простую цель, за успешное выполнение которой они получают некое вознаграждение.

Вспомогательные задачи, которые мы составляем, имеют один общий принцип, а именно побуждение робота к исследованию всего, что доступно для сенсорного потенциала. К примеру, активируя "чувства" робота в пальцах, мы позволяем ему ощутить силу в запястье. Также мы можем управлять и максимизировать угол сустава в датчиках, или заставить определять движение объектов при помощи визуальных датчиков робота, таких как камера, — следует из блога DeepMind.

Исследователи не дают роботу способ решения проблемы, они просто предоставляют ему все возможное оборудования для поиска пути решения поставленной задачи.

Путём изучения окружающей среды и проверки функциональности установленных датчиков, робот получает в награду некую точку. А при условии неудачи не получает ничего вовсе.

Если до этого вам удосужилось наблюдать за принципом работы робота, строящего автомобили, или допустим мебель, вы вряд ли удивитесь руке робота шевелящейся в коробке. Но все удивительное скрывается в этом простейшем процессе, не подкрепленном определенной программой написанной разработчиками, этот робот просто пытается понять, как развеселить человека.

Продолжая следовать этому пути, DeepMind полностью изменит мир, совершенствуя технологию изо дня в день. Сегодня вы вряд ли отыщете робота, способного самостоятельно убираться, ходить или управлять машиной. Заправить кровать, выкинуть мусор или запустить кофеварку — это невероятно сложные действия даже для самого продвинутого ИИ современности. Для каждой задачи существует бесчисленное количество путей выполнения.

Если DeepMind не собьется со своего пути, то рано или поздно она достигнет этой вершины. Всё начинается с малого, например, когда робот самостоятельно экспериментирует с какими-нибудь кубиками.