Google разработал робота с искусственным интеллектом

Дети начинают ходить в разном возрасте – от 10 месяцев и старше. Это неплохо, учитывая, что средняя продолжительность жизни человека составляет около 83 лет, но это не идет ни в какое сравнение с тем, чего добился четырехногий робот с Google AI, которому удалось научиться ходить за пару часов.

Ученые использовали передачу навыков с глубоким подкреплением (Deep RL) для разработки системы машинного обучения для передвижения в реальном мире. Они разработали многозадачную среду обучения: для робота были разработаны алгоритмы, чтобы идти вперед, а также назад или вбок в зависимости от обстоятельств.

Иди, падай и вставай сам

Как правило, при реализации алгоритма обучения требуется некоторое вмешательство человека, чтобы вернуть устройство в исходное положение. В случае робота, если он пытается встать и падает, человек должен взять его и правильно поставить, чтобы робот попытался снова. Интересно, что робот делает все сам, изучая все необходимые инструкции самостоятельно.

Кроме того, при использовании обучения с подкреплением, как правило, генерируется симуляция, которая имитирует поведение робота в реальном мире через виртуальный сценарий. Таким образом алгоритм обучается, что впоследствии реализуется в конечном устройстве. Google, однако, предпочел пропустить этот этап и сделать все на самом устройстве.

Причина в том, что есть много переменных для моделирования, но в основном это ландшафт. Имитировать след на деревянной или каменной поверхности не то же самое, что на матраце или более мягкой поверхности, поэтому вместо этого Google перенесли симуляцию на физическую плоскость, изменив поверхность, на которой тренировался робот, чтобы увидеть, способен ли он адаптироваться самостоятельно.

Общая поверхность была 5х2 метров, и робот должен был научиться не выходить за пределы и маневрировать. Другими словами, если робот достигал края, он понимал, что нужно двигаться в противоположном направлении, чтобы вернуться в активированную область, обучаясь идти назад. Вот что имеется в виду под «многозадачными рамками обучения».

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *