Искусственный интеллект самостоятельно освоил сумо

Исследователи из компании OpenAI, одним из основателей которой является Илон Маск, создали среду для обучения искусственного интеллекта сумо. Они также разработали алгоритмы, которые самостоятельно научились бороться друг с другом за счёт метаобучения. Алгоритм на основе предыдущего опыта адаптировал обучение и при этом учитывал стоящую перед ним задачу.


Специальная виртуальная среда RoboSumo поддерживала обучение агентов с четырьмя, шестью и восемью ногами. Разработчики вывели «популяцию» из 1050 агентов, которые различались строением и способами обучения. Сначала они самостоятельно научились ходить, а затем бороться с использованием различных тактик.


Учёные сталкивали агентов между собой, которым нужно было выбить противника с площадки или перевернуть его. Проигравшие агенты исчезали, а победившие размножали свой вид, поэтому состав популяции периодически менялся. К концу эксперимента шестиногие «существа» начали доминировать в популяции.


Исследователи также устроили борьбу человекоподобных агентов с более сложной анатомией, в которой они использовали различные тактики.