Вы вошли как Гость   Группа "Гости
Приветствую Вас!
Гость
Меню таверны
Курилка
Опрос
Оцените мой сайт
Всего ответов: 28
Посетители
Rambler's Top100
Онлайн всего: 1
Гостей: 1
Пользователей: 0
Главная » 2016 » Октябрь » 1 » Учёные научили искусственный интеллект играть в Doom.
14:11
Учёные научили искусственный интеллект играть в Doom.

Сейчас многие часто пишут об искусственном интеллекте. Совсем недавно была опубликована новость о том, что ученые предрекают восстание ИИ уже к 2075 году. И, похоже, прогнозы ученых не так уж и беспочвенны, ведь искусственный разум научился делать еще одну вещь - играть в видеоигры и совсем недавно обыграл людей в мультиплеере шутера DooM.

Ученые из Университета Карнеги Мелон Гийом Лампль и Девендра Сингх Чаплот создали систему искусственного интеллекта и обучили ее играть в видеоигры. То есть играть в прямом смысле слова. Не ориентироваться по заранее прописанным путям и скриптам, как это происходит со всеми ботами в играх, а именно ориентироваться в виртуальном пространстве, использовать элементы интерфейса и управления, изучать уровни и механики геймплея. То есть, если еще проще, если в современной видеоигре искусственный разум находится «внутри» игры и полностью запрограммирован, то новый созданный ИИ находится «вне» игры и познает внутреннее устройство игрового мира, как и игрок-человек.

Играя в DooM, ИИ использует только поток визуальной информации, считываемой с экрана монитора и выполняет параллельно две задачи. Первая: перемещение по карте, сбор предметов и оружия, анализ интерфейса. Вторая: боевые действия (прицеливание, стрейф, выбор наиболее подходящего оружия, изучение поведения противников).

Как говорят сами исследователи,

«Задача эффективных действий в трехмерной среде шутера от первого лица намного сложней действий в двухмерной среде примитивных игр. Искусственному интеллекту требуются навыки перемещения по карте, сбора оружия и призов, борьбы с противниками и многое другое. Некоторые из элементов игры находятся вне поля зрения игрока, и это все достаточно близко к реальному миру, открывая огромные перспективы в области робототехники, которой и предстоит действовать исключительно в реальном мире».

Обучение искусственного интеллекта всем вышеперечисленным навыкам производилось на пустых картах. Система поощрялась за нахождение правильного маршрута, найденные предметы и секреты, а за смерть на ИИ накладывались штрафы. Затем искусственный мозг научился распознавать врагов и поражать их при помощи доступного арсенала всего за несколько часов. Ну а после началось самое интересное: ИИ выпустили на арены мультиплеерных сражений! И он практически всегда выходил победителем из схваток «1 на 1». Что уж говорить о монстрах, которых новый игрок щелкал как орешки. Кстати говоря, на обучение всем премудростям управления с видеоигрой у ИИ ушла всего одна неделя.

И еще одна новость - в мае 2016-го на основе открытого кода Doom польские исследователи создали платформу VizDoom для разработки искусственного интеллекта, способного играть в эту игру. Поляки вдохновились успехом компании Google DeepMind, которая научила искусственный интеллект играть в двухмерные игры компании Atari, - и решили выяснить, чего можно достичь в 3D-играх. 

Платформа VizDoom заинтересовала многих инженеров, занимающихся машинным обучением. В частности, для изучения возможностей искусственного интеллекта ее использовала студия DICE (самый известный продукт - игры Battlefield). Для дальнейшей популяризации платформы польские исследователи решили устроить соревнование среди агентов (или ботов) с искусственным интеллектом. 

22 сентября 2016-го огласили итоги чемпионата. В нем победила команда IntelAct, состоящая из двух человек: главы лаборатории компьютерного зрения в Intel Labs Владлена Колтуна и сотрудника немецкого Фрайбургского университета Алексея Досовицкого. 

Чемпионат проводился в двух дисциплинах: более простой, когда боты бились друг с другом на известной им карте с использованием ракетницы, и более сложной - на карте, о которой агенты ничего не знали и где они могли использовать любое оружие. В обоих случаях они имели право собирать патроны и аптечки. 

Отличие ботов, участвовавших в соревновании, от обычных ботов (которые есть в каждой игре) состоит в том, что они должны воспринимать игру как человек - то есть наблюдая только за экраном. Они ничего не знают ни о местонахождении патронов, ни о расположении противников. 

В самом начале обучения у бота нет никаких знаний о том, что в принципе происходит в игре, - он не знает, что там есть стены, оружие и монстры.  Бот начинает случайно двигаться и в какой-то момент натыкается на патроны; тут он понимает, что произошло нечто хорошее. В идеале постепенно он понимает, что нужно находить патроны как можно чаще, и начинает делать это целенаправленно. 

Как научиться этому простому действию - подойти к патронам? При текущих алгоритмах требуется, чтобы бот увидел десятки миллионов экранов - это дни и недели игры в реальном времени. Однако боты играют куда быстрее. 

На обучение нейронной сети команда победителей потратила три-четыре дня. Остальное время (на подготовку к соревнованиям участникам отводилось четыре месяца) ушло на отладку. Бот команды IntelAct написан на языке Python. Для его обучения использовалась библиотека Google TensorFlow. 

В отличие от программы AlphaGo, которой для победы над человеком в настольную игру го потребовались сотни и тысячи процессоров, для обучения бота IntelAct нужен один обычный компьютер. Это обусловлено тем, что AlphaGo нужно просчитывать действия на много шагов вперед, тогда как IntelAct действует, исходя из того, что выгодно прямо сейчас, и не просчитывает разные варианты развития событий. 

Чтобы проверить, насколько хорошо бот IntelAct научился играть, его заставляли сражаться с более старыми версиями себя (так же поступали и в DeepMind - нейросеть играла в го с другими версиями себя самой). 

За четыре месяца бот, конечно, не научился действовать идеально во всех ситуациях. Как рассказал инженер, он сам пробовал играть против бота и побеждал его - более-менее опытный человек пока может обыграть искусственный интеллект. Но среди участников турнира ботов IntelAct не было равных. 

Он бился только во второй категории турнира - на неизвестных картах и с любым набором оружия. В 10 из 12 игр бот выиграл, победив ближайшего преследователя со счетом 256:164 по числу фрагов (убийств). Второе место заняла команда The Terminators из двух человек - выпускников Университета Карнеги - Меллон. В первой дисциплине (на знакомой карте) выиграла команда F1 сотрудников Facebook (во второй они не участвовали). The Terminators заняли второе место и там. 

18 сентября, за несколько дней до объявления итогов соревнований, участники The Terminators опубликовали научную работу, в которой рассказали, как работает их бот. В отличие от бота IntelAct, их искусственный интеллект представляет собой не одну, а две нейронные сети: одна отвечает за перемещение, другая - за стрельбу. 

Они - опять же, в отличие от команды IntelAct - тренировали своего бота не только на основе визуальной информации, но и получая от самого движка игры данные о присутствии патронов и противников в поле зрения. По словам Алексея Досовицкого из IntelAct, никаких нарушений в этом нет, хотя в его команде решили, что действовать так «некрасиво и нереалистично», поскольку у обычного игрока нет доступа к данным игры, только картинка на экране.  

В научной работе выпускников Университета Карнеги -  Меллон утверждается, что их бот играет лучше людей. «Я немного удивился, что мы у них выиграли после таких заявлений», -  признает Алексей Досовицкий. Он предполагает, что The Terminators тестировали своих ботов на тех же картах, где и тренировали; либо они сильно улучшили алгоритм за те две недели, которые прошли с дедлайна на подачу заявок на соревнования. 

В некоторых публикациях о турнире ботов, которых научили убивать, высказываются опасения, что это может означать начало создания сети Skynet из фильма «Терминатор», пытавшейся уничтожить человечество. «Лицемерно говорить, что тренировать агентов собирать яблоки и пускать радуги друг в друга - это хорошо, а играть в Doom - это плохо. Мы, конечно, против человекоподобных роботов-убийц, но эту проблему нужно решать не запрещая играть в Doom, а какими-то другими способами», - отвечает на это Досовицкий.

По его словам, главное - не научить бота играть в Doom, а научить бота учиться в процессе восприятия окружающего мира. То же самое говорят и участники команды The Terminators. Вместо того чтобы создать непобедимого игрока в Doom, они намерены использовать свои разработки для решения прикладных задач. 

Пара видеороликов с демонстрацией игрового процесса с участием искусственного разума:

 

Источник: http://hi-news.ru/

Просмотров: 130 | Добавил: Admin | Рейтинг: 0.0/0
Всего комментариев: 0
avatar
Вход на сайт

Наша музыка
Дата и время
Найти в таверне
Друзья таверны