Созданный исследователями Minecraft AI способен выполнять сложные последовательности кликов по клавиатуре и мыши, справляясь с такими игровыми задачами, как рубка деревьев или создание инструментов. Это первый бот, которые умеет создавать так называемые алмазные инструменты. У хорошего игрока-человека на это уходит 20 минут быстрой игры, около 24 тысяч действий.
Это прорыв для методики, известной как имитационное обучение, в рамках которой нейронные сети обучаются выполнять задания, наблюдая за тем, как это делают люди. С помощью имитационного обучения ИИ можно научить управлять руками роботов, водить автомобили или перемещаться по веб-страницам.
Читайте по теме:
В сети существует огромное количество видео, на которых люди выполняют различные задачи. Используя этот ресурс, исследователи надеются сделать для имитационного обучения то же, что GPT-3 сделал для больших языковых моделей.
«За последние несколько лет мы стали свидетелями расцвета парадигмы GPT-3, где мы видим удивительные возможности, больших моделей, обученных на огромных просторах интернета. Во многом это связано с тем, что мы моделируем то, что делают люди, когда они выходят онлайн», — говорит Боуэн Бейкер из OpenAI, один из разработчиков нового бота Minecraft.
С вероятностью 99.9% Вы это не Видели — майнкрафт бот
Проблема с существующими подходами к имитационному обучению заключается в том, что каждый шаг видеодемонстрации нужно размечать: выполнение этого действия приводит к одному результату, того действия — к другому, и так далее. Ручная разметка занимает много усилий, поэтому такие наборы данных, как правило, небольшие. Бейкер и его коллеги хотели найти способ превратить миллионы видеороликов, доступных онлайн, в новый датасет.
Разработанный командой подход VPT (Video Pre-Training, предобучение видео) позволяет препятствия имитационного обучения, используя для разметки видео другую нейросеть.
Сначала исследователи наняли краудворкеров для игры в Minecraft и записали их щелчки по клавиатуре и мыши вместе с видео с их экранов. В результате у них получилось 2 тысячи часов игры в Minecraft с примечаниями. На этом материале модель обучили сопоставлять действия с результатами на экране. Щелчок мыши в определенной ситуации заставляет персонажа, например, взмахнуть топором.
Следующим шагом было использовать эту модель для создания меток действий для 70 тысяч часов немаркированного видео, взятого из интернета, а затем обучить бота Minecraft на этом большем наборе данных.
«Видео — это обучающий ресурс с большим потенциалом», — говорит Питер Стоун, исполнительный директор Sony AI America, который ранее работал над имитационным обучением.
Имитационное обучение — это альтернатива обучению с подкреплением, при котором нейросеть учится выполнять задачу с нуля методом проб и ошибок. Это технология, которая обеспечила множество крупнейших прорывов в области ИИ за последние несколько лет. Ее использовали для обучения моделей, которые могут побеждать людей в играх, управлять термоядерным реактором и находить быстрые решения фундаментальных математических задач.
МОД НА ВСЕХ НЕКСТБОТОВ МАЙНКРАФТ ! NICO’S NEXTBOTS ADDON MOD MINECRAFT BEDROCK
Проблема в том, что обучение с подкреплением лучше всего работает для задач с четкой целью, где случайные действия могут привести к случайному успеху. Алгоритмы обучения с подкреплением вознаграждают эти случайные успехи, повышая вероятность их повторения.
Но Minecraft — это игра без четкой цели. Игроки вольны делать то, что им нравится: бродить по сгенерированному компьютером миру, добывать различные материалы и комбинировать их для создания различных объектов.
Отсутствие границ делает Minecraft идеальным пространством для обучения ИИ. Бейкер был одним из исследователей проекта Hide им больше ничего не оставалось делать. Мы хотели расширить пространство, и мы подумали, что Minecraft — отличная площадка для работы», — говорит Бейкер.
Фото в тексте: Diego Thomazini / Shutterstock
Они не единственные, кто пришел к этому. Minecraft становится важной тестовой площадкой для новых методов ИИ. MineDojo, среда Minecraft с десятками предварительно разработанных задач, в этом году получила награду на NeurIPS, одной из крупнейших конференций по искусственному интеллекту.
Благодаря VPT бот OpenAI способен выполнять задачи, невозможные только при обучении с подкреплением. Например, чтобы изготовить доски и превратить их в стол, нужно около 970 последовательных действий. Тем не менее, команда обнаружила, что наилучшие результаты достигаются при совместном использовании имитационного обучения и обучения с подкреплением.
Если обучить бота с помощью VPT, а затем точнее настроить его в процессе обучения с подкреплением, он сможет выполнять задачи, включающие более 20 тысяч последовательных действий.
Исследователи утверждают, что их подход может быть использован для обучения ИИ выполнению других задач. Например, можно было бы использовать его для ботов, которые при помощи клавиатуры и мыши перемещаются по сайтам, бронируют авиабилеты или покупают продукты онлайн.
Но теоретически его можно было бы задействовать в обучении роботов физическим, реальным задачами, на видео от первого лица, на которых люди делают эти вещи. По мнению Стоуна, это вполне реально.
Заставь искусственный интеллект самообучаться и совершенствоваться – выбирай онлайн-курсы в каталоге курсов по машинному обучению.
Впрочем, Мэтью Гуздиал из Университета Альберты в Канаде, который использовал видео, чтобы обучить ИИ играть в Super Mario Bros., не думает, что это произойдет в ближайшее время. Действия в таких играх, как Minecraft и Super Mario Bros. выполняются нажатием кнопок. Действия в физическом мире гораздо сложнее, и машине труднее их освоить. «Это открывает целый ряд новых исследовательских проблем», — рассуждает Гуздиал.
«Эта работа — еще одно свидетельство возможностей масштабирования моделей и обучения на массивных наборах данных для достижения хорошей производительности», — говорит Наташа Жак, которая работает над обучением с многоагентным подкреплением в Google и Калифорнийском университете в Беркли.
Большие наборы данных размером с интернет, безусловно, откроют новые возможности для искусственного интеллекта, говорит Жак: «Мы видели это снова и снова, и это отличный подход». Но, по ее мнению, OpenAI слишком полагается только на большие датасеты, говорит она: «Лично я немного более скептически отношусь к тому, что данные могут решить любую проблему».
Тем не менее, Бейкер и его коллеги считают, что сбор более миллиона часов видеороликов Minecraft сделает их ИИ еще лучше. Вероятно, это лучший бот для игры в Minecraft на сегодняшний день, заявляет Бейкер: «Но с большим количеством данных и большими моделями я бы ожидал, что это будет напоминать наблюдение за человеком, играющим в игру, а не за ИИ, который пытается имитировать человека».
* Meta и входящие в нее Facebook и Instagram признаны экстремистскими организациями, деятельность которых запрещена в РФ.
Фото на обложке: Ekaterina_Minaeva / Shutterstock
Источник: rb.ru
Microsoft тестирует чат-бот в Minecraft: ИИ будет строить здания за игрока
Спустя 12 лет на рынке и более 238 миллионов проданных копий, с многочисленными обновлениями, модами и играми-сиквелами, Minecraft можно смело назвать одной из самых популярных видеоигр на современном рынке развлечений. Геймерам очень нравится копить ресурсы, строить дома и хитроумные постройки, создавать целые механизмы или прорывать секретные логова, но обычно на это приходится тратить много личного времени — на поиск ресурсов (если геймер играет не в творческом режиме) или возведение сложного сооружения. В Microsoft решили, что стоит помочь тем игрокам, которые не хотят затрачивать свои силы на эти процессы, интегрировав в Minecraft полноценную модель на базе искусственного интеллекта.
Лучший Telegram-канал про технологии (возможно)
Редактор информационного издания Semafor Technology Рид Альберготти заявил, что внутреннее тестирование чат-бота для Minecraft уже запущено внутри Microsoft — новая технология позволит геймерам использовать простые и не очень текстовые команды, на основе которых система самостоятельно будет строить, ломать, редактировать или крафтить. Работает это на самом деле очень просто — например, игрок вводит команду «построить дом с красной крышей и серыми стенами», после чего искусственный интеллект анализирует подсказку и реализует её на основе встроенных алгоритмов. Это куда проще, чем рисование картин, оцифровка текста в голос и многое другое, что уже имеют современные модели от той же OpenAI.
Сам журналист сообщает, что в процессе тестирования на текущий момент используется модель Prometheus от OpenAI — она же используется в службе Bing Chat, которая была недавно анонсирована компанией. Вероятно, технологию адаптировали для демонстрационной версии работы модели, но в будущем её могут заменить на что-то более актуальное или удобное. При этом источники западного издания со ссылкой на разработчиков из Microsoft заявляют, что компания пока что не планирует в ближайшем будущем интегрировать ИИ в общедоступную сборку Minecraft, потому что технология далека от идеала и её ещё придётся дорабатывать. С другой стороны, сама идея задействовать ИИ в данной видеоигре приходила в головы энтузиастов и ранее.
Некоторое время назад в ходе исследования специалисты компании OpenAI интегрировали свою собственную модель поведенческого клонирования в Minecraft, чтобы обучить её выполнению определённых действий. В результате модели показали 70 тысяч часов видеороликов, после просмотра которых ИИ мог самостоятельно собрать верстак, изготавливать инструменты и даже строить дома из дерева. Если же Microsoft интегрирует систему прямо в движок игры, то возможности будут куда более богатыми и обширными. Например, поклонники проекта смогут возводить сложные здания или целые города посредством одной команды в строке без лишних усилий и потраченного времени. Вопрос только в том, зачем играть в игру, которая играет за тебя?
Материалы по теме:
- Почему в спутниках и марсоходах процессор слабее, чем в умных часах. Парадокс XX века
- Это какой-то SRAM: разбираемся в причине застоя современных технологий
- Запуск виртуального ядерного реактора и другие новейшие достижения российской науки
- Трассировка лучей появляется в смартфонах: что собой представляет и чего ждать
- Производители электрокаров врут: как измеряется запас хода и почему он всегда завышен
Источник: trashbox.ru
Готовые макросы и скрипты для «minecraft»
На этой странице вы можете скачать абсолютно бесплатно готовые макросы и скрипты для «minecraft». Установка макроса на обычную клавиатуру и мышку происходит в два клика.
Категория: База макросов и скриптов » minecraft
Наименование
Макрос на ферму тыквы, арбузов hypixel skyblock в гардене размером два плота, ск..
18.04.2023 08:04:07
viligar trade
Этот макрос позволяет вам легко торговать с сельскими жителями. — Разбивает к..
17.04.2023 21:49:50
16 CPS Неплохо для ПВП на версии 1.8. Hу если у вас есть желание то можно и на П..
17.04.2023 10:45:48
Аркады2.0(снапа+струк)5+1
Лучший макрос для пвп гтм 2.0 , прокрутка снайперки и страйкера, моментальный ур..
leafanchik
15.04.2023 21:43:41
Прокрутка калаш страйкер калаш, 131 слоты, используется меньше секунду, убивает ..
leafanchik
15.04.2023 21:43:34
Юзание апетчки-бинта
Этот макрос позволит вам всего за 1 кнопкуи время менее чем секунда использовать..
15.04.2023 14:50:02
пшеница 165 скорости
Макрос на ферму hypixel skyblock в гардене для горизонтальной фермы пшеницы, нар..
15.04.2023 10:06:39
Лучшие макросы для получение отхила, прокрут бинтов кофе сахара и аптек,с ним вы..
leafanchik
14.04.2023 18:13:05
Skyblock farm
Макрос для автоматического вспахивания земли на вертикальной ферме. Для использо..
13.04.2023 20:50:17
Automine — это очень полезная функция для игры в майнкрафт. Она копает 16х16 бло..
12.04.2023 22:56:14
Return Command
Простой макрос для Minecraft возвращяющий последнюю введённую комманду Бинд у м..
11.04.2023 17:20:58
3 снайперки
Этот макрос прокручивает 785 и 6 слот за секунду, использую как прокрут на режим..
11.04.2023 17:16:29
Макро 2 снапы гтм
прокрутка двух снайперок и страйкера чуть более чем секунда, на гтме DEFLEX шота..
10.04.2023 19:05:49
Снапа 1 слот прокрутка на режиме снайперки и страйкера
Прокрут страйкера и снаперки снайперка 1 лот стрйкер 5 джетпак 2. Создан для реж..
Источник: botmek.ru