Используя новую технологию, искусственный интеллект даже научился делать алмазные кирки в Minecraft. Но путь к нему довольно сложен.
Вам нравится играть вMinecraft, но у вас нет времени добывать тысячи блоков камня и дерева для вашего следующего монументального сооружения? Тогда вам повезло, потому чтов будущем хорошо обученный искусственный интеллект сможет сделать это за вас За это отвечает OpenAI, исследовательская компания, изучающая искусственный интеллект. OpenAI известна разработкой (DALL E 2), искусственного интеллекта, который создает изображения на основе введенного текста.
A (свободный вариант DALL E)Кстати, вы можете попробовать сами, результаты могут быть забавными, но и довольно тревожными.Но вернемся к теме:Цель исследователей состояла в том, чтобы научить ИИ действиям не через речевой ввод, а через видеоматериалы. Как им это удалось и на что способен искусственный интеллект, узнайте здесь.
Получил 70 000 часов игры
Чтобы научить ИИ Minecraft,исследователи предприняли несколько шагов — полный отчетвы можете найти в их (записи в блоге). Во-первых, они должны были убедиться, что ИИ вообще способен обучаться на видеоматериалах с YouTube. Это связано с тем, что действия, выполняемые там, не описаны конкретно: ИИ не может знать, какие кнопки, щелчки мыши и движения используют игроки для перемещения, открытия инвентаря и демонтажа блоков.
Поэтому мы сначала записали собственный игровой процесс с соответствующими вводами мыши и клавиатуры. На основе этих данных была обученаInverse Dynamics Model
для предсказания следующего действия в видео. Он мог получить доступ как к прошлым, так и к будущим кадрам видео. Эта модель, в свою очередь, была использована для сопоставления 70 000 часов неснятого видеоматериала с соответствующими вводами с помощью мыши и клавиатуры.
KI даже создает алмазные кирки
Теперь вы можете скормить ИИ обработанный видеоматериал и заставить его имитировать поведение, продемонстрированное в игровом процессе. Например, он смог срубить деревья, сделать из них доски и, в конечном итоге, верстак. Поначалу это может показаться не впечатляющим, но для этого требуется около 1000 входов от игрока, все из которых должны быть имитированы ИИ.
Искусственный интеллект освоил еще большечеловеческих
навыков, таких как плавание, охота и поедание животных и даже так называемые прыжки со столба. Но это был далеко не конец для исследователей.
Искусственный интеллект теперь обладал некоторыми базовыми способностями, но должен был научиться использовать их более конкретно с помощью тонкой настройки. Поэтому ему был представлен геймплей из недавно запущенных миров Minecraft, чтобы закрепить навыки из ранней игры. В результате ИИ даже научился делать деревянные и каменные инструменты, строить (на самом деле очень) примитивные убежища и грабить сундуки в деревнях NPC.
С помощью другого метода тонкой настройки, обучения с усилением, ИИ даже смог в конце создать алмазную кирку! И это при том, что он небрежно копал прямо вниз! Для сравнения: если для изготовления верстака требовалось около 1 000 действий, то для изготовления алмазного инструмента человеку необходимо около 24 000 действий, и все они были выполнены искусственным интеллектом.
Какой смысл во всем этом?
Как вы, наверное, догадываетесь, исследование не касается практических ИИ-компаньонов для напряженных игроков Minecraft. Скорее, предполагается, что искусственный интеллект будет обучаться действиям на основе многочисленных видеороликов, доступных в Интернете. Исследователи пишут в своем блоге, что VPT (их технология) предлагает захватывающую возможность изучения крупномасштабных поведенческих моделей непосредственно в других областях, помимо языка.
Minecraft идеально подходит для этих экспериментов, потому что он имеет очень простой интерфейс с мышью и клавиатурой и предлагает очень открытый мир с множеством возможностей. Достигнутые там результаты могут быть легко перенесены в аналогичные области, такие как общая работа компьютеров.
Что вы думаете об эксперименте исследователей ИИ в Minecraft? Считаете ли вы искусственные интеллекты скучными и не ожидаете от них многого, или вы верите в их будущее значение? Не стесняйтесь написать нам свое мнение в комментариях!
