Некомерційна компанія OpenAI випустила платформу Universe, яка дозволить системам штучного інтелекту навчатися, граючи в комп'ютерні ігри і отримуючи нагороду за успішно пройдені випробування. Як повідомляє вUniverse зібрано більше тисячі «віртуальних світів» Нова платформа повинна допомогти впоратися з проблемою застосування знань, отриманих при вирішенні одного завдання, для вирішення інших, але схожих завдань (transfer learning).
Метод машинного навчання, в рамках якого штучний інтелект удосконалює свою роботу, взаємодіючи з деяким незнайомим йому середовищем і отримуючи від неї винагороду або штраф, називається навчанням з підкріпленням. Цей алгоритм добре показав себе в різних складних областях, наприклад в робототехніці або в іграх (AlphaGo). Тим не менш, на сьогоднішній день існує дуже мало загальнодоступних платформ, які б могли використовуватися дослідниками для навчання своїх систем, тому дослідницька компанія OpenAI випустила Universe.
До складу нової платформи увійдуть тисячі віртуальних середовищ, за допомогою яких штучний інтелект буде навчатися виконанню різних завдань. Так, комп'ютер зможе пограти в Grand Theft Auto 5 або в ігри Atari, а також виконати послідовність дій у браузері (наприклад знайти необхідний авіарейс). Для цього він буде, як і людина, використовувати мишу і клавіатуру, правда не натискаючи на них, а надсилаючи їм сигнали через систему віддаленого доступу VNC. Нагорода в Universe залежить від завдання, яке вирішує штучний інтелект: наприклад, в іграх позитивним відгуком середовища може бути перехід на наступний рівень.
Співробітники OpenAI сподіваються, що за допомогою їхньої платформи системи штучного інтелекту навчаться використовувати отриманий раніше в Universe досвід для того, щоб швидко адаптуватися до нового, більш складного середовища. «Такий алгоритм може стати в нагоді в робототехніці, обробці природної мови або де-небудь ще», - зазначає Ілля Суцкевер, директор з досліджень в OpenAI. Крім того, в компанії очікують, що користувачі допоможуть розвинути платформу, навчаючи з її допомогою свої програми, вбудовуючи в Universe нові середовища і граючи в ігри для того, щоб розширити базу даних.
Кілька днів тому Google DeepMind також оголосила про відкриття нової платформи для тренування штучного інтелекту. З її допомогою він зможе навчатися взаємодії з тривимірним віртуальним середовищем. Нещодавно таке завдання вирішувала система, також створена в лабораторії DeepMind: здійснюючи певні дії у віртуальному світі, вона навчилася визначати характеристики об'єктів - зокрема, їх вагу і кількість.