Google представили революційну ШІ-технологію під назвою Genie 2, яка здатна створювати ігрові 3D-світи всього за кілька секунд! 🎮
Genie 2, розроблена командою DeepMind, може генерувати ігрові тривимірні середовища на основі текстових або зображувальних підказок буквально за секунди, залежно від потужності обчислювальної техніки. У блозі DeepMind було опубліковано кадри з демонстрацією досліджуваних світів, створених Genie 2 на основі лише початкової текстової підказки 🌍
Хоча ця технологія ще знаходиться на початковій стадії, це вже помітний крок вперед порівняно з Genie 1, який міг генерувати лише 2D-середовища.
🔍 Опис Genie 2 від DeepMind:
Genie 2 є моделлю світу, тобто вона здатна симулювати віртуальні світи, включаючи наслідки виконання будь-яких дій (наприклад, стрибок, плавання тощо). Її було навчено на великомасштабному відеодатасеті, і, як інші генеративні моделі, вона демонструє різноманітні здібності, такі як взаємодія з об'єктами, складна анімація персонажів, фізика та здатність моделювати й передбачати поведінку інших агентів.
Порівняно з першою версією, Genie 2:
- може запам'ятовувати елементи світу, які не знаходяться в полі зору;
- може створювати оточення з різними перспективами (від першої або третьої особи, ізометрична камера тощо);
- може створювати комплексні тривимірні сцени;
- може моделювати різноманітні взаємодії з об'єктами, такими як лопання повітряних кульок, відкриття дверей або підрив вибухових барелів;
- навчилася анімувати персонажів різних типів;
- навчилася моделювати NPC та взаємодії з ними;
- навчилася моделювати ефекти води, диму, гравітацію, освітлення, відображення;
- навчилася моделювати інтерактивне оточення на основі реальних фотографій.
Хоча можливості Genie 2 ще обмежені: вона може генерувати послідовні світи лише до 60 секунд, причому більшість показаних прикладів тривають 10-20 секунд. У демонстрації команда DeepMind досліджувала все — від гонок до платформерів, і Genie 2 змогла створити інтерактивні середовища з лопаючими кульками, робочими дверима та вибуховими барелями💥
Навіть реалістичні відображення та напрямок освітлення здатні точно відображатися Genie 2, і вона може взяти один концепт-арт і використовувати його, щоб вдихнути життя у вигадане середовище 🌅