Krafton, південнокорейський розробник PUBG: Battlegrounds, хоче перенести напрацювання з ігрового штучного інтелекту в реальний світ. Її палоальтський підрозділ Ludo Robotics розробляє ШІ, який допомагає роботам розуміти запити людей і вирішувати, як діяти. Ідея проста: робот, який постійно потребує пояснень, перетворює власника на наглядача, а не на того, хто передав роботу рутину.
Ринок гуманоїдної робототехніки зараз отримує великі гроші. Figure залучила понад мільярд доларів минулого року за оцінки 39 мільярдів, а софтверний стартап Skild AI у січні зібрав 1,4 мільярда доларів на ШІ, що керує різними типами роботів. Проте робота поруч із людьми вимагає іншого: розуміти неповні інструкції та переналаштовуватися, коли людина змінила думку посеред завдання. Саме тут, за логікою Krafton, її ігровий досвід може бути корисним, адже ігрові світи роками вчаться реагувати на непередбачувані рішення гравців.
Ключовим прикладом компанія називає PUBG Ally, створений разом із чипмейкером Nvidia. За формулюванням розробників, це «перший у світі персонаж із голосовим управлінням, здатний грати разом із гравцем». Він співпрацює з гравцями, адаптується до ігрового процесу та пам’ятає попередні взаємодії, тобто виходить за межі звичайних неігрових персонажів. СЕО обох компаній CH Kim пояснює, що команда працювала над ШІ-персонажами для ігор задовго до нинішнього буму великих мовних моделей, а нові технології дали змогу зробити їх розумнішими. Звідти й виникла думка винести такі персонажі з віртуального світу в реальний. «Це і є фізичний ШІ, так ми дійшли до роботи над Ludi», каже він.
Ludo Robotics планує представити Ludi 0.2, свою останню експериментальну систему роботизованого інтелекту, на Bay Area Robotics Symposium в Каліфорнійському університеті в Берклі. Нова версія має покращити розмовну пам’ять і розпізнавання жестів. Водночас Kim визнає, що Ludi залишається дослідницькою демонстрацією і поки не є достатньо надійним для щоденного використання.
Не все з ігрового досвіду виглядає переконливо. Під час обмеженої бета-версії в аркадному режимі PUBG гравці могли взяти компаньйонку Ellу, яка реагувала на голосові команди. За даними ігрового видання Inven Global з посиланням на звіт Krafton про PUBG Ally, бойова ефективність персонажа оцінена в 2,58 з 5. Половина опитаних вважала її інструментом, а не напарником, і лише 18,5% ставилися до неї як до товариша по команді. Kim каже, що фундаментальні технології, застосовані для PUBG Ally, дуже схожі на ті, що використовують для Ludi, і що довгострокова мета компанії полягає в розробці власної пропрієтарної базової моделі.
Ігрові рушії симулюють рух і взаємодію об’єктів, тож віртуальні середовища можуть генерувати навчальні дані. Kim стверджує, що Ludo вже використовує синтетичні дані з таких світів і планує додавати більше реальної інформації в міру просування досліджень. Головна позиція компанії: вона створює інтелект для роботів, а не виробляє самих роботів, і працюватиме з виробниками апаратного забезпечення, щоб інтегрувати свій софт у їхні машини.
Технічна архітектура Ludi 0.1, представленого в серпні, поєднує кілька наявних ШІ-моделей. Мовно-візуальна модель із відкритої родини Qwen від Alibaba аналізує зображення з камер і розшифрований мовлення, щоб визначити, що робот має зробити далі. Модель GR00T для робототехніки від Nvidia, яку доопрацювала Ludo, відповідає за фізичні дії, як-от підняття предметів. Система працює на G1 від Unitree, гуманоїдному роботі приблизно за 16 000 доларів, а програмне забезпечення Ludo координує ці компоненти. Модель міркувань компанія навчала на 14 432 згенерованих комп’ютером послідовностях взаємодій. Фізичні маніпуляції робот опановував окремо, на записах людей, які віддалено керували ним у макеті побутового простору. У технічному звіті Ludo PUBG Ally названо дизайнерським прецедентом, але розмови гравців серед навчальних даних не згадуються.
Фінансово Krafton виглядає сильно. Її виручка за другий квартал склала 1,29 трлн вон, приблизно 890 мільйонів доларів, що на 95% більше, ніж рік тому. Ширші ШІ-інвестиції компанії включають 70 мільйонів доларів на обчислювальний кластер і, за повідомленнями, 33 мільйони доларів в HyperAccel, південнокорейський стартап, що розробляє ШІ-чипи. У команді Ludo є Rob Nowak, головний науковець, і Yea-Seul Kim, керівниця напряму взаємодії людини з роботом; обоє мають академічний досвід Університету Вісконсин-Медісон.
Для українського ринку історія цікава з кількох причин. Ігрові студії в Україні мають великий досвід у рушіях, симуляціях і ШІ-персонажах, тож підхід Krafton, де ігрові світи стають джерелом навчальних даних для фізичного ШІ, варто тримати в полі зору. Водночас приклад показує, наскільки ранньою є галузь: навіть у компанії з такими фінансами продукт поки лишається дослідженням, а не готовим сервісом.