Дослідники з Університету Ватерлоо розробляють новий спосіб перегляду потокових відеоігор на таких платформах, як Twitch та YouTube. Технологія дозволяє перетворювати відеопотік, що передається у форматі 2D, на інтерактивне 3D-відео, даючи глядачам можливість переглядати його під різними кутами.
В багатьох багатокористувацьких іграх-шутерах існує режим перегляду, який дозволяє користувачам спостерігати за тим, що відбувається, з різних кутів. Це дає чудову можливість вивчати стратегії, які використовують інші гравці, або насолоджуватися тим, як видатний гравець знищує конкурентів. Однак для цього ви повинні грати в гру.
Джеремі Ґартманн і Деніел Фоґель з Черітонської школи комп’ютерних наук при Університеті Ватерлоо опублікували своє дослідження наприкінці квітня. У ньому автори пояснюють спосіб досягнення ефекту, подібного до того, який дає режим глядача, але без встановлення гри.
Технологія дозволяє брати відеопотік у форматі 2D та додавати до нього буфер глибини гри, позу камери та матрицю проєкції. Таким чином створюється інтерактивне 3D-середовище, яке глядачі можуть досліджувати, коли стрімер грає в гру. Глядачі можуть вільно переміщати свої камери як у режимі 3D, так і в режимі VR.
Спочатку здається, що це все виглядає просто як дивний ракурс дії, що відбувається на екрані, накладений на сірий фон. Однак це не те саме, що режим глядача в грі. Усе, окрім перспективи, з якої дивиться гравець, є не текстурованим. Крім того, все, що знаходиться за межами перегляду потоку, не анімується. Наприклад, у відео вище ви можете побачити, як модель гравця повністю відтворена, але при цьому вона ковзає навколо середовища, ніби вона стоїть на колесах.
Відсутність текстур та анімації дещо погіршує враження від перегляду гри. Але варто зважати на те, що цей метод рендерингу прямих трансляцій відеоігор у 3D ще перебуває в зародковому стані. Удосконалення технології, яку описують Ґартманн і Фоґель, і машинне навчання можуть у підсумку принести нам можливість перегляду кращих і приємніших інтерактивних прямих трансляцій, які залучатимуть глядача безпосередньо до гри.
Нагадаємо, раніше в японській компанії NTT DOCOMO заявили про створення першої у світі системи віртуальної реальності (VR) із підтримкою 8K 3D для передачі живого потокового відео.
