- Реклама -

В обществе Фраунгофера из Германии, широко известном в мире благодаря вкладу, сделанному в развитие формата MPEG – технологии компрессии, используемой в MP3 аудио-файлах и MP4 видео – недавно переключили внимание на очередную технологию из мира медиа: виртуальную реальность. В прошлом году организация представила доступную гарнитуру виртуальной реальности, а в настоящее время готова предложить программное обеспечение для компрессии видео нового поколения, в котором используется стандарт MPEG-OMAF. Это первая VR-технология, позволяющая вести потоковую трансляцию видео с углом обзора 360 градусов в сетях 5G.

Основанный во многом на предложенных обществом Фраунгофера технологиях компрессии видео, стандарт MPEG-OMAF разбивает свёрнутое видео на множество плиток-фрагментов, сжатых в различном разрешении. Выше на картинке использованы фрагменты с заливкой, которые должны указывать на площади, передаваемые в низком разрешении, а остальные фрагменты передаются в высоком разрешении.

В отличие от стандартных видео, которые передаются потоком с сервера в одном избранном разрешении, VR-видео динамически используют фрагменты-плитки высокого разрешения в тех местах, на которые смотрит зритель, и фрагменты низкого разрешения для областей, которые находятся вне поля его зрения. При изменении положения головы зрителя гарнитура или дисплей запрашивают другой микс потоковых фрагментов, оптимизированных для текущего фокуса зрения зрителя.

Данный «трюк» позволяет продолжать передавать поток панорамного видео, уделяя максимальное внимание передаче тех фрагментов, которые просматривает зритель. Он идёт рука об руку с недавно предложенным глубоким рендерингом, который должен максимально улучшить передачу в реальном времени 3D-графики пользователям виртуальной реальности, гарантируя зрителям возможность при повороте головы продолжать видеть что-то боковым зрением – пускай даже в более низкой чёткости.

Международная организация по стандартизации сотовой связи 3GPP приняла стандарт MPEG-OMAF для потоковой передачи контента виртуальной реальности в сетях в 5G, поэтому он, вероятно, будет поддерживать множество видеопотоков виртуальной реальности с 360-градусным обзором – точно так же, как MP3 и MP4 были основой для передачи цифрового аудио и видео предыдущего поколения. В настоящее время при передаче 360-градусных VR-видео через сети 4G и сети Wi-Fi, как правило, используется низкое разрешение, а сами видео страдают от общих артефактов сжатия и высокой задержки, которые могут устранить новые стандартные сети и сети с более высокой пропускной способностью.

В обществе Фраунгофера демонстрируют возможности новой технологии, используя комбинацию из JavaScript, браузера Safari от компании Apple, WebGL API для рендеринга и HEVC видеокодек. Техническое видео доступно здесь. Исходный код для проигрывателя JavaScript, а также инструкции по созданию контента, совместимого со стандартом, доступны для скачивания с GitHub.

- Реклама -
Подписывайтесь на наши сообщества в Viber и Telegram
Борис Скуратовский
Журналист, медиа-эксперт и «летописец» истории украинского радио. Образование: филолог (должен был обучать детишек английскому языку, а также украинскому языку и литературе, но в итоге просвещаю взрослых дядь и тёть, информируя их о новостях из мира радио, телевидения и сопутствующих технологий). За развитием телевидения и радио в Украине слежу с 1990 года – вначале как пассивный наблюдатель, а с февраля 1997, когда на страницах киномузыкального еженедельника «П’ятниця» впервые вышла моя рубрика «Новости радио», - как журналист. Впоследствии в разное время сотрудничал с такими изданиями, как газета «Хрещатик», а также журналы «Телерадіокур’єр», «Телемир», «Медиа-Эксперт» и рядом других. С 1998 по 2001 год работал на «Радио РОКС – Украина», где впервые получил возможность изучить радио «изнутри». Затем какое-то время работал редактором-наполнителем сайта радиостанции «ХИТ FM», а потом сотрудничал ещё с несколькими радиостанциями в качестве копирайтера. С 1999 года веду собственный интернет-портал ProRadio.Org.Ua, всецело посвящённый теме радиовещания в Украине. Люблю классический хард-рок, ценю оригинальность и нестандартность. Интересуюсь историей, лингвистикой, психологией.