Новости про Adobe и OpenGL

Компания Imagination Technologies серией пресс-релизов похвасталась успехами своей архитектуры встраиваемых графических решений PowerVR.

В первую очередь радость компании принесло использование PowerVR SGX в более чем 100 моделях портативных устройств. Общий выпуск устройств с графическим ядром с поддержкой OpenGL ES 2.0 от Imagination составил свыше 100 миллионов и растёт на 50% в год. В числе партнёров компании числятся Intel, NEC, Samsung, Texas Instruments, Sony Ericsson, Nokia, Motorola и HTC, и будущее трёхмерной графики в мобильных решениях в целом видится хорошим и ярким.

В продолжение темы роста числа внедрений идёт сообщение, что Texas Instruments выбрала графическое решение PowerVR SGX540 для четвёртой версии своей платформы для мобильных телефонов OMAP. Платформа OMAP и раньше использовала графику PowerVR (SGX530), но новое графического решение от ImTec предлагает впятеро большую производительность шейдерных операций в 3D графике. OMAP лежит в основе более 40 моделей мобильных телефонов, включая Nokia N900.

В заключение были озвучены планы по сотрудничеству с Adobe по созданию GPU-ускоряемой (через OpenGL ES 2.0) версии Adobe Flash 10.1 для мобильных платформ. Работающая на PowerVR версия плагина Flash будет показана на выставке Mobile World Congress 2010, начавшейся сегодня в Барселоне, Испания. В планах компании обеспечить ускорение флеш-видео во всех мобильных операционных системах: Linux, Android, Windows Mobile и Symbian.

Напомним, что графические решения PowerVR используются также в продуктах Apple, включая iPhone и iPod Touch, а последняя модель ImTec PowerVR SGX545, предположительно, вошла в состав недавнего iPad и будет использована в будущих iPhone/iPod. Основным конкурентом Imagination на рынке мобильной графики является NVIDIA со своей платформой Tegra, но пока из крупных успехов у NVIDIA только гаджет Zune HD от Microsoft.

Mike Melanson, ведущий инженер Adobe по поддержке технологии Flash в операционных системах Unix/Linux, опубликовал в своем блоге серию сообщений о проблемах, с которыми компания столкнулась при реализации аппаратного ускорения декодирования и воспроизведения видео в Linux.

Первой проблемой является разнообразие и различный уровень реализации API работы с аппаратными ускорителями видеодекодирования в Linux, представленное на специальной иллюстрации:

Разработчикам приходится иметь дело по меньшей мере с тремя проприетарными API, каждый из которых поддерживает лишь оборудование одного вендора (AMD для XvBA, NVIDIA для VDPAU и Broadcom для CrystalHD), причем, например, для XvBA спецификации в открытом доступе отсутствуют. Заявленные же как «универсальные» API вроде VA на самом деле являются лишь программными прослойками ко всё тем же VDPAU и XvBA. Мало того, определенное распространение получило использование оборудования напрямую из программ или через API универсальных вычислений, такие как CUDA и OpenCL.

Второй проблемой является отсутствие у имеющихся API ускорения декодирования и соответствующих драйверов оборудования функций по возврату полностью декодированных кадров приложению. В реализациях NVIDIA и AMD декодированный поток сразу уходит в устройство отображения, что может быть приемлемо для «чистых» проигрывателей мультимедиа, но неприемлемо для Flash, которому нужно объединять видео и прочие элементы веб-страницы в единое изображение. Проблема наглядно показана на иллюстрациях:

При этом в среде Windows возможность возврата декодированного видеопотока приложению реализована.

На иллюстрациях видна и третья проблема ускорения видео Flash в Linux — необходимость конверсии цветового пространства YUV в RGB. В частности, именно поэтому невозможно использовать расширение Х-интерфейса Xv для вывода и масштабирования видео. Два года назад Adobe предпринимала попытку задействовать OpenGL для данных операций, но столкнулась с низким качеством реализации OpenGL во многих открытых драйверах видеокарт и невозможностью одновременного использования OpenGL для видео и набиравших популярность эффектов Compiz.

В результате, если на платформе Windows бета-версия Adobe Flash 10.1 с поддержкой аппаратного ускорения декодирования и воспроизведения видео в формате H.264 доступна уже несколько месяцев, Linux версия Flash-плагина по-прежнему использует лишь программное воспроизведение. Но Mike Melanson сообщает, что так или иначе работа над реализацией аппаратного ускорения Flash в Linux продолжается, и что Adobe рассчитывает на встречные движения разработчиков драйверов по реализации необходимых функций.