MeeGo でのビデオ画像処理とその可能性ターボシステムズ株式会社

Size: px

Start display at page:

Download "MeeGo でのビデオ画像処理とその可能性ターボシステムズ株式会社"

あつのおおばま
5 years ago
Views:

1 MeeGo でのビデオ画像処理とその可能性

2 Linux(x86) でのハードウエアビデオコーデックの利用近年地上デジタル放送衛星デジタル放送ブルーレイ薄型 TV の普及によりフル HD の映像ソースの利用は格段に増えてきている Linux でもビデオチップやアクセラレータのハードウエアの持つビデオコーデックにより H264,MPEG1/2/4, VC1 等を専用ハードウエアを介し十二分にパフォーマンスのある映像再生を実現するフル HD とは 1920x1080 解像度の映像を差し H264 圧縮された映像ではそのデコードをソフトウエアで行う場合かなりの CPU パワーを必要としたが専用ハードウエアを使用することによりより快適に美しい再生能力を持ち非力な CPU でも十分実用になるその応用はデジタル TV デジタルサイネージカラオケシステム STB 等などの組込機器の仕様に耐えうるものであり既存の x86 系ソフトウエアと組合わることにより高度応用製品が期待される

3 Linux(x86) での主なハードウエアコーデックの種類 1.Intel 社の推進する VAAPI(libva) 汎用的に作られた Video Accelarator を使用するためのインターフェース 2.Nvidia 社の推進する VDPAU Nvidia 専用であるが高度に CUBA を利用し最適化するインターフェース 3.ATI 社の推進する XvBA 現存の Xv の拡張する ATI 社策定のインターフェース 4. 専用ハードウエア Broadcom BMC70012 CrystalHD 等専用独自ドライバインターフェース 5.VAAPI ブリッジ VDPAU,XvBA にブリッジドライバを介し VAAPI を使用する手法

4 VAAPI でサポートされる Full HD コーデックタイプ MPEG2 H264 VC1 MPEG4 サブピクチャ Intel G45/G43/G41/H55/H57 Intel Poulsbo *1 *1 *1 *1 Intel MooresTown Intel TunnelCreak 以下 MeeGO 非サポート Nvidia 8xxx/9xxx (VideoCard) Nvidia 8xxx/9xxx (Chipset) Nvidia GT series ATI Radeon HD series *1 *2 *2 パフォーマンスが悪い現在のクロックのGMA500ではVideo 帯域があまりあげられない (FullHDの場合) Divxを含む

5 サブピクチャ機能 (OSD) ビデオ型ハードウエアコーデックではサブピクチャ用専用プレーンを持ち OSD( オンスクリーンディスプレイ ) を可能にするサブピクチャでは字幕や解説タイトル情報等の文字のインポーズ写真や絵等を重ね合わせた透過型アルファブレンドを可能とするこの機能により画面上により多くの情報を映像と同時に表示でき応用例としてデジタルサイネージカラオケシステム電車内案内版などの応用デジタル TV への応用を可能とするこの機能は VAAPI,VDPAU で提供可能である

6 現在のオープンソースソフトウエアで実装状況 Mplayer vdpau, vaapiの利用が可能 MythTV vdpau 利用が可能 gstreamer vaapi vdpau( ベータ ), CrystalHDの利用が可能 gnash vaapiの利用が可能 vlc vaapi のコーデックのみ利用可能デコーダ出力は使用できない

7 ターボシステムズの技術 Linux Kernel 各種ドライバ開発 DVB(ISDB-T/ISDB-S/DVB-S2) USB SATA NETWORK 等 Xorg ビデオドライバ開発 DTV/STB アプリケーション開発 ARIB 対応 MPEG2-TS/PS BML パーサプレーヤ等 Audio Video 各種 CODEC 開発 / 対応ハードウエア (VAAPI/VDPAU/XvBA 等 )/ ソフトウエアに対応可独自の MPEG2 パーサーによる最適化技術 OpenGL を利用した Clutter アプリケーション開発 Moblin アプリケーション開発 Android アプリケーション開発

8 MeeGo で地デジシステムブロックダイアグラム

9 VAAPI 構成 G4x / H5x Series LIBVA i965_video_drv va driver LIBDRM i965_drv drm driver i915 dri kernel driver HW MooresTown / Tunnel Creak Series LIBVA pvr_video_drv va driver LIBDRM pvr_drv drm driver mrst dri kernel driver HW

10 vainfo とはシステムで libva が使えるか使えるとすればどのようなプロファイルが使えるのか # vainfo libva: libva version 1.06 libva: va_getdrivername() returns 0 libva: Trying to open /usr/lib/dri//i965_drv_video.so libva: va_opendriver() returns 0 vainfo: VA API version: 1.06 vainfo: Supported profile and entrypoints VAProfileMPEG2Simple : VAEntrypointVLD VAProfileMPEG2Main : VAEntrypointVLD VAProfileH264Main : VAEntrypointVLD VAProfileH264High : VAEntrypointVLD

11 va の初期化終了初期化処理 XopenDisplay VaGetDisplay VaInitialize VaMaxNumProfiles VaMaxNumEntrypoints VaMaxNumEntrypoints VaQueryConfigEntrypoints VaGetConfigAttributes VaCreateConfig 終了処理 VaTerminate XcloseDisplay

12 mpeg2 のヘッダのより vaapi の構造体にデータをセットする case HEADER_SEAQUENCE: seaquence_header(mc); vaapiの構造体データセット case HEADER_PICTURE: picture_header(mc); case HEADER_GOP: mc->state = STATE_GOP; case HEADER_EXTENSION: switch(ext_tyoe){ case 1: sequence_extension(mc); vaapiの構造体データセット case 2: sequence_display_extension(mc); case 8: picture_coding_extension(mc); default: if((unsigned int)mc->type - 1 < HEADER_SLICE_STOP){ mc->state = STATE_SLICE; slice_keep(mc); } break; }

13 mpeg のピクチャータイプでデータをセットしレンダーする switch(pict_type){ case TYPE_NONE: return 0; case P_TYPE: case I_TYPE: switch(mc->frame_state){ case 2: mc->frame_state = 1; case 0: case 1: mc->frame_state++; VaSetFrame(mc->va, mc->pp, mc->iq); VaRenderSlices(mc->va, sl->sp, sl->sp_num, sl->slice_buff, case B_TYPE: switch(mc->frame_state){ case 1: return 0; case 2: case 3: mc->frame_state++; VaSetFrame(mc->va, mc->pp, mc->iq); VaRenderSlices(mc->va, sl->sp, sl->sp_num, sl->slice_buff, sl->slice_len, sl->sid); } }

14 mpeg のSLICE により画像を put する mstate = va_mpeg2_parse(mc); switch(mstate){ case STATE_SEQUENCE: if(mc->sq->width!= mc->width mc->sq->height!= mc->height mc->sq->aspect_ratio_info!= mc->aspect) VaMPEGDisplaySetup(mc, mc->sq->width, mc->sq->height, mc->sq->aspect_ratio_info); break; case STATE_SLICE: mc->tick = WaitToNow(mc->tick + diff, GetTicks90(), 0, 0);

15 デモをご覧くださいソースの入手はにお問い合わせください by GO!

untitled

untitled DirectFB SoC munakata.hisao@renesas.com DirectFB DirectFB Linux Frame Buffer Device API Input Device Window System Linux DirectDraw http://www.directfb.org/ TV DirectFB ARIB) YUV SoC blitter 2 DirectFB

MeeGo でのビデオ画像処理とその可能性 ターボシステムズ株式会社

MeeGo でのビデオ画像処理とその可能性ターボシステムズ株式会社