総合性能評価

最適化項目と最適化計画に沿って最適化を全て実施した性能推移を以下に示す。最適化前では、約41fpsだった処理性能が、 最終的に約57fpsまで向上させることができた。 最適化の内容については、No.1インター時の復号処理の統合から説明する。


総合性能実績

最適化計画については下記である。

No. 項目
1 インター時の復号処理の統合
2 中間バッファの削除
3 イントラ処理部の構造変更
4 データ初期化処理部の変更
5 飽和演算処理時の条件分岐処理の変更

No.1インター時の復号処理の統合

デコーダプログラムは、参照画像用と完成画像用の大きな作業領域(「フレームメモリと呼ぶ」)を確保している。インター時の復号処理の流れは、基本的に動き補償 →可変長復号→逆量子化→逆離散コサイン変換→差分加算となっている。この中でフレームメモリにアクセスしているのが、動き補償(ストア)と差分加算処理(ロード) であり、キャッシュ効率が非常に悪い形になっていた。 ここでは、大幅な処理構造の変更を行い、動き補償と差分加算を同時に行う形で統合を行った。これにより、フレームメモリへのロード/ストアを大幅に削除すること ができた。本最適化を行ったことによる性能変化を以下に示す。



性能評価
前回の性能値 適用後性能前回からの性能向上率
41.320fps 50.063fps17.5%向上

No.2中間バッファの削除

本デコーダプログラムは、最終的にはRGB32bitフォーマットで出力する仕様であるが、同時にデコード済みの「完成画用のフレーム」として、 実フレームサイズ分のYUVバッファも存在していた。この「完成画用のフレーム」は、RGB変換処理に変更を行うことで、削除可能な中間バッファとみなすことができる。 フレームメモリのようなキャッシュ効率の悪いデータ域へのアクセスを減らすことは、No.1インター時の復号処理の統合と同様、大幅な高速化を見込める。 本項目では、YUVフォーマットの最終画像用の中間バッファを削除し、参照画・カレント用フレームから直接RGB変換を行うことが可能となる形に変更を行った。この変更により、 大幅なストア処理の削除が実現した。



性能評価
前回の性能値 適用後性能前回からの性能向上率
50.063fps 53.942fps7.55%向上

No.3イントラ処理部の変更

本デコーダプログラムのイントラ処理時では、ブロックデータ解析後、輝度ブロックのデコード処理か色差ブロックのデコード処理かを振り分けるための 条件分岐が頻繁に行われていた。ここでは、これらの処理の条件分岐を外し、シーケンシャルに処理が実行されるように、輝度の処理と色差の処理を別関数に分けた。 また、後の最適化を行うにあたり、コード改修を行いやすくすることにも繋がる。当然であるが、関数を増やすと、コードサイズは増加する。 本手法は、コードサイズがネックになる可能性を考慮して適用するべきである。本件では、若干であるが性能向上した。



性能評価
前回の性能値 適用後性能前回からの性能向上率
53.942fps 54.232fps0.55%向上

No.4データ初期化処理部の変更

本デコーダプログラムが、頻繁に使用するデータに「ブロックデータ」がある。その初期化処理を、キャッシュに乗っているタイミングで行っていなかった。 また、初期化の0クリア処理においても、CHAR型のポインタを使用していたため、命令数の増加に繋がっていた。基本的ではあるが、 これを、INT型ポインタでのストアに変更を行った。処理構造の変更と、キャッシュ効率の改善を起こった結果を以下に示す。



性能評価
前回の性能値 適用後性能前回からの性能向上率
54.232fps 57.338fps5.41%向上

No.5飽和演算処理時の条件分岐処理の変更

本開発対象デコーダでは、short型のデータに対して、0〜255の飽和演算処理が行われている。元の、飽和演算処理 は下記の流れで処理を行っていた。

  1. short型のデータに対して、255以上であるかどうかの条件判断を行い、255以上の場合は、255をストアする。

  2. 0未満であるかどうかの条件判断を行い、0未満の場合は、0をストアする。

  3. 1. 2.の条件に該当しなかった場合、short型のデータをそのままストアする。

この処理の場合、short型のデータが255以上の値であれば、条件分岐処理1回で終わるため、非常に効率が良い。 だが、1〜254の値である場合、条件分岐を2度通過する為、効率が悪いと言える。 本件では、1〜254の値の場合を優先し、以下のように飽和演算処理の流れを変更した。

  1. short型のデータに対して、0xFF00でマスクを行い、8ビット以上の値がない場合は、short型のデータをそのままストアする。

  2. short型のデータに対して、0以上であるかの判断を行い、0以上の場合は255をストアする。

  3. 2.の条件に該当しなかった場合、0をストアする。

この改修により、わずかであるが性能向上させることができた。この変更は、画像に依存する為、 いくつかのサンプルを取得した上で、こちらの方が性能が良いことを確認の上、採用した。



性能評価
前回の性能値 適用後性能前回からの性能向上率
57.338fps 57.705fps0.63%向上
国立電気通信大学 大学院情報システム学研究科 笠井研究室に技術協力し、左記のskim@mobileに本ページのデコーダ を使用して頂いています。skim@mobileは、モバイルビデオの新しい視聴スタイルを提供します。