JP3356337B2 - 画像処理装置及び画像処理方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【目次】以下の順序で本発明を説明する。 産業上の利用分野 従来の技術（図１２及び図１３） 発明が解決しようとする課題 課題を解決するための手段（図１〜図１１） 作用（図１及び図１１） 実施例（図１〜図１１） （１）階層符号化の原理（図１〜図３） （２）全体構成（図４） （３）階層符号化エンコーダ部４０Ａ（図５及び図６） （３−１）ブロツク構成（図５及び図６） （３−２）処理 （４）発生情報量制御部４０Ｂ（図７〜図９） （４−１）ブロツク構成（図７） （４−２）度数分布表（図８） （４−３）処理（図９） （５）伝送ブロツクのデータ構成（図１０） （６）他の実施例（図１１） 発明の効果

【０００２】

【産業上の利用分野】本発明は画像処理装置及び画像処
理方法に関し、例えば所定の画像データを異なる解像度
でなる複数の画像データに分割符号化する画像処理装置
及び画像処理方法に適用して好適なものである。

【０００３】

【従来の技術】従来、この種の画像符号化装置として、
入力画像データをピラミツド符号化等の階層符号化の手
法を用いて階層的に符号化するものがある。この階層符
号化装置においては、高解像度の入力画像データを第１
の階層データとして、この第１の階層データよりも解像
度が低い第２の解像データ、さらに第２の解像データよ
りも解像度が低い第３の階層データ、……を順次再帰的
に形成し、これら複数の階層データを通信路や記録再生
経路でなる伝送路で伝送する。

【０００４】またこのとき複数の階層データを復号化す
る画像復号化装置では、複数の階層データについて全て
復号化しても良く、またそれぞれに対応するテレビジヨ
ンモニタの解像度等により、何れかの階層データのうち
所望の１つを選択して復号化しても良い。このように階
層化された複数の階層データから所望の階層データのみ
について復号化することにより必要最小限の伝送データ
量により所望の画像データを得ることができる。

【０００５】ここで図１２に示すように、この階層符号
化として例えば４階層の符号化を実現する画像符号化装
置１では、それぞれ３段分の間引きフイルタ２、３、４
と補間フイルタ５、６、７とを有し、入力画像データＤ
１について各段の間引きフイルタ２、３、４によつて順
次解像度の低い縮小画像データＤ２、Ｄ３、Ｄ４を形成
すると共に補間フイルタ５、６、７により縮小画像デー
タＤ２、Ｄ３、Ｄ４を縮小前の解像度に戻す。

【０００６】各間引きフイルタ２〜４の出力Ｄ２〜Ｄ４
及び各補間フイルタ５〜７の出力Ｄ５〜Ｄ７はそれぞれ
差分回路８、９、１０に入力され、これにより差分デー
タＤ８、Ｄ９、Ｄ１０が生成される。この結果、画像符
号化装置１においては、階層データのデータ量を低減す
ると共に信号電力を低減する。ここでこの差分データＤ
８〜Ｄ１０及び縮小画像データＤ４は、入力画像データ
Ｄ１に対して、それぞれ面積が１、1/4 、1/16、1/64の
サイズとなつている。

【０００７】それぞれの差分回路８〜１０より得られる
差分データＤ８〜Ｄ１０及び間引きフイルタ４より得ら
れる縮小画像データＤ４は各符号器１１、１２、１３、
１４によつて圧縮処理され、この結果、各符号器１１、
１２、１３、１４から解像度の異なる第１、第２、第３
及び第４の階層データＤ１１、Ｄ１２、Ｄ１３及びＤ１
４が所定の順序で伝送路に送出される。

【０００８】このようにして伝送される第１〜第４の階
層データＤ１１〜Ｄ１４は、図１３に示す画像復号化装
置によつて復号される。すなわち第１〜第４の階層デー
タＤ１１〜Ｄ１４は、それぞれ復号器２１、２２、２
３、２４によつて復号され、この結果、まず復号器２４
からは第４の階層データＤ２４が出力される。

【０００９】また復号器２３の出力は加算回路２９にお
いて補間フイルタ２６より得られる第４の階層データＤ
２４の補間データと加算され、これにより第３の階層デ
ータＤ２３が復元される。同様にして復号器２２の出力
は加算回路３０において補間フイルタ２７より得られる
第３の階層データＤ２３の補間データと加算され、これ
により第２の階層データＤ２２が復元される。さらに復
号器２１の出力は加算回路３１において補間フイルタ２
８より得られる第２の階層データＤ２２の補間データと
加算され、これにより第１の階層データＤ２１が復元さ
れる。

【００１０】

【発明が解決しようとする課題】ところがかかる階層符
号化方法を実現する画像符号化装置においては、入力画
像データを複数の階層データに分割して符号化するた
め、必然的に階層成分だけデータ量が増加し、その分階
層符号化を用いない高能率符号化方法に比較して圧縮率
が低下するという問題がある。また圧縮効率を向上しよ
うとした場合、各階層データ間に適用される量子化器に
よつて画質劣化が発生する問題がある。さらに重要な問
題として、かかる階層符号化方法により得られた各階層
データを伝送する際のデータ構造が伝送エラーに対して
何ら考慮されていない問題があつた。

【００１１】本発明は以上の点を考慮してなされたもの
で、かかる従来の問題点を一挙に解決しながら、伝送エ
ラーに対するロバスト（robust）性をもたせ得る画像処
理装置及び画像処理方法を提案しようとするものであ
る。

【００１２】

【課題を解決するための手段】かかる課題を解決するた
め本発明においては、解像度の最も低い最上位階層情報
Ｄ３５から解像度の最も高い最下位階層情報Ｄ３１でな
る複数のからなる画像データを伝送するための画像伝送
データを生成する画像処理装置において、最上位階層情
報Ｄ３５を除く階層情報Ｄ３１〜Ｄ３４として、隣接す
る上位階層の階層情報との差分である階層間差分データ
Ｄ４１〜Ｄ４４を求める階層間差分データ生成手段４
１、４３、４５、４７と、所定の階層の階層情報Ｄ４１
〜Ｄ４４に対して、複数の画素からなる各ブロツクにつ
いてブロツクアクテイビテイＰを判断する判断手段５１
〜５４と、最上位階層情報Ｄ３５を除く所定の階層の階
層情報Ｄ４１〜Ｄ４４の各ブロツクについて、ブロツク
アクテイビテイＰが所定の閾値未満ＴＨ１〜ＴＨ４のと
きに、当該ブロツクの階層情報Ｄ４１〜Ｄ４４の伝送を
しないことを示すフラグを設定する設定手段５１と、フ
ラグに基づいて、各階層情報Ｄ４１〜Ｄ４４の各ブロツ
ク毎に伝送又は非伝送の有無を制御する制御手段５１
と、最上位階層情報Ｄ３５及びフラグを固定長データＣ
１、Ｄ５５、Ｃ２として伝送した後に階層間差分データ
Ｄ４１〜Ｄ４４を可変長データＤ５１〜Ｄ５４として伝
送するような画像伝送データを生成する画像伝送データ
生成手段８０とを設けるようにした。

【００１３】また本発明においては、解像度の最も低い
最上位階層情報Ｄ３５から解像度の最も高い最下位階層
情報Ｄ３１でなる複数のからなる画像データを伝送する
ための画像伝送データを生成する画像処理方法におい
て、最上位階層情報Ｄ３５を除く階層情報Ｄ３１〜Ｄ３
４として、隣接する上位階層の階層情報との差分である
階層間差分データＤ４１〜Ｄ４４を求める第１のステツ
プと、所定の階層の階層情報Ｄ４１〜Ｄ４４に対して、
複数の画素からなる各ブロツクについてブロツクアクテ
イビテイＰを判断する第２のステツプと、最上位階層情
報Ｄ３５を除く所定の階層の階層情報Ｄ４１〜Ｄ４４の
各ブロツクについて、ブロツクアクテイビテイＰが所定
の閾値未満ＴＨ１〜ＴＨ４のときに、当該ブロツクの階
層情報Ｄ４１〜Ｄ４４の伝送をしないことを示すフラグ
を設定する第３のステツプと、フラグに基づいて、各階
層情報Ｄ４１〜Ｄ４４の各ブロツク毎に伝送又は非伝送
の有無を制御する第４のステツプと、最上位階層情報Ｄ
３５及びフラグを固定長データＣ１、Ｄ５５、Ｃ２とし
て伝送した後に階層間差分データＤ４１〜Ｄ４４を可変
長データＤ５１〜Ｄ５４として伝送するような画像伝送
データを生成する第５のステツプとを設けるようにし
た。

【００１４】さらに本発明においては、解像度の最も低
い最上位階層情報Ｄ３５から解像度の最も高い最下位階
層情報Ｄ３１でなる複数の階層情報からなる画像データ
を伝送するための画像伝送データを生成する画像処理装
置において、最上位階層情報Ｄ３５を除く階層情報Ｄ３
１〜Ｄ３４として、隣接する上位階層の階層情報との差
分である階層間差分データＤ４１〜Ｄ４４を求める階層
間差分データ生成手段４１、４３、４５、４７と、所定
の階層の階層情報Ｄ４１〜Ｄ４４に対して、複数の画素
からなる各ブロツクについてブロツクアクテイビテイＰ
を判断する判断手段５１〜５４と、最上位階層情報Ｄ３
５を除く所定の階層の階層情報Ｄ４１〜Ｄ４４の各ブロ
ツクについて、ブロツクアクテイビテイＰが所定の閾値
ＴＨ１〜ＴＨ４以上のときにブロツクの階層情報Ｄ４１
〜Ｄ４４の伝送をし、ブロツクアクテイビテイＰが当該
閾値ＴＨ１〜ＴＨ４未満のときにブロツクの階層情報Ｄ
４１〜Ｄ４４の伝送をしないように制御する制御手段５
１と、最上位階層情報Ｄ３５を固定長データＣ１、Ｄ５
５、Ｃ２として伝送した後に階層間差分データＤ４１〜
Ｄ４４を可変長データＤ５１〜Ｄ５４として伝送するよ
うな画像伝送データを生成する画像伝送データ生成手段
８０とを設けるようにした。

【００１５】さらに本発明においては、解像度の最も低
い最上位階層情報Ｄ３５から解像度の最も高い最下位階
層情報Ｄ３１でなる複数の階層情報からなる画像データ
を伝送するための画像伝送データを生成する画像処理方
法において、最上位階層情報Ｄ３５を除く階層情報Ｄ３
１〜Ｄ３４として、隣接する上位階層の階層情報との差
分である階層間差分データＤ４１〜Ｄ４４を求める第１
のステツプと、所定の階層の階層情報Ｄ４１〜Ｄ４４に
対して、複数の画素からなる各ブロツクについてブロツ
クアクテイビテイＰを判断する第２のステツプと、最上
位階層情報Ｄ３５を除く所定の階層の階層情報Ｄ４１〜
Ｄ４４の各ブロツクについて、ブロツクアクテイビテイ
Ｐが所定の閾値ＴＨ１〜ＴＨ４以上のときにブロツクの
階層情報Ｄ４１〜Ｄ４４の伝送をし、ブロツクアクテイ
ビテイＰが当該閾値ＴＨ１〜ＴＨ４未満のときにブロツ
クの階層情報Ｄ４１〜Ｄ４４の伝送をしないように制御
する第３のステツプ５１と、最上位階層情報Ｄ３５を固
定長データＣ１、Ｄ５５、Ｃ２として伝送した後に階層
間差分データＤ４１〜Ｄ４４を可変長データＤ５１〜Ｄ
５４として伝送するような画像伝送データを生成する第
４のステツプとを設けるようにした。

【００１６】

【作用】第１及び第２の発明においては、最上位階層情
報Ｄ３５を除く所定の階層の階層情報Ｄ４１〜Ｄ４４の
各ブロツクについて、ブロツクアクテイビテイＰが所定
の閾値未満ＴＨ１〜ＴＨ４のときに、当該ブロツクの階
層情報Ｄ４１〜Ｄ４４の伝送をしないことを示すフラグ
を設定し、当該フラグに基づいて、各階層情報Ｄ４１〜
Ｄ４４の各ブロツク毎に伝送又は非伝送の有無を制御す
るようにしたことにより、伝送情報量を削減することが
できる。

【００１７】また最上位階層情報Ｄ３５及びフラグを固
定長データＣ１、Ｄ５５、Ｃ２として伝送した後に階層
間差分データＤ４１〜Ｄ４４を可変長データＤ５１〜Ｄ
５４として伝送するような画像伝送データを生成するよ
うにしたことにより、復号する際、可変長データＤ５４
〜Ｄ５１にエラーが発生した場合でも、固定長データＣ
１、Ｄ５５、Ｃ２の内容を正確に検出することができ
る。さらに固定長データＣ１、Ｄ５５、Ｃ２に基づいて
所望の画像データに対するアクセス性を向上させること
ができる。

【００１８】一方、第３及び第４の発明においては、最
上位階層情報Ｄ３５を除く所定の階層の階層情報Ｄ４１
〜Ｄ４４の各ブロツクについて、ブロツクアクテイビテ
イＰが所定の閾値ＴＨ１〜ＴＨ４以上のときにブロツク
の階層情報Ｄ４１〜Ｄ４４の伝送をし、ブロツクアクテ
イビテイＰが当該閾値ＴＨ１〜ＴＨ４未満のときにブロ
ツクの階層情報Ｄ４１〜Ｄ４４の伝送をしないように制
御するようにしたことにより、伝送情報量を削減するこ
とができる。また第１及び第２の発明と同様に、最上位
階層情報Ｄ３５を固定長データＣ１、Ｄ５５、Ｃ２とし
て伝送した後に階層間差分データＤ４１〜Ｄ４４を可変
長データＤ５１〜Ｄ５４として伝送するような画像伝送
データを生成するようにしたことにより、復号する際、
可変長データＤ５４〜Ｄ５１にエラーが発生した場合で
も、固定長データＣ１、Ｄ５５、Ｃ２の内容を正確に検
出することができる。さらに固定長データＣ１、Ｄ５
５、Ｃ２に基づいて所望の画像データに対するアクセス
性を向上させることができる。

【００１９】

【実施例】以下図面について、本発明の一実施例を詳述
する。

【００２０】（１）階層符号化の原理 図１は全体として本発明による階層符号化の原理とし
て、例えば高品位テレビジヨン信号等の静止画像を階層
符号化して圧縮する場合を示す。この階層符号化では下
位階層データの単純な算術平均で上位階層データを作り
伝送すべき下位階層データを減少させて、情報量の増加
を伴わない階層構造を実現する。また上位階層から下位
階層の復号についてはブロツク毎のアクテイビテイに基
づいて適応的に分割を制御することで平坦部分の情報量
を削減する。さらに下位階層のために行う差分信号の符
号化では、その量子化特性を上位階層のアクテイビテイ
に基づいて、付加コードなしにブロツク毎に切り替える
ことで高能率化を実現する。

【００２１】すなわちこの階層符号化の階層構造では、
まず入力される高品位テレビジヨン信号を下位階層と
し、この下位階層の２ライン×２画素の小ブロツク中の
４画素Ｘ1 〜Ｘ4 について、次式

【数１】 ｍ＝（Ｘ1 ＋Ｘ2 ＋Ｘ3 ＋Ｘ4 ）／４ ……（１） で表される算術平均を取り、その値ｍを上位階層の値と
する。この下位階層では、次式

【数２】 ΔＸi ＝Ｘi −ｍ （ただし ｉ＝１〜３） ……（２） で示すように、上位階層との差分値を３画素分だけ用意
することで、元々の４画素データと同じ情報量で階層構
造を構成する。

【００２２】一方下位階層の復号に際しては３画素Ｘ1
〜Ｘ3 は、次式

【数３】 Ｅ〔Ｘi 〕＝ΔＸi ＋ｍ （但し ｉ＝１〜３） ……（３） で表すように上位階層の平均値ｍにそれぞれの差分値Δ
Ｘi を加えて復号値Ｅ〔Ｘi 〕を求め、残つた１画素
は、次式

【数４】 Ｅ〔Ｘ4 〕＝ｍ×４−Ｅ〔Ｘ1 〕−Ｅ〔Ｘ2 〕−Ｅ〔Ｘ3 〕 ……（４） で表すように上位階層の平均値ｍから下位階層の３個の
復号値を引く事で復号値Ｅ〔Ｘ4 〕を決定する。ここ
で、Ｅ〔 〕は復号値を意味する。

【００２３】ここでこの階層符号化においては、上位階
層から下位階層へは解像度が階層毎に４倍になるが、平
坦部ではこの分割を禁止する事で冗長度を削減してい
る。なおこの分割の有無を指示するためのフラグが１ビ
ツト、ブロツク単位で用意される。下位階層での分割の
必要性の判断は局所的なアクテイビテイとして、例えば
差分データの最大値で判断する。

【００２４】ここで階層符号化の例としてＩＴＥのＨＤ
標準画像（Ｙ信号）を用い、５階層符号化した場合の適
応分割結果を図２に示す。最大差分データに対する閾値
を変化させた時の各階層の画素数を本来の画素数に対す
る割合を示すが、空間相関に基づく冗長度削減のようす
が分かる。削減効率は画像によつて変わるが最大差分デ
ータに対する閾値を１〜６と変化させると、平均的な削
減率は28〜69〔％〕になる。

【００２５】実際上、上位階層の解像度を１／４倍にし
て上位階層を作り、そのとき下位階層では上位階層デー
タからの差分データを符号化することで、信号レベル幅
を有効に削減できる。図２について上述した階層符号化
による５階層の場合を、図３に示すが、ここでは階層を
下位から数えて第１〜５階層と名付けた。

【００２６】原画像の８ビツトＰＣＭデータに比べて、
信号レベル幅の削減が見られる。特に画素数の多い第１
〜４階層は差分信号なので、大幅な削減が達成でき、以
降の量子化で効率が向上する。図３の表から分かるよう
に削減効率の絵柄への依存性は少なく、全ての絵に対し
て有効である。

【００２７】また下位階層の平均値で上位階層を作るこ
とで、エラー伝播をブロツク内にとめながら、下位階層
を上位階層の平均値からの差分に変換することで、効率
の良さも合わせ持つことができる。実際上階層符号化で
は同一空間的位置での階層間のアクテイビテイには相関
があり、上位階層の量子化結果から下位階層の量子化特
性を決定することで、受信側に逆量子化のための量子化
情報を伝送する必要のない（但し、初期値を除く）適応
量子化器を実現できる。

【００２８】実際上、上述した５段階の階層構造に基づ
いて画像を階層符号化してマルチ解像度で表現し、階層
構造を利用した適応分割及び適応量子化を行うことで、
各種ＨＤ標準画像（８ビツトのＹ／ＰB ／ＰR ）を約１
／８に圧縮することができる。また適応分割のために用
意されるブロツク毎の付加コードは、圧縮効率の向上の
ために各階層でランレングス符号化が行われる。このよ
うにして、各階層で充分な画質の画像が得られ、最終的
な最下位階層も視覚的劣化のない良好な画像を得ること
ができる。

【００２９】（２）全体構成 図４において、４０は本発明による画像符号化装置を示
し、入力画像データＤ１を階層符号化して出力する階層
符号化エンコーダ部４０Ａと階層符号化エンコーダ部４
０Ａにおける発生情報量が目標値を達成するように制御
する発生情報量制御部４０Ｂとによつて構成されてい
る。

【００３０】また画像符号化装置４０は人間の視覚特性
を考慮して符号化できるように各階層ごとの閾値を設定
できるようになされている。これにより広い面積に影響
を及ぼす上位階層の画像データについてはブロツクの分
割処理を選択させる一方、狭い面積にしか影響を及ぼさ
ない下位階層の画像データについてはブロツクの分割処
理を選択させないといつた各階層に応じた分割処理を実
現できるようになされている。

【００３１】ここで階層符号化エンコーダ部４０Ａはデ
ータ遅延用のメモリ（図示せず）とエンコーダとによつ
て構成されている。このうちメモリは発生情報量制御部
４０Ｂにおいて最適制御値が決定されるまでの間、エン
コード処理が実行されないようにデータを遅延できるよ
う入力段に設けられている。

【００３２】一方、発生情報量制御部４０Ｂは入力画像
データを入力して処理対象データに適合した閾値ＴＨを
決定するようになされており、階層符号化エンコーダ部
４０Ａにおいて入力画像データが効率良く符号化される
ように決定された最適制御値をエンコーダに伝送するよ
うになされている。いわゆるフイードフオワード型のバ
ツフアリングの構成である。この構成により正確な発生
情報量制御とフイードフオワード型バツフアリングによ
つて発生する時間遅れを排除することができるようにな
されている。

【００３３】（３）階層符号化エンコーダ部４０Ａ （３−１）ブロツク構成 階層符号化エンコーダ部４０Ａは図５に示す構成でな
り、この例の場合、５階層に分けて処理する。まず入力
画像データＤ３１が第１の差分回路４１及び第１の平均
化回路４２に入力される。第１の平均化回路４２は、入
力画像データＤ３１（すなわち第１階層データ（最下位
階層データ））の４画素平均により第２階層データＤ３
２を生成する。この実施例の場合、第１の平均化回路４
２は、図６（Ｄ）及び（Ｅ）に示すように、入力画像デ
ータＤ３１の４画素Ｘ1(1)〜Ｘ4(1)から第２階層データ
Ｄ２の画素Ｘ1(2)を生成する。

【００３４】また第２階層データＤ３２の画素Ｘ1(2)に
隣接する画素Ｘ2(2)〜Ｘ4(2)も同様に第１階層データＤ
３１の４画素平均により生成される。第２階層データＤ
３２は第２の差分回路４３及び第２の平均化回路４４に
入力され、第２の平均化回路４４は、第２階層データＤ
３２の４画素平均により第３階層データＤ３３を生成す
る。例えば、図６（Ｃ）及び（Ｄ）に示す第２階層デー
タＤ３２の画素Ｘ1(2)〜Ｘ4(2)から第３階層データＤ３
３の画素Ｘ1(3)が生成されると共に、画素Ｘ1(3)に隣接
する画素Ｘ2(3)〜Ｘ4(3)も同様に第２階層データＤ３２
の４画素平均により生成される。

【００３５】第３階層データＤ３３は第３の差分回路４
５及び第３の平均化回路４６に入力され、第３の平均化
回路４６は上述の場合と同様に第３階層データＤ３３の
４画素平均により図６（Ｂ）及び（Ｃ）に示すように、
画素Ｘ1(4)〜Ｘ4(4)でなる第４階層データＤ３４を生成
する。第４階層データＤ４４は第４の差分回路４７及び
第４の平均化回路４８に入力され、第４の平均化回路４
８は、第４階層データＤ３４の４画素平均により最上位
階層となる第５階層データＤ３５を生成する。すなわち
図６（Ａ）及び（Ｂ）に示すように、第４階層データＤ
３４の４画素Ｘ1(4)〜Ｘ4(4)を平均化することにより第
５階層データＤ３５の画素Ｘ1(5)が生成される。

【００３６】ここで第１〜第５階層データＤ３１〜Ｄ３
５のブロツクサイズは、最下位階層である第１階層デー
タＤ３１のブロツクサイズを１ライン×１画素とする
と、第２階層データＤ３２は１／２ライン×１／２画
素、第３階層データＤ３３は１／４ライン×１／４画
素、第４階層データＤ３４は１／８ライン×１／８画
素、最上位階層データである第５階層データＤ３５は１
／１６ライン×１／１６画素となる。

【００３７】階層符号化エンコーダ部４０Ａは、これら
第１〜第５の階層データＤ３１〜Ｄ３５のうち最上位の
階層データ（すなわち第５の階層データＤ３５）から順
に再帰的処理を繰り返して隣接する２つの階層データ間
の差分を差分回路４１、４３、４５、４７において求
め、差分データのみを符号器５１〜５５によつて圧縮符
号化する。これにより階層符号化エンコーダ部４０Ａは
伝送路に伝送される情報量を圧縮するようになされてい
る。また階層符号化エンコーダ部４０Ａは、（２）式に
ついて上述したように、符号器５１〜５４により、上位
階層１画素に対応する下位階層４画素のうち１画素を減
らすことにより、伝送データ量を削減する。

【００３８】このような圧縮条件を最適に保つため階層
符号化エンコーダ部４０Ａは、各階層ごとに得られた伝
送データとしての第２〜第４階層差分符号化データＤ５
１〜Ｄ５４及び最上位階層符号化データＤ５５を復号器
５６〜５９によつて復号する。このうち最上位の階層に
対応する復号器５９は、符号器５５において圧縮符号化
された第５の階層データＤ３５に対応する復号データＤ
４８を最上位階層符号化データＤ５５から復号し、これ
を第４階層の差分回路４７に与える。

【００３９】これに対して他の復号器５１〜５４は、そ
れぞれ分割／非分割処理の有無を示すフラグに基づいて
復号動作を切換える。すなわち分割処理がなされている
場合には、第２〜第４階層差分値符号化データＤ５２〜
Ｄ５４として伝送される差分データから復号処理によつ
て上位の階層データ（すなわち第４、第３、第２の階層
データ）を復号して第３階層の差分回路４５、第２階層
の差分回路４３、第１の階層データ４１にそれぞれ与え
るようになされている。これにより各差分回路４１、４
３、４５、４７からは隣接する階層間についての差分デ
ータＤ４１、Ｄ４２、Ｄ４３、Ｄ４４が得られることに
なる。

【００４０】また各階層に対応する符号器５１〜５５は
これら差分回路４１、４３、４５、４７や平均化回路４
８によつて得られた差分データＤ４１、Ｄ４２、Ｄ４
３、Ｄ４４又は第５の階層データＤ３５を入力し、各ブ
ロツクについて得られるアクテイビテイに対する閾値の
判定と分割選択処理を実行する。このとき符号器５１〜
５５は、処理対象が分割ブロツクの場合、階層間で得ら
れた差分データをそのまま圧縮符号化し、同時に各ブロ
ツクについての分割判定フラグをつけて伝送する。

【００４１】これに対して符号器５１〜５５は、処理対
象が非分割ブロツクの場合、このブロツクは受信側にお
いて上位階層データから復号されるものとして符号化対
象から除外する。因にこの場合にも各ブロツクについて
の分割判定フラグは付けて伝送される。これら５組の符
号器５１〜５５から出力された第１〜第４階層差分値符
号化データＤ５１〜Ｄ５４及び最上位階層符号化データ
Ｄ５５が所定の伝送路に送出される。

【００４２】（３−２）処理 次に階層符号化エンコーダ部４０Ａによる具体的な信号
処理を説明する。まず階層間差分値に基づくブロツクア
クテイビテイにより、階層間差分値に対する処理を選択
する場合を考える。また各ブロツクは２ライン×２画素
より構成されるものとする。

【００４３】ここでは各画素のデータ値をＸとし、デー
タ値Ｘの階層をサフイツクスで表す。すなわち上位の階
層データをＸi+1(0)とするとき、隣接する下位階層デー
タはＸi(j)（ｊ＝０〜３）である。また階層間の差分符
号値はΔＸi(j)（ｊ＝０〜３）であり、階層符号化エン
コーダ部４０Ａはこの差分符号値を圧縮符号化するので
ある。

【００４４】各階層における符号器５１〜５５による圧
縮符号化処理は各ブロツクについて得られたブロツクア
クテイビテイＰと閾値データＤ５７とを比較し、比較結
果によつて処理を選択する。すなわちブロツクアクテイ
ビテイＰが閾値ＴＨ以上の場合には下位階層について順
次分割処理するのに対し、ブロツクアクテイビテイＰが
閾値ＴＨ未満の場合には下位階層についての分割処理を
中止する。

【００４５】これによりブロツクアクテイビテイＰが低
い領域については上位の階層データしか送らずに済み、
伝送情報量を削減できるのである。また伝送路を挟んで
これらのデータを受信する画像データ復号装置は、順に
送られてくる伝送データのうち上位階層データを用いて
ブロツクアクテイビテイＰの低い領域では下位階層デー
タを上位階層データで復元する。一方、ブロツクアクテ
イビテイＰが高い領域では階層間差分復号値と上位階層
データを加算することでデータを復元する。

【００４６】この分割又は非分割の判定結果に対しては
１ビツトの判定フラグが導入されている。このフラグに
よつて各ブロツクについての判定結果を指示することが
可能となる。この判定フラグは各階層のブロツク毎に１
ビツトづつ必要となるが、画質を考慮した場合、有効で
ある。因にこの実施例における階層符号化方式では、こ
の判定フラグをそれ以降の下位階層での判定には反映さ
せないものとする。またこの判定フラグはランレングス
符号化等によつて符号化され、符号化コードと共に伝送
される。

【００４７】（４）発生情報量制御部４０Ｂ （４−１）ブロツク構成 一方、発生情報量制御部４０Ｂは、図７に示すように構
成されている。この発生情報量制御部４０Ｂは、階層符
号化エンコーダ部４０Ａが画質を劣化させることなく効
率的に画像データを符号化処理できるようにするため、
分割／非分割の選択基準となる各階層についての閾値Ｔ
Ｈ１〜ＴＨ４の組み合わせを設定し、これを階層符号化
エンコーダ部４０Ａに閾値データＤ５７として出力する
ものである。

【００４８】発生情報量制御部４０Ｂは、入力画像デー
タＤ３１を平均値回路４２、４４、４６、４８を順次介
して１／４平均化することにより解像度の異なる５階層
の画像データを生成する。続いて差分データとして伝送
される画像データの各階層毎の発生情報量を求めるた
め、１階層上の階層画像データＤ３２、Ｄ３３、Ｄ３４
及びＤ３５と各階層の画像データＤ３１、Ｄ３２、Ｄ３
３及びＤ３４との差を各差分回路６１、６２、６３及び
６４において求める。

【００４９】これら各差分回路６１、６２、６３及び６
４から出力される差分データは階層符号化エンコーダ部
４０Ａにおける階層処理によつて得られる各階層の差分
データとみなすことができる。アクテイビテイ検出回路
６５、６６、６７及び６８は第１階層〜第４階層の画像
データにそれぞれ対応し、各階層の各ブロツクについて
ブロツクアクテイビテイを求めてこれを対応する度数分
布表６９〜７２に登録するようになされている。ここで
度数分布表の生成過程では、エンコーダ部の伝送データ
量を正確に把握するために、上位階層１画素に対応する
下位階層４画素のうち実際にエンコーダによる伝送対象
である３画素を用いるようになされている。また第５階
層の画像データについては最上位の階層データであり、
差分データとしてではなく直接伝送されるため各ブロツ
クについてのダイナミツクレンジがそのまま度数分布表
７３に登録される。

【００５０】制御部７４はこれら５組の度数分布表６９
〜７３と双方向の信号路で接続されており、下位階層を
分割又は非分割か否かの判断基準となるブロツクアクテ
イビテイＰの閾値ＴＨ１〜ＴＨ４の組み合わせをＲＯＭ
に格納している。制御部７４はこれらの組を度数分布表
６９〜７３に与えて、当該閾値に対して生じるであろう
発生情報量を各階層ごとに読み出し、これら全ての発生
情報量を基に全体としての総発生情報量を求める。そし
て総発生情報量が目標値を達成するまで最適な閾値を求
め、得られた閾値を制御データとして階層符号化エンコ
ーダ部４０Ａに与えるようになされている。

【００５１】また制御部７４は階層毎に画像信号データ
の性質や人間の視覚特性を考慮して階層符号化エンコー
ダ部４０Ａに与える制御データを調整し、最適な閾値を
与えることができるようになされている。これにより受
信側において再生された画質について主観的な画質の向
上がみこまれる。

【００５２】（４−２）度数分布表 ここでは情報量制御用の度数分布表６９〜７３について
説明する。図８（Ａ）〜（Ｅ）はそれぞれ最上位の階層
データ（第５の階層データ）〜最下位の階層データ（第
１の階層データ）について得られたブロツクアクテイビ
テイの度数分布表を示している。ここで図８（Ａ）に示
す第５の階層についての度数分布表に関しては、対象デ
ータが差分データではないためダイナミツクレンジによ
る度数分布表が生成される。例えばＰＣＭ符号化を適用
する場合には符号化されたブロツクについてのダイナミ
ツクレンジがデータとして登録され、圧縮処理方法とし
てＡＤＲＣ（適応ダイナミツクレンジ符号化（USP-4703
352））を適用する場合にはＡＤＲＣブロツクのＤＲが
登録される。

【００５３】一方、他の度数分布表６９〜７２は対象デ
ータが差分データであり、各度数分布表について与えら
れている閾値ＴＨ１、ＴＨ２、ＴＨ３、ＴＨ４以上のブ
ロツクアクテイビテイを有するブロツクが分割対象ブロ
ツクとなる。従つて各階層において閾値以上のブロツク
アクテイビテイを有するブロツクの数を算出すれば発生
情報量を算出することができる。

【００５４】次に発生情報量の算出例を説明する。ここ
で第１階層におけるブロツク数をＮ1 、またブロツクア
クテイビテイが閾値ＴＨ１より大きい分割対象ブロツク
数をＮ1'とし、その際における量子化ビツト数をＱ１と
すると、第１階層における発生情報量Ｉ１は、次式

【数５】 Ｉ１＝４・Ｑ１・Ｎ1'・（３／４）＋Ｎ1 ……（５） によつて与えることができる。

【００５５】この（５）式における第１項において各ビ
ツト数が４倍されているのは、この例の場合、各ブロツ
クが２ライン×２画素に分割されているからである。ま
た第１項において３／４倍しているのは上位階層値が下
位階層値の平均値より生成されるという構造において、
上位階層値と伝送される下位階層値３画素を用いて算術
式により下位階層の４番目の非伝送画素値が復元できる
という性質を反映しているからである。因に第２項にお
いて、第１階層におけるブロツク数をＮ1 が加算されて
いるのは分割判定フラグとして各ブロツクごとに１ビツ
ト付加して伝送することを示している。

【００５６】同様に、第２、第３、第４の階層について
も、各階層におけるブロツク数をＮ2 、Ｎ3 、Ｎ4 と
し、またブロツクアクテイビテイが閾値ＴＨ２、ＴＨ
３、ＴＨ４より大きい分割対象ブロツク数をＮ2'、Ｎ
3'、Ｎ4'として、その際における量子化ビツト数をＱ
２、Ｑ３、Ｑ４とすると、各階層における発生情報量Ｉ
ｋ（ｋ＝２、３、４）は、次式

【数６】 Ｉｋ＝４・Ｑｋ・Ｎk'・（３／４）＋Ｎk ……（６） によつて与えられる。

【００５７】これら第１〜第４階層についての発生情報
量Ｉ１〜Ｉ４及び第５階層についての発生情報量Ｉ５を
用いると、階層符号化エンコーダ部４０Ａの符号化処理
によつて生じる総発生情報量Ｉは、次式

【数７】 Ｉ＝Ｉ１＋Ｉ２＋Ｉ３＋Ｉ４＋Ｉ５ ……（７） のように各階層ごとの発生情報量の和として求めること
ができる。

【００５８】（４−３）処理 発生情報量制御部４０Ｂは、階層符号化エンコーダ部４
０Ａと同様、入力画像データＤ３１を入力し、これを平
均化回路４２によつて２ライン×２画素ごとに平均値が
求められ、画素数を１／４に減少させて解像度を落と
す。続いてこの階層データＤ３２についても同様に平均
化回路４３、４６、４８を順に介することにより、それ
ぞれ画素数を１／４に減少させて解像度を落とす。

【００５９】発生情報量制御部４０Ｂは、このように複
数の解像度の画像データのうち最上位（すなわち解像度
が最も低い）の階層データＤ３５を度数分布表７３に与
え、第５の階層データＤ３５における各ブロツクのアク
テイビテイＰの度数を登録する。これは前述の階層符号
化エンコーダ部４０Ａで実行される圧縮処理に対応する
データの度数の計測である。例えば第５階層データＤ３
５に対し、ＰＣＭ符号化による圧縮処理がなされる場
合、各ブロツクについて与えられるダイナミツクレンジ
がデータとして登録され、圧縮処理方法としてＡＤＲＣ
を適用する場合にはＡＤＲＣブロツクのＤＲが登録され
る。

【００６０】次に第４の階層データＤ３４と第５の階層
データＤ３５との差分から差分データＤ６４が得られ
る。アクテイビテイ検出回路６８はこの差分データＤ６
４についてアクテイビテイを検出し、アクテイビテイデ
ータＤ６８として度数分布表７２に登録する。同様に下
位の階層データＤ３３、Ｄ３２、Ｄ３１のそれぞれにつ
いて求められた各ブロツクのアクテイビテイＰをアクテ
イビテイデータＤ６７、Ｄ６６、Ｄ６５として度数分布
表７１、７０、６９に順に登録する。

【００６１】制御部７４は図９に示すＲＯＭテーブルか
ら各階層について設定されている分割／非分割設定用の
閾値ＴＨ１、ＴＨ２……ＴＨ４についての組み合わせを
番号の若い組（ＱNO1 ）から順に読み出す。続いて各閾
値ＴＨ１、ＴＨ２……ＴＨ４に対して大きな値のアクテ
イビテイＰを有するブロツク度数を各階層について度数
分布表６９〜７３から読み出し、各階層について各閾値
に対する発生情報量を検出する。

【００６２】制御部７４は各階層の度数分布表６９〜７
３について求められた発生情報量を統合し、階層符号化
エンコーダ４０Ａにおける符号化の結果生じるであろう
総発生情報量を算出する。制御部７４はこの発生情報量
と目標値とを比較し、目標値との差が大きい場合には目
標値を満たす閾値の組み合わせを求めるため次の番号
（ＱNO2 ）の閾値ＴＨ１、ＴＨ２……ＴＨ４の組に移
る。以後、総発生情報量が目標値に達成するまで上述の
処理を繰り返し、目標値に最も近い総発生量が得られる
閾値ＴＨ１、ＴＨ２……ＴＨ５の組を得、これを閾値デ
ータＤ５７として階層符号化エンコーダ部４０Ａに出力
するようになされている。

【００６３】（５）伝送ブロツクのデータ構成 ここで上述のような発生情報量制御方式により階層符号
化エンコーダ部４０Ａにおいて生成されるデータは、符
号器５５（図５）から出力される最上位階層符号化デー
タＤ５５等の固定長データと、符号器５１〜５４から出
力される第１〜第４階層差分値符号化データＤ５１〜Ｄ
５４の可変長データとに分類できる。このため当該階層
符号化エンコーダ部４０Ａにおいては、出力段に設けた
伝送ブロツク形成部８０によつて、図１０に示すよう
に、画像を構成する各フレームごとに各固定長データを
ひとまとめにして固定長データブロツク１００を形成す
ると共に、当該フレームの各可変長データをひとまとめ
にして可変長データブロツク１０１を形成し、この可変
長データブロツク１０１を固定長データブロツク１００
の後に配列することにより伝送用の単位ブロツク１０２
（以下、これを伝送ブロツク１０２と呼ぶ）を形成して
伝送路に順次送出するようになされている。

【００６４】実際上伝送ブロツク１０２においては、固
定長データブロツク１００の先頭部（すなわち伝送ブロ
ツク１０２の先頭部）にブロツク１０２の先頭位置を認
識させるためのＳＹＮＣコードや画像データの内容を示
す情報コード（以下これを識別情報コードと呼ぶ）等で
なる伝送ブロツク識別コードＣ１が配列されている。ま
た伝送ブロツク１０２においては、伝送ブロツク識別コ
ードＣ１のすぐ後に最上位階層符号化データＤ５５が配
列されており、これにより識別コードを用いて所望の画
像を探す際、情報量の少ない最上位階層符号化データＤ
５５を用いることによつて画像を高速で順次復元するこ
とができるようになされている。これにより再生時にお
ける高速データサーチ（早見）機能を実現し得るように
なされている。

【００６５】さらに上述のような階層符号化方式では、
階層符号化エンコーダ部４０Ａの符号器５１〜５５から
それぞれ出力された上述の分割判定フラグでなる、復号
側において画像を形成するための判別コード（以下、こ
れらをまとめて階層間データ分割判定コードと呼ぶ）の
データ長が、それぞれ各階層における全ブロツク数に等
しいためにそれぞれ固定長データとなる。このため伝送
ブロツク１０２では、図１０からも明らかなように、こ
れら復号側において各階層ごとの画像を形成するための
判別コードでなる階層間データ分割判定コードＣ２が最
上位階層符号化データＤ５５のすぐ後に配列され、これ
により上述の発生情報量制御を施された後でも、最上位
階層符号化データＤ５５と階層間データ分割判定コード
Ｃ２を合わせた区間に存在するデータが全体として固定
長となり得るようになされている。

【００６６】可変長データブロツク１０１においては、
第４〜第１階層差分値符号化データＤ５４、Ｄ５３、Ｄ
５２、Ｄ５１が順次配列されて形成されており、当該可
変長データ１０１のすぐ後には伝送ブロツク１０２の終
わりを認識させるための伝送ブロツク終了コードＣ３が
付加されている。

【００６７】以上の構成において、この画像符号化装置
では階層符号化エンコーダ部４０Ａにおいて生成したデ
ータを、各フレームごとに各固定長データの後に各可変
長データを配列することにより伝送ブロツク１０２を形
成し、これを伝送路に送出する。従つて復号側では、い
ずれかの可変長データにエラーが発生した場合において
も固定長データブロツク１００内のデータの定義を誤る
ことなく復号することができる。これによりこの画像符
号化装置では伝送データにエラーに対するロバスト性を
もたせ得るようになされている。さらにこの画像符号化
装置４０では、上述のような発生情報量制御方式により
生成したデータを伝送する際、伝送ブロツク識別コード
Ｃ１のすぐ後に最上位階層符号化データＤ５５を配列し
て出力するようにしたことにより、復号側に早見機能を
付加した場合に伝送ブロツク識別コードＣ１を検出後、
最上位階層符号化データＤ５５まで短い時間でアクセス
させることができる。

【００６８】以上の構成によれば、複数の解像度を有す
る階層符号化を容易に実現することができる。また階層
符号化エンコーダ４０Ａから符号化されて出力される伝
送画像データの総発生情報量はほぼ目標値に一致させる
ことができ、圧縮効率の低下しない符号化を実現するこ
とができる。さらに画質劣化の少ない階層符号化を実現
することができる。さらに階層符号化の際における発生
情報量の管理を従来に比して一段と容易にすることがで
きる。また各階層ごとの画像信号データの性質や人間の
視覚特性を考慮して最適な閾値を設定できることによ
り、一律に閾値を設定する場合に比して受け手側におけ
る主観的な画質を一段と向上させることができる。

【００６９】（６）他の実施例 なお上述の実施例においては、ブロツクアクテイビテイ
を各ブロツクについて上位の階層データについて得られ
た復号データと下位の階層データとの差分値の最大値で
判断する場合について述べたが、本発明はこれに限ら
ず、ブロツク内における平均誤差や絶対値和、また標準
偏差やｎ乗和、さらには閾値以上のデータ度数によつて
判断しても良い。

【００７０】また上述の実施例においては、各階層毎に
得られた度数分布表をそのまま利用する場合について述
べたが、本発明はこれに限らず、度数分布表から積算型
の度数分布表を作成してこれを発生情報量の計算に用い
ても良い。すなわち各階層ごとに度数分布表を生成した
後、ブロツクアクテイビテイの上位の値から各ブロツク
アクテイビテイの値までのブロツク度数について累積加
算値を求め、各累積加算値を各ブロツクアクテイビテイ
の値に対応するアドレスに書き込んで積算型の度数分布
を作成するようにしても良い。すると各ブロツクアクテ
イビテイに対応する度数はそのブロツクアクテイビテイ
以上の値をもつブロツク度数の積算値となる。

【００７１】このように予め積算型度数分布表を生成す
れば、各閾値に対応するブロツク度数積算値を算出する
ことは不要となり、単なるメモリの閾値アドレスの読み
出しによつてブロツク度数積算値の算出を可能とするこ
とができ、算出に要する時間を大幅に削減することがで
きる。

【００７２】さらに上述の実施例においては、各階層ご
と異なる値に設定された閾値とブロツクアクテイビテイ
とを比較し、ブロツクの分割／非分割を判定する場合に
ついて述べたが、本発明はこれに限らず、各階層ごと異
なる値に設定された閾値と階層間におけるデータの差分
値とを比較し、比較結果に基づいてブロツクの分割／非
分割を判定するようにしても良い。

【００７３】さらに上述の実施例においては、符号器に
おいて画像データをＰＣＭ符号化する場合について述べ
たが、本発明はこれに限らず、他の符号化方式、例えば
直交符号化方式を適用しても良い。

【００７４】さらに上述の実施例においては、各階層に
ついて得られた度数分布表の閾値について複数の組み合
わせをＲＯＭに格納しておき、発生情報量が最も目標値
に近くなる閾値の組み合わせを求める場合について述べ
たが、本発明はこれに限らず、各階層毎独立に設定でき
るようにしても良い。

【００７５】さらに上述の実施例においては、最下位の
階層データを２ライン×２画素づつ平均値を求めて上位
の階層の画像データを求める場合について述べたが、本
発明はこれに限らず、他の組み合わせによつて平均値を
求めるようにしても良い。

【００７６】

【発明の効果】以上のように本発明によれば、解像度の
最も低い最上位階層情報から解像度の最も高い最下位階
層情報でなる複数のからなる画像データを伝送するため
の画像伝送データを生成する画像処理装置及び方法にお
いて、最上位階層情報を除く階層情報として、隣接する
上位階層の階層情報との差分である階層間差分データを
求め、所定の階層の階層情報に対して、複数の画素から
なる各ブロツクについてブロツクアクテイビテイを判断
し、最上位階層情報を除く所定の階層の階層情報の各ブ
ロツクについて、ブロツクアクテイビテイが所定の閾値
未満のときに、当該ブロツクの階層情報の伝送をしない
ことを示すフラグを設定し、当該フラグに基づいて、各
階層情報の各ブロツク毎に伝送又は非伝送の有無を制御
し、最上位階層情報及びフラグを固定長データとして伝
送した後に階層間差分データを可変長データとして伝送
するような画像伝送データを生成するようにしたことに
より、伝送情報量を削減することができると共に、復号
する際、可変長データにエラーが発生した場合でも、固
定長データの内容を正確に検出することができ、かくし
て伝送エラーに対するロバスト性をもたせることができ
る。また固定長データに基づいて所望の画像データに対
するアクセス性を向上させて、ユーザ側において早見機
能等の付加機能の追加を容易化させることができる。ま
た本発明によれば、解像度の最も低い最上位階層情報か
ら解像度の最も高い最下位階層情報でなる複数の階層情
報からなる画像データを伝送するための画像伝送データ
を生成する画像処理方法において、最上位階層情報を除
く階層情報として、隣接する上位階層情報との差分であ
る階層間差分データを求め、所定の階層の階層情報に対
して、複数の画素からなる各ブロツクについてブロツク
アクテイビテイを判定し、最上位階層情報を除く所定の
階層の階層情報の各ブロツクについて、ブロツクアクテ
イビテイが所定の閾値以上のときにブロツクの階層情報
の伝送をし、ブロツクアクテイビテイが当該閾値未満の
ときにブロツクの階層情報の伝送をしないように制御す
る一方、最上位階層情報を固定長データとして伝送した
後に階層間差分データを可変長データとして伝送するよ
うな画像伝送データを生成するようにしたことにより、
伝送情報量を削減することができると共に、復号する
際、可変長データにエラーが発生した場合でも、固定長
データの内容を正確に検出することができ、かくして伝
送エラーに対するロバスト性をもたせることができる。
また固定長データに基づいて所望の画像データに対する
アクセス性を向上させて、ユーザ側において早見機能等
の付加機能の追加を容易化させることができる。

【図面の簡単な説明】

【図１】本発明による画像符号化方法の原理の説明に供
する略線図である。

【図２】本発明における画像符号化方法によつて適応分
割された撮像画像の処理結果を示す表である。

【図３】本発明における画像符号化方法によつて得られ
る各階層ごとの信号レベルを示す表である。

【図４】本発明による画像符号化装置の一実施例を示す
ブロツク図である。

【図５】階層符号化エンコーダ部を示すブロツク図であ
る。

【図６】階層構造の説明に供する略線図である。

【図７】発生情報量制御部を示すブロツク図である。

【図８】各階層の度数分布表を示す特性曲線図である。

【図９】各階層について得られる閾値の組み合わせを示
す表である。

【図１０】伝送ブロツクのデータ構成を示す概念的な平
面図である。

【図１１】積算型度数分布表を示す特性曲線図である。

【図１２】従来における階層符号化装置を示すブロツク
図である。

【図１３】従来における階層復号化装置を示すブロツク
図である。

【符号の説明】

４０……階層符号化装置、４０Ａ……階層符号化エンコ
ーダ部、４０Ｂ……発生情報量制御部、４１、４３、４
５、４７、６１、６２、６３、６４……差分回路、４
２、４４、４６、４６……平均化回路、５１、５２、５
３、５４、５５……符号器、５６、５７、５８、５９…
…復号器、６５、６６、６７、６８……アクテイビテイ
検出回路、６９、７０、７１、７２、７３……度数分布
表、７４……制御部、１００……固定長データブロツ
ク、１０１……可変長データブロツク、１０２……伝送
ブロツク、Ｃ１……伝送ブロツク識別コード、Ｃ２……
階層間データ分割判定コード、Ｄ５１……第１階層差分
値符号化データ、Ｄ５２……第２階層差分値符号化デー
タ、Ｄ５３……第３階層差分値符号化データ、Ｄ５４…
…第４階層差分値符号化データ、Ｄ５５……最上位階層
符号化データ。

───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平５−183870（ＪＰ，Ａ) 特開 昭62−84630（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 7/24 - 7/68 H04N 1/41 - 1/419

Claims (4)

(57)【特許請求の範囲】
1. 【請求項１】解像度の最も低い最上位階層情報から解像
   度の最も高い最下位階層情報でなる複数の階層情報から
   なる画像データを伝送するための画像伝送データを生成
   する画像処理装置において、 上記最上位階層情報を除く上記階層情報として、隣接す
   る上位階層の上記階層情報との差分である階層間差分デ
   ータを求める階層間差分データ生成手段と、 所定の階層の上記階層情報に対して、複数の画素からな
   る各ブロツクについてブロツクアクテイビテイを判断す
   る判断手段と、 上記最上位階層情報を除く上記所定の階層の上記階層情
   報の上記各ブロツクについて、上記ブロツクアクテイビ
   テイが所定の閾値未満のときに、当該ブロツクの上記階
   層情報の伝送をしないことを示すフラグを設定する設定
   手段と、 上記フラグに基づいて、各上記階層情報の上記各ブロツ
   ク毎に伝送又は非伝送の有無を制御する制御手段と、 上記最上位階層情報及び上記フラグを固定長データとし
   て伝送した後に上記階層間差分データを可変長データと
   して伝送するような上記画像伝送データを生成する画像
   伝送データ生成手段とを具えることを特徴とする画像処
   理装置。
2. 【請求項２】解像度の最も低い最上位階層情報から解像
   度の最も高い最下位階層情報でなる複数の階層情報から
   なる画像データを伝送するための画像伝送データを生成
   する画像処理方法において、 上記最上位階層情報を除く上記階層情報として、隣接す
   る上位階層の上記階層情報との差分である階層間差分デ
   ータを求める第１のステツプと、 所定の階層の上記階層情報に対して、複数の画素からな
   る各ブロツクについてブロツクアクテイビテイを判断す
   る第２のステツプと、 上記最上位階層情報を除く上記所定の階層の上記階層情
   報の上記各ブロツクについて、上記ブロツクアクテイビ
   テイが所定の閾値未満のときに、当該ブロツクの上記階
   層情報の伝送をしないことを示すフラグを設定する第３
   のステツプと、 上記フラグに基づいて、各上記階層情報の上記各ブロツ
   ク毎に伝送又は非伝送の有無を制御する第４のステツプ
   と、 上記最上位階層情報及び上記フラグを固定長データとし
   て伝送した後に上記階層間差分データを可変長データと
   して伝送するような上記画像伝送データを生成する第５
   のステツプとを具えることを特徴とする画像処理方法。
3. 【請求項３】解像度の最も低い最上位階層情報から解像
   度の最も高い最下位階層情報でなる複数の階層情報から
   なる画像データを伝送するための画像伝送データを生成
   する画像処理装置において、上記最上位階層情報を除く上記階層情報として、隣接す
   る上位階層情報との差分である階層間差分データを求め
   る階層間差分データ取得手段と、 所定の階層の上記階層情報に対して、複数の画素からな
   る各ブロツクについてブロツクアクテイビテイを判定す
   る判定手段と、 上記最上位階層情報を除く上記所定の階層の上記階層情
   報の上記各ブロツクについて、上記ブロツクアクテイビ
   テイが所定の閾値以上のときに上記ブロツクの上記階層
   情報の伝送をし、ブロツクアクテイビテイが当該閾値未
   満のときに上記ブロツクの上記階層情報の伝送をしない
   ように制御する制御手段と、 上記最上位階層情報を固定長データとして伝送した後に
   上記階層間差分データを可変長データとして伝送するよ
   うな画像伝送データを生成する画像伝送データ生成手段
   と を具えることを特徴とする画像処理装置。
4. 【請求項４】解像度の最も低い最上位階層情報から解像
   度の最も高い最下位階層情報でなる複数の階層情報から
   なる画像データを伝送するための画像伝送データを生成
   する画像処理方法において、上記最上位階層情報を除く上記階層情報として、隣接す
   る上位階層情報との差分である階層間差分データを求め
   る第１のステツプと、 所定の階層の上記階層情報に対して、複数の画素からな
   る各ブロツクについて ブロツクアクテイビテイを判定す
   る第２のステツプと、 上記最上位階層情報を除く上記所定の階層の上記階層情
   報の上記各ブロツクについて、上記ブロツクアクテイビ
   テイが所定の閾値以上のときに上記ブロツクの上記階層
   情報の伝送をし、ブロツクアクテイビテイが当該閾値未
   満のときに上記ブロツクの上記階層情報の伝送をしない
   ように制御する第３のステツプと、 上記最上位階層情報を固定長データとして伝送した後に
   上記階層間差分データを可変長データとして伝送するよ
   うな画像伝送データを生成する第４のステツプと を具え
   ることを特徴とする画像処理方法。