JP3349964B2 - 画像復号化装置 - Google Patents
画像復号化装置Info
- Publication number
- JP3349964B2 JP3349964B2 JP31206498A JP31206498A JP3349964B2 JP 3349964 B2 JP3349964 B2 JP 3349964B2 JP 31206498 A JP31206498 A JP 31206498A JP 31206498 A JP31206498 A JP 31206498A JP 3349964 B2 JP3349964 B2 JP 3349964B2
- Authority
- JP
- Japan
- Prior art keywords
- time information
- frame
- frame time
- image decoding
- decoding apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
- H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Description
【０００１】
【発明の属する技術分野】本発明は、通信システムにお
けるデータ受信装置、特に画像通信システムにおけるデ
ータ誤りや欠落等に起因した画像品質の低下を改善する
機能に関するものである。
けるデータ受信装置、特に画像通信システムにおけるデ
ータ誤りや欠落等に起因した画像品質の低下を改善する
機能に関するものである。
【０００２】
【従来の技術】近年、テレビ電話やテレビ会議システ
ム、ビデオオンデマンド（VOD: Video On Demand）シス
テム等といった動画像伝送システムの実現に向け、動画
像符号化方法の国際標準化が進められており、代表的な
国際標準規格として、ITU-T勧告H.261やH.263、ISO標準
MPEG-1, 2, 4 (Moving Picture Experts Group)などが
知られている。
ム、ビデオオンデマンド（VOD: Video On Demand）シス
テム等といった動画像伝送システムの実現に向け、動画
像符号化方法の国際標準化が進められており、代表的な
国際標準規格として、ITU-T勧告H.261やH.263、ISO標準
MPEG-1, 2, 4 (Moving Picture Experts Group)などが
知られている。
【０００３】動画像を符号化して伝送する場合、伝送中
にエラーが発生すると、受信側では符号データを正しく
復号できなくなる。符号化される情報には、動きベクト
ルや画素値など、映像の一部にのみ影響を与える局所情
報と、フレーム時間情報や符号化モード情報など、フレ
ーム全体に影響を与える重要情報がある。局所情報にエ
ラーが発生した場合は、映像の一部が乱れるだけである
が、重要情報に伝送エラーが発生するとフレーム全体が
復号できなかったり、正しく表示できなかったりする。
にエラーが発生すると、受信側では符号データを正しく
復号できなくなる。符号化される情報には、動きベクト
ルや画素値など、映像の一部にのみ影響を与える局所情
報と、フレーム時間情報や符号化モード情報など、フレ
ーム全体に影響を与える重要情報がある。局所情報にエ
ラーが発生した場合は、映像の一部が乱れるだけである
が、重要情報に伝送エラーが発生するとフレーム全体が
復号できなかったり、正しく表示できなかったりする。
【０００４】
【発明が解決しようとする課題】重要情報の一つに「フ
レームの時間情報」がある。現在の標準規格では、フレ
ームごとにフレーム時間情報を必ず挿入することになっ
ており、画像受信装置ではフレーム時間情報に従って復
号や表示のタイミングを決定している。
レームの時間情報」がある。現在の標準規格では、フレ
ームごとにフレーム時間情報を必ず挿入することになっ
ており、画像受信装置ではフレーム時間情報に従って復
号や表示のタイミングを決定している。
【０００５】ITU-T勧告H.263では、8ビット（条件によ
っては１０ビットの場合もあるが、以下では８ビットに
限って説明を行う）固定長の「Temporal Reference」で
フレーム時間情報を表わしている。入力映像のフレーム
（NTSC方式では１秒３０枚）毎に０から２５５までの番
号を順に割り当て、符号化したフレームの番号をＴＲと
する。１秒１０枚のフレームレートで符号化した場合に
は、ＴＲは０、３、６、９、．．．という飛び飛びの値
をとる。２５５まで行くと次のフレームは０に戻る。
っては１０ビットの場合もあるが、以下では８ビットに
限って説明を行う）固定長の「Temporal Reference」で
フレーム時間情報を表わしている。入力映像のフレーム
（NTSC方式では１秒３０枚）毎に０から２５５までの番
号を順に割り当て、符号化したフレームの番号をＴＲと
する。１秒１０枚のフレームレートで符号化した場合に
は、ＴＲは０、３、６、９、．．．という飛び飛びの値
をとる。２５５まで行くと次のフレームは０に戻る。
【０００６】ＴＲは固定長であるため、伝送中にエラー
が発生しても、必ず０から２５５までの値に復号されて
しまう。したがって、エラー検出することができない。
例えば、ＴＲ＝８（00001000）の最下位１ビットにエラ
ーが発生すると、受信側ではＴＲ＝９（00001001）と復
号してしまう。下位のエラーは大きな影響は生じない
が、上位ビットにエラーが発生すると、大きく影響を及
ぼす。例えばＴＲ＝８の最上位１ビットに誤りが発生す
ると、ＴＲ＝１３６（10001000）となり、表示時間が大
きくずれてしまう。
が発生しても、必ず０から２５５までの値に復号されて
しまう。したがって、エラー検出することができない。
例えば、ＴＲ＝８（00001000）の最下位１ビットにエラ
ーが発生すると、受信側ではＴＲ＝９（00001001）と復
号してしまう。下位のエラーは大きな影響は生じない
が、上位ビットにエラーが発生すると、大きく影響を及
ぼす。例えばＴＲ＝８の最上位１ビットに誤りが発生す
ると、ＴＲ＝１３６（10001000）となり、表示時間が大
きくずれてしまう。
【０００７】また、ＴＲは固定長であり２５５の次は０
に戻るため、相対的なフレーム時間情報しか伝送できな
い。したがって、通常の復号器では前フレームよりも小
さいＴＲを受けた時は２５５を加えた絶対的なフレーム
時間情報に変換して扱う方法が一般的である。
に戻るため、相対的なフレーム時間情報しか伝送できな
い。したがって、通常の復号器では前フレームよりも小
さいＴＲを受けた時は２５５を加えた絶対的なフレーム
時間情報に変換して扱う方法が一般的である。
【０００８】例えば、前フレームがＴＲ＝２５３（1111
1101）で現フレームがＴＲ＝５（00000101）の場合に
は、現フレーム時間情報を２５５＋５＝２６０と絶対フ
レーム時間情報に変換して認識する。ところがこのよう
な方法を採用すると、例えばＴＲ＝１５（00001111）に
エラーが発生してＴＲ＝１１（00001011）と大小関係が
逆転してしまった場合に、フレーム時間情報を２５５＋
１１＝２６６と認識してしまう可能性が高く、大きな表
示時間のずれを引き起こしてしまう。
1101）で現フレームがＴＲ＝５（00000101）の場合に
は、現フレーム時間情報を２５５＋５＝２６０と絶対フ
レーム時間情報に変換して認識する。ところがこのよう
な方法を採用すると、例えばＴＲ＝１５（00001111）に
エラーが発生してＴＲ＝１１（00001011）と大小関係が
逆転してしまった場合に、フレーム時間情報を２５５＋
１１＝２６６と認識してしまう可能性が高く、大きな表
示時間のずれを引き起こしてしまう。
【０００９】さらに悪いことに、次のフレームで正しい
ＴＲ＝２１を受けたとしても、既に前フレームで２６６
と認識しているため、次のフレームでも再び大小関係が
逆転してしまうため、２５５＋２１＝２７６と誤認識が
伝播してしまう。このエラー伝播は相対的なフレーム時
間情報を用いている限り、永久に復活しない。
ＴＲ＝２１を受けたとしても、既に前フレームで２６６
と認識しているため、次のフレームでも再び大小関係が
逆転してしまうため、２５５＋２１＝２７６と誤認識が
伝播してしまう。このエラー伝播は相対的なフレーム時
間情報を用いている限り、永久に復活しない。
【００１０】またH.263やMPEG-4では、フレームを複数
のセグメント（GOB: Group Of Blockやスライス）に分
割して符号化することができるが、その際、それぞれの
セグメントに付けるヘッダ情報にフレーム時間情報を付
加することができるモード（以下、フレーム時間情報２
重化モードと呼ぶ）も存在する。
のセグメント（GOB: Group Of Blockやスライス）に分
割して符号化することができるが、その際、それぞれの
セグメントに付けるヘッダ情報にフレーム時間情報を付
加することができるモード（以下、フレーム時間情報２
重化モードと呼ぶ）も存在する。
【００１１】これまでは、ＴＲはフレームのヘッダ情報
（各フレームの先頭のセグメントだけに付加されてい
た）にのみ格納されていたので、先頭セグメントにエラ
ーが発生した場合には、他のセグメントが正しく復号で
きてもＴＲを特定することができなかったが、フレーム
時間情報２重化モードを利用して各セグメント毎にＴＲ
を格納すれば、正しく復号できたセグメントは正しいＴ
Ｒを得ることができる。
（各フレームの先頭のセグメントだけに付加されてい
た）にのみ格納されていたので、先頭セグメントにエラ
ーが発生した場合には、他のセグメントが正しく復号で
きてもＴＲを特定することができなかったが、フレーム
時間情報２重化モードを利用して各セグメント毎にＴＲ
を格納すれば、正しく復号できたセグメントは正しいＴ
Ｒを得ることができる。
【００１２】また、複数のセグメントが連続して欠落し
た場合に、これまでは図２のように異なるフレームの映
像を１つのフレームに復号する可能性があったが、この
フレーム時間情報２重化モードを利用すると、別々の正
しいフレームとして復号することが可能である。
た場合に、これまでは図２のように異なるフレームの映
像を１つのフレームに復号する可能性があったが、この
フレーム時間情報２重化モードを利用すると、別々の正
しいフレームとして復号することが可能である。
【００１３】ところが、このフレーム時間情報２重化モ
ードを利用している時にＴＲにエラーが発生した場合、
同一フレームを複数のフレームに誤認識してしまうこと
もある。例えば図３のように、２番目のセグメントでＴ
Ｒ＝１３８と誤復号された場合、１番目のセグメントと
は異なるフレームと誤認識され、さらに３番目のセグメ
ントでは、正しくＴＲ＝１０と復号したにも関わらず、
２番目のセグメントのＴＲと逆転しているため、２５５
＋１０＝２６５と誤認識されてしまう。
ードを利用している時にＴＲにエラーが発生した場合、
同一フレームを複数のフレームに誤認識してしまうこと
もある。例えば図３のように、２番目のセグメントでＴ
Ｒ＝１３８と誤復号された場合、１番目のセグメントと
は異なるフレームと誤認識され、さらに３番目のセグメ
ントでは、正しくＴＲ＝１０と復号したにも関わらず、
２番目のセグメントのＴＲと逆転しているため、２５５
＋１０＝２６５と誤認識されてしまう。
【００１４】以上のようなことから、フレーム時間情報
にエラーが発生しても大きなずれを生じることがなく、
さらに過去のエラーによる影響のないフレーム時間情報
復号方法が望まれる。
にエラーが発生しても大きなずれを生じることがなく、
さらに過去のエラーによる影響のないフレーム時間情報
復号方法が望まれる。
【００１５】
【課題を解決するための手段】かかる課題を解決するた
めに以下のようにしたことを特徴とする。
めに以下のようにしたことを特徴とする。
【００１６】フレーム時間情報を含む符号化データを復
号化し、そのフレーム時間情報の復号結果を得る画像復
号化装置において、過去のフレームのフレーム時間情報
の復号結果を記録するフレーム時間情報記録手段と、フ
レーム時間情報記録手段に記録された過去のフレームの
フレーム時間情報の復号結果に基づき現フレームのフレ
ーム時間情報の推定値を算出するフレーム時間情報推定
手段と、現フレームのフレーム時間情報の復号結果と現
フレームのフレーム時間情報の推定値を比較し、その現
フレームのフレーム時間情報の復号結果を修正して、修
正フレーム時間情報を算出するフレーム時間情報修正手
段とを備える。
号化し、そのフレーム時間情報の復号結果を得る画像復
号化装置において、過去のフレームのフレーム時間情報
の復号結果を記録するフレーム時間情報記録手段と、フ
レーム時間情報記録手段に記録された過去のフレームの
フレーム時間情報の復号結果に基づき現フレームのフレ
ーム時間情報の推定値を算出するフレーム時間情報推定
手段と、現フレームのフレーム時間情報の復号結果と現
フレームのフレーム時間情報の推定値を比較し、その現
フレームのフレーム時間情報の復号結果を修正して、修
正フレーム時間情報を算出するフレーム時間情報修正手
段とを備える。
【００１７】また、フレームが複数の領域に分割され、
その各領域にフレーム時間情報を付加した符号化データ
を復号化し、各領域のフレーム時間情報の復号結果を得
る画像復号化装置において、過去のフレームのフレーム
時間情報の復号結果を記録するフレーム時間情報記録手
段と、現フレームの各領域のフレーム時間情報の復号結
果の中から所定の条件にしたがって選択した領域のフレ
ーム時間情報を現フレームのフレーム時間情報とするフ
レーム時間情報判定手段と、判定された現フレームのフ
レーム時間情報と現フレームのフレーム時間情報の推定
値を比較し、その現フレームのフレーム時間情報の復号
結果を修正して、修正フレーム時間情報を算出するフレ
ーム時間情報修正手段とを備える。
その各領域にフレーム時間情報を付加した符号化データ
を復号化し、各領域のフレーム時間情報の復号結果を得
る画像復号化装置において、過去のフレームのフレーム
時間情報の復号結果を記録するフレーム時間情報記録手
段と、現フレームの各領域のフレーム時間情報の復号結
果の中から所定の条件にしたがって選択した領域のフレ
ーム時間情報を現フレームのフレーム時間情報とするフ
レーム時間情報判定手段と、判定された現フレームのフ
レーム時間情報と現フレームのフレーム時間情報の推定
値を比較し、その現フレームのフレーム時間情報の復号
結果を修正して、修正フレーム時間情報を算出するフレ
ーム時間情報修正手段とを備える。
【００１８】ここで、現フレームのフレーム時間情報の
復号結果と、現フレームのフレーム時間情報の推定値と
基準しきい値との和とを比較し、これらの大小関係に応
じて、現フレームのフレーム時間情報または現フレーム
のフレーム時間情報の推定値のいずれかを修正フレーム
時間情報とすることを特徴とする。また、フレームが複
数の領域に分割されている場合、現フレームのフレーム
時間情報の復号結果と、各領域のフレーム時間情報の復
号結果とを比較し、これらの関係から各領域のフレーム
時間情報を修正する。その上で、所定の条件にしたがっ
て選択した領域の修正フレーム時間情報を、現フレーム
のフレーム時間情報とする。
復号結果と、現フレームのフレーム時間情報の推定値と
基準しきい値との和とを比較し、これらの大小関係に応
じて、現フレームのフレーム時間情報または現フレーム
のフレーム時間情報の推定値のいずれかを修正フレーム
時間情報とすることを特徴とする。また、フレームが複
数の領域に分割されている場合、現フレームのフレーム
時間情報の復号結果と、各領域のフレーム時間情報の復
号結果とを比較し、これらの関係から各領域のフレーム
時間情報を修正する。その上で、所定の条件にしたがっ
て選択した領域の修正フレーム時間情報を、現フレーム
のフレーム時間情報とする。
【００１９】
【発明の実施の形態】以下、本発明の実施形態を、図面
を参照しながら説明する。
を参照しながら説明する。
【００２０】（Ａ）第１の実施形態 （Ａ−１）第１の実施形態の特徴 第１の実施形態では、フレーム時間情報の復号に際し
て、過去のフレーム時間情報を利用して求めた推定値に
基づいて、復号結果を修正することを特徴とする。
て、過去のフレーム時間情報を利用して求めた推定値に
基づいて、復号結果を修正することを特徴とする。
【００２１】（Ａ−２）第１の実施形態の構成 図１は、第１の実施形態にかかる動画像復号化装置１０
０の機能構成図である。この図１において、動画像復号
化装置１００は、符号データ入力部１０１、復号化部１
０２、動画像出力部１０３、フレーム時間情報修正部１
０４、フレーム時間情報記録部１０５、フレーム時間情
報推定部１０６とから構成されている。
０の機能構成図である。この図１において、動画像復号
化装置１００は、符号データ入力部１０１、復号化部１
０２、動画像出力部１０３、フレーム時間情報修正部１
０４、フレーム時間情報記録部１０５、フレーム時間情
報推定部１０６とから構成されている。
【００２２】符号データ入力部１０１は、符号化された
動画像データを、ネットワークを介して動画像符号化装
置から受信したり、蓄積メディアのメモリから読み込ん
だりするものであり、入力した符号データを復号化部１
０２へ与える。
動画像データを、ネットワークを介して動画像符号化装
置から受信したり、蓄積メディアのメモリから読み込ん
だりするものであり、入力した符号データを復号化部１
０２へ与える。
【００２３】復号化部１０２は、入力された符号データ
を復号するものである。復号の際、フレーム時間情報に
関しては、フレーム時間情報の復号結果をフレーム時間
情報修正部１０４へ与え、復号結果を修正したその修正
結果をフレーム時間情報修正部１０４から受ける。ま
た、フレーム時間情報修正部１０４から得たフレーム時
間情報とともに、復号データを動画像出力部１０３へ与
える。
を復号するものである。復号の際、フレーム時間情報に
関しては、フレーム時間情報の復号結果をフレーム時間
情報修正部１０４へ与え、復号結果を修正したその修正
結果をフレーム時間情報修正部１０４から受ける。ま
た、フレーム時間情報修正部１０４から得たフレーム時
間情報とともに、復号データを動画像出力部１０３へ与
える。
【００２４】動画像出力部１０３は、復号化部１０２か
ら与えられた復号データをモニタ用の表示装置などに出
力するものである。
ら与えられた復号データをモニタ用の表示装置などに出
力するものである。
【００２５】フレーム時間情報修正部１０４は、復号化
部１０２から受けたフレーム時間情報の復号結果に対
し、フレーム時間情報推定部１０６から受けた推定値を
利用して、修正するものである。復号結果が直前フレー
ムのフレーム時間情報より大きく、かつ、推定値と修正
基準しきい値ｄの和よりも小さい場合は、復号結果が正
しいとして、復号化部１０２とフレーム時間情報記録部
１０５へ与える。復号結果が推定値と修正基準しきい値
ｄの和より大きい場合は、推定値を復号結果に置き換え
て、復号化部１０２へ与える。
部１０２から受けたフレーム時間情報の復号結果に対
し、フレーム時間情報推定部１０６から受けた推定値を
利用して、修正するものである。復号結果が直前フレー
ムのフレーム時間情報より大きく、かつ、推定値と修正
基準しきい値ｄの和よりも小さい場合は、復号結果が正
しいとして、復号化部１０２とフレーム時間情報記録部
１０５へ与える。復号結果が推定値と修正基準しきい値
ｄの和より大きい場合は、推定値を復号結果に置き換え
て、復号化部１０２へ与える。
【００２６】フレーム時間情報記録部１０５は、フレー
ム時間情報修正部１０４から与えられたフレーム時間情
報を数フレームに渡って記録するものである。正しいと
判定された復号結果だけを記録してもよく、推定値を用
いた場合も含めて記録しても良い。ただし、推定値を含
めて記録する場合は、その旨も合わせて記録することが
望ましい。
ム時間情報修正部１０４から与えられたフレーム時間情
報を数フレームに渡って記録するものである。正しいと
判定された復号結果だけを記録してもよく、推定値を用
いた場合も含めて記録しても良い。ただし、推定値を含
めて記録する場合は、その旨も合わせて記録することが
望ましい。
【００２７】フレーム時間情報推定部１０６は、フレー
ム時間情報記録部１０５に記録されている過去のフレー
ム時間情報からフレーム間隔を算出し、フレーム間隔の
平均値を直前フレームのフレーム時間情報に加算し、現
フレームのフレーム時間情報の推定値とするものであ
り、推定値をフレーム時間情報修正部１０４へ与える。
ム時間情報記録部１０５に記録されている過去のフレー
ム時間情報からフレーム間隔を算出し、フレーム間隔の
平均値を直前フレームのフレーム時間情報に加算し、現
フレームのフレーム時間情報の推定値とするものであ
り、推定値をフレーム時間情報修正部１０４へ与える。
【００２８】（Ａ−３）第１の実施形態の動作 図４は、第１の実施形態の動作を表わすフローチャート
である。
である。
【００２９】動画像復号化装置１００の復号化部１０２
は、フレーム時間情報を復号化する。フレーム時間情報
の復号結果が直前フレームよりも小さい場合は、既定値
（H.263では255）を復号結果に加算して絶対フレーム時
間情報に変換する（Ｓ１１)。以下の処理では、フレー
ム時間情報としてすべて絶対フレーム時間情報を用い
る。
は、フレーム時間情報を復号化する。フレーム時間情報
の復号結果が直前フレームよりも小さい場合は、既定値
（H.263では255）を復号結果に加算して絶対フレーム時
間情報に変換する（Ｓ１１)。以下の処理では、フレー
ム時間情報としてすべて絶対フレーム時間情報を用い
る。
【００３０】次に、フレーム時間情報推定部１０６は、
過去のフレーム時間情報のフレーム間隔の平均値を求め
（Ｓ１２）、その平均値を直前フレームのフレーム時間
情報に加算したものを、現フレームのフレーム時間情報
の推定値とする（Ｓ１３）。平均値を求める際に、有効
桁以下の値（例えばH.263のTRならば小数点以下の値）
は四捨五入が望ましいが、処理を簡素化して切り捨てま
たは切り上げにしても良い。
過去のフレーム時間情報のフレーム間隔の平均値を求め
（Ｓ１２）、その平均値を直前フレームのフレーム時間
情報に加算したものを、現フレームのフレーム時間情報
の推定値とする（Ｓ１３）。平均値を求める際に、有効
桁以下の値（例えばH.263のTRならば小数点以下の値）
は四捨五入が望ましいが、処理を簡素化して切り捨てま
たは切り上げにしても良い。
【００３１】フレーム時間情報修正部１０４は、復号結
果を修正するか否かの判定を行い、復号結果が直前フレ
ームのフレーム時間情報より大きく、かつ、推定値と修
正基準しきい値ｄの和よりも小さい場合は（Ｓ１４）、
復号結果を現フレームのフレーム時間情報と確定し（Ｓ
１５）、確定したフレーム時間情報をフレーム時間情報
記録部１０５に記録する（Ｓ１６）。
果を修正するか否かの判定を行い、復号結果が直前フレ
ームのフレーム時間情報より大きく、かつ、推定値と修
正基準しきい値ｄの和よりも小さい場合は（Ｓ１４）、
復号結果を現フレームのフレーム時間情報と確定し（Ｓ
１５）、確定したフレーム時間情報をフレーム時間情報
記録部１０５に記録する（Ｓ１６）。
【００３２】Ｓ１４の復号結果の修正判定で復号結果が
推定値と修正基準しきい値ｄの和より大きい場合は、復
号結果が誤復号の可能性が高いとして、復号結果を用い
ず推定値を現フレームのフレーム時間情報に置き換える
（Ｓ１７）。
推定値と修正基準しきい値ｄの和より大きい場合は、復
号結果が誤復号の可能性が高いとして、復号結果を用い
ず推定値を現フレームのフレーム時間情報に置き換える
（Ｓ１７）。
【００３３】推定値を採用したフレームのフレーム時間
情報は記録せず、平均値算出には用いないようにしてい
るが、推定値を記録してその後の平均値算出に利用して
も良い。また、フレーム間隔が著しく平均値からかけ離
れているフレームは、伝送中のトラブルなどが影響して
いる可能性が高いので、そのフレームのフレーム時間情
報は、平均値算出には用いないようにしても良い。
情報は記録せず、平均値算出には用いないようにしてい
るが、推定値を記録してその後の平均値算出に利用して
も良い。また、フレーム間隔が著しく平均値からかけ離
れているフレームは、伝送中のトラブルなどが影響して
いる可能性が高いので、そのフレームのフレーム時間情
報は、平均値算出には用いないようにしても良い。
【００３４】以上の動作により、エラーによるフレーム
時間情報の誤復号が発生した場合にも、安定した復号結
果を得ることができるようになる。例えば、過去のフレ
ーム間隔の平均値が約３であり、直前フレームのフレー
ム時間情報が５の場合、エラーによりＴＲ＝８（000010
00）をＴＲ＝１３６（10001000）と復号してしまって
も、推定値の５＋３＝８に修正することができる。
時間情報の誤復号が発生した場合にも、安定した復号結
果を得ることができるようになる。例えば、過去のフレ
ーム間隔の平均値が約３であり、直前フレームのフレー
ム時間情報が５の場合、エラーによりＴＲ＝８（000010
00）をＴＲ＝１３６（10001000）と復号してしまって
も、推定値の５＋３＝８に修正することができる。
【００３５】修正基準しきい値ｄ＝２としている場合、
ＴＲ＝１０（00001010）と誤復号した時には修正できな
いが、この程度のずれは表示映像にほとんど影響をしな
いため、問題はない。
ＴＲ＝１０（00001010）と誤復号した時には修正できな
いが、この程度のずれは表示映像にほとんど影響をしな
いため、問題はない。
【００３６】逆に修正基準しきい値ｄを小さくしすぎる
と、フレーム間隔の変動が激しい符号化を行った場合
に、誤修正する可能性が出てくるので、修正基準しきい
値ｄはフレーム間隔の平均値と同程度、または平均値の
２〜３倍程度とすることが望ましい。
と、フレーム間隔の変動が激しい符号化を行った場合
に、誤修正する可能性が出てくるので、修正基準しきい
値ｄはフレーム間隔の平均値と同程度、または平均値の
２〜３倍程度とすることが望ましい。
【００３７】また、同様に過去のフレーム間隔の平均値
が約３で、直前フレームのフレーム時間情報が１２の場
合、ＴＲ＝１５（00001111）にエラーが発生してＴＲ＝
１１（00001011）と大小関係が逆転してしまうと、従来
ならフレーム時間情報を２５５＋１１＝２６６と認識し
てしまう可能性が高いが、第１の実施形態では推定値の
１２＋３＝１５に修正することができる。これにより、
その後のフレームへのエラー伝播も防ぐことができる。
が約３で、直前フレームのフレーム時間情報が１２の場
合、ＴＲ＝１５（00001111）にエラーが発生してＴＲ＝
１１（00001011）と大小関係が逆転してしまうと、従来
ならフレーム時間情報を２５５＋１１＝２６６と認識し
てしまう可能性が高いが、第１の実施形態では推定値の
１２＋３＝１５に修正することができる。これにより、
その後のフレームへのエラー伝播も防ぐことができる。
【００３８】（Ａ−４）第１の実施形態の効果 以上のように、第１の実施形態によれば、フレーム時間
情報を誤復号した時に修正ができるので、フレームの表
示時間が大幅にずれることを防ぐことができる。これに
より、その後のフレームへのエラー伝播も防ぐことがで
きる。
情報を誤復号した時に修正ができるので、フレームの表
示時間が大幅にずれることを防ぐことができる。これに
より、その後のフレームへのエラー伝播も防ぐことがで
きる。
【００３９】修正に際しては、過去のフレーム間隔の平
均値を利用するため、確からしい修正が可能となる。ま
た、影響の少ない誤認識を許容することで、影響の大き
い誤修正の可能性を低くすることができる。
均値を利用するため、確からしい修正が可能となる。ま
た、影響の少ない誤認識を許容することで、影響の大き
い誤修正の可能性を低くすることができる。
【００４０】（Ａ−５）第１の実施形態の変形例 第１の実施形態において、過去のフレーム時間情報を記
録する例を示したが、これに限定するものではない。フ
レーム間隔を求めた後に、フレーム間隔を記録するよう
にしても良い。さらにフレーム間隔の平均値を求めた後
に、平均値と平均値を算出するのに用いたフレーム数だ
けを記録するようにしても良い。この場合、直前フレー
ムのフレーム時間情報は別途記録しておく必要がある。
録する例を示したが、これに限定するものではない。フ
レーム間隔を求めた後に、フレーム間隔を記録するよう
にしても良い。さらにフレーム間隔の平均値を求めた後
に、平均値と平均値を算出するのに用いたフレーム数だ
けを記録するようにしても良い。この場合、直前フレー
ムのフレーム時間情報は別途記録しておく必要がある。
【００４１】（Ｂ）第２の実施形態 （Ｂ−１）第２の実施形態の特徴 第２の実施形態では、第１の実施形態の画像復号化装置
に対して、過去のフレーム間隔の変動を記録する手段
と、フレーム間隔の変動に応じてフレーム時間情報の修
正基準しきい値を調節する手段を追加して構成する。
に対して、過去のフレーム間隔の変動を記録する手段
と、フレーム間隔の変動に応じてフレーム時間情報の修
正基準しきい値を調節する手段を追加して構成する。
【００４２】これにより、映像内容やネットワークの状
況によって変化するフレーム間隔に動的に対応して、フ
レーム時間情報の修正を的確におこなうことができる。
況によって変化するフレーム間隔に動的に対応して、フ
レーム時間情報の修正を的確におこなうことができる。
【００４３】（Ｂ−２）第２の実施形態の構成 図５は、第２の実施形態の動画像復号化装置２００の機
能構成図であり、第１の実施形態の動画像復号化装置１
００に修正基準しきい値調節部２０２とフレーム間隔変
動記録部２０３を追加したものである。図５において、
図１と同一の機能を有するものには同一符号を付してあ
る。ここでは第１の実施形態の構成と異なる部分につい
てのみ説明する。
能構成図であり、第１の実施形態の動画像復号化装置１
００に修正基準しきい値調節部２０２とフレーム間隔変
動記録部２０３を追加したものである。図５において、
図１と同一の機能を有するものには同一符号を付してあ
る。ここでは第１の実施形態の構成と異なる部分につい
てのみ説明する。
【００４４】フレーム時間情報修正部２０１は、第１の
実施形態のフレーム時間情報修正部１０４と同等の機能
を有し、さらに修正後のフレーム時間情報をフレーム間
隔変動記録部２０３へ与えるものである。また、修正の
際に用いる修正基準しきい値は、修正基準しきい値調節
部２０２によって調整可能となっている。
実施形態のフレーム時間情報修正部１０４と同等の機能
を有し、さらに修正後のフレーム時間情報をフレーム間
隔変動記録部２０３へ与えるものである。また、修正の
際に用いる修正基準しきい値は、修正基準しきい値調節
部２０２によって調整可能となっている。
【００４５】修正基準しきい値調節部２０２は、フレー
ム間隔変動記録部２０３に記録されている過去のフレー
ム間隔の変動を参考にして、現フレームの修正に用いる
修正基準しきい値を調節するものである。調節に際して
は、過去数フレームのフレーム間隔の変動が少ない場合
は修正基準しきい値を小さくし、変動が多い場合には修
正基準しきい値を大きくする。
ム間隔変動記録部２０３に記録されている過去のフレー
ム間隔の変動を参考にして、現フレームの修正に用いる
修正基準しきい値を調節するものである。調節に際して
は、過去数フレームのフレーム間隔の変動が少ない場合
は修正基準しきい値を小さくし、変動が多い場合には修
正基準しきい値を大きくする。
【００４６】フレーム間隔変動記録部２０３は、フレー
ム時間情報修正部２０１から与えられたフレーム時間情
報からフレーム間隔を算出し、過去数フレームに渡って
フレーム間隔を記録するものである。
ム時間情報修正部２０１から与えられたフレーム時間情
報からフレーム間隔を算出し、過去数フレームに渡って
フレーム間隔を記録するものである。
【００４７】（Ｂ−３）第２の実施形態の動作 図６は、第２の実施形態の動作例を表わすフローチャー
トである。図６において、図４と同一の動作を行うもの
には同一符号を付してある。ここでは第１の実施形態の
動作と異なる部分についてのみ説明する。
トである。図６において、図４と同一の動作を行うもの
には同一符号を付してある。ここでは第１の実施形態の
動作と異なる部分についてのみ説明する。
【００４８】動画像復号化装置２００のフレーム時間情
報推定部１０６が、第１の実施形態の動作と同様にフレ
ーム時間情報の推定値を求めた後（Ｓ１１〜Ｓ１３）、
修正基準しきい値調節部２０２が、過去の数フレームの
フレーム間隔の最大値Imaxと最小値Iminを求め（Ｓ２
１）、ImaxとIminの差に依存して修正基準しきい値ｄを
決定する（Ｓ２２）。
報推定部１０６が、第１の実施形態の動作と同様にフレ
ーム時間情報の推定値を求めた後（Ｓ１１〜Ｓ１３）、
修正基準しきい値調節部２０２が、過去の数フレームの
フレーム間隔の最大値Imaxと最小値Iminを求め（Ｓ２
１）、ImaxとIminの差に依存して修正基準しきい値ｄを
決定する（Ｓ２２）。
【００４９】例えば、修正基準しきい値ｄを、通常はフ
レーム間隔の平均値にセットしておき、フレーム間隔の
変動が大きくなった場合には、ImaxとIminの差を修正基
準しきい値ｄに加算する。
レーム間隔の平均値にセットしておき、フレーム間隔の
変動が大きくなった場合には、ImaxとIminの差を修正基
準しきい値ｄに加算する。
【００５０】この後は、第１の実施形態の動作と同様に
フレーム時間情報修正部２０１が、フレーム時間情報の
修正を行う（Ｓ１４〜Ｓ１７）。Ｓ１６において、第１
の実施形態と同様に推定値を採用したフレームのフレー
ム時間情報は記録せず、平均値算出には用いないように
しているが、推定値を記録してその後の平均値算出に利
用しても良い。
フレーム時間情報修正部２０１が、フレーム時間情報の
修正を行う（Ｓ１４〜Ｓ１７）。Ｓ１６において、第１
の実施形態と同様に推定値を採用したフレームのフレー
ム時間情報は記録せず、平均値算出には用いないように
しているが、推定値を記録してその後の平均値算出に利
用しても良い。
【００５１】以上の動作により、フレーム間隔が安定し
ない場合でも的確にフレーム時間情報の修正を施すこと
ができる。例えば、動き量の変化が大きい映像を一定ビ
ットレートで符号化する際に、量子化サイズを固定にし
て、フレーム間隔を変動させる制御方式をとることもあ
るが、この場合、動きが大きい場合にはフレーム当たり
の発生符号量が多くなるのでフレーム間隔が大きくな
り、動きが小さい場合にはフレーム間隔が小さくなる。
ない場合でも的確にフレーム時間情報の修正を施すこと
ができる。例えば、動き量の変化が大きい映像を一定ビ
ットレートで符号化する際に、量子化サイズを固定にし
て、フレーム間隔を変動させる制御方式をとることもあ
るが、この場合、動きが大きい場合にはフレーム当たり
の発生符号量が多くなるのでフレーム間隔が大きくな
り、動きが小さい場合にはフレーム間隔が小さくなる。
【００５２】このような符号化を行う場合に、第１の実
施形態のように修正基準しきい値ｄを固定して修正を行
うと、フレーム間隔が平均値よりもかなり大きくなって
符号化された場合に、誤復号と勘違いし、誤った修正を
施してしまうことになる。
施形態のように修正基準しきい値ｄを固定して修正を行
うと、フレーム間隔が平均値よりもかなり大きくなって
符号化された場合に、誤復号と勘違いし、誤った修正を
施してしまうことになる。
【００５３】しかし第２の実施形態を用いると、フレー
ム間隔の変動が大きい場合には、修正基準しきい値ｄが
大きくなるため、誤修正の可能性が低くなる。また、フ
レーム間隔の変動が小さい場合には、修正基準しきい値
ｄが小さくなるため、誤復号をもらさず修正することが
可能となる。
ム間隔の変動が大きい場合には、修正基準しきい値ｄが
大きくなるため、誤修正の可能性が低くなる。また、フ
レーム間隔の変動が小さい場合には、修正基準しきい値
ｄが小さくなるため、誤復号をもらさず修正することが
可能となる。
【００５４】（Ｂ−４）第２の実施形態の効果 以上のように、第２の実施形態によれば、第２の実施形
態で説明したのと同様の効果が得られるのに加え、フレ
ーム間隔の変動が大きい場合でも、的確にフレーム時間
情報の修正を行うことが可能である。特に、フレーム間
隔の変動に応じて、変動が大きい場合は、ある程度の誤
復号は許容するが誤修正の可能性を低くするように動作
し、変動が小さい場合は、誤復号をもらさず確実に修正
するように動作することができる。
態で説明したのと同様の効果が得られるのに加え、フレ
ーム間隔の変動が大きい場合でも、的確にフレーム時間
情報の修正を行うことが可能である。特に、フレーム間
隔の変動に応じて、変動が大きい場合は、ある程度の誤
復号は許容するが誤修正の可能性を低くするように動作
し、変動が小さい場合は、誤復号をもらさず確実に修正
するように動作することができる。
【００５５】（Ｃ）第３の実施形態 （Ｃ−１）第３の実施形態の特徴 第３の実施形態では、第１の実施形態の画像復号化装置
に対して、符号化モード情報（フレーム内符号化、また
はフレーム間符号化）によりフレーム時間情報の修正基
準しきい値を調節する手段を追加して構成する。
に対して、符号化モード情報（フレーム内符号化、また
はフレーム間符号化）によりフレーム時間情報の修正基
準しきい値を調節する手段を追加して構成する。
【００５６】これにより、フレーム内符号化された符号
データの伝送時に生じるフレーム間隔の変動に動的に対
応して、フレーム時間情報の修正を的確におこなうこと
ができる。
データの伝送時に生じるフレーム間隔の変動に動的に対
応して、フレーム時間情報の修正を的確におこなうこと
ができる。
【００５７】（Ｃ−２）第３の実施形態の構成 図７は、第３の実施形態の動画像復号化装置３００の機
能構成図であり、第１の実施形態の動画像復号化装置１
００に、符号化モード準拠修正基準しきい値調節部３０
３を追加したものである。図７において、図１と同一の
機能を有するものには同一符号を付してある。ここでは
第１の実施形態の構成と異なる部分についてのみ説明す
る。
能構成図であり、第１の実施形態の動画像復号化装置１
００に、符号化モード準拠修正基準しきい値調節部３０
３を追加したものである。図７において、図１と同一の
機能を有するものには同一符号を付してある。ここでは
第１の実施形態の構成と異なる部分についてのみ説明す
る。
【００５８】復号化部３０１は、第１の実施形態の復号
化部１０２と同様の機能を有し、さらに、復号したフレ
ームの符号化モードを、符号化モード準拠修正基準しき
い値調整部３０３へ与えるものである。
化部１０２と同様の機能を有し、さらに、復号したフレ
ームの符号化モードを、符号化モード準拠修正基準しき
い値調整部３０３へ与えるものである。
【００５９】フレーム時間情報修正部３０２は、第１の
実施形態のフレーム時間情報修正部１０４と同等の機能
を有し、さらに修正の際に用いる修正基準しきい値は、
符号化モード準拠修正基準しきい値調節部３０３によっ
て調節可能となっている。
実施形態のフレーム時間情報修正部１０４と同等の機能
を有し、さらに修正の際に用いる修正基準しきい値は、
符号化モード準拠修正基準しきい値調節部３０３によっ
て調節可能となっている。
【００６０】符号化モード準拠修正基準しきい値調節部
３０３は、前フレームの符号化モードに基づいて現フレ
ームの修正に用いる修正基準しきい値を調節するもので
あり、前フレームと現フレームの符号化モードを記録し
ている。調節に際しては、前フレームがフレーム内符号
化モードの場合に、修正基準しきい値を大きくする。
３０３は、前フレームの符号化モードに基づいて現フレ
ームの修正に用いる修正基準しきい値を調節するもので
あり、前フレームと現フレームの符号化モードを記録し
ている。調節に際しては、前フレームがフレーム内符号
化モードの場合に、修正基準しきい値を大きくする。
【００６１】（Ｃ−３）第３の実施形態の動作 図８は、第３の実施形態の動作例を表わすフローチャー
トである。図８において、図４と同一の動作を行うもの
には同一符号を付してある。ここでは第１の実施形態の
動作と異なる部分についてのみ説明する。
トである。図８において、図４と同一の動作を行うもの
には同一符号を付してある。ここでは第１の実施形態の
動作と異なる部分についてのみ説明する。
【００６２】動画像復号化装置３００のフレーム時間情
報推定部１０６が、第１の実施形態の動作と同様にフレ
ーム時間情報の推定値を求めた後（Ｓ１１〜Ｓ１３）、
符号化モード準拠修正基準しきい値調節部３０３が、前
フレームの符号化モードを判断し、前フレームの符号化
モードに基づいて修正基準しきい値ｄを決定する（Ｓ３
１）。Ｓ３１の判断で、前フレームの符号化モードがフ
レーム間符号化の場合には、修正基準しきい値ｄをフレ
ーム間隔の平均値にセットする。（Ｓ３２）。
報推定部１０６が、第１の実施形態の動作と同様にフレ
ーム時間情報の推定値を求めた後（Ｓ１１〜Ｓ１３）、
符号化モード準拠修正基準しきい値調節部３０３が、前
フレームの符号化モードを判断し、前フレームの符号化
モードに基づいて修正基準しきい値ｄを決定する（Ｓ３
１）。Ｓ３１の判断で、前フレームの符号化モードがフ
レーム間符号化の場合には、修正基準しきい値ｄをフレ
ーム間隔の平均値にセットする。（Ｓ３２）。
【００６３】Ｓ３１の判断で、前フレームの符号化モー
ドがフレーム内符号化の場合には、修正基準値しきい値
をフレーム間隔の平均値のｍ倍にセットする（Ｓ３
３）。ｍは、フレーム間符号化モードとフレーム内符号
化モードでの発生符号量の比に依存する正の整数であ
り、通常は約２〜５とする。
ドがフレーム内符号化の場合には、修正基準値しきい値
をフレーム間隔の平均値のｍ倍にセットする（Ｓ３
３）。ｍは、フレーム間符号化モードとフレーム内符号
化モードでの発生符号量の比に依存する正の整数であ
り、通常は約２〜５とする。
【００６４】この後は、第１の実施形態の動作と同様に
フレーム時間情報修正部３０２がフレーム時間情報の修
正を行う（Ｓ１４〜Ｓ１７）。Ｓ１６において、第１の
実施形態と同様に推定値を採用したフレームのフレーム
時間情報は記録せず、平均値算出には用いないようにし
ているが、推定値を記録してその後の平均値算出に利用
しても良い。
フレーム時間情報修正部３０２がフレーム時間情報の修
正を行う（Ｓ１４〜Ｓ１７）。Ｓ１６において、第１の
実施形態と同様に推定値を採用したフレームのフレーム
時間情報は記録せず、平均値算出には用いないようにし
ているが、推定値を記録してその後の平均値算出に利用
しても良い。
【００６５】以上の動作により、フレーム間符号化モー
ドとフレーム内符号化モードが混在して、フレーム間隔
が安定しない場合でも的確にフレーム時間情報の修正を
施すことができる。例えば、伝送エラーが発生して正常
に復号できない場合に、画像符号化装置に対して、フレ
ーム内符号化を要求して、エラー伝播を回避する「デマ
ンド型イントラリフレッシュ」を利用する場合には、予
定外のフレーム内符号化されたイントラフレームが発生
する。
ドとフレーム内符号化モードが混在して、フレーム間隔
が安定しない場合でも的確にフレーム時間情報の修正を
施すことができる。例えば、伝送エラーが発生して正常
に復号できない場合に、画像符号化装置に対して、フレ
ーム内符号化を要求して、エラー伝播を回避する「デマ
ンド型イントラリフレッシュ」を利用する場合には、予
定外のフレーム内符号化されたイントラフレームが発生
する。
【００６６】イントラフレームは、フレーム間符号化さ
れた場合に比較して、発生符号量が数倍大きいため、伝
送に数倍時間がかかる。そのため、画像符号化装置では
送信バッファがいっぱいになるので、イントラフレーム
の伝送遅延時間の後に、次のフレームを符号化すること
が一般的である。
れた場合に比較して、発生符号量が数倍大きいため、伝
送に数倍時間がかかる。そのため、画像符号化装置では
送信バッファがいっぱいになるので、イントラフレーム
の伝送遅延時間の後に、次のフレームを符号化すること
が一般的である。
【００６７】したがって、イントラフレームの次のフレ
ームは、フレーム間隔が平均よりも大きくなる可能性が
高くなる。第３の実施形態を用いると、このようなイン
トラフレームによるフレーム間隔の変動に的確に対応し
て、フレーム時間情報の修正を正しく行うことが可能と
なる。
ームは、フレーム間隔が平均よりも大きくなる可能性が
高くなる。第３の実施形態を用いると、このようなイン
トラフレームによるフレーム間隔の変動に的確に対応し
て、フレーム時間情報の修正を正しく行うことが可能と
なる。
【００６８】（Ｃ−４）第３の実施形態の効果 以上のように、第３の実施形態によれば、第１の実施形
態で説明したのと同様の効果が得られるのに加え、イン
トラフレームによるフレーム間隔の変動が大きい場合で
も、的確にフレーム時間情報の修正を行うことが可能で
ある。特にデマンド型イントラリフレッシュを利用して
いる場合には、このようなフレーム間隔の変動が発生し
やすいため、より有効である。
態で説明したのと同様の効果が得られるのに加え、イン
トラフレームによるフレーム間隔の変動が大きい場合で
も、的確にフレーム時間情報の修正を行うことが可能で
ある。特にデマンド型イントラリフレッシュを利用して
いる場合には、このようなフレーム間隔の変動が発生し
やすいため、より有効である。
【００６９】（Ｃ−５）第３の実施形態の変形例 第３の実施形態において、前フレームの符号化モードに
基づいて修正基準しきい値を調整する例を示したが、こ
れに限定するものではない。符号化によっては、現フレ
ームの符号化モードに基づいて処理を行っても良い。ま
た、イントラフレームによるフレーム間隔の変動が数フ
レームに及ぶこともあるため、数フレームの符号化モー
ドを考慮するようにしても良い。
基づいて修正基準しきい値を調整する例を示したが、こ
れに限定するものではない。符号化によっては、現フレ
ームの符号化モードに基づいて処理を行っても良い。ま
た、イントラフレームによるフレーム間隔の変動が数フ
レームに及ぶこともあるため、数フレームの符号化モー
ドを考慮するようにしても良い。
【００７０】また、第３の実施形態は第１の実施形態に
機能追加する例を示したが、これに限定するものではな
い。第２の実施例と組み合わせて利用することも可能で
ある。
機能追加する例を示したが、これに限定するものではな
い。第２の実施例と組み合わせて利用することも可能で
ある。
【００７１】（Ｄ）第４の実施形態 （Ｄ）第４の実施形態の特徴 第４の実施形態では、フレームが複数のセグメントに分
割して符号化されており、各セグメントにフレーム時間
情報が付加されている「フレーム時間情報２重化モー
ド」を利用している場合に、復号された複数のフレーム
時間情報を比較して、正しいフレーム時間情報を得るこ
とを特徴とする。
割して符号化されており、各セグメントにフレーム時間
情報が付加されている「フレーム時間情報２重化モー
ド」を利用している場合に、復号された複数のフレーム
時間情報を比較して、正しいフレーム時間情報を得るこ
とを特徴とする。
【００７２】（Ｄ−２）第４の実施形態の構成 図９は、第４の実施形態にかかる動画像復号化装置４０
０の機能構成図である。この図９において、動画像復号
化装置４００は、符号データ入力部４０１、復号化部４
０２、動画像出力部４０３、フレーム時間情報判定部４
０４、各セグメントフレーム時間情報記録部４０５とか
ら構成されている。
０の機能構成図である。この図９において、動画像復号
化装置４００は、符号データ入力部４０１、復号化部４
０２、動画像出力部４０３、フレーム時間情報判定部４
０４、各セグメントフレーム時間情報記録部４０５とか
ら構成されている。
【００７３】符号データ入力部４０１は、符号化された
動画像データを、ネットワークを介して動画像符号化装
置から受信したり、蓄積メディアのメモリから読み込ん
だりするものであり、入力した符号データを復号化部４
０２へ与える。
動画像データを、ネットワークを介して動画像符号化装
置から受信したり、蓄積メディアのメモリから読み込ん
だりするものであり、入力した符号データを復号化部４
０２へ与える。
【００７４】復号化部４０２は、入力された符号データ
を復号するものである。復号の際、各セグメントのフレ
ーム時間情報に関しては、復号結果をフレーム時間情報
判定部４０４へ与え、そのフレームの最終的なフレーム
時間情報をフレーム時間情報判定部４０４から受ける。
また、フレーム時間情報判定部４０４から得た最終的な
フレーム時間情報とともに復号データを動画像出力部４
０３へ与える。
を復号するものである。復号の際、各セグメントのフレ
ーム時間情報に関しては、復号結果をフレーム時間情報
判定部４０４へ与え、そのフレームの最終的なフレーム
時間情報をフレーム時間情報判定部４０４から受ける。
また、フレーム時間情報判定部４０４から得た最終的な
フレーム時間情報とともに復号データを動画像出力部４
０３へ与える。
【００７５】動画像出力部４０３は、復号化部４０２か
ら与えられた復号データをモニタ用の表示装置などに出
力するものである。
ら与えられた復号データをモニタ用の表示装置などに出
力するものである。
【００７６】フレーム時間情報判定部４０４は、復号化
部４０２から受けた各セグメントのフレーム時間情報の
復号結果を各セグメントフレーム時間情報記録部４０５
へ与えて記録し、同一フレームの各セグメントのフレー
ム時間情報の復号結果を用いて、そのフレームの正しい
フレーム時間情報を判定するものである。
部４０２から受けた各セグメントのフレーム時間情報の
復号結果を各セグメントフレーム時間情報記録部４０５
へ与えて記録し、同一フレームの各セグメントのフレー
ム時間情報の復号結果を用いて、そのフレームの正しい
フレーム時間情報を判定するものである。
【００７７】各セグメントフレーム時間情報記録部４０
５は、フレーム時間情報判定部４０４から与えられた各
セグメントのフレーム時間情報を１フレーム分、記録す
るものである。
５は、フレーム時間情報判定部４０４から与えられた各
セグメントのフレーム時間情報を１フレーム分、記録す
るものである。
【００７８】（Ｄ−３）第４の実施形態の動作 図１０は、第４の実施形態の動作を表わすフローチャー
トである。
トである。
【００７９】動画像復号化装置４００の復号化部４０２
は、セグメント毎に付加されているフレーム時間情報を
復号化する。各々のセグメントのフレーム時間情報の復
号結果が、直前フレームよりも小さくなっている場合
は、既定値（H.263では255）を加算して絶対フレーム時
間情報に変換する（Ｓ４１）。以下の処理では、フレー
ム時間情報としてすべて絶対フレーム時間情報を用い
る。
は、セグメント毎に付加されているフレーム時間情報を
復号化する。各々のセグメントのフレーム時間情報の復
号結果が、直前フレームよりも小さくなっている場合
は、既定値（H.263では255）を加算して絶対フレーム時
間情報に変換する（Ｓ４１）。以下の処理では、フレー
ム時間情報としてすべて絶対フレーム時間情報を用い
る。
【００８０】その後、全てのセグメントの復号化が終了
したか否かを判定し、終了していない場合は、Ｓ４１に
処理を進めＳ４１からＳ４２の処理を続ける（Ｓ４
２）。Ｓ４２の判定で全てのセグメントの復号化が終了
した場合は、フレーム時間情報判定部４０４が、各セグ
メントにおけるフレーム時間情報の復号結果を集計し、
同一復号結果を有するセグメントが存在するか否かを判
定する（Ｓ４３)。
したか否かを判定し、終了していない場合は、Ｓ４１に
処理を進めＳ４１からＳ４２の処理を続ける（Ｓ４
２）。Ｓ４２の判定で全てのセグメントの復号化が終了
した場合は、フレーム時間情報判定部４０４が、各セグ
メントにおけるフレーム時間情報の復号結果を集計し、
同一復号結果を有するセグメントが存在するか否かを判
定する（Ｓ４３)。
【００８１】Ｓ４３の判定で、同一復号結果のセグメン
トが存在する場合は、さらに、異なる復号結果において
同一復号結果を有するセグメント数が最大で同数の復号
結果が存在するか否かを判定する（Ｓ４４）。Ｓ４４の
判定で同一復号結果のセグメント数が最大で同数存在す
る場合は、同一復号結果のセグメント数が最大の復号結
果のうち、直前フレームのフレーム時間情報よりも大き
い復号結果で最小のものをフレーム時間情報とする（Ｓ
４５）。
トが存在する場合は、さらに、異なる復号結果において
同一復号結果を有するセグメント数が最大で同数の復号
結果が存在するか否かを判定する（Ｓ４４）。Ｓ４４の
判定で同一復号結果のセグメント数が最大で同数存在す
る場合は、同一復号結果のセグメント数が最大の復号結
果のうち、直前フレームのフレーム時間情報よりも大き
い復号結果で最小のものをフレーム時間情報とする（Ｓ
４５）。
【００８２】Ｓ４４の判定で同一復号結果を有するセグ
メント数が最大で同数の復号結果が存在しない場合は、
同一復号結果のセグメント数が最大の復号結果をフレー
ムのフレーム時間情報とする（Ｓ４６）。また、Ｓ４３
の判定で、全てのセグメントで異なる復号結果が得られ
た場合には、直前フレームのフレーム時間情報よりも大
きい復号結果の中から、最小のものをフレーム時間情報
とする（Ｓ４７）。
メント数が最大で同数の復号結果が存在しない場合は、
同一復号結果のセグメント数が最大の復号結果をフレー
ムのフレーム時間情報とする（Ｓ４６）。また、Ｓ４３
の判定で、全てのセグメントで異なる復号結果が得られ
た場合には、直前フレームのフレーム時間情報よりも大
きい復号結果の中から、最小のものをフレーム時間情報
とする（Ｓ４７）。
【００８３】以上の動作により、図３のように２番目の
セグメントでＴＲ＝１３８と誤復号された場合でも、１
番目と３番目のセグメントで得られているＴＲ＝１０を
最終的なフレーム時間情報と判定することができ、同一
フレームが複数のフレームに分割表示される可能性が極
めて低くなる。
セグメントでＴＲ＝１３８と誤復号された場合でも、１
番目と３番目のセグメントで得られているＴＲ＝１０を
最終的なフレーム時間情報と判定することができ、同一
フレームが複数のフレームに分割表示される可能性が極
めて低くなる。
【００８４】（Ｄ−４）第４の実施形態の効果 以上のように、第４の実施形態によれば、セグメント毎
に異なるフレーム時間情報の復号結果が得られた場合で
も、高い確率で正しいフレーム時間情報を得ることがで
きる。
に異なるフレーム時間情報の復号結果が得られた場合で
も、高い確率で正しいフレーム時間情報を得ることがで
きる。
【００８５】（Ｅ）第５の実施形態 （Ｅ−１）第５の実施形態の特徴 第５の実施形態では、第４の実施形態の画像復号化装置
に対して、第１、第２または第３の実施形態と同様なフ
レーム時間情報を修正する手段を追加して構成する。
に対して、第１、第２または第３の実施形態と同様なフ
レーム時間情報を修正する手段を追加して構成する。
【００８６】これにより、第１、第２または第３の実施
形態と、第４の実施形態の特徴を組み合わせた高い信頼
性のある画像復号化装置を実現できる。第５の実施形態
では、第４の実施形態を第１の実施形態と組み合わせた
例を中心に説明するが、第２、第３の実施形態との組み
合わせも同様に実現できる。
形態と、第４の実施形態の特徴を組み合わせた高い信頼
性のある画像復号化装置を実現できる。第５の実施形態
では、第４の実施形態を第１の実施形態と組み合わせた
例を中心に説明するが、第２、第３の実施形態との組み
合わせも同様に実現できる。
【００８７】（Ｅ−２）第５の実施形態の構成 図１１は、第５の実施形態の動画像復号化装置５００の
機能構成図であり、第４の実施形態の動画像復号化装置
４００に、フレーム時間情報修正部５０２、フレーム時
間情報記録部５０３、フレーム時間情報推定部５０５を
追加したものである。
機能構成図であり、第４の実施形態の動画像復号化装置
４００に、フレーム時間情報修正部５０２、フレーム時
間情報記録部５０３、フレーム時間情報推定部５０５を
追加したものである。
【００８８】図１１において、図９と同一の機能を有す
るものには同一符号を付してある。ここでは第４の実施
形態の構成と異なる部分についてのみ説明する。
るものには同一符号を付してある。ここでは第４の実施
形態の構成と異なる部分についてのみ説明する。
【００８９】復号化部５０１は、第４の実施形態の復号
化部４０２と同等の機能を有し、各セグメントのフレー
ム時間情報の復号結果をフレーム時間情報修正部５０２
へ与えるとともに、最終的なフレーム時間情報をフレー
ム時間情報判定部５０５から受ける。また、フレーム時
間情報判定部５０５から得た最終的なフレーム時間情報
とともに復号データを動画像出力部４０３へ与える。
化部４０２と同等の機能を有し、各セグメントのフレー
ム時間情報の復号結果をフレーム時間情報修正部５０２
へ与えるとともに、最終的なフレーム時間情報をフレー
ム時間情報判定部５０５から受ける。また、フレーム時
間情報判定部５０５から得た最終的なフレーム時間情報
とともに復号データを動画像出力部４０３へ与える。
【００９０】フレーム時間情報修正部５０２は、復号化
部５０１から受けた各セグメントのフレーム時間情報の
復号結果に対し、フレーム時間情報推定部５０４から受
けた推定値を利用して、修正するものである。復号結果
が直前フレームのフレーム時間情報より大きく、かつ、
推定値と修正基準しきい値ｄの和よりも小さい場合は、
復号結果が正しいとして、フレーム時間情報判定部５０
５へ与える。復号結果が推定値としきい値の和より大き
い場合は、推定値を復号結果に置き換えて、フレーム時
間情報判定部５０５へ与える。この際、推定値である旨
も合わせてフレーム時間情報判定部５０５へ与える。
部５０１から受けた各セグメントのフレーム時間情報の
復号結果に対し、フレーム時間情報推定部５０４から受
けた推定値を利用して、修正するものである。復号結果
が直前フレームのフレーム時間情報より大きく、かつ、
推定値と修正基準しきい値ｄの和よりも小さい場合は、
復号結果が正しいとして、フレーム時間情報判定部５０
５へ与える。復号結果が推定値としきい値の和より大き
い場合は、推定値を復号結果に置き換えて、フレーム時
間情報判定部５０５へ与える。この際、推定値である旨
も合わせてフレーム時間情報判定部５０５へ与える。
【００９１】フレーム時間情報記録部５０３は、フレー
ム時間情報判定部５０５から与えられたフレーム時間情
報を複数フレーム記録するものである。
ム時間情報判定部５０５から与えられたフレーム時間情
報を複数フレーム記録するものである。
【００９２】フレーム時間情報推定部５０４は、フレー
ム時間情報記録部５０３に記録されている過去のフレー
ム時間情報からフレーム間隔を算出し、フレーム間隔の
平均値を直前フレームのフレーム時間情報に加算し、現
フレームのフレーム時間情報を推定するものであり、推
定値をフレーム時間情報修正部５０２へ与える。
ム時間情報記録部５０３に記録されている過去のフレー
ム時間情報からフレーム間隔を算出し、フレーム間隔の
平均値を直前フレームのフレーム時間情報に加算し、現
フレームのフレーム時間情報を推定するものであり、推
定値をフレーム時間情報修正部５０２へ与える。
【００９３】フレーム時間情報判定部５０５は、フレー
ム時間情報修正部５０２から受けた各セグメントのフレ
ーム時間情報の修正結果を各セグメントフレーム時間情
報記録部４０５へ与えて記録し、同一フレームの各セグ
メントのフレーム時間情報の復号結果を用いて、そのフ
レームの正しいフレーム時間情報を判定するものであ
る。
ム時間情報修正部５０２から受けた各セグメントのフレ
ーム時間情報の修正結果を各セグメントフレーム時間情
報記録部４０５へ与えて記録し、同一フレームの各セグ
メントのフレーム時間情報の復号結果を用いて、そのフ
レームの正しいフレーム時間情報を判定するものであ
る。
【００９４】（Ｅ−３）第５の実施形態の動作 図１２、図１３は第５の実施形態の動作例を表わすフロ
ーチャートである。
ーチャートである。
【００９５】動画像復号化装置５００のフレーム時間情
報推定部５０４は、過去のフレーム時間情報のフレーム
間隔の平均値を求め（Ｓ５１）、その平均値を直前フレ
ームのフレーム時間情報に加算したものを、現フレーム
のフレーム時間情報の推定値とする（Ｓ５２）。
報推定部５０４は、過去のフレーム時間情報のフレーム
間隔の平均値を求め（Ｓ５１）、その平均値を直前フレ
ームのフレーム時間情報に加算したものを、現フレーム
のフレーム時間情報の推定値とする（Ｓ５２）。
【００９６】次に、復号化部５０１は、各セグメント毎
に付加されているフレーム時間情報を復号化する。フレ
ーム時間情報の復号結果が直前フレームよりも小さい場
合は、既定値（H.263では255）を復号結果に加算して絶
対フレーム時間情報に変換する（Ｓ５３）。以下の処理
では、フレーム時間情報としてすべて絶対フレーム時間
情報を用いる。
に付加されているフレーム時間情報を復号化する。フレ
ーム時間情報の復号結果が直前フレームよりも小さい場
合は、既定値（H.263では255）を復号結果に加算して絶
対フレーム時間情報に変換する（Ｓ５３）。以下の処理
では、フレーム時間情報としてすべて絶対フレーム時間
情報を用いる。
【００９７】フレーム時間情報修正部５０２は、復号結
果を修正するか否かの判定を行い、各セグメントのフレ
ーム時間情報の復号結果が直前フレームのフレーム時間
情報より大きく、かつ、推定値と修正基準しきい値ｄの
和よりも小さい場合は（Ｓ５４）、復号結果を現セグメ
ントのフレーム時間情報とする（Ｓ５５）。Ｓ５４の復
号結果の修正判定で復号結果が推定値と修正基準しきい
値の和より大きい場合は、復号結果が誤復号の可能性が
高いとして、復号結果を用いず推定値を現フレームのフ
レーム時間情報に置き換える（Ｓ５６）。
果を修正するか否かの判定を行い、各セグメントのフレ
ーム時間情報の復号結果が直前フレームのフレーム時間
情報より大きく、かつ、推定値と修正基準しきい値ｄの
和よりも小さい場合は（Ｓ５４）、復号結果を現セグメ
ントのフレーム時間情報とする（Ｓ５５）。Ｓ５４の復
号結果の修正判定で復号結果が推定値と修正基準しきい
値の和より大きい場合は、復号結果が誤復号の可能性が
高いとして、復号結果を用いず推定値を現フレームのフ
レーム時間情報に置き換える（Ｓ５６）。
【００９８】その後、全てのセグメントの復号化が終了
したか否かを判定し、終了していない場合は、Ｓ５３に
処理を進めＳ５３からＳ５７の処理を続ける（Ｓ５
７）。Ｓ５７の判定で全てのセグメントの復号化が終了
した場合は、フレーム時間情報判定部５０５が、各セグ
メントにおけるフレーム時間情報の復号結果を集計し、
推定値に修正されたものを除く復号結果の中で、同一復
号結果のセグメントが存在するか否かを判定する（Ｓ５
８）。
したか否かを判定し、終了していない場合は、Ｓ５３に
処理を進めＳ５３からＳ５７の処理を続ける（Ｓ５
７）。Ｓ５７の判定で全てのセグメントの復号化が終了
した場合は、フレーム時間情報判定部５０５が、各セグ
メントにおけるフレーム時間情報の復号結果を集計し、
推定値に修正されたものを除く復号結果の中で、同一復
号結果のセグメントが存在するか否かを判定する（Ｓ５
８）。
【００９９】Ｓ５８の判定で、同一復号結果のセグメン
トが存在する場合は、さらに、異なる復号結果において
同一復号結果を有するセグメント数が最大で同数の復号
結果が存在するか否かを判定する（Ｓ５９）。Ｓ５９の
判定で同一復号結果のセグメント数が最大で同数存在す
る場合は、同一復号結果のセグメント数が最大の復号結
果のうち、直前フレームのフレーム時間情報よりも大き
い復号結果で最小のものをフレーム時間情報とする（Ｓ
６０）。
トが存在する場合は、さらに、異なる復号結果において
同一復号結果を有するセグメント数が最大で同数の復号
結果が存在するか否かを判定する（Ｓ５９）。Ｓ５９の
判定で同一復号結果のセグメント数が最大で同数存在す
る場合は、同一復号結果のセグメント数が最大の復号結
果のうち、直前フレームのフレーム時間情報よりも大き
い復号結果で最小のものをフレーム時間情報とする（Ｓ
６０）。
【０１００】Ｓ５９の判定で同一復号結果を有するセグ
メント数が最大で同数の復号結果が存在しない場合は、
同一復号結果のセグメント数が最大の復号結果をフレー
ムのフレーム時間情報とする（Ｓ６１）。その後、確定
した現フレームのフレーム時間情報を、フレーム時間情
報記録部５０３に記録する（Ｓ６２）。
メント数が最大で同数の復号結果が存在しない場合は、
同一復号結果のセグメント数が最大の復号結果をフレー
ムのフレーム時間情報とする（Ｓ６１）。その後、確定
した現フレームのフレーム時間情報を、フレーム時間情
報記録部５０３に記録する（Ｓ６２）。
【０１０１】また、Ｓ５８の判定で、全てのセグメント
で異なる復号結果が得られた場合には、全てのセグメン
トで復号結果を推定値に修正したか否かを判定する（Ｓ
６３）。Ｓ６３の判定で、全てのセグメントが推定値に
修正されている場合には、推定値をフレームのフレーム
時間情報とする（Ｓ６４）。Ｓ６３の判定で、全てのセ
グメントで推定値に修正されていない場合は、推定値ま
たは推定値にもっとも近い復号結果をフレームのフレー
ム時間情報とする（Ｓ６５）。
で異なる復号結果が得られた場合には、全てのセグメン
トで復号結果を推定値に修正したか否かを判定する（Ｓ
６３）。Ｓ６３の判定で、全てのセグメントが推定値に
修正されている場合には、推定値をフレームのフレーム
時間情報とする（Ｓ６４）。Ｓ６３の判定で、全てのセ
グメントで推定値に修正されていない場合は、推定値ま
たは推定値にもっとも近い復号結果をフレームのフレー
ム時間情報とする（Ｓ６５）。
【０１０２】Ｓ６２において、推定値を採用したフレー
ムのフレーム時間情報は記録せず、平均値算出に用いて
いないが、推定値を記録してその後の平均値算出に利用
しても良い。
ムのフレーム時間情報は記録せず、平均値算出に用いて
いないが、推定値を記録してその後の平均値算出に利用
しても良い。
【０１０３】以上の動作により、複数のセグメントで異
なるフレーム時間情報の復号結果が得られた場合におい
て、より確からしいフレーム時間情報を得ることが可能
となる。
なるフレーム時間情報の復号結果が得られた場合におい
て、より確からしいフレーム時間情報を得ることが可能
となる。
【０１０４】（Ｅ−４）第５の実施形態の効果 以上のように、第５の実施形態によれば、第１、第２ま
たは第３の実施形態に加え、第４の実施形態で説明した
のと同様の効果が得られ、複数のセグメントで異なるフ
レーム時間情報の復号結果が得られた場合において、よ
り確からしいフレーム時間情報を得ることが可能とな
る。
たは第３の実施形態に加え、第４の実施形態で説明した
のと同様の効果が得られ、複数のセグメントで異なるフ
レーム時間情報の復号結果が得られた場合において、よ
り確からしいフレーム時間情報を得ることが可能とな
る。
【０１０５】（Ｆ）他の利用形態 上述の各実施形態において説明した画像復号化装置のそ
れぞれは、ハードウェアによって実現してもソフトウェ
アによって実現しても良い。
れぞれは、ハードウェアによって実現してもソフトウェ
アによって実現しても良い。
【０１０６】
【発明の効果】以上のように、本発明によれば、フレー
ム時間情報を誤復号した時に修正ができるので、フレー
ムの表示時間が大幅にずれることを防ぐことができる。
これにより、その後のフレームへのエラー伝播も防ぐこ
とができる。
ム時間情報を誤復号した時に修正ができるので、フレー
ムの表示時間が大幅にずれることを防ぐことができる。
これにより、その後のフレームへのエラー伝播も防ぐこ
とができる。
【０１０７】修正に際しては、過去のフレーム間隔の平
均値を利用するため、確からしい修正が可能となる。ま
た、影響の少ない誤認識を許容することで、影響の大き
い誤修正の可能性を低くすることができる。
均値を利用するため、確からしい修正が可能となる。ま
た、影響の少ない誤認識を許容することで、影響の大き
い誤修正の可能性を低くすることができる。
【０１０８】また、修正基準しきい値をフレーム間隔の
変動に応じて変更した場合には、フレーム間隔の変動が
大きい場合でも、的確にフレーム時間情報の修正を行う
ことが可能である。特に、フレーム間隔の変動に応じ
て、変動が大きい場合は、ある程度の誤復号は許容する
が誤修正の可能性を低くするように動作し、変動が小さ
い場合は、誤復号をもらさず確実に修正するように動作
することができる。
変動に応じて変更した場合には、フレーム間隔の変動が
大きい場合でも、的確にフレーム時間情報の修正を行う
ことが可能である。特に、フレーム間隔の変動に応じ
て、変動が大きい場合は、ある程度の誤復号は許容する
が誤修正の可能性を低くするように動作し、変動が小さ
い場合は、誤復号をもらさず確実に修正するように動作
することができる。
【０１０９】また、符号化モードによって修正基準しき
い値を変更した場合には、イントラフレームによるフレ
ーム間隔の変動が大きい場合でも、的確にフレーム時間
情報の修正を行うことが可能である。特にデマンド型イ
ントラリフレッシュを利用している場合には、このよう
なフレーム間隔の変動が発生しやすいため、より有効で
ある。
い値を変更した場合には、イントラフレームによるフレ
ーム間隔の変動が大きい場合でも、的確にフレーム時間
情報の修正を行うことが可能である。特にデマンド型イ
ントラリフレッシュを利用している場合には、このよう
なフレーム間隔の変動が発生しやすいため、より有効で
ある。
【０１１０】また、セグメント毎に異なるフレーム時間
情報の復号結果が得られた場合でも、高い確率で正しい
フレーム時間情報を得ることができる。
情報の復号結果が得られた場合でも、高い確率で正しい
フレーム時間情報を得ることができる。
【図１】第１の実施形態の画像復号化装置を示す機能構
成図である。
成図である。
【図２】従来技術におけるフレーム時間情報２重化モー
ドの効果の説明図である。
ドの効果の説明図である。
【図３】従来技術におけるフレーム時間情報２重化モー
ドの問題点の説明図である。
ドの問題点の説明図である。
【図４】第１の実施形態の動作を示すフローチャートで
ある。
ある。
【図５】第２の実施形態の画像復号化装置を示す機能構
成図である。
成図である。
【図６】第２の実施形態の動作を示すフローチャートで
ある。
ある。
【図７】第３の実施形態の画像復号化装置を示す機能構
成図である。
成図である。
【図８】第３の実施形態の動作を示すフローチャートで
ある。
ある。
【図９】第４の実施形態の画像復号化装置を示す機能構
成図である。
成図である。
【図１０】第４の実施形態の動作を示すフローチャート
である。
である。
【図１１】第５の実施形態の画像復号化装置を示す機能
構成図である。
構成図である。
【図１２】第５の実施形態の動作を示すフローチャート
（Ａ）である。
（Ａ）である。
【図１３】第５の実施形態の動作を示すフローチャート
（Ｂ）である。
（Ｂ）である。
100、200、300、400、500・・・・・動画像復号化装置、10
1、401・・・・・符号データ入力部、102、301、402、501・・・
・・復号化部、103、403・・・・・動画像出力部、104、201、3
02、502・・・・・フレーム時間情報修正部、105、503・・・・・
フレーム時間情報記録部、106、504・・・・・フレーム時間
情報推定部、202・・・・・修正基準しきい値調節部、203・・・
・・フレーム間隔変動記録部、303・・・・・符号化モード準拠
修正基準しきい値調節部、404、505・・・・・フレーム時間
情報判定部、405・・・・・各セグメントフレーム時間情報記
録部。
1、401・・・・・符号データ入力部、102、301、402、501・・・
・・復号化部、103、403・・・・・動画像出力部、104、201、3
02、502・・・・・フレーム時間情報修正部、105、503・・・・・
フレーム時間情報記録部、106、504・・・・・フレーム時間
情報推定部、202・・・・・修正基準しきい値調節部、203・・・
・・フレーム間隔変動記録部、303・・・・・符号化モード準拠
修正基準しきい値調節部、404、505・・・・・フレーム時間
情報判定部、405・・・・・各セグメントフレーム時間情報記
録部。
Claims (19)
- 【請求項１】 フレーム時間情報を含む符号化データを
復号化し、該フレーム時間情報の復号結果を得る画像復
号化装置において、 過去のフレームのフレーム時間情報の復号結果を記録す
る、フレーム時間情報記録手段と、 前記フレーム時間情報記録手段に記録された前記過去の
フレームのフレーム時間情報の復号結果に基づき、現フ
レームのフレーム時間情報の推定値を算出するフレーム
時間情報推定手段と、 前記現フレームのフレーム時間情報の復号結果と前記現
フレームのフレーム時間情報の推定値を比較し、該現フ
レームのフレーム時間情報の復号結果を修正して、修正
フレーム時間情報を算出するフレーム時間情報修正手段
とを備えることを特徴とする画像復号化装置。 - 【請求項２】 請求項１に記載の画像復号化装置におい
て、 前記フレーム時間情報推定手段は、前記フレーム時間情
報記録手段に記録されている前記過去のフレームのフレ
ーム時間情報に基づいてフレーム間隔の平均値を算出
し、現フレームの直前フレームのフレーム時間情報に、
該平均値を加算した値を前記現フレームのフレーム時間
情報の推定値とすることを特徴とする画像復号化装置。 - 【請求項３】 請求項１、２のいずれかに記載の画像復
号化装置において、前記フレーム時間情報修正手段は、
予め設定した修正基準となる修正基準しきい値を有し、 前記現フレームのフレーム時間情報の復号結果が、前記
フレーム時間情報推定手段によって算出された前記現フ
レームのフレーム時間情報の推定値と該修正基準しきい
値との和と同じまたは小さい場合は、該現フレームのフ
レーム時間情報の復号結果を前記修正フレーム時間情報
とすることを特徴とする画像復号化装置。 - 【請求項４】 請求項１、２のいずれかに記載の画像復
号化装置において、前記フレーム時間情報修正手段は、
予め設定した修正基準となる修正基準しきい値を有し、 前記現フレームのフレーム時間情報の復号結果が、前記
フレーム時間情報推定手段によって算出された前記現フ
レームのフレーム時間情報の推定値と該修正基準しきい
値との和と同じまたは小さく、かつ、現フレームの直前
フレームのフレーム時間情報より大きい場合は、該現フ
レームのフレーム時間情報の復号結果を前記修正フレー
ム時間情報とすることを特徴とする画像復号化装置。 - 【請求項５】 請求項１、２のいずれかに記載の画像復
号化装置において、前記フレーム時間情報修正手段は、
予め設定した修正基準となる修正基準しきい値を有し、 前記現フレームのフレーム時間情報の復号結果が、前記
フレーム時間情報推定手段によって算出された前記現フ
レームのフレーム時間情報の推定値と該修正基準しきい
値との和よりも大きい場合は、該現フレームのフレーム
時間情報の推定値を前記修正フレーム時間情報とするこ
とを特徴とする画像復号化装置。 - 【請求項６】 請求項３〜５のいずれかに記載の画像復
号化装置において、 前記フレーム時間情報修正手段で修正された修正フレー
ム時間情報に基づいてフレーム間隔の変動を算出し、該
フレーム間隔の変動に応じて前記修正基準しきい値を調
節する修正基準しきい値調節手段を備えることを特徴と
する画像復号化装置。 - 【請求項７】 請求項３〜５のいずれかに記載の画像復
号化装置において、現フレームの直前フレームの符号化
モードに応じて前記修正基準しきい値を調節する符号化
モード準拠修正基準しきい値手段を備えることを特徴と
する画像復号化装置。 - 【請求項８】 請求項７に記載の画像復号化装置におい
て、 前記符号化モード準拠修正基準しきい値手段は、現フレ
ームの符号化モードに応じて前記修正基準しきい値を調
節することを特徴とする画像復号化装置。 - 【請求項９】 フレームが複数の領域に分割され、該フ
レームおよび該各領域にフレーム時間情報を付加した符
号化データを復号化し、該各領域のフレーム時間情報の
復号結果を得る画像復号化装置において、 過去のフレームのフレーム時間情報の復号結果を記録す
るフレーム時間情報記録手段と、 前記フレーム時間情報記録手段に記録された前記過去の
フレームのフレーム時間情報の復号結果に基づき、現フ
レームのフレーム時間情報の推定値を算出するフレーム
時間情報推定手段と、 前記現フレームにおける各領域のフレーム時間情報の復
号結果と前記現フレームのフレーム時間情報の推定値を
比較し、該現フレームにおける各領域のフレーム時間情
報の復号結果を修正して、各領域の修正フレーム時間情
報を算出するフレーム時間情報修正手段と、 前記現フレームにおける各領域の修正フレーム時間情報
の中から、所定の条件にしたがって選択した領域の修正
フレーム時間情報を、前記現フレームのフレーム時間情
報とするフレーム時間情報判定手段とを備えることを特
徴とする画像復号化装置。 - 【請求項１０】 請求項９に記載の画像復号化装置にお
いて、 前記フレーム時間情報判定手段は、前記各領域の修正フ
レーム時間情報のうち、同一の復号結果が最も多い領域
の修正フレーム時間情報を前記フレームのフレーム時間
情報とすることを特徴とする画像復号化装置。 - 【請求項１１】 請求項９に記載の画像復号化装置にお
いて、 前記フレーム時間情報判定手段は、前記各領域の修正フ
レーム時間情報のうち、復号結果の値が最小の領域の修
正フレーム時間情報を前記現フレームのフレーム時間情
報とすることを特徴とする画像復号化装置。 - 【請求項１２】 請求項９に記載の画像復号化装置にお
いて、 前記フレーム時間情報判定手段は、前記各領域の修正フ
レーム時間情報のうち、現フレームの直前フレームのフ
レーム時間情報より大きく、かつ、復号結果の値が最小
の領域の修正フレーム時間情報を前記現フレームのフレ
ーム時間情報とすることを特徴とする画像復号化装置。 - 【請求項１３】 請求項９から１２のいずれかに記載
の画像復号化装置において、 前記フレーム時間情報推定手段は、前記フレーム時間情
報記録手段に記録されている前記過去のフレームのフレ
ーム時間情報に基づいてフレーム間隔の平均値を算出
し、前記現フレームの直前フレームのフレーム時間情報
に該平均値を加算した値を、前記現フレームのフレーム
時間情報の推定値とすることを特徴とする画像復号化装
置。 - 【請求項１４】 請求項９から１２のいずれかに記載の
画像復号化装置において、 前記フレーム時間情報修正手段は、予め設定した修正基
準となる修正基準しきい値を有し、 前記判定された現フレームのフレーム時間情報が、前記
フレーム時間情報推定手段によって算出された前記現フ
レームのフレーム時間情報の推定値と該修正基準しきい
値との和と同じまたは小さい場合は、該判定された現フ
レームのフレーム時間情報を前記現フレームのフレーム
時間情報とすることを特徴とする画像復号化装置。 - 【請求項１５】 請求項９から１２のいずれかに記載の
画像復号化装置において、 前記フレーム時間情報修正手段は、予め設定した修正基
準となる修正基準しきい値を有し、 前記判定された現フレームのフレーム時間情報が、前記
フレーム時間情報推定手段によって算出された前記現フ
レームのフレーム時間情報の推定値と該修正基準しきい
値との和と同じまたは小さく、かつ、現フレームの直前
フレームのフレーム時間情報より大きい場合は、該判定
された現フレームのフレーム時間情報を前記現フレーム
のフレーム時間情報とすることを特徴とする画像復号化
装置。 - 【請求項１６】 請求項９から１２のいずれかに記載の
画像復号化装置において、 前記フレーム時間情報修正手段は、予め設定した修正基
準となる修正基準しきい値を有し、 前記判定された現フレームのフレーム時間情報が、前記
フレーム時間情報推定手段によって算出された前記現フ
レームのフレーム時間情報の推定値と該修正基準しきい
値との和よりも大きい場合は、該現フレームのフレーム
時間情報の推定値を前記現フレームのフレーム時間情報
とすることを特徴とする画像復号化装置。 - 【請求項１７】 請求項１３から１６のいずれかに記載
の画像復号化装置において、前記フレーム時間情報修正
手段で修正された修正フレーム時間情報に基づいてフレ
ーム間隔の変動を算出し、該フレーム間隔の変動に応じ
て前記修正基準しきい値を調節する修正基準しきい値調
節手段を備えることを特徴とする画像復号化装置。 - 【請求項１８】 請求項１３から１７のいずれかに記載
の画像復号化装置において、 現フレームの直前フレームの符号化モードに応じて前記
修正基準しきい値を調節する符号化モード準拠修正基準
しきい値手段を備えることを特徴とする画像復号化装
置。 - 【請求項１９】 請求項１８に記載の画像復号化装置に
おいて、前記符号化モード準拠修正基準しきい値手段
は、現フレームの符号化モードに応じて前記修正基準し
きい値を調節することを特徴とする画像復号化装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP31206498A JP3349964B2 (ja) | 1998-11-02 | 1998-11-02 | 画像復号化装置 |
| US09/418,799 US6643326B1 (en) | 1998-11-02 | 1999-10-15 | Picture decoding apparatus modifying received temporal references |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP31206498A JP3349964B2 (ja) | 1998-11-02 | 1998-11-02 | 画像復号化装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000138930A JP2000138930A (ja) | 2000-05-16 |
| JP3349964B2 true JP3349964B2 (ja) | 2002-11-25 |
Family
ID=18024804
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP31206498A Expired - Fee Related JP3349964B2 (ja) | 1998-11-02 | 1998-11-02 | 画像復号化装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6643326B1 (ja) |
| JP (1) | JP3349964B2 (ja) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7275256B1 (en) | 2001-08-28 | 2007-09-25 | Music Choice | System and method for providing an interactive, visual complement to an audio program |
| JP3916382B2 (ja) * | 2000-07-07 | 2007-05-16 | 沖電気工業株式会社 | 動画像受信装置 |
| JP4612171B2 (ja) * | 2000-10-27 | 2011-01-12 | 株式会社東芝 | 動画像復号再生モジュールと再生時刻管理プログラムとマルチメディア情報受信装置 |
| EP1750426A1 (en) * | 2000-12-07 | 2007-02-07 | Sony United Kingdom Limited | Methods and apparatus for embedding data and for detecting and recovering embedded data |
| CN1720584A (zh) * | 2002-12-05 | 2006-01-11 | 皇家飞利浦电子股份有限公司 | 数据帧的编辑 |
| US7626609B1 (en) | 2003-03-07 | 2009-12-01 | Music Choice | Method and system for displaying content while reducing burn-in of a display |
| US7158169B1 (en) * | 2003-03-07 | 2007-01-02 | Music Choice | Method and system for displaying content while reducing burn-in of a display |
| KR101289603B1 (ko) * | 2005-07-25 | 2013-07-24 | 톰슨 라이센싱 | 참조 및 비참조 비디오 프레임을 검출하고 은닉하는 방법및 장치 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5543930A (en) * | 1993-02-18 | 1996-08-06 | Nec Corporation | Video data management method and apparatus |
| US5732217A (en) * | 1995-12-01 | 1998-03-24 | Matsushita Electric Industrial Co., Ltd. | Video-on-demand system capable of performing a high-speed playback at a correct speed |
| US6157771A (en) * | 1996-11-15 | 2000-12-05 | Futuretel, Inc. | Method and apparatus for seeking within audiovisual files |
-
1998
- 1998-11-02 JP JP31206498A patent/JP3349964B2/ja not_active Expired - Fee Related
-
1999
- 1999-10-15 US US09/418,799 patent/US6643326B1/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2000138930A (ja) | 2000-05-16 |
| US6643326B1 (en) | 2003-11-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6259736B1 (en) | Video encoder and video encoding method | |
| USRE42504E1 (en) | Moving-picture signal coding and/or decoding system resistant to transmission error | |
| US6188792B1 (en) | Video encoding and decoding apparatus | |
| KR100493770B1 (ko) | 화상부호화장치,화상복호화장치및화상전송방법 | |
| US6744924B1 (en) | Error concealment in a video signal | |
| US6594790B1 (en) | Decoding apparatus, coding apparatus, and transmission system employing two intra-frame error concealment methods | |
| EP0901288A1 (en) | Moving image coding method and apparatus | |
| JP2000307672A (ja) | 符号化情報受信復号装置 | |
| HUP0301969A2 (hu) | Eljárás videojel kódolására, videó kóder, eljárás kódolt videojel dekódolására, videó dekóder, eljárás hiba eltüntetésére, hordozható vezeték nélküli kommunikációs eszköz | |
| JPH0937245A (ja) | 動画像伝送システム及び動画像伝送装置 | |
| JP2001169286A (ja) | 動画像符号化装置 | |
| JP3349964B2 (ja) | 画像復号化装置 | |
| JP3403683B2 (ja) | 画像符号化装置および方法 | |
| US6885704B1 (en) | Coding apparatus and coding method of time-varying image signal | |
| US20020126757A1 (en) | Method for video encoding by utilizing intra updating technique based on error probabilities estimated from size of bit stream for each block | |
| US6836513B2 (en) | Moving picture encoding method and apparatus | |
| US20120213283A1 (en) | Method of decoding a sequence of encoded digital images | |
| JPH089374A (ja) | 符号化情報量制御装置 | |
| KR20040013325A (ko) | 동영상 압축방법 | |
| KR19990005604A (ko) | 화상 부호화방법 및 화상부호화 장치 | |
| JPH11205787A (ja) | 画像通信方法および画像通信装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20020827 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20070913 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080913 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080913 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090913 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090913 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100913 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110913 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |