JP4530795B2 - 告知情報番組制作装置、方法、プログラム、及び告知情報番組放送システム - Google Patents

Description

本発明は、告知情報によって構成される告知情報番組を制作する技術に関する。

従来から、テレビ放送やラジオ放送においては、１つの番組の途中や終了時に告知情報が放送されている。例えば、テレビ放送においては、通常のテレビ番組の映像に、告知情報を示す文字が重ねられた映像が放送される（いわゆる、文字スーパー）。告知情報としては、催し物開催・セール情報や、キャンペーン情報や、問い合わせ先・応募先・申し込み先などの電話番号・ＵＲＬ・所在地や、料理のレシピや、プロ野球の試合結果や、ドラマの結末や、ニュースのヘッドラインなどが挙げられる。

しかしながら、上記の告知情報は、テレビ放送やラジオ放送においては通常は一定時間しか放送されないため、視聴者は、メモを取り損なったり、聞き損なったりする場合があった。したがって、視聴者は、告知情報を有効に利用できない場合があった。

本発明は、上記の点に鑑みてなされたものであり、告知情報によって構成される告知情報番組を制作する告知情報番組制作装置を提供することにある。

本発明の１つの観点では、告知情報番組制作装置は、複数のテレビ番組に対応するテレビ放送用の情報から、文字列を含みテレビ番組中に放送される告知情報を収集する収集手段と、収集した告知情報に含まれる文字列を、テレビ番組毎に１又は複数のページに配置して複数の告知情報ページを作成する告知情報ページ作成手段と、前記複数のテレビ番組が放送される時間順に従い、時間的に先に放送されるべきテレビ番組に対応する告知情報ページほど先頭ページよりに位置するように前記複数の告知情報ページを配列して告知情報番組を制作する制作手段と、を備える。

上記の告知情報番組制作装置は、テレビ放送などによって放送された告知情報を自動的に収集し、収集した告知情報によって構成される告知情報番組を自動的に制作する。告知情報は、テレビ放送などに一定時間放送される情報である。例えば、告知情報としては、催し物開催・セール情報や、キャンペーン情報や、問い合わせ先・応募先・申し込み先などの電話番号・ＵＲＬ・所在地や、料理のレシピや、プロ野球の試合結果や、ドラマの結末や、ニュースのヘッドラインなどが挙げられる。告知情報番組は、このような告知情報を放送する番組であり、通常のテレビ放送において放送される番組とは独立した番組である。このような告知情報番組を視聴者に配信することにより、視聴者がテレビ放送中に告知情報を見逃したり、メモを取り損なったり、聞き損なったりしても、視聴者は告知情報番組を視聴することによって確実に告知情報を取得することができる。これにより、視聴者は、告知情報を有効に利用することが可能となる。また、告知情報番組制作装置は、告知情報の収集と告知情報番組の制作とを自動的に行うので、告知情報番組に要する制作コストを低減することができる。

上記の告知情報番組制作装置の一態様では、前記テレビ放送用の情報は画像データを含み、前記収集手段は、前記画像データの色度成分に基づいて第１マスク画像を作成する第１マスク画像生成手段と、前記画像データの動き成分に基づいて第２マスク画像を作成する第２マスク画像生成手段と、前記第１マスク画像及び前記第２マスク画像 を用いて、前記画像データをマスキングするマスキング処理手段と、前記マスキング後の画像データを２値化する２値化処理手段と、前記２値化後の画像データ内において、前記告知情報が収容されるブロックの境界及びサイズを推定する推定手段と、前記推定されたブロック内のデータに対してパターンマッチングし、前記ブロック内のデータを文字列にするパターンマッチング手段と、前記文字列を識別して、前記番組ごとに当該文字列を集積する文字列識別手段と、を備えている。この態様では、収集手段は、例えば、告知情報がデジタル画像データ内において字幕として重ねられているか、又は取りきり文字画面で挿入されている場合に、上記の処理を行う。これにより、告知情報番組制作装置は、画像データから告知情報を示す文字列を精度よく収集することができる。

上記の告知情報番組制作装置の他の一態様では、前記テレビ放送用の情報はデジタルテレビ放送用の情報であり、前記収集手段は、前記デジタルテレビ放送用の情報中のクローズドキャプションとして伝送される字幕信号から前記告知情報を収集する。また、更に他の一態様では、前記テレビ放送用の情報はデジタルデータ放送用の情報を含み、前記収集手段は、前記デジタルデータ放送用の情報に含まれるＢＭＬ文書から前記告知情報を収集する。

本発明の他の観点では、告知情報番組制作装置によって実行される告知情報番組制作方法は、複数のテレビ番組に対応するテレビ放送用の情報から、文字列を含みテレビ番組中に放送される告知情報を収集する収集工程と、収集した告知情報に含まれる文字列を、番組毎に１又は複数のページに配置して複数の告知情報ページを作成する告知情報ページ作成工程と、前記複数のテレビ番組が放送される時間順に従い、時間的に先に放送されるべきテレビ番組に対応する告知情報ページほど先頭ページよりに位置するように前記複数の告知情報ページを配列して告知情報番組を制作する制作工程と、を備える。

本発明のさらに他の観点では、コンピュータを備える告知情報番組制作装置により実行される告知情報番組制作プログラムは、複数のテレビ番組に対応するテレビ放送用の情報から、文字列を含みテレビ番組中に放送される告知情報を収集する収集手段、収集した告知情報に含まれる文字列を、テレビ番組毎に１又は複数のページに配置して複数の告知情報ページを作成する告知情報ページ作成手段、前記複数のテレビ番組が放送される時間順に従い、時間的に先に放送されるべきテレビ番組に対応する告知情報ページほど先頭ページよりに位置するように前記複数の告知情報ページを配列して告知情報番組を制作する制作手段、として前記コンピュータを機能させる。

本発明のさらに他の観点では、放送システムは、複数の番組に対応するテレビ放送用の情報に基づいて、予め決められた時間スケジュールに従って、各テレビ番組を放送するテレビ番組放送装置と、上記の告知情報番組制作装置と、前記告知情報番組制作装置が制作した告知情報番組を放送する告知情報番組放送装置と、を備える。

上記の放送システムの一態様では、前記告知情報番組放送装置は、前記テレビ番組放送装置により１つのテレビ番組の放送が終了するたびに、当該テレビ番組に対応する告知情報ページを追加した告知情報番組を放送する。

上記の放送システムの他の一態様では、前記告知情報番組は、先頭位置に表紙ページを含み、前記告知情報番組放送装置は、最初のテレビ番組の放送が終了するまでの間は、前記表紙ページのみを含む告知情報番組を放送する。

上記の放送システムの他の一態様では、前記告知情報番組放送装置は、前記テレビ放送装置により既に放送が終了したテレビ番組に対応する告知情報ページを含む告知情報番組を放送する。

以下、図面を参照して本発明の好適な実施形態について説明する。

［告知情報番組放送システム］
まず、本実施形態に係る告知情報番組放送システムについて、図１を用いて説明する。図１は、本実施形態に係る告知情報番組放送システムの概略構成を示す図である。

告知情報番組放送システムは、主に、放送局１と、携帯電話向けサーバ２と、視聴者３とから構成される。

放送局１は、映像情報や音声情報を視聴者３に配信し、テレビ放送やラジオ放送を行う。本実施形態に係る告知情報番組放送システムにおいては、放送局１は、告知情報によって構成される告知情報番組を配信する。告知情報としては、例えば、催し物開催・セール情報や、キャンペーン情報や、問い合わせ先・応募先・申し込み先などの電話番号・ＵＲＬ・所在地や、料理のレシピや、プロ野球の試合結果や、ドラマの結末や、ニュースのヘッドラインなどが挙げられる。このような告知情報は、テレビ番組やラジオ番組では、一定時間のみ放送されるものである。告知情報番組は、上記の告知情報を放送する番組であり、通常のテレビ放送やラジオ放送において放送される番組とは独立しており、文字から構成される画像などによって放送される。

詳しくは、放送局１は、映像情報内や音声情報内に含まれる告知情報を自動的に収集し、収集した告知情報から構成される告知情報番組を自動的に制作する。また、放送局１は、告知情報が放送されたテレビ又はラジオの番組ごとに、告知情報が異なるページに表示されるように告知情報番組を制作する。また、告知情報番組は、複数存在するページを視聴者３が手動で進めたり、戻したりできるように、即ち視聴者３がページを手動進行できるように制作される。

放送局１は、放送波Ｓ１として視聴者３に告知情報番組を送信すると共に、所定の有線又は無線の送信波Ｓ２として携帯電話向けサーバ２に告知情報番組を送信する。これらの場合、放送局１は、告知情報番組を構成する全てのページを一括で送信する。言い換えると、放送局１は、告知情報番組を構成するページを別々に送信しない。なお、上記の告知情報番組の制作などに係る処理は、放送局１内の告知情報番組制作装置が行う。告知情報番組制作装置が行う処理については、詳細は後述する。

携帯電話向けサーバ２は、放送局１より送信波Ｓ２として告知情報番組を受信する。そして、携帯電話向けサーバ２は、受信した告知情報番組を通信波Ｓ３として視聴者３に送信する。詳しくは、携帯電話向けサーバ２は、視聴者３が所有する携帯電話６に通信波Ｓ３を送信する。

視聴者３は、テレビ用のリモコン５と、携帯電話６と、デジタルテレビ７ａ、又は文字放送受信可能なアナログテレビ７ｂ、若しくは文字放送受信不可能なアナログテレビ７ｃの少なくともいずれかのテレビと、を有している。なお、図１においては、説明の便宜上、リモコン５を１つしか示していないが、視聴者３が所有するテレビの数だけ、そのテレビに対応するリモコン５が存在するものとする。

視聴者３がデジタルテレビ７ａを有している場合には、視聴者３は、図示しないアンテナより放送波Ｓ１を受信することによって、デジタルデータ放送の告知情報番組を取得する。この場合、告知情報番組は、地上デジタル放送番組であり、ＢＭＬ（Broadcast Markup Language）の形態で取得され、デジタルテレビ７ａに表示される。

視聴者３がアナログテレビ７ｂを有している場合には、視聴者３は、図示しないアンテナより放送波Ｓ１を受信することによって、アナログデータの告知情報番組を取得する。この場合、告知情報番組は、いわゆる文字放送番組として取得され、アナログテレビ７ｂに表示される。

このように視聴者３がデジタルテレビ７ａ又はアナログテレビ７ｂを有している場合には、図１中の矢印Ｓ５ａ、Ｓ５ｂで示すように、視聴者３は、リモコン５によって通常のテレビ放送と告知情報番組を切り替えることができる。また、携帯電話６がテレビの切り替え機能を有するものである場合は、矢印Ｓ６ａ、Ｓ６ｂで示すように、携帯電話６によって通常のテレビ放送と告知情報番組とを切り替えることができる。更に、視聴者３は、リモコン５又は携帯電話６によって、告知情報番組のページを進めたり、戻したりすることもできる。

一方、視聴者３がアナログテレビ７ｃのみを有している場合には、視聴者３は、携帯電話６により通信波Ｓ３を受信することによって告知情報番組を取得し、取得した告知情報番組を携帯電話６のモニタ６ａで見ることができる。即ちこの場合は、アナログテレビ７ｃは文字放送の受信が不可能であるため、視聴者３は、携帯電話６のモニタ６ａで告知情報番組を見ることになる。また、視聴者３は、矢印Ｓ５ｃ、Ｓ６ｃで示すように、リモコン５又は携帯電話６を用いて通常のテレビ番組のチャンネルの切り替えることができると共に、携帯電話６を用いて告知情報番組のページを進めたり、戻したりすることができる。

なお、矢印Ｓ６ａ、Ｓ６ｂを破線で示しているのは、視聴者３がデジタルテレビ７ａ又はアナログテレビ７ｂを有している場合には、視聴者３は、これらのテレビで告知情報番組を見ることができるが、補助的に携帯電話６のモニタ６ａで告知情報番組を見ることもできることを意味している。

以上のように、告知情報番組を視聴者３に配信することにより、視聴者３がテレビ放送中又はラジオ放送中に告知情報を見逃したり、メモを取り損なったり、聞き損なったりしても、視聴者３はその後に告知情報番組を見ることによって確実に告知情報を取得することができる。これにより、視聴者３は、告知情報を有効に利用することが可能となる。

［告知情報番組の具体例］
次に、告知情報番組の具体例について図２を用いて説明する。図２は、テレビ番組内で放送された告知情報から制作された告知情報番組の例を示している。

図２（ａ）は、これから放送されるテレビ番組の案内情報から構成される番組、いわゆる電子番組ガイド（ＥＰＧ（Electric Program Guide））の例を示す画像である。この番組は、告知情報番組とは別の番組である。上記の案内情報としては、これから放送されるテレビ番組に対応する、番組名と放送時間とが含まれている。また、案内情報は、番組が放送される順に並べられており、放送が終了した番組から順に消されていく。

図２（ｂ）〜（ｄ）は、本実施形態に係る告知情報番組の例を示す画像である。図２（ｂ）は、告知情報番組の表紙を示す画像である。この表紙は、視聴者が通常のテレビ番組から告知情報番組へ切り替えた際に最初に表示される。これにより、視聴者は、選択している番組が告知情報番組であることを即座に認識できる。

図２（ｃ）及び（ｄ）は、告知情報番組を構成する告知情報の具体的な例を示す画像である。告知情報は、その告知情報が放送された元のテレビ番組ごとに、異なるページに表示される。よって、告知情報番組のページを進めると、異なるテレビ番組内で放送された告知情報が次々と表示される。図２（ｃ）は、ニュース番組Ｄにおいて放送された告知情報を示す画像である。この場合、ニュース番組Ｄ内で告知情報として放送された、ニュースヘッドラインが表示される。また、図２（ｄ）は、料理番組Ｅにおいて放送された告知情報を示す画像である。この場合、料理番組Ｅ内で告知情報として放送された、お勧め料理店の名称・電話番号・所在地が表示される。

［告知情報番組の放送順序］
次に、告知情報番組の放送順序について図３を用いて説明する。図３は、通常のテレビ番組と、上記した電子番組ガイド（以下、単に「ＥＰＧ」と呼ぶ）と、告知情報番組とが放送される順序を示したタイムチャートを示している。

時刻１４：００から時刻１５：００までに放送される番組１０としては、テレビ番組１０ａと、ＥＰＧ１０ｂと、告知情報番組１０ｃとが放送される。即ち、テレビ放送としてテレビ番組１０ａが放送され、デジタルデータ放送あるいはアナログ文字放送としてＥＰＧ１０ｂと告知情報番組１０ｃとが放送される。具体的には、テレビ番組１０ａとしては、トーク番組Ａが放送される。ＥＰＧ１０ｂとしては、これから放送されるテレビ番組における、番組名及びその番組の放送時間が並べられた画像が放送される。また、ＥＰＧ１０ｂは、これから放送される順に番組名及び放送時間が並べられている。具体的には、ＥＰＧ１０ｂとしては、現在放送しているトーク番組Ａ、トーク番組Ａの後に放送される放送される情報番組Ｂ、情報番組Ｂの後に放送されるドラマＣ、ドラマＣの後に放送されるニュース番組Ｄ、ニュース番組Ｄの後に放送される料理番組Ｅ、の順で番組名及び放送時間が並べられた画像が表示される。一方、告知情報番組１０ｃとしては、ここでは、時刻１４：００以前にはテレビ番組が放送されていないことを仮定しているので、告知情報は存在しないため、表紙のページのみが放送される。

時刻１５：００から時刻１７：００までに放送される番組１１としては、テレビ番組１１ａと、ＥＰＧ１１ｂと、告知情報番組１１ｃとが放送される。テレビ番組１１ａとしては、情報番組Ｂが放送される。ＥＰＧ１１ｂとしては、前述したＥＰＧ１０ｂから放送が終了したトーク番組Ａの番組名及び放送時間を除いた各番組の番組名及び放送時間が並べられた画像が放送される。

一方、告知情報番組１１ｃとしては、トーク番組Ａ内で放送された告知情報を追加した画像が放送される。告知情報は、１つのテレビ番組の放送が終了した時点で、そのテレビ番組内で放送された告知情報が告知情報番組内で放送される。したがって、トーク番組Ａ内で放送された告知情報は、トーク番組Ａの放送が終了した時点で、告知情報番組１１ｃ内で放送される。この場合、トーク番組Ａ内で放送された告知情報は、表紙のページの次のページに表示される。

時刻１７：００から時刻１８：００までに放送される番組１２としては、テレビ番組１２ａと、ＥＰＧ１２ｂと、告知情報番組１２ｃとが放送される。テレビ番組１２ａとしては、ドラマＣが放送される。ＥＰＧ１２ｂとしては、前述したＥＰＧ１１ｂから放送が終了した情報番組Ｂの番組名及び放送時間を除いた各番組の番組名及び放送時間が並べられた画像が放送される。

一方、告知情報番組１２ｃとしては、情報番組Ｂ内で放送された告知情報を追加した画像が放送される。情報番組Ｂ内で放送された告知情報は、情報番組Ｂの放送が終了した時点で、告知情報番組１２ｃ内で放送される。この場合、情報番組Ｂ内で放送された告知情報は、表紙のページの次のページに表示される。即ち、情報番組Ｂ内で放送された告知情報は、トーク番組Ａの前のページに挿入される。

時刻１８：００から時刻１９：００までに放送される番組１３としては、テレビ番組１３ａと、ＥＰＧ１３ｂと、告知情報番組１３ｃとが放送される。テレビ番組１３ａとしては、ニュース番組Ｄが放送される。ＥＰＧ１３ｂとしては、前述したＥＰＧ１２ｂから放送が終了したドラマＣの番組名及び放送時間を除いた各番組の番組名及び放送時間が並べられた画像が放送される。

一方、告知情報番組１３ｃとしては、ドラマＣ内で告知情報が放送されなかったため、新たな告知情報は追加されない。即ち、告知情報番組１３ｃは、告知情報番組１２ｃと同一の画像が放送される。

時刻１９：００から時刻２０：００までに放送される番組１４としては、テレビ番組１４ａと、ＥＰＧ１４ｂと、告知情報番組１４ｃとが放送される。テレビ番組１４ａとしては、料理番組Ｅが放送される。ＥＰＧ１４ｂとしては、前述したＥＰＧ１３ｂから放送が終了したニュース番組Ｄの番組名及び放送時間を除いた各番組の番組名及び放送時間が並べられた画像が放送される。

一方、告知情報番組１４ｃとしては、ニュース番組Ｄ内で放送された告知情報を追加した画像が放送される。ニュース番組Ｄ内で放送された告知情報は、ニュース番組Ｄの放送が終了した時点で、告知情報番組１４ｃ内で放送される。この場合、ニュース番組Ｄ内で放送された告知情報は、表紙のページの次のページに表示される。なお、トーク番組Ａの告知情報と情報番組Ｂの告知情報とが表示されるページの位置関係は変わらない。つまり、トーク番組Ａの告知情報は、情報番組Ｂの告知情報の後ろのページに位置する。

ここで、告知情報の放送順序の基本概念について、図４を用いて説明する。ここでは、所定の期間内に番組Ｊ１→Ｊ２→Ｊ３→Ｊ４の順にテレビ番組が放送され、それぞれの番組内で告知情報が放送されたものとする。図４（ａ）は、番組Ｊ３までの放送が終了したときに放送される告知情報番組の内容を示している。告知情報は、表紙の次のページに番組Ｊ３内で放送された告知情報のページが位置し、この次のページに番組Ｊ２内で放送された告知情報のページが位置し、更にこの次のページに番組Ｊ１内で放送された告知情報のページが位置する。即ち、告知情報は、放送された時間が新しいものから古いものへと順に並べられおり、新しいものから古いものへと順に表示される。

図４（ｂ）は、番組Ｊ４までの放送が終了したときに放送される告知情報番組の内容を示している。この場合、番組Ｊ４内で放送された告知情報のページは、図４（ａ）中の矢印１８で示す位置に挿入されている。つまり、表紙のページの次のページに、番組Ｊ４内で放送された告知情報のページが挿入される。この場合、番組Ｊ１、Ｊ２、Ｊ３の順番は変わらない、即ち、表示される順番は変わらない。よって、告知情報は、新しいものから古いものへと順に表示される。以上により、視聴者は、最新に放送された番組内の告知情報を即座に見ることができる。例えば、視聴者がテレビ番組を見ている際に告知情報の内容をメモしきれなかった場合に、テレビ番組から告知情報番組に切り替えると、最初にそのテレビ番組に係る告知情報が表示されるため、視聴者は即座に告知情報を取得することができる。

なお、告知情報番組に追加されてから所定時間又は所定日数が経過している告知情報は、自動的に消去してもよい。新しい告知情報が次々と追加されていくため、古い告知情報を残しておくと、告知情報番組のデータ量が大きくなってしまうからである。

また、上記の例では、１つの番組から収集された告知情報が１ページに表示されるものを示したが、１つの番組から収集された告知情報が複数のページに亘ってもよい。この場合は、１つの番組から収集された告知情報が、連続する複数のページに表示される。

［告知情報番組制作方法］
以下で、本実施形態に係る告知情報番組制作装置内で行われる、告知情報番組の制作方法について図５〜図７を用いて説明する。ここでは、一例として、テレビ番組内で放送された告知情報に対する告知情報番組の制作方法について説明する。

（告知情報番組制作装置の構成）
図５は、本実施形態に係る告知情報番組制作装置５０の概略構成を示すブロック図である。告知情報番組制作装置５０は、テレビ番組内で放送された画像データから告知情報を示す文字を自動的に収集し、収集した告知情報によって構成される告知情報番組を制作する。更に、告知情報番組制作装置５０は、制作した告知情報番組を視聴者や携帯電話向けサーバなどに放送する。このように、告知情報番組制作装置５０は、本発明による告知情報自動制作装置の収集手段、制作手段、および放送手段として機能する。

なお、ここでは、告知情報番組制作装置５０がデジタル画像データに対して処理を行うものについて説明する。この場合、告知情報は、デジタル画像データ内において字幕として重ねられているか、又は取りきり文字画面で挿入されている。更に、告知情報番組制作装置５０は、コンピュータ（ＰＣ）などによって構成され、ＣＰＵやＲＯＭやＲＡＭなどを備えている。即ち、コンピュータが予め用意された告知情報制作プログラムなどを実行することにより、図５に示す各手段が実現される。

告知情報番組制作装置５０は、主に、画像データ取得部２１と、デジタル・プログレッシブ変換部２２と、第１マスクパターン生成部２３と、第２マスクパターン生成部２４と、マスキング処理部２５と、レベル変動部分抑圧処理部２６と、２値化処理部２７と、静止画キャプチャ部２８と、ブロック境界・ブロックサイズ推定部２９と、パターンマッチング部３０と、文字列識別部３１と、フレームメモリ３５とを備える。なお、図５に示す告知情報番組制作装置５０は、主に、取得した画像データから告知情報を示す文字を収集する処理を行う処理部について示している。

画像データ取得部２１は、外部から、テレビ番組内で放送された画像データｄ１を取得する。そして、画像データ取得部２１は、画像データｄ１をデジタル・プログレッシブ変換部２２に供給する。

デジタル・プログレッシブ変換部２２は、取得した画像データｄ１をデジタル・プログレッシブ信号、即ち、ノン・インターレース信号に変換する。このような信号変換を行うのは、後述するパターンマッチング部３０によって行われるパターンマッチングの精度を上げるためである。デジタル・プログレッシブ変換部２２は、デジタル・プログレッシブ信号に変換された画像データｄ２、ｄ３、ｄ４を、それぞれ第１マスクパターン生成部２３、第２マスクパターン生成部２４、及びマスキング処理部２５に供給する。

第１マスクパターン生成部２３は、取得した画像データｄ２の色度（色差）成分Ｃｒ及びＣｂを検出し、第１マスクパターンｍ１を生成する。いま、画像データｄ２〜ｄ４は輝度成分Ｙと、色度成分Ｃｒ及びＣｂを有し、輝度成分Ｙは８ビット（０〜２５５の画素値を有する）、色度成分Ｃｒ及びＣｂはそれぞれ７ビット（０〜１２７の画素値を有する）とする。即ち、画像データｄ２においては、例えばある画素の色度成分Ｃｒ及びＣｂがともに値「０」であるときにはその画素は色度成分を有さず（即ち、色彩が無い）、Ｃｒ又はＣｂの少なくとも一方が値「０」でない場合にはその画素は色度成分を有する（即ち、色彩がある）であるとする。

第１マスクパターン生成部２３は、画像データｄ２において、色度成分Ｃｒ及びＣｂの少なくとも一方が「０」でない画素のＹ（輝度成分）、Ｃｒ、Ｃｂをローレベルの所定値に置き換えると共に、色度成分Ｃｒ及びＣｂの両方が「０」である画素のＹ、Ｃｒ、Ｃｂの全てをハイレベルの所定値に置き換える。このような処理を１枚の画像データｄ２の全ての画素に対して行うことにより、第１マスクパターンｍ１が生成される。具体的には、第１マスクパターンｍ１は、画像データｄ２内において色彩がない部分の画素値がハイレベルの値となり、色彩がある部分の画素値がローレベルの値となっているマスクパターンである。なお、一般的に、告知情報を示す文字は通常は白色のみで構成されている（即ち、色彩がない）。また、第１マスクパターンｍ１を用いてある画像データをマスク処理するときには、当該画像データをローレベルの値の部分でマスキングものとする。即ち、第１マスクパターンｍ１によりマスキング処理された画像データは、彩色がある部分が除去され、彩色が無い部分（つまり、白色の文字部分）のみが残ることになる。第１マスクパターン生成部２３は、生成した第１マスクパターンｍ１をマスキング処理部２５に供給する。

第２マスクパターン生成部２４は、フレームメモリ３５に記憶された画像データｄ５（例えば、画像データｄ２の１フレーム前／後の画像データ）と、デジタル・プログレッシブ変換部２２から取得した画像データｄ３とに基づいて、動き成分を検出して第２マスクパターンｍ２を生成する。具体的には、第２マスクパターン生成部２４は、画像データｄ３と画像データｄ５において同じ位置にある画素の画素値を比較し、Ｙ、Ｃｂ、Ｃｒのいずれかの画素値が変化したならば、その画素のＹ、Ｃｂ、Ｃｒの全てをローレベルの所定値に置き換える。一方、Ｙ、Ｃｂ、Ｃｒの画素値が変化していなければ、第２マスクパターン生成部２４は、その画素のＹ、Ｃｂ、Ｃｒ全てをハイレベルの所定値に置き換える。このような処理を１枚の画像データｄ３の全ての画素に対して行うことにより、第２マスクパターンｍ２が生成される。具体的には、第２マスクパターンｍ２は、画像データｄ３内において静止している部分の画素値がハイレベルの値となり、動きがあった部分の画素値がローレベルの値となっている。また、告知情報を示す文字は通常は静止している。第２マスクパターンｍ２を用いてある画像データをマスク処理するときには、当該画像データをローレベルの値の部分でマスキングする。即ち、第２マスクパターンによりマスキング処理された画像データは、動きのある部分が除去され、動きが無い部分（つまり、文字部分）のみが残ることになる。第２マスクパターン生成部２４は、生成した第２マスクパターンｍ２をマスキング処理部２５に供給する。なお、第２マスクパターン生成部２４は、現在取得した画像データｄ３を画像データｄ３１としてフレームメモリ３５に供給する。

マスキング処理部２５は、取得した画像データｄ４を、第１マスクパターンｍ１と第２マスクパターンｍ２を用いてマスキングする。具体的には、マスキング処理部２５は、色度成分に基づいて生成された第１マスクパターンｍ１と、動き成分に基づいて生成された第２マスクパターンｍ２とを用いて、画像データｄ４をマスキングして画像データｄ６を生成する。このマスキングは、ローレベルの値となっている部分を用いて行われる。言い換えると、ローレベルの値となっている部分が除去される。第１マスクパターンｍ１では色彩がある部分がローレベルの値となっており、第２マスクパターンｍ２では動きがあった部分がローレベルの値となっているため、マスキング処理部２５は、画像データｄ４において色彩がある部分及び動きがあった部分を除去することができる。告知情報を示す文字は色彩もなく静止しているため、マスキング処理後の画像データｄ６は、告知情報を示す文字のみが抽出された画像となる。マスキング処理部２５は、画像データｄ６をレベル変動部分抑圧処理部２６に供給する。

レベル変動部分抑圧処理部２６は、フレーム間において画素値の積分を行うことによって、画像データｄ６において画素値のレベルが変動した部分を抑圧する処理を行う。即ち、レベル変動部分抑圧処理部２６は、画像データｄ６中の静止した部分を精度よく抽出する処理を行う。これにより、画像データｄ６中の告知情報を示す文字を、確実に抽出することが可能となる。レベル変動部分抑圧処理部２６は、処理後の画像データｄ７を２値化処理部２７に供給する。

２値化処理部２７は、取得した画像データｄ７を適切なレベル値でスライスし、画像データｄ７を２値化する。告知情報を示す文字は通常は白色であるため輝度成分Ｙが大きい値を有しているので、このように２値化することにより、告知情報を示す文字が更に強調される。２値化処理部２７は、２値化処理した画像データｄ８を静止画キャプチャ部２８に供給する。

静止画キャプチャ部２８は、供給された画像データｄ８が所定時間以上継続して表示された静止画であったならば、その画像をキャプチャ（蓄積）する。具体的には、静止画キャプチャ部２８は、フレームメモリ３５から供給される画像データｄ９を参照して、２値化処理部２７から供給された画像データｄ８が、例えば３秒以上継続して放送されたものであるか否かを判定する。そして、静止画キャプチャ部２８は、当該画像データｄ８が３秒以上継続して放送されたものであった場合、当該画像データｄ８をキャプチャする。告知情報は通常は３秒以上継続して放送されるので、静止画キャプチャ部２８がこのような処理を行うことによって、告知情報を含まない画像データｄ８を後の処理対象から除去することができる。特に、静止画キャプチャ部２８は、一瞬光って画面全体が白くなった画像などを、効果的に除去することができる。静止画キャプチャ部２８は、キャプチャした画像を画像データｄ１０としてブロック境界・ブロックサイズ推定部２９に供給する。

ブロック境界・ブロックサイズ推定部２９は、取得した画像データｄ１０内に複数存在するブロックの境界及びサイズを推定する処理を行う。上記のブロックは仮想的なものであり、１つのブロック内には、告知情報を示す１つの文字が収められており、複数のブロック内に収められた文字が告知情報を示す文字列となる。詳しくは、１つのブロックは、告知情報を示す１つの文字の周囲を囲む長方形を示している。したがって、ブロック境界・ブロックサイズ推定部２９は、文字を囲む複数のブロックを決定して、このようなブロックの境界とサイズを推定することによって、画像データｄ１０内から大まかに文字を抽出する。なお、ブロック境界・ブロックサイズ推定部２９による処理の段階では、文字の塊が認識されるだけであり、ブロック内に収められた文字の内容は認識されない。

具体的には、ブロック境界・ブロックサイズ推定部２９は、画面を横方向に横切る第１サンプリングラインを用い、第１サンプリングラインを画面の上から下に向かって移動させながら黒色でない画素の座標を調べると共に、画面を縦方向に横切る第２サンプリングラインを用い、第２サンプリングラインを画面の左から右に向かって移動させながら黒色でない画素の座標を調べる。そして、ブロック境界・ブロックサイズ推定部２９は、求められた座標値を分析して、白色の画素を含むブロックの存在と、ブロックの高さ及び幅と、ブロックの間隔の規則性とを調べる。これにより、ブロック境界・ブロックサイズ推定部２９は、画像データｄ１０内に告知情報を示す文字が並んでいることを論理判断することができる。ブロック境界・ブロックサイズ推定部２９は、推定されたブロック境界・ブロックサイズに対応するデータをデータｄ１１としてパターンマッチング部３０に供給する。

パターンマッチング部３０は、供給されたデータｄ１２に基づいて、ブロック内に収められた文字を抽出して、抽出された文字に対してパターンマッチングを行う。具体的には、パターンマッチング部３０は、ブロック内に収められた文字に対して字母を用いてパターンマッチングする。そして、パターンマッチング部３０は、パターンマッチングした複数の文字を文字列化し、文字列化したデータｄ１２を文字列識別部３１に供給する。

文字列識別部３１は、取得したデータｄ１２に対応する文字列を文章解析により自動識別し、番組ごとのファイルに集積（保存）する。具体的には、文字列識別部３１は、告知情報を示す文字列を自動識別するごとに、１画面分のテキストファイルを作成し、このファイル内に文字列を保存する。

告知情報番組制作装置５０は、以上のように番組ごとのファイルに集積された文字列を、告知情報番組内で告知情報として放送する。具体的には、告知情報番組制作装置５０は、異なるファイルに集積された告知情報が異なるページに表示されるように放送を行う。この場合、告知情報番組制作装置５０は、最新のテレビ番組から収集された告知情報が先頭のページに表示されるように放送を行う。また、告知情報番組制作装置５０は、テレビ放送された時間が新しい番組から順に、告知情報が放送されるようにする。

以上のように制作された告知情報番組が視聴者に配信されることにより、視聴者がテレビ放送中又はラジオ放送中に告知情報を見逃したり、メモを取り損なったり、聞き損なったりしても、視聴者は告知情報番組を見ることによって告知情報を確実に取得することができる。これにより、視聴者は、告知情報を有効に利用することが可能となる。

また、告知情報番組制作装置５０が告知情報の収集と告知情報番組の制作とを自動的に行うので、告知情報番組の制作に要するコストを低減することができる。

なお、上記した画像データ取得部２１と、デジタル・プログレッシブ変換部２２と、第１マスクパターン生成部２３と、第２マスクパターン生成部２４と、マスキング処理部２５と、レベル変動部分抑圧処理部２６と、２値化処理部２７とによって行われる処理は、テレビ放送における画像表示と同じタイミングで、即ちリアルタイミングで、画像データの処理を行う。言い換えると、これらの処理部は、テレビ放送された動画像全てに対して処理を行う。

また、静止画キャプチャ部２８と、ブロック境界・ブロックサイズ推定部２９と、パターンマッチング部３０と、文字列識別部３１とによって行われる処理は、テレビ放送における画像表示と独立したタイミングで画像データの処理を行う。言い換えると、これらの処理部は、テレビ放送された動画像全てに対して処理を行わず、静止画キャプチャ部２８によってキャプチャされた静止画に対してのみ処理を行う。

（告知情報収集処理）
以下では、上記した告知情報番組制作装置５０が行う告知情報収集処理について、図６及び図７を用いて説明する。

図６は、告知情報収集処理を示すフローチャートである。ここでは、このフローチャートに対する説明を補足するために、具体的な画像を示す図７を参照しながら説明を行う。図７は、告知情報収集処理の途中における画像を示す図である。なお、図６に示すフローチャートは、主に、告知情報番組制作装置５０が、取得した画像データから告知情報を示す文字を収集するまでの処理を示したものである。

まず、ステップＳ１１では、画像データ取得部２１が、外部から、テレビ番組内で放送された画像データを取得する。例えば、図７（ａ）で示すような画像を、画像データ取得部２１が取得する。この画像は、街角の風景を撮影した画像であり、画面の下部分（灰色の帯状の領域）に「朝の街角」の文字が重ねられて表示されている。ステップＳ１１の処理が終了すると、処理はステップＳ１２に進む。

ステップＳ１２では、デジタル・プログレッシブ変換部２２が、画像データをデジタル・プログレッシブ信号に変換する。そして、処理はステップＳ１３に進む。

ステップＳ１３では、第１マスクパターン生成部２３が、画像データの色度成分Ｃｒ及びＣｂを検出して第１マスクパターンｍ１を生成すると共に、第２マスクパターン生成部２４が、画像データの動き成分を検出して第２マスクパターンｍ２を生成する。第１マスクパターンｍ１としては、例えば図７（ｂ）に示すような画像が得られる。第１マスクパターンｍ１は、画像データ内において色彩がない部分の画素値がハイレベルの値となり、色彩がある部分の画素値がローレベルの値となっている。告知情報を示す文字は通常は白色のみで構成されている（即ち、色彩がない）ため、第１マスクパターンｍ１においては、告知情報を示す文字はハイレベルの画素値になっている。また、告知情報を示す文字は通常は白色である（即ち、色彩がない）ため、第１マスクパターンｍ１においては、告知情報を示す文字はハイレベルの画素値を有する画像となっている。

図７（ｃ）に示す画像は図７（ａ）に示す画像から１フレーム分進んだ画像であり、第２マスクパターン生成部２４は、このような連続する画像の画素値を比較して動き検出を行う。第２マスクパターンｍ２としては、例えば図７（ｄ）に示すような画像が得られる。第２マスクパターンｍ２は、画像データ内において静止している部分の画素値がハイレベルの値となり、動きがあった部分の画素値がローレベルの値となっている。また、告知情報を示す文字は通常は静止しているため、第２マスクパターンｍ２においては、告知情報を示す文字はハイレベルの画素値になっている。ステップＳ１３の処理が終了すると、処理はステップＳ１４に進む。

ステップＳ１４では、マスキング処理部２５が、第１マスクパターンｍ１と第２マスクパターンｍ２を用いて画像データに対してマスキング処理を行う。図７（ｅ）は、図７（ｂ）に示した第１マスクパターンｍ１と、図７（ｄ）に示した第２マスクパターンｍ２とを用いて、図７（ａ）に示す元の画像をマスキングした画像である。マスキング処理部２５は、ローレベルの値となっている部分を用いて画像データをマスクキングし、ローレベルな値となっている部分を除去する処理を行う。したがって、第１マスクパターンｍ１では色彩がある部分の画素値がローレベルな値となっており、第２マスクパターンｍ２では動きがあった部分の画素値がローレベルな値となっているため、マスキング後の画像データは、色彩がある部分及び動きがあった部分が除去される。例えば、図７（ｅ）に示すように、マスキング後の画像は、色彩のある部分及び動きがあった部分が黒くなっており（即ち、除去されている）、色彩がない部分及び動きがなかった部分が白くなっていることがわかる。また、告知情報を示す文字は白色であるため、背景画像に対して浮き出ていることがわかる。以上の処理が終了すると、処理はステップＳ１５に進む。

ステップＳ１５では、レベル変動部分抑圧処理部２６が、フレーム間において画素値の積分を行うことによって、画像データにおいて画素値のレベルが変動した部分を抑圧する処理を行う。そして、処理はステップＳ１６に進む。

ステップＳ１６では、２値化処理部２７が、画像データを適切なレベル値でスライスして、２値化の画像データを生成する。図７（ｆ）は、２値化された画像データの例である。告知情報を示す文字は通常は白色であるため輝度成分Ｙが大きい値を有しているので、２値化された画像においては、告知情報を示す文字のみが浮き出た画像となっている。以上の処理が終了すると、処理はステップＳ１７に進む。

ステップＳ１７では、静止画キャプチャ部２８が、フレームメモリ３５を参照して、画像データが所定時間（例えば３秒）以上継続して表示された画像であるか否かを判定する。通常、告知情報は継続して表示されるので、上記のような判定を行うことにより、処理している画像に告知情報が含まれているか否かを判別することができる。これにより、静止画キャプチャ部２８は、告知情報を含まない画像データを後の処理対象から除去することができる。特に、静止画キャプチャ部２８は、一瞬光って画面全体が白くなった画像などを、効果的に除去することができる。画像データが所定時間以上継続して表示された画像である場合（ステップＳ１７；Ｙｅｓ）は、この画像には告知情報が含まれているので、処理はステップＳ１８に進む。一方、画像データが所定時間以上継続して表示されていない画像である場合（ステップＳ１７；Ｎｏ）は、この画像には告知情報が含まれていないため、処理は当該フローを抜ける。

ステップＳ１８では、静止画キャプチャ部２８が、所定時間以上継続して表示された判定された画像データをキャプチャする。そして、処理はステップＳ１９に進む。

ステップＳ１９では、ブロック境界・ブロックサイズ推定部２９が、画像データ内に複数存在するブロックの境界及びサイズを推定する処理を行う。ブロック境界・ブロックサイズ推定部２９は、告知情報を示す文字を囲む複数のブロックを決定し、このようなブロックの境界とサイズを推定することによって、画像データから大まかに文字を抽出する。詳しくは、ブロック境界・ブロックサイズ推定部２９は、告知情報を含むブロックの存在と、ブロックの高さ及び幅と、ブロックの間隔の規則性とを調べて、画像データ内に告知情報を示す文字が並んでいることを論理判断する。図７（ｇ）は、ブロック境界・ブロックサイズ推定部２９によって決定された、告知情報を示す文字が収められたブロックを示している。１つのブロックは、告知情報を示す１つの文字の周囲を囲む長方形を示している。この１つのブロック内には、告知情報を示す１つの文字が収められており、複数のブロック内に収められた文字を合わせると告知情報を示す文字列となる。以上の処理が終了すると、処理はステップＳ２０に進む。

ステップＳ２０では、パターンマッチング部３０が、上記のブロック内に収められた文字を抽出して、抽出された文字に対して字母を用いてパターンマッチングを行う。また、パターンマッチング部３０は、パターンマッチングした複数の文字を文字列化する。そして、処理はステップＳ２１に進む。

ステップＳ２１では、文字列識別部３１が、上記の文字列を文章解析により自動識別し、番組ごとのファイルに集積する。そして、処理は当該フローを抜ける。

このように収集された告知情報が視聴者に配信されることにより、視聴者がテレビ放送中又はラジオ放送中に告知情報を見逃したり、メモを取り損なったり、聞き損なったりしても、視聴者は告知情報番組を見ることによって告知情報を確実に取得することができる。これにより、視聴者は、告知情報を有効に利用することが可能となる。

なお、上記では、告知情報番組制作装置５０が、告知情報を示す文字が重ねられた画像データから告知情報を収集する処理を行うものを示したが、告知情報の収集方法はこれに限定はされない。他の例では、告知情報番組制作装置５０は、デジタルテレビ放送においてクローズドキャプションとして伝送される字幕信号から告知情報を収集してもよい。更に他の例では、告知情報番組制作装置５０は、デジタルデータ放送においてＤＳＭ−ＣＣ（Digital Storage Media Command and Control）カルーセルで伝送されるＢＭＬ文書から告知情報を収集してもよい。

なお、上記では、告知情報番組制作装置５０が、テレビ放送におけるデジタル画像データに対して処理を行うものについて示したが、これに限定はされない。他の例では、告知情報番組制作装置５０は、アナログテレビ放送において、文字放送のクローズドキャプションとして伝送される字幕信号から告知情報を収集してもよい。更に他の例では、告知情報番組制作装置５０は、ラジオ放送において、音声信号から音声認識によって告知情報を収集してもよい。

なお、告知情報番組制作装置５０がテレビ放送又はラジオ放送から告知情報を収集することが困難であった場合、放送局側の人間などが告知情報を直接収集してもよい。この場合、告知情報番組制作装置５０は、このように収集された告知情報から告知情報番組を制作して、これを放送する。

本実施形態に係る告知情報番組放送システムの概略構成を示す図である。 告知情報番組で放送される画像の具体例を示す図である。 告知情報番組の放送順序を示すタイムチャートである。 告知情報の放送順序の基本概念を示す図である。 告知情報番組制作装置の概略構成を示すブロック図である。 告知情報収集処理を示すフローチャートである。 告知情報収集処理の途中における画像を示す図である。

符号の説明

１ 放送局
２ 携帯電話向けサーバ
３ 視聴者
５ リモコン
６ 携帯電話
７ａ デジタルテレビ
７ｂ、７ｃ アナログテレビ
５０ 告知情報番組制作装置

Claims (10)

1. 複数のテレビ番組に対応するテレビ放送用の情報から、文字列を含みテレビ番組中に放送される告知情報を収集する収集手段と、
   収集した告知情報に含まれる文字列を、テレビ番組毎に１又は複数のページに配置して複数の告知情報ページを作成する告知情報ページ作成手段と、
   前記複数のテレビ番組が放送される時間順に従い、時間的に先に放送されるべきテレビ番組に対応する告知情報ページほど先頭ページよりに位置するように前記複数の告知情報ページを配列して告知情報番組を制作する制作手段と、
   を備えることを特徴とする告知情報番組制作装置。
2. 前記テレビ放送用の情報は画像データを含み、
   前記収集手段は、
   前記画像データの色度成分に基づいて第１マスク画像を作成する第１マスク画像生成手段と、
   前記画像データの動き成分に基づいて第２マスク画像を作成する第２マスク画像生成手段と、
   前記第１マスク画像及び前記第２マスク画像を用いて、前記画像データをマスキングするマスキング処理手段と、
   前記マスキング後の画像データを２値化する２値化処理手段と、
   前記２値化後の画像データ内において、前記告知情報が収容されるブロックの境界及びサイズを推定する推定手段と、
   前記推定されたブロック内のデータに対してパターンマッチングし、前記ブロック内のデータを文字列にするパターンマッチング手段と、
   前記文字列を識別して、前記番組ごとに当該文字列を集積する文字列識別手段と、を備えていることを特徴とする請求項１に記載の告知情報番組制作装置。
3. 前記テレビ放送用の情報はデジタルテレビ放送用の情報であり、
   前記収集手段は、前記デジタルテレビ放送用の情報中のクローズドキャプションとして伝送される字幕信号から前記告知情報を収集することを特徴とする請求項１に記載の告知情報番組制作装置。
4. 前記テレビ放送用の情報はデジタルデータ放送用の情報を含み、
   前記収集手段は、前記デジタルデータ放送用の情報に含まれるＢＭＬ文書から前記告知情報を収集することを特徴とする請求項１に記載の告知情報番組制作装置。
5. 告知情報番組制作装置によって実行される告知情報番組制作方法であって、
   複数のテレビ番組に対応するテレビ放送用の情報から、文字列を含みテレビ番組中に放送される告知情報を収集する収集工程と、
   収集した告知情報に含まれる文字列を、番組毎に１又は複数のページに配置して複数の告知情報ページを作成する告知情報ページ作成工程と、
   前記複数のテレビ番組が放送される時間順に従い、時間的に先に放送されるべきテレビ番組に対応する告知情報ページほど先頭ページよりに位置するように前記複数の告知情報ページを配列して告知情報番組を制作する制作工程と、
   を備えることを特徴とする告知情報番組制作方法。
6. コンピュータを備える告知情報番組制作装置により実行され、
   複数のテレビ番組に対応するテレビ放送用の情報から、文字列を含みテレビ番組中に放送される告知情報を収集する収集手段、
   収集した告知情報に含まれる文字列を、テレビ番組毎に１又は複数のページに配置して複数の告知情報ページを作成する告知情報ページ作成手段、
   前記複数のテレビ番組が放送される時間順に従い、時間的に先に放送されるべきテレビ番組に対応する告知情報ページほど先頭ページよりに位置するように前記複数の告知情報ページを配列して告知情報番組を制作する制作手段、
   として前記コンピュータを機能させることを特徴とする告知情報番組制作プログラム。
7. 複数の番組に対応するテレビ放送用の情報に基づいて、予め決められた時間スケジュールに従って、各テレビ番組を放送するテレビ番組放送装置と、
   請求項１に記載の告知情報番組制作装置と、
   前記告知情報番組制作装置が制作した告知情報番組を放送する告知情報番組放送装置と、を備えることを特徴とする放送システム。
8. 前記告知情報番組放送装置は、前記テレビ番組放送装置により１つのテレビ番組の放送が終了するたびに、当該テレビ番組に対応する告知情報ページを追加した告知情報番組を放送することを特徴とする請求項７に記載の放送システム。
9. 前記告知情報番組は、先頭位置に表紙ページを含み、
   前記告知情報番組放送装置は、最初のテレビ番組の放送が終了するまでの間は、前記表紙ページのみを含む告知情報番組を放送することを特徴とする請求項８に記載の放送システム。
10. 前記告知情報番組放送装置は、前記テレビ放送装置により既に放送が終了したテレビ番組に対応する告知情報ページを含む告知情報番組を放送することを特徴とする請求項８又は９に記載の放送システム。

Images