JP4710350B2

JP4710350B2 - Ｃｍ付加情報供給方法、ｃｍ付加情報供給装置、ｃｍ付加情報受給装置及びｃｍ付加情報供給システム

Info

Publication number: JP4710350B2
Application number: JP2005047799A
Authority: JP
Inventors: 理中村; 素嗣安部
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2005-02-23
Filing date: 2005-02-23
Publication date: 2011-06-29
Anticipated expiration: 2025-02-23
Also published as: JP2006237878A

Description

本発明は、ＣＭ付加情報供給装置からネットワークを介してＣＭ付加情報受給装置にコマーシャルメッセージの付加情報の供給を行うＣＭ付加情報供給方法、ＣＭ付加情報供給装置、ＣＭ付加情報受給装置及びＣＭ付加情報供給システムに関する。

従来、テレビジョン放送では、消費者に対する有効な広告手段として、コマーシャルメッセージ（以下ＣＭとする）を番組本編と共に放送している。ところが、一般的にＣＭには時間的制約があり、商品やサービスの情報を十分に消費者に提供できているとは言い難い。それを補うため、店頭にて商品を展示したり、カタログを頒布したりしている。又、現在ではインターネットが一般的に普及しているため、自らのＷｅｂサイトを設け、そこで情報提供を行っている企業も少なくない。一方、消費者としても、ＣＭの商品、登場する俳優、使われている楽曲など、放送されたＣＭに関する情報を得たいという欲求があり、店頭で実際に商品を見るだけでなく、カタログや、インターネット等を利用している。

しかしながら、現状、テレビジョン放送にて放送されたＣＭを視聴した消費者が、そのＣＭに関連する情報を得るためには、そのＣＭの企業名や商品名を書き留め、店頭や、インターネット等で改めて調べる必要がある。インターネットが普及している現在では様々な情報を間単に検索できる環境が整っているものの、改めて検索するという作業は煩雑な作業であり、そもそも短いＣＭの中で検索に必要なキーワード等の情報を得ることができるか否かという問題も存在する。

このような煩雑さを解消するため、例えば、放送されたＣＭの履歴をサーバにて逐次作成し、ユーザはＣＭが放送された時刻と放送チャネルをそのサーバに送信することでＣＭに関する情報を取得できる方法が提案されている（例えば、特許文献１参照）。

また、入力信号から所定の時間間隔で発生する信号の特徴的パターンに基づいて、第１の信号の候補区間を検出し、その候補区間内又はその前後の入力信号から第１の信号らしさを表わす特徴量を抽出し、その特徴量に基づき第１の信号の区間を検出することにより、例えば、ＴＶ放送信号に含まれるコマーシャルメッセージ部分を高精度に検出又は検索可能とする方法が提案されている（例えば、特許文献２参照）。

さらに、記録された映像信号及び／又は音響信号から、ユーザの所望の再生位置を検索して再生するための手法として、映像信号及び／又は音響信号を記録する際に、その特徴ベクトルについても記録し、また、記録された映像信号及び／又は音響信号を再生する際に、例えばユーザが指定する信号位置に対応する特徴ベクトルを登録しておき、記録手段に記録されている特徴ベクトルから、登録された特徴ベクトルの少なくとも１つとの相関値が所定の閾値を超える特徴ベクトルを検出し、その検出された特徴ベクトルに基づいて再生点を設定して当該再生点から映像信号及び／又は音響信号を再生する方法が提案されている（例えば、特許文献３参照）。

特開２００２−１０２３７号公報特開２００２−１６８７３号公報特開２００３−３３９０１０号公報

しかしながら、上記特許文献１に示されているような従来の方法では、ＣＭの問い合わせをそのＣＭが放送された時刻と放送チャネルに頼っているため、ＣＭが放送された時刻と放送チャネルが分からない場合は適用できない。例えば、録画番組を再生して視聴している場合、ユーザがＣＭを視聴する時刻と実際にＣＭが放送された時刻が異なるという問題がある。又、全ての放送局の履歴をサーバにて把握することは現実問題として難しいという問題もある。

そこで、本発明の目的は、上述の如き従来の問題点に鑑み、ＣＭ自体の特徴をもってＣＭに関する情報を問い合わせることができるようにすることにある。

本発明の更に他の目的、本発明によって得られる具体的な利点は、以下に説明される実施の形態の説明から一層明らかにされる。

本発明は、ＣＭ付加情報供給装置からネットワークを介してＣＭ付加情報受給装置にコマーシャルメッセージの付加情報の供給を行うＣＭ付加情報供給方法であって、ＣＭ付加情報供給装置が、テレビジョン放送からコマーシャルメッセージを検出し、検出したコマーシャルメッセージの特徴量を算出し、ネットワークに接続された特定又は不特定の者に対してコマーシャルメッセージの付加情報の入力を求め、算出したコマーシャルメッセージの特徴量と該コマーシャルメッセージの付加情報とを対応付けたデータベースを作成しておき、ＣＭ付加情報受給装置からネットワークを介して送られてくるコマーシャルメッセージの付加情報の送信要求に応じて、コマーシャルメッセージの特徴量をキーとしてデータベース内を検索し、データベースから検索された特徴量のコマーシャルメッセージの付加情報を読み出して上記ネットワークを介してＣＭ付加情報受給装置に送信し、
ＣＭ付加情報受給装置が、ネットワークを介して受信したコマーシャルメッセージの付加情報と該コマーシャルメッセージの特徴量とを対応付けたデータベースに格納する。

また、本発明は、ネットワークを介してＣＭ付加情報受給装置にコマーシャルメッセージの付加情報を供給するＣＭ付加情報供給装置であって、テレビジョン放送を受信するテレビジョン放送受信手段と、上記テレビジョン放送受信手段により受信されたテレビジョン放送からコマーシャルメッセージを検出し、検出したコマーシャルメッセージの特徴量を算出し、ネットワークに接続された特定又は不特定の者に対してコマーシャルメッセージの付加情報の入力を求め、算出したコマーシャルメッセージの特徴量と該コマーシャルメッセージの付加情報とを対応付けてデータベースに格納しておき、ＣＭ付加情報受給装置からネットワークを介して送られてくるコマーシャルメッセージの付加情報の送信要求に応じて、コマーシャルメッセージの特徴量をキーとして上記データベース内を検索し、検索された特徴量のコマーシャルメッセージの付加情報を上記データベースから読み出して上記ネットワークを介して上記ＣＭ付加情報受給装置に送信して、該ＣＭ付加情報受給装置に受給した付加情報と該コマーシャルメッセージの特徴量とを対応付けたデータベースに格納させる制御を行う制御手段とを備える。

さらに、本発明は、ＣＭ付加情報供給装置からネットワークを介してＣＭ付加情報受給装置にＣＭ付加情報の供給を行うＣＭ付加情報供給システムであって、ＣＭ付加情報供給装置は、テレビジョン放送を受信するテレビジョン放送受信手段と、上記テレビジョン放送受信手段により受信されたテレビジョン放送からコマーシャルメッセージを検出し、検出したコマーシャルメッセージの特徴量を算出し、ネットワークに接続された特定又は不特定の者に対してコマーシャルメッセージの付加情報の入力を求め、算出したコマーシャルメッセージの特徴量と該コマーシャルメッセージの付加情報とを対応付けてデータベースに格納しておき、ＣＭ付加情報受給装置からネットワークを介して送られてくるコマーシャルメッセージの付加情報の送信要求に応じて、コマーシャルメッセージの特徴量をキーとして上記データベース内を検索し、検索された特徴量のコマーシャルメッセージの付加情報を上記データベースから読み出して上記ネットワークを介して上記ＣＭ付加情報受給装置に送信する制御を行う制御手段とを備え、ＣＭ付加情報供給装置は、テレビジョン放送を受信するテレビジョン放送受信手段と、上記テレビジョン放送受信手段により受信されたテレビジョン放送からコマーシャルメッセージを検出し、検出したコマーシャルメッセージの特徴量を算出し、該コマーシャルメッセージの特徴量をＣＭ付加情報供給装置にデータベースの検索キーとしてネットワークを介して送信して、上記ＣＭ付加情報供給装置からネットワークを介してコマーシャルメッセージの付加情報を受給し、受給した付加情報と該コマーシャルメッセージの特徴量とを対応付けたデータベースに格納する制御を行う制御手段とを備える。

本発明では、ＣＭの付加情報をネットワーク上のサーバから取得する際に、ＣＭを特定するための情報としてＣＭの映像の代わりにその特徴量を用いることによって、ユーザからサーバに送信するデータ量を大幅に削減することが可能となると同時に、サーバ内でのデータベースの検索処理も大幅に高速化が可能となる。

また、本発明では、ＣＭの付加情報をネットワーク上のサーバから取得する際に、ＣＭを特定するための情報としてＣＭの映像の代わりにその特徴量を用いることによって、ＣＭの映像そのものを送信する必要がなくなるため、著作物であるＣＭを複製する必要がなくなり、権利上の問題が発生し難いという効果がある。

また、本発明では、ＣＭの付加情報をネットワーク上のサーバから取得した際に、取得した付加情報をユーザが使用する録画再生装置内のデータベース内に登録することによって、次に同じＣＭの付加情報を必要になった場合に、再度サーバに問い合わせる必要がないため、即座に付加情報をユーザに提示できる。又、ネットワークに接続されていない状態でもその付加情報を利用できる。

さらに、本発明では、ＣＭの付加情報をネットワーク上の情報入力者が入力する構成とすることによって、様々な情報を迅速に集めることが可能となる。

以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、本発明は以下の例に限定されるものではなく、本発明の要旨を逸脱しない範囲で、任意に変更可能であることは言うまでもない。

本発明は、例えば図１に示すような構成の情報提供システム１００に適用される。

図１は、情報提供システム１００全体の接続状態を示す概念図である。

この情報提供システム１００は、インターネット１０１に接続された複数のユーザ１０２_１，・・・１０２_ｎ及びＣＭ情報サーバ１０３と、テレビジョン放送を送信する放送局１０６からなる。

ＣＭ情報サーバ１０３はサーバ１０４とデータベース１０５からなり、サーバ１０４により放送局１０６から放送されるテレビジョン放送を受信し、受信したテレビジョン放送からＣＭを検出し、新規のＣＭが放送された場合、そのＣＭをデータベース１０５に登録する。サーバ１０４の管理者は新規に登録されたＣＭの企業名や商品名、楽曲や出演俳優などの付加情報（以下ＣＭ付加情報とする）を収集しデータベース１０５に登録する。ユーザ１０２_１，・・・１０２_ｎは放送局１０６から放送されるテレビジョン放送を受信し、録画すると同時に受信したテレビジョン放送からＣＭを検出し、新規のＣＭが放送された場合、そのＣＭの付加情報をＣＭ情報サーバ１０３に問い合わせる。サーバ１０４は、問い合わせられたＣＭをデータベース１０５内で検索し、検索結果をユーザに通知する。

ユーザ１０２_１，・・・１０２_ｎ（以下まとめてユーザ１０２という）が、インターネット１０１を経由してＣＭ情報サーバ１０３にＣＭ付加情報を問い合わせる際、ユーザ１０２側からサーバ１０４側に送信するデータは、ＣＭの映像（画像と音声）そのものではなく、ＣＭの映像の特徴量とする。近年では映像圧縮技術が進歩しており、非圧縮の場合と比較して小さなデータ量で映像を表現することが可能である。しかしながら、映像データは依然としてデータ量が多く、映像データそのものを検索のために送信することは非現実的である。又、ＣＭの映像にも著作権等の権利があり、ＣＭを送信することは権利上の問題が発生する可能性がある。そこで、ＣＭの映像から、そのＣＭの特徴を表現する特徴量を抽出し、その特徴量を映像の代わりに用いる。つまり、特徴量とはもとの映像よりもデータサイズが極めて小さく、かつ、元の映像を区別できるだけの独立性を持つものとする。そのような特徴量の例としては、上記特許文献３にて公開されている映像信号の所定時間区間内における少なくとも１枚のフレームの平均画像の画素値をベクトル化したものの時系列や、上記平均画像を所定のブロック単位の小画像に分割し、当該小画像の画素値をベクトル化したものの時系列などがある。

ここで、ＣＭ付加情報を提供するＣＭサーバ１０３の概念構成を図２のブロック図に示す。

すなわち、ＣＭサーバ１０３は、図１ではサーバ１０４とデータベース１０５を合わせたものに該当し、テレビジョン放送を受信する放送受信部２０１、テレビジョン放送の映像信号やチャネル情報、放送モード情報等映像信号に付随する情報が上記放送受信部２０１から供給される制御部２０２、この制御部２０２に接続された記憶部２０３、データベース２０４、ネットワーク制御部２０５、出力制御部２０６及び入力制御部２０７などからなる。

放送受信部２０１はテレビジョン放送を受信し、映像信号やチャネル情報、放送モード情報等映像信号に付随する情報を制御部２０２へ送る。

制御部２０２は、放送受信部２０１から得た映像信号からＣＭを検出するためのプログラムを記憶部２０３から読み出し、ＣＭ検出を開始する。このＣＭ検出を行うための方法は、例えば特許文献２に詳しく記載されている方法が適用可能である。例えばＴＶ放送信号の本編とコマーシャルメッセージ部分のように、本編信号とコマーシャルメッセージ信号（第１の信号）よりなるＴＶ放送信号の音声及び／又は映像信号から、所定の必須条件に基づき、信号が特徴的パターンを示すＣＭ候補区間を抽出し、それらＣＭ候補区間に対して、幾つかの特徴からＣＭらしさを表わす指標である付加条件を検出し、抽出した付加条件を総合してＣＭの判定を行うことにより、精度良く個々のＣＭの検出を行う。また、上記検出する付加条件の一部又は全部を記録し、ＴＶ放送信号や記録された他のＣＭ候補と比較することより、ＴＶ放送信号又はそれが記録されたデータベースから所望のＣＭを検索することもできる。但し、必ずしもこの方法でなくとも、ＣＭ一つ一つを正確に検出することができる方法であれば良い。

制御部２０２がＣＭを検出した場合、その検出されたＣＭが既にデータベース２０４に登録済みか否か検索するためのプログラムを記憶部２０３から読み出し、データベース２０４内を検索する。検出されたＣＭと同じＣＭがデータベース内に見つからなかった場合は、制御部２０２は検出されたＣＭの映像とその特徴量をデータベース２０４に登録する。データベース２０４に登録されるＣＭは、例えば、図３に示すような付加情報登録待ちＣＭリストと付加情報登録済みＣＭリストが考えられる。制御部２０２は、新たに登録するＣＭをまず付加情報登録待ちＣＭリストに登録し、サーバ管理者にその旨を伝える。伝える方法は、例えば、出力制御部２０６にて図示しないモニタ等外部出力部にその旨のメッセージを表示することで行う。例えば、表示画面は、図１３のように、付加情報登録待ちＣＭリストに登録されているＣＭの一覧を画面に並べて表示する形式とする。サーバ管理者は画面下部の「前の候補」ボタンや「次の候補」ボタンを操作することで、付加情報登録待ちＣＭリスト内のＣＭを次々に確認することができる。付加情報登録待ちＣＭリストに新たにＣＭが登録されたことを知った管理者は、データベース２０４に記憶されているそのＣＭの映像を確認し、企業名や商品名や俳優など、そのＣＭの付加情報となる情報を図示しない手段によって収集し、図示しないキーボード等の外部入力部を用いてＣＭサーバ１０３に入力する。例えば、管理者が付加情報を入力する際の表示画面は、図１４のように、付加情報の項目と入力欄１４０２〜１４０５を画面に並べて表示する形式とする。サーバ管理者は、各項目の入力欄１４０２〜１４０５に情報を入力する。制御部２０２は入力された付加情報を入力制御部２０７経由で取得し、データベース２０４に登録する。例えば図３に示すような付加情報登録待ちＣＭリスト内のＣＭで付加情報が入力されたＣＭは、付加情報登録待ちＣＭリストから付加情報登録済みＣＭリストに移される。

ユーザ１０２からのＣＭ付加情報の問い合わせは、制御部２０２がネットワーク制御部２０５経由で受け付ける。ユーザ１０２から送信されてくるＣＭを特定するための情報は、そのＣＭの特徴量である。制御部２０２は、問い合わせのＣＭがデータベース２０４に登録されているか否か検索するためのプログラムを記憶部２０３から読み出し、データベース２０４内を検索する。問い合わせのＣＭが付加情報登録済みＣＭリスト内に見つかった場合は、そのＣＭの付加情報を、見つからなかった場合は見つからなかったということを、ネットワーク制御部２０５を経由してユーザ１０２に送信する。

ここで、上記ＣＭサーバ１０３における制御部２０２による新規ＣＭの登録処理について、図４に示すフローチャートを参照して説明する。

すなわち、新規ＣＭの登録処理では、先ずステップＳ４０１においてテレビジョン放送を受信する。放送がアナログの場合は、デジタル化しておく。

ステップＳ４０２では、受信したテレビジョン放送の映像信号からＣＭを検出する。

ステップＳ４０３では、ステップＳ４０２でＣＭが検出されたか否かを判定する。このステップＳ４０３における判定結果がＹｅｓ、すなわち、ＣＭが検出された場合は、ステップＳ４０４へ進み、また、判定結果がＮｏ、すなわち、ＣＭが検出されなかった場合は、ステップＳ４０１へ戻る。

ステップＳ４０４では、検出されたＣＭから特徴量を求め、その特徴量によってデータベース２０４内を検索し、上記検出されたＣＭが既にデータベース２０４に登録されているか否かを判定する。このステップＳ４０４における判定結果がＮｏ、すなわち、検出されたＣＭと同じＣＭがデータベース２０４に登録されていなかった場合は、ステップＳ４０５へ進み、また、判定結果がＹｅｓ、すなわち、既に登録されていた場合は、ステップＳ４０１へ戻る。

ステップＳ４０５では、検出されたＣＭの映像とその特徴量をデータベース２０４内の付加情報登録待ちＣＭリストに登録する。登録後は、ステップＳ４０１へ戻って処理を続ける。

次に、上記ＣＭサーバ１０３におけるデータベース２０４内の付加情報登録待ちＣＭリストに対する処理について、図５に示すフローチャートを参照して説明する。

すなわち、付加情報登録待ちＣＭリストに対する処理では、先ず、ステップＳ５０１において、データベース２０４内の付加情報登録待ちＣＭリストに新たなＣＭが登録されているか否かを判定する。そして、このステップＳ５０１における判定結果がＹｅｓ、すなわち、新たなＣＭが登録されている場合は、ステップＳ５０２へ進み、また、判定結果がＮｏ、すなわち、登録されていない場合は、処理を終了する。

ステップＳ５０２では、付加情報登録待ちＣＭリストに登録されているＣＭをサーバ管理者に提示する。提示処理は、例えば、制御部２０２がデータベース２０４内の付加情報登録待ちＣＭリストを出力制御部２０６を経由して図示しないモニタ等の外部出力部に表示することによって行う。外部出力部に表示される画面は、例えば、図１３のように付加情報登録待ちＣＭリスト内のＣＭを一覧で表示するような構成である。

次のステップＳ５０３では、付加情報登録待ちＣＭリストを確認した管理者が図示しない方法によって収集した付加情報を、キーボード等の外部入力部によって入力する。入力処理は、例えば、制御部２０２が入力制御部２０７を経由して図示しないキーボード等の外部入力部から入力された付加情報を制御部２０２がデータベース２０４内の付加情報登録待ちＣＭリストの該当ＣＭと関連付けることによって行う。入力処理の際、入力を支援するためにモニタ等の外部出力部に表示する画面は、例えば、図１４のような、付加情報の項目とその入力欄１４０２〜１４０５を並べて表示する構成である。

さらに、ステップＳ５０４では、付加情報が入力されたＣＭを付加情報登録待ちＣＭリストから付加情報登録済みＣＭリストに移動し、処理を終了する。

なお、図５に示す一連の処理は、新規のＣＭがデータベースに登録されるたびに開始される設定でも良いし、時間を決めて、例えば１時間ごとに開始される設定でも良いし、もしくは、管理者が開始を指示する設定でも良い。

次に、上記ＣＭサーバ１０４におけるユーザ１０２からのＣＭ付加情報問い合わせに対する処理について、図６に示すフローチャートを参照して説明する。

すなわち、ユーザ１０２からのＣＭ付加情報問い合わせに対する処理では、先ず、ステップＳ６０１において、ユーザ１０２からのＣＭ付加情報問い合わせがあるか否かを判定する。そして、ステップＳ６０１における判定結果がＹｅｓ、すなわち、問い合わせがある場合は、ステップＳ６０２へ進み、また、判定結果がＮｏ、すなわち、問い合わせがない場合は、ステップＳ６０１へ戻る。

ステップＳ６０２では、ユーザ１０２より送信されたＣＭの特徴量にてデータベース２０４内の付加情報登録済みＣＭリスト内を検索する。検索処理は、例えば、制御部２０２がネットワーク制御部２０５を経由して問い合わせＣＭの特徴量を受け取り、その特徴量でデータベース２０４内の付加情報登録済みＣＭリストを検索することによって行う。

次のステップＳ６０３では、問い合わせＣＭの特徴量と一致する特徴量を持つＣＭがデータベース内に見つかったか否かを判定する。このＳ６０３における判定結果がＹｅｓ、すなわち、見つかった場合は、ステップＳ６０４へ進み、また、判定結果がＮｏ、すなわち、見つからなかった場合は、ステップＳ６０５へ進む。

ステップＳ６０４では、見つかったＣＭの付加情報をＣＭ付加情報問い合わせ元のユーザ１０２に送信し、ステップＳ６０１へ戻る。

また、ステップＳ６０５では、ＣＭ付加情報が見つからなかったことを伝える情報をＣＭ付加情報問い合わせ元ユーザ１０２に送信し、ステップＳ６０１へ戻る。ＣＭ付加情報問い合わせ元ユーザ１０２への情報の送信処理は、例えば、制御部２０２がネットワーク制御部２０５を経由してユーザ１０２に送信することによって行う。

次に、ＣＭ付加情報を利用する録画再生装置７００の概念構成を図７のブロック図に示す。

この録画再生装置７００は、テレビジョン放送を受信する放送受信部７０１、上記放送受信部７０１から映像信号が供給される制御部７０２、この制御部７０２に接続された記憶部７０３、データベース７０４、ネットワーク制御部７０５、出力制御部７０６、入力制御部７０７及び映像記憶部７０８などからなる。

放送受信部７０１はテレビジョン放送を受信し、出力制御部７０６を経由して受信した映像を図示しないモニタ等外部出力部に出力する。ユーザは、この外部出力部によって受信している放送番組を視聴する。

テレビジョン放送の録画を行う場合は、キーボードやマウスやリモコン等、図示しない外部入力部によってユーザが指示を入力し、制御部７０２は入力制御部７０７を経由してその入力を受け取る。

制御部７０２はユーザより指示された放送チャネルの放送番組を放送受信部７０１から得て、映像記憶部７０８に記憶する。同時に、制御部７０２は、放送受信部７０１から得た映像信号からＣＭを検出するためのプログラムを記憶部７０３から読み出し、ＣＭ検出を開始する。

このＣＭ検出を行うための方法は、例えば特許文献２に詳しく記載されている方法が適用可能である。例えばＴＶ放送信号の本編とコマーシャルメッセージ部分のように、本編信号とコマーシャルメッセージ信号（第１の信号）よりなるＴＶ放送信号の音声及び／又は映像信号から、所定の必須条件に基づき、信号が特徴的パターンを示すＣＭ候補区間を抽出し、それらＣＭ候補区間に対して、幾つかの特徴からＣＭらしさを表わす指標である付加条件を検出し、抽出した付加条件を総合してＣＭの判定を行うことにより、精度良く個々のＣＭの検出を行う。また、上記検出する付加条件の一部又は全部を記録し、ＴＶ放送信号や記録された他のＣＭ候補と比較することより、ＴＶ放送信号又はそれが記録されたデータベースから所望のＣＭを検索することもできる。但し、必ずしもこの方法でなくとも、ＣＭ一つ一つを正確に検出することができる方法であれば良い。

制御部７０２がＣＭを検出した場合、その検出されたＣＭが既にデータベース７０４に登録済みか否か検索するためのプログラムを記憶部７０３から読み出し、データベース７０４内を検索する。検出されたＣＭと同じＣＭがデータベース内に見つからなかった場合は、制御部７０２は検出されたＣＭの映像（及び／又は、ＣＭの映像の記録位置）とその特徴量をデータベース７０４に登録する。データベース７０４に登録されるＣＭは、例えば、図３に示すような付加情報登録待ちＣＭリストと付加情報登録済みＣＭリストが採用される。制御部７０２は、新たに登録するＣＭをまず付加情報登録待ちＣＭリストに登録する。

録画番組をユーザが視聴する場合は、キーボードやマウスやリモコン等、図示しない外部入力部によってユーザが指示を入力し、制御部７０２は入力制御部７０７を経由してその入力を受け取る。制御部７０２はユーザより指示された録画番組を映像記憶部７０８から読み取り、出力制御部７０６を経由して図示しないモニタ等外部出力部に出力する。ユーザはこれによって録画番組を視聴することができる。

ユーザがテレビジョン放送番組を視聴中、及び／又は、録画番組を視聴中、ＣＭに関しての付加情報を取得したくなった場合は、キーボードやマウスやリモコン等、図示しない外部入力部によってユーザが指示を入力し、制御部７０２は入力制御部７０７を経由してその入力を受け取る。例えば、外部入力部に「ＣＭ問い合わせ」ボタンがあり、ユーザがそのボタンを押したら、そのとき出力制御部７０６から出力最中のＣＭの問い合わせを指示されたものと解釈する。制御部７０２はユーザより指示されたＣＭの特徴量をデータベース７０４より取得し、ネットワーク制御部７０５を経由して、ＣＭサーバ１０３に特徴量を送信する。ＣＭサーバ１０３からの応答はネットワーク制御部７０５を経由して制御部７０２に届く。応答として、ＣＭサーバ１０３から付加情報が送信されてきた場合は、制御部７０２は出力制御部７０６を経由して図示しないモニタ等外部出力部に付加情報を出力することでユーザ１０２に情報を伝えると共に、データベース７０４内の付加情報登録待ちＣＭリストから該当ＣＭを付加情報登録済みＣＭリストに移す。ユーザにＣＭ付加情報を伝えるためにモニタ等外部出力部に表示する画面は、例えば、図１５のように、画面１５０１内にＣＭの映像を表示する領域１５０２とそのＣＭの付加情報を表示する領域１５０３から構成される。

ＣＭ付加情報のＣＭサーバ１０３への問い合わせは、上記のようにユーザが指示してから行う他に、制御部７０２が新規ＣＭを検出した際に自動的に問い合わせる構成とすることも可能である。

ここで、ユーザが使用する録画再生装置７００での新規ＣＭの登録処理について図８に示すフローチャートを参照して説明する。

すなわち、新規ＣＭの登録処理では、先ず、ステップＳ８０１において、テレビジョン放送を受信し、放送がアナログの場合は、デジタル化し、必要があれば受信映像を録画する。

次のステップＳ８０２では、受信したテレビジョン放送の映像信号からＣＭを検出する。

次のステップＳ８０３では、ステップＳ８０２でＣＭが検出されたか否かを判定する。そして、このステップＳ８０３での判定結果がＹｅｓ、すなわち、ＣＭが検出された場合は、ステップＳ８０４へ進み、また、判定結果がＮｏ、すなわち、ＣＭが検出されなかった場合は、ステップＳ８０１へ戻る。

ステップＳ８０４では、検出されたＣＭから特徴量を求め、その特徴量によってデータベース内を検索し、上記検出されたＣＭが既にデータベースに登録されているか否かを判定する。そして、このステップＳ８０４での判定結果がＮｏ、すなわち、検出されたＣＭと同じＣＭがデータベースに登録されていなかった場合は、ステップＳ８０５へ進み、また、判定結果がＹｅｓ、すなわち、既に登録されていた場合は、ステップＳ８０１へ戻る。

そして、ステップＳ８０５では、検出されたＣＭの映像とその特徴量をデータベース内の付加情報登録待ちＣＭリストに登録する。登録後は、ステップＳ８０１へ戻って処理を続ける。

上記図８のフローチャートに示した新規ＣＭの登録処理の流れでは、まずＣＭを検出し、その後で検出されたＣＭの特徴量を求めている。これを図に示すと図１８の（Ａ）のようになる。テレビジョン放送の映像信号１８０１からＣＭ１８０２を検出し、その検出されたＣＭの特徴量１８０３を後から計算する。

これ対して、図１８の（Ｂ）に示すように、テレビジョン放送の映像信号１８０４からＣＭや番組本編の区別なく特徴量１８０５を計算すると同時にＣＭ位置を検出し、計算された特徴量の中からＣＭに該当する情報１８０６を切り出すという方法も考えられる。この場合、図８のフローチャートに示した新規ＣＭの登録処理の流れは以下のようになる。

すなわち、ステップＳ８０１では、テレビジョン放送を受信し、放送がアナログの場合は、デジタル化し、必要があれば受信映像を録画する。更に、受信映像の特徴量を計算し、必要があれば録画映像と共に記憶する。ステップＳ８０２では、受信したテレビジョン放送の映像信号からＣＭを検出する。ステップＳ８０３では、ステップＳ８０２でＣＭが検出されたか否かを判定する。このステップＳ８０３における判定結果がＹｅｓ、すなわち、ＣＭが検出された場合は、ステップＳ８０４へ進み、また、判定結果がＮｏ、すなわち、ＣＭが検出されなかった場合は、ステップＳ８０１へ戻る。ステップＳ８０４では、検出されたＣＭの特徴量をステップＳ８０１で計算した特徴量から抜き出し、その特徴量によってデータベース内を検索して、上記検出されたＣＭが既にデータベースに登録されているか否かを判定する。このステップＳ８０４における判定結果がＮｏ、すなわち、検出されたＣＭと同じＣＭがデータベースに登録されていなかった場合は、ステップＳ８０５へ進み、また、判定結果がＹｅｓ、すなわち、既に登録されていた場合は、ステップＳ８０１へ戻る。ステップＳ８０５では、検出されたＣＭの映像とその特徴量をデータベース内の付加情報登録待ちＣＭリストに登録する。登録後は、ステップＳ８０１へ戻って処理を続ける。

次に、ユーザが使用する録画再生装置７００がＣＭサーバ１０３にＣＭ付加情報を問い合わせる処理について、図９に示すフローチャートを参照して説明する。この処理は、ＣＭ付加情報をＣＭサーバ１０３から取得することをユーザが指示した場合、及び／又は、新規ＣＭが検出された場合に実行される。

このＣＭ付加情報の問い合わせ処理では、先ず、ステップＳ９０１において、付加情報を知りたいＣＭと同じＣＭが既に付加情報登録済みＣＭリスト内に登録されているか否かを判定する。そして、このステップＳ９０１での判定結果がＹｅｓ、すなわち、付加情報が既に登録されている場合は、その付加情報をユーザに提示して処理を終了する。また、上記ステップＳ９０１における判定結果がＮｏ、すなわち、上記付加情報が登録されていない場合は、ステップＳ９０２へ進む。

ステップＳ９０２では、付加情報を取得したいＣＭの特徴量をＣＭサーバ１０３に送信する。特徴量の送信処理は、例えば、制御部７０２がデータベース７０４からＣＭの特徴量を取得し、ネットワーク制御部７０５を経由してＣＭサーバ１０３に特徴量の送信を行う。

次のステップＳ９０３では、ＣＭサーバから送信されてくる付加情報を受信する。付加情報の受信処理は、例えば、制御部７０２がネットワーク制御部７０５を経由してＣＭサーバ１０３から付加情報の受信を行う。

次のステップＳ９０４では、ＣＭサーバ１０３からの返信情報に、問い合わせたＣＭの付加情報が含まれているか否か判定する。そして、このステップＳ９０４における判定結果がＹｅｓ、すなわち、付加情報が含まれている場合は、ステップＳ９０５へ進み、また、判定結果がＮｏ、すなわち、付加情報が含まれていない場合は、ユーザに付加情報が得られなかった旨を伝え、処理を終了する。

放送され始めたばかりのＣＭは付加情報がＣＭサーバ１０３にまだ登録されていない場合があり、この場合、ユーザは付加情報を得られない。ユーザに伝える処理は、例えば、制御部７０２が出力制御部７０６を経由して図示しないモニタ等外部出力部に出力することにより行う。

そして、ステップＳ９０５では、ＣＭサーバ１０３から取得した付加情報をユーザに伝えると共に、付加情報登録待ちＣＭリスト内の該当ＣＭと関連付け、該当ＣＭを付加情報登録済みＣＭリストへ移す。

次に、ユーザ１０２の使用する録画再生装置７００とＣＭサーバ１０３の間のやりとりについて、図１０を参照して説明する。

手順１）ユーザの指示により、及び／又は、自動的に、ＣＭの付加情報を取得するために、ユーザ１０２の録画再生装置７００からＣＭサーバ１０３へＣＭの特徴量が送信される。

手順２）ＣＭサーバ１０３は、受信したＣＭの特徴量をキーとしてＣＭサーバ１０３内のデータベースを検索する。

手順３）ＣＭサーバ１０３は、検索した結果、特徴量が一致するＣＭが見つかった場合は、そのＣＭの付加情報をユーザ１０２の録画再生装置７００へ送信する。特徴量が一致するＣＭが見つからなかった場合は、付加情報が見つからなかったという旨の情報をユーザ１０２の録画再生装置７００へ送信する。

手順４）ユーザの録画再生装置７００は、ＣＭサーバ１０３から受信した情報に問い合わせＣＭの付加情報が含まれている場合は、その付加情報をユーザに提示し、同時に、ユーザの録画再生装置７００内のデータベースに登録する。問い合わせＣＭの付加情報が含まれていない場合は、ユーザ１０２に付加情報が得られなかった旨を提示する。

以上説明した例では、ユーザ１０２の使用する録画再生装置７００内にもＣＭの付加情報を記憶するデータベース７０４を構築する構成を示したが、必ずしもこの構成にする必要はなく、付加情報が必要になるたびにＣＭサーバ１０３に付加情報を問い合わせる構成とすることも可能である。又、ＣＭサーバ１０３において、付加情報はＣＭサーバ管理者が図示しない方法で収集した付加情報をＣＭサーバ１０３に入力する構成を示したが、この構成例とは異なる構成例も考えられる。例えば、図１３のような画面にて、Ｗｅｂ上にＣＭのリストを公開し、Ｗｅｂに接続している特定又は不特定の者によって、例えば、図１４のような画面を利用して、その付加情報がネットワークを介して入力される構成とすることも可能である。この場合の情報提供システム１０００全体の接続状態の概念図は図１１のようになり、図１に示した情報提供システム１００の接続状態の概念図に、情報入力者１１０７_１，・・・１１０７_ｍ（以下まとめて情報入力者１１０７という）が追加された構成となる。

ここで、この情報提供システム１０００におけるＣＭサーバ１０３のデータベース内の付加情報登録待ちＣＭリストに対する処理について、図１２に示すフローチャートを参照して説明する。

すなわち、ステップＳ１２０１では、データベース内の付加情報登録待ちＣＭリストに新たなＣＭが登録されているか否か判定する。このステップＳ１２０１における判定結果がＹｅｓ、すなわち、新たなＣＭが登録されている場合は、ステップＳ１２０２へ進み、また、判定結果Ｎｏ、すなわち、登録されていない場合は、処理を終了する。

ステップＳ１２０２では、付加情報登録待ちＣＭリストに登録されているＣＭをネットワーク上の情報入力者に提示する。提示処理は、例えば、制御部２０２がデータベース２０４内の付加情報登録待ちＣＭリストをネットワーク出力制御部２０５を経由して図示しないネットワーク上の情報入力者のモニタ等の出力部に表示することによって行う。情報入力者の出力部に表示される画面は、例えば、図１３のように付加情報登録待ちＣＭリスト内のＣＭを一覧で表示するような構成である。

次のステップＳ１２０３では、付加情報登録待ちＣＭリストを確認した情報入力者が図示しない方法によって収集した付加情報を、キーボード等の入力部によって入力する。入力処理は、例えば、制御部２０２がネットワーク制御部２０５を経由して図示しないネットワーク上の情報入力者のキーボード等の入力部から入力された付加情報を制御部２０２がデータベース２０４内の付加情報登録待ちＣＭリストの該当ＣＭと関連付けることによって行う。入力処理の際、入力を支援するためにネットワーク上の情報入力者のモニタ等の出力部に表示する画面は、例えば、図１４のような、付加情報の項目とその入力欄１４０２〜１４０５を並べて表示する構成である。ステップＳ１２０４では、付加情報が入力されたＣＭを付加情報登録待ちＣＭリストから付加情報登録済みＣＭリストに移動し、処理を終了する。

なお、図１２に示す一連の処理は、新規のＣＭがデータベースに登録されるたびに開始される設定でも良いし、時間を決めて、例えば１時間ごとに開始される設定でも良いし、もしくは、情報入力者が開始を指示する設定でも良い。

なお、上述の実施の形態では、上記特許文献３の特徴量を仮定して説明したが、本願発明は必ずしもこれに限定されるものではない。例えば画像に関しては図１６に示すような方法によって求まる量を特徴量としても良い。

図１６では、画像の特徴量の例を示している。ＮＴＳＣ方式の場合、１秒間の映像は約３０枚の画像から成っている。１枚の画像は図１６の（Ａ）のように水平が７２０画素、垂直が４８０画素であり、１画素はＲＧＢの３つの値から構成されている。ＲＧＢがそれぞれ１バイトで表現されている場合、１枚の画像は約１メガバイト（７２０×４８０×３＝１０３６８００）のデータ量となる。例えば、１５秒のＣＭの場合、約４５０枚の画像から成るため、約４５０メガバイトのデータ量となる。映像圧縮技術ＭＰＥＧ２で低レート、例えば２Ｍｂｐｓで圧縮した場合でも、１５秒では約４メガバイトのデータ量となる。対して、図１６の（Ｂ）のように、画像の輝度のヒストグラムを利用すると、１枚の画像を１１バイトで表現できる。この例では、各画素の輝度が０〜２５５の値と仮定し、輝度値を１６等分してそのヒストグラムをとり、各値を１バイトで表現できるように正規化している。更に、黒（０付近）と白（２５５付近）の出現頻度は高くないのでそれらの付近５バンド分を捨てることとした。この場合、１５秒では約５キロバイトとなる。図１６の（Ｂ）のような特徴量では、この特徴量から元のＣＭを想像することはできないが、同じＣＭからは同じ特徴量が求まり、異なるＣＭからは高い確率で異なる特徴量が求まる。

テレビジョン放送で放送されたＣＭが新規ＣＭであるか否かは、そのＣＭが既にデータベース１０５に登録されているか否かによって判断できる。つまり、放送されたＣＭをキーにしてデータベース１０５内を検索し、同じＣＭが見つかればキーにしたＣＭは新規ＣＭではなく、同じＣＭが見つからなければキーにしたＣＭは新規ＣＭであると判断できる。このＣＭの検索には、ＣＭの映像そのものではなく、ユーザ１０２より送信されてきたＣＭの特徴量を利用する。例えば、図１７において、ＣＭ１７０１がデータベースに登録済みのＣＭか否かを検索する場合、ＣＭ１７０１の映像データとデータベース内のＣＭ１７０３、ＣＭ１７０５、ＣＭ１７０７、ＣＭ１７０９の映像データを比較する代わりそれらＣＭの特徴量との比較を行う。つまり、ＣＭ１７０１の映像データから特徴量１７０２を求める。同様に、データベース内のＣＭにおいても各々の特徴量１７０４、１７０６、１７０８、１７１０を求めておく。比較は、ＣＭ１７０１の特徴量１７０２とデータベース内の特徴量１７０４，１７０６，１７０８，１７１０にて行う。図１７の例では、特徴量１７０２と特徴量１７０８が一致しているので、ＣＭ１７０１とＣＭ１７０７は同じものであり、ＣＭ１７０１は既にデータベースに登録されていると判断できる。ＣＭの映像の代わりにＣＭの特徴量で検索するという方法は、検索に使用するデータ量が圧倒的に少量で済むため、高速な検索処理を実現する。特徴量をキーとし、その特徴量と一致する特徴量をデータベース１０５内から高速に検索する技術に関しては上記特許文献３に詳しく記載されている。

本発明を適用した情報提供システムの構成を示すブロック図である。ＣＭ付加情報を提供するＣＭサーバの概念構成を示すブロック図である。データベースに登録されるＣＭの付加情報登録待ちＣＭリストと付加情報登録済みＣＭリストを模式的に示す図である。上記ＣＭサーバにおける制御部による新規ＣＭの登録処理の手順を示すフローチャートである。上記ＣＭサーバにおけるデータベース内の付加情報登録待ちＣＭリストに対する処理の手順を示すフローチャートである。上記ＣＭサーバにおけるユーザからのＣＭ付加情報問い合わせに対する処理の手順を示すフローチャートである。ＣＭ付加情報を利用する録画再生装置の概念構成を示すブロック図である。上記録画再生装置での新規ＣＭの登録処理の手順を示すフローチャートである。上記録画再生装置がＣＭサーバにＣＭ付加情報を問い合わせる処理の手順を示すフローチャートである。上記録画再生装置とＣＭサーバの間のやりとりを模式的に示す図である。本発明を適用した情報提供システムの他の接続状態の概念図である。上記情報提供システムにおけるＣＭサーバのデータベース内の付加情報登録待ちＣＭリストに対する処理の手順を示すフローチャートである。付加情報登録待ちＣＭリストに登録されているＣＭの一覧の表示画面を示す図である。管理者が付加情報を入力する際の表示画面を示す図である。ユーザにＣＭ付加情報を伝えるためにモニタ等外部出力部に表示する画面を示す図である。画像に関する特徴量を示す図である。特徴量による検索の例を示す図である。テレビジョン放送の映像信号から特徴量を切り出す例を示す図である。

符号の説明

１００，１０００情報提供システム、１０１インターネット、１０２，１０２_１，・・・１０２_ｎユーザ、１０３ＣＭ情報サーバ、１０４サーバ、１０５データベース、１０６放送局、２０１放送受信部、２０２制御部、２０３記憶部、２０４データベース、２０５ネットワーク制御部、２０６出力制御部、２０７入力制御部、７００録画再生装置、７０１放送受信部、７０２制御部、７０３記憶部、７０４データベース、７０５ネットワーク制御部、７０６出力制御部、７０７入力制御部、７０８映像記憶部、１１０７，１１０７_１，・・・１１０７_ｍ情報入力者

Claims

ＣＭ付加情報供給装置からネットワークを介してＣＭ付加情報受給装置にコマーシャルメッセージの付加情報の供給を行うＣＭ付加情報供給方法であって、
ＣＭ付加情報供給装置が、テレビジョン放送からコマーシャルメッセージを検出し、検出したコマーシャルメッセージの特徴量を算出し、ネットワークに接続された特定又は不特定の者に対してコマーシャルメッセージの付加情報の入力を求め、算出したコマーシャルメッセージの特徴量と該コマーシャルメッセージの付加情報とを対応付けたデータベースを作成しておき、ＣＭ付加情報受給装置からネットワークを介して送られてくるコマーシャルメッセージの付加情報の送信要求に応じて、コマーシャルメッセージの特徴量をキーとしてデータベース内を検索し、データベースから検索された特徴量のコマーシャルメッセージの付加情報を読み出して上記ネットワークを介してＣＭ付加情報受給装置に送信し、
ＣＭ付加情報受給装置が、ネットワークを介して受信したコマーシャルメッセージの付加情報と該コマーシャルメッセージの特徴量とを対応付けたデータベースに格納するＣＭ付加情報供給方法。
ネットワークを介してＣＭ付加情報受給装置にコマーシャルメッセージの付加情報を供給するＣＭ付加情報供給装置であって、
テレビジョン放送を受信するテレビジョン放送受信手段と、
上記テレビジョン放送受信手段により受信されたテレビジョン放送からコマーシャルメッセージを検出し、検出したコマーシャルメッセージの特徴量を算出し、ネットワークに接続された特定又は不特定の者に対してコマーシャルメッセージの付加情報の入力を求め、算出したコマーシャルメッセージの特徴量と該コマーシャルメッセージの付加情報とを対応付けてデータベースに格納しておき、ＣＭ付加情報受給装置からネットワークを介して送られてくるコマーシャルメッセージの付加情報の送信要求に応じて、コマーシャルメッセージの特徴量をキーとして上記データベース内を検索し、検索された特徴量のコマーシャルメッセージの付加情報を上記データベースから読み出して上記ネットワークを介して上記ＣＭ付加情報受給装置に送信して、該ＣＭ付加情報受給装置に受給した付加情報と該コマーシャルメッセージの特徴量とを対応付けたデータベースに格納させる制御を行う制御手段とを備えるＣＭ付加情報供給装置。
ＣＭ付加情報供給装置からネットワークを介してＣＭ付加情報受給装置にＣＭ付加情報の供給を行うＣＭ付加情報供給システムであって、
ＣＭ付加情報供給装置は、テレビジョン放送を受信するテレビジョン放送受信手段と、上記テレビジョン放送受信手段により受信されたテレビジョン放送からコマーシャルメッセージを検出し、検出したコマーシャルメッセージの特徴量を算出し、ネットワークに接続された特定又は不特定の者に対してコマーシャルメッセージの付加情報の入力を求め、算出したコマーシャルメッセージの特徴量と該コマーシャルメッセージの付加情報とを対応付けてデータベースに格納しておき、ＣＭ付加情報受給装置からネットワークを介して送られてくるコマーシャルメッセージの付加情報の送信要求に応じて、コマーシャルメッセージの特徴量をキーとして上記データベース内を検索し、検索された特徴量のコマーシャルメッセージの付加情報を上記データベースから読み出して上記ネットワークを介して上記ＣＭ付加情報受給装置に送信する制御を行う制御手段とを備え、
ＣＭ付加情報供給装置は、テレビジョン放送を受信するテレビジョン放送受信手段と、上記テレビジョン放送受信手段により受信されたテレビジョン放送からコマーシャルメッセージを検出し、検出したコマーシャルメッセージの特徴量を算出し、該コマーシャルメッセージの特徴量をＣＭ付加情報供給装置にデータベースの検索キーとしてネットワークを介して送信して、上記ＣＭ付加情報供給装置からネットワークを介してコマーシャルメッセージの付加情報を受給し、受給した付加情報と該コマーシャルメッセージの特徴量とを対応付けたデータベースに格納する制御を行う制御手段と備えるＣＭ付加情報供給システム。