Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP4019945B2 - Summary generation apparatus, summary generation method, summary generation program, and recording medium recording the program - Google Patents
[go: Go Back, main page]

JP4019945B2 - Summary generation apparatus, summary generation method, summary generation program, and recording medium recording the program - Google Patents

Summary generation apparatus, summary generation method, summary generation program, and recording medium recording the program Download PDF

Info

Publication number
JP4019945B2
JP4019945B2 JP2003006388A JP2003006388A JP4019945B2 JP 4019945 B2 JP4019945 B2 JP 4019945B2 JP 2003006388 A JP2003006388 A JP 2003006388A JP 2003006388 A JP2003006388 A JP 2003006388A JP 4019945 B2 JP4019945 B2 JP 4019945B2
Authority
JP
Japan
Prior art keywords
audience rating
time
video
data
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003006388A
Other languages
Japanese (ja)
Other versions
JP2004220286A (en
Inventor
智樹 渡部
伸哉 植垣
浩樹 安西
伸彦 竹原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Inc
NTT Inc USA
Original Assignee
Nippon Telegraph and Telephone Corp
NTT Inc USA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp, NTT Inc USA filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2003006388A priority Critical patent/JP4019945B2/en
Publication of JP2004220286A publication Critical patent/JP2004220286A/en
Application granted granted Critical
Publication of JP4019945B2 publication Critical patent/JP4019945B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、映像及び音声の要約を自動的に作成する技術に関する。
【0002】
【従来の技術】
従来、映像の要約を作成する場合には、あらかじめ映像編集者が設定した映像のシーン、あるいは、映像の切れ目をコンピュータにより自動的に検出するといった方法により抽出されたシーンを、要約の作成者がカットやつなぎ合わせにより人為的に作成していた。自動的に作成する方法としては、音声の強弱や映像変化といった特徴のある部分だけを抽出したり、映像の内容とは無関係に適当な時間を映像から抽出する方法があった。
【0003】
【特許文献1】
特開平11−331761号公報
【0004】
【特許文献2】
特開平8−116514号公報
【0005】
【特許文献3】
特開2002−245069号公報
【0006】
【発明が解決しようとする課題】
要約を人為的に作成する場合、視聴者に良く評価されるように作成することは非常に難しい。そこで、一旦視聴者に評価してもらい、その結果を反映させるといった方法が考えられる。しかし、複数の番組から要約映像を作成するとなると、非常に時間を要することになる。
【0007】
また、自動的に作成した場合には、作成の手間と時間は省くことができるが、必ずしも視聴者側に魅力的に見える箇所を要約中に含んでいるとは言えず、実際に視聴者から良い評価が得られるかどうかは分からない。要約は例えば広告に利用されるが、上記の従来技術では、要約を用いた効果的な広告を打つことができなかった。
【0008】
また、要約を有効に活用するためには利用場面に応じた適切な時間長の要約を作成する必要があるが、従来技術では利用場面に応じた適切な時間長の要約を作成するために多大な手間と時間を要することになる。
【0009】
本発明は、視聴率を用いて効果的な要約を自動的に作成する技術を提供することを目的とし、特に、要約の時間長を指定することにより、その時間長の要約を自動的に生成する技術を提供することを目的とする。
【0010】
【課題を解決するための手段】
上記の課題を解決するために、本発明は次のように構成される。
【0013】
本発明は、要約生成装置が映像又は音声の要約を作成する方法であり、要約の対象となる映像又は音声の時間毎の視聴率を含む視聴率データを元に、各視聴率に対してその視聴率以上の時間区間を示す再生区間データを作成する再生区間データ作成ステップと、その再生区間データを元に、各視聴率に対して前記時間区間の時間の総和を示す要約時間データを作成する要約時間データ作成ステップと、要求される要約時間長を取得する要約時間長取得ステップと、前記要約時間データと前記要求される要約時間長とから、その要約時間長分の映像又は音声を抽出するための視聴率の閾値を決定する閾値決定ステップと、視聴率が前記閾値を超えた時間区間を前記再生区間データから取得し、その時間区間の映像又は音声を抽出し、抽出された映像又は音声を用いて要約を生成する生成ステップとを有する。ここで、前記再生区間データは、特定の視聴率に対してその視聴率以上の視聴率に対応する時間区間を前記視聴率データから取得する処理を前記特定の視聴率の大きさを変えて複数回行うことにより作成できる。
【0014】
すなわち、本発明では、映像又は音声の時間経過に対する視聴率を示す「視聴率データ」から、視聴率に対してその視聴率以上となる時間区間を集計した「再生区間データ」と、視聴率に対する再生区間の時間総和を集計した「要約時間データ」を作成する。そして、利用者が指定した要約の時間長に基づき、要約時間データから要約の時間長と再生区間の時間総和とが同値あるいは最も近い値となる視聴率を求め、この視聴率を閾値として映像を抽出して要約を生成する。
本発明によれば、要求される要約時間に見合う視聴率の閾値を定め、その閾値を用いて要約を生成することとしたので、視聴率の高い部分を抽出した要約を、利用者が指定した時間長で生成することが可能となる。
【0015】
また、本発明では、上記の方法の発明の実施に適した要約生成装置、コンピュータに上記の方法の発明における各ステップを実行させるプログラム、及びそのプログラムを記録した記録媒体が提供される。
【0016】
【発明の実施の形態】
以下、本発明の実施の形態について説明する。以下の実施の形態の説明では“映像”を例にとって説明するが、この“映像”は、映像のみの場合もあるが、一般には音声を含むものである。また、映像を含まずに音声のみの場合でも、“映像”の場合と同様の方法で要約を作成することが可能である。以下、まず、本発明の実施の形態の概念を説明する。
【0017】
本発明の実施の形態に係る装置では、放送された映像もしくは記録媒体から再生された映像の時間毎の視聴率のデータを用い、所定の閾値よりも視聴率が高い部分の映像を抽出することによって要約を生成する。上記所定の閾値は利用者が指定した要約時間長に基づき決定される。これにより、所望の時間長の要約を自動生成することが可能となる。なお、本実施の形態における“映像”は、放送により配信された映像、ネットワーク経由で配信された映像、パッケージメディアによる映像などを含むものである。
【0018】
図1(A)、(B)は、本発明の実施の形態の概念を説明するための図である。(A)は、○月○日における時間と視聴率との関係を示すグラフの例である。本発明の実施の形態では、要約作成者が希望する時間長に応じた所定の閾値を超えた視聴率を有する時間区間(以下、再生区間という)の映像を抽出し、その時間長の要約映像を作成する。(A)の例の場合、視聴率が閾値を超えて抽出されたのはバラエティ番組の映像(a)とニュース番組の映像(b)である。抽出された視聴率の高い映像は、要約映像として編集される。(B)は、○月○日におけるあるチャンネルで放送された映像における要約映像の例である。
【0019】
ここで、指定した時間長の要約を生成する方法の原理について説明する。
【0020】
図1(A)に示すグラフにおいて閾値を最高視聴率の方向に移動させると再生区間の時間長は短くなり、閾値を視聴率0の方向に移動させると再生区間の時間長は長くなることなどから分かるように、閾値と再生区間の時間長との関係は図2に示すグラフのようになる。従って、再生区間時間長を指定すれば閾値が一意に定まり、当該閾値を用いて要約映像を作成すれば指定した時間長の要約を作成することが可能となる。
【0021】
以下、本発明の実施の形態を図を用いて説明する。
【0022】
図3に本発明の実施の形態における要約映像生成装置1の構成を示す。本実施の形態における要約映像生成装置1は、視聴率データ取得部2、再生区間データ作成部3、要約時間データ作成部4、再生区間取得部5、閾値視聴率決定部6、要約時間要求取得部7、要約映像生成部8を有している。また、各データを格納するための図示しない記憶部を有している。
【0023】
視聴率データ取得部2は、要約の対象となる映像に関する少なくとも映像の再生時間あるいは放送時刻に対応する時間とそのときの視聴率を含む視聴率データを取得する。視聴率は視聴者の全体あるいはそのサンプリングから得られる映像を視聴した人の割合である。また、映像の再生時間とは、例えば、DVDなどの記録媒体に記録された映像を再生する場合における映像の最初の部分からの経過時間のことである。放送時刻に対応する時間とは、放送時刻そのものであってもよいし、放送をある特定の時刻から録画した場合における録画し始めの部分からの経過時間であってもよい。
【0024】
視聴率データの例を図4に示す。視聴率の単位は%であり、時間の単位は例えば時(60分)である。なお、本実施の形態において、視聴率の代わりに視聴者数を用いても視聴率を用いる場合と同様にして希望時間長の要約を作成することができる。
【0025】
予め作成された視聴率データを用いる場合、視聴率データは要約映像生成装置1の外部から必要に応じてネットワークを介して取得するようにしてもよいし、記録媒体などから視聴率データを読み出して予め要約映像生成装置1に格納しておいてもよい。
【0026】
また、予め作成された視聴率データを用いるのではなく、視聴率を要約映像生成装置1内で算出することにより視聴率データを要約映像生成装置1が生成するようにしてもよい。視聴率を算出する方法としては、例えば、以下のような方法がある。
【0027】
まず、放送された映像を出力している複数の視聴者端末、もしくは蓄積された映像を再生している複数の視聴者端末から、視聴映像に対応する時間と映像に係るコンテンツを識別するIDとを含む視聴データを受信する。そして、複数の視聴データから特定の時間において対象の映像が視聴されていた視聴者端末の数を集計し、その数を全視聴者端末数で割ることにより、その時間における視聴率を求めることができる。当該対象映像コンテンツにおける各時間についての視聴率を求めることにより図4に示すような視聴率データを得ることができる。
【0028】
再生区間データ作成部3は視聴率データを元に視聴率に対する再生区間を算出し、再生区間データを作成する。具体的な方法としては、例えば、視聴率の最大値から順に最小値までの範囲で視聴率データをシークしながら、シークしている視聴率の値よりも大きい視聴率の時間区間を記録していくという方法がある。
【0029】
図5に再生区間データの例を示す。同図に示す例は、視聴率が10.72〜10.04の範囲でシークした場合の例である。
【0030】
要約時間データ作成部4は視聴率対要約時間のデータ(要約時間データ)を作成する。要約時間はこの場合、上記再生区間データにおける各視聴率の再生区間の総和になる。よって、要約時間データ作成部4は視聴率毎に上記再生区間データにおける再生区間の総和を求める。要約時間データの例を図6に示す。
【0031】
要約時間要求取得部7は、要約映像の作成者が指定した要約映像の時間長を取得する。これは、例えば、インターネットのWWWサービスを使ったリクエストなどを用いることにより実現することができる。
【0032】
閾値視聴率決定部6は、要約時間要求取得部7により取得された時間長に相当する要約時間を要約時間データから参照し、映像抽出の閾値となる視聴率を決定する。例えば、図6の例において、要求された時間長が10であれば、10.33を映像抽出の閾値となる視聴率として決定する。なお、要求された時間長と要約時間データにおける時間長とで一致するものがない場合には、要求された時間長に最も近い時間長に対応する視聴率を閾値として決定する。
【0033】
再生区間取得部5は、閾値となった視聴率を元に、再生区間データから映像の再生区間を取得する。すなわち、図5に示す再生区間データの例において、閾値となった視聴率が10.33である場合、再生区間として4:00〜11:00、13:00〜16:00を取得する。
【0034】
要約映像生成部8は、当該再生区間を対象映像から抽出し、要約映像を生成する。要約映像は、例えば、再生区間の映像を繋ぎ合わせることにより生成する。なお、映像を抽出するには、外部の装置に蓄積された対象映像からネットワークを介して抽出してもよいし、対象映像を予め要約映像生成装置1に格納しておき、そこから抽出してもよい。
【0035】
図7は、要約映像生成装置1における処理の流れを示すフローチャートである。図7を用いて要約映像生成装置1の動作を説明する。
【0036】
要約作成者からの要約生成対象映像コンテンツの指定を受けると、要約映像生成装置1はそのコンテンツに対する要約時間データが作成されているかどうかを調べ(ステップ1)、要約時間データが既に作成されている場合にはステップ5に進む。
【0037】
要約時間データが作成されていなければ、まず視聴率データ取得部2が視聴率データを取得する(ステップ2)。そして、再生区間データ作成部3が視聴率データ取得部2からの視聴率データを受けて再生区間データを作成する(ステップ3)。
【0038】
その後、再生区間データ作成部3が作成した再生区間データを用いて、要約時間データ作成部4が要約時間データを作成する(ステップ4)。なお、要約時間データは視聴率データが変わらない限り同じであるので、要約時間データを一度作成しておけばステップ2〜ステップ4の処理は次回からは省略することができる。
【0039】
ステップ5において、要約時間要求取得部7は利用者からの要約時間長を取得する。なお、要約時間長は最初に取得しておいてもよい。そして、閾値視聴率決定部6が要約時間データと要約時間長とから要約映像生成のための閾値となる視聴率を決定し(ステップ6)、再生区間取得部5がその視聴率(閾値)と再生区間データとから要約映像抽出のための再生区間を取得する(ステップ7)。最後に、要約映像生成部8が当該再生区間で指定された区間の映像を対象映像から抽出することにより要約映像を生成する(ステップ8)。
【0040】
以上のようにして、視聴者が要求した時間長の要約映像を取得することが可能となる。
【0041】
本発明の実施の形態の要約映像生成装置1における処理内容をコンピュータプログラムとして記述し、そのプログラムをコンピュータを用いて実行することによっても要約映像生成装置1を実現することができる。当該コンピュータは、CPU、メモリー、ハードディスク、入力装置、出力装置、CD−ROMドライブ、通信処理装置などを有するものであり、要約映像生成装置1における各部の機能は主にCPUが上記プログラムに従った処理を行うことにより実現される。また、外部からデータを取得したり利用者が指示を与える場合には、入力装置、出力装置、通信処理装置などが使用され、処理データを格納もしくは一時的に格納しておくためにメモリーやハードディスクが用いられる。
【0042】
上記プログラムは、コンピュータが読み取りできる記録媒体、例えば、FD(フロッピー(登録商標)ディスク)や、MO、ROM、メモリカード、CD−ROM、DVD、リムーバブルディスクなどに記録して、保存したり、配布したりすることが可能である。また、そのプログラムは、インターネットや電子メールなど、ネットワークを通して提供することも可能である。
【0043】
上述したように本発明における実施の形態によれば、視聴率に基づき要約を生成するので、視聴者の関心に適合した効果的な要約映像を作成することが可能になることに加え、指定された要約映像の時間長から自動的に閾値を設定することが可能となり、過去のデータや要約映像作成者の経験がなくとも容易に要約映像を作成することができる。しかも要約映像の利用者の必要とする時間長に応じて、迅速に要約映像を提供することが可能となる。
【0044】
なお、本発明は、上記の実施例に限定されることなく、特許請求の範囲内において、種々変更・応用が可能である。
【0045】
【発明の効果】
本発明によれば、視聴率の高い部分を抽出した要約映像を、利用者が指定した時間長で生成することが可能となる。
【図面の簡単な説明】
【図1】本発明の実施の形態の概念を説明するための図である。
【図2】閾値と再生区間の時間長との関係を説明するためのグラフである。
【図3】本発明の実施の形態における要約映像生成装置1の構成を示す図である。
【図4】本発明の実施の形態における視聴率データの例を示す図である。
【図5】本発明の実施の形態における再生区間データの例を示す図である。
【図6】本発明の実施の形態における要約時間データの例を示す図である。
【図7】本発明の実施の形態における要約映像生成装置1における処理の流れを示すフローチャートである。
【符号の説明】
1 要約映像生成装置
2 視聴率データ取得部
3 再生区間データ作成部
4 要約時間データ作成部
5 再生区間取得部
6 閾値視聴率決定部
7 要約時間要求取得部
8 要約映像生成部
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a technique for automatically creating video and audio summaries.
[0002]
[Prior art]
Conventionally, when creating a video summary, a video creator previously set by a video editor or a scene extracted by a method in which a video break is automatically detected by a computer is used by the summary creator. It was created artificially by cutting and joining. As a method of automatically creating, there are a method of extracting only a characteristic part such as the strength of sound and a change of video, or a method of extracting an appropriate time from the video regardless of the content of the video.
[0003]
[Patent Document 1]
Japanese Patent Application Laid-Open No. 11-333161
[Patent Document 2]
Japanese Patent Laid-Open No. 8-116514
[Patent Document 3]
Japanese Patent Laid-Open No. 2002-245069
[Problems to be solved by the invention]
When creating a summary artificially, it is very difficult to create a summary so that the viewer can appreciate it. Thus, a method is conceivable in which the viewer is evaluated once and the result is reflected. However, when a summary video is created from a plurality of programs, it takes a very long time.
[0007]
In addition, when it is automatically created, it can save the labor and time of creation, but it does not necessarily include the part that looks attractive to the viewer side in the summary. I don't know if a good evaluation can be obtained. The summary is used for advertisement, for example. However, in the above-described conventional technology, an effective advertisement using the summary cannot be made.
[0008]
In addition, in order to effectively use the summary, it is necessary to create a summary with an appropriate time length according to the usage scene. Time and effort.
[0009]
An object of the present invention is to provide a technique for automatically creating an effective summary using the audience rating, and in particular, by specifying the duration of the summary, the summary of the duration is automatically generated. It aims at providing the technology to do.
[0010]
[Means for Solving the Problems]
In order to solve the above problems, the present invention is configured as follows.
[0013]
The present invention is a method for creating a summary of video or audio by the summary generation device , and for each audience rating based on audience rating data including the audience rating for each hour of video or audio to be summarized. A playback section data creation step for creating playback section data indicating a time section that is higher than the audience rating, and a summary time data that indicates the sum of the times of the time section for each audience rating based on the playback section data. Summary time data creation step, summary time length acquisition step for obtaining a required summary time length, and video or audio corresponding to the summary time length are extracted from the summary time data and the requested summary time length. a threshold determination step of determining a threshold value of the audience for, and obtain the time interval in which the viewing rate exceeds the threshold value from the playback section data, extracts the video or audio of the time interval, extracted And a generation step of generating a summary using an image or voice. Here, the reproduction section data includes a plurality of processes for obtaining a time section corresponding to a viewer rating higher than the viewer rating from the audience rating data for a specific audience rating by changing the size of the specific audience rating. Can be created by performing it once.
[0014]
That is, according to the present invention, from “viewing rate data” indicating the audience rating with respect to the passage of time of video or audio, “playback segment data” in which time segments that are equal to or higher than the audience rating with respect to the audience rating are counted, and Create "summary time data" that totals the total time of playback sections. Then, based on the summary time length specified by the user, an audience rating is obtained from the summary time data so that the summary time length and the total time of the playback section are the same value or the closest value. Extract to generate a summary.
According to the present invention, since the audience rating threshold value corresponding to the required summary time is determined, and the summary is generated using the threshold value, the user specifies the summary extracted from the portion with the highest audience rating. It becomes possible to generate with time length.
[0015]
The present invention also provides a summary generation apparatus suitable for carrying out the above method invention, a program for causing a computer to execute each step in the above method invention, and a recording medium recording the program.
[0016]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below. In the following description of the embodiment, “video” will be described as an example. However, this “video” may include only video, but generally includes audio. In addition, even in the case of only audio without including video, it is possible to create a summary by the same method as in the case of “video”. Hereinafter, first, the concept of the embodiment of the present invention will be described.
[0017]
In the apparatus according to the embodiment of the present invention, the data of the audience rating for each hour of the broadcast video or the video reproduced from the recording medium is used to extract a video of a portion having a higher audience rating than a predetermined threshold. Produces a summary. The predetermined threshold is determined based on the summary time length designated by the user. Thereby, it is possible to automatically generate a summary of a desired time length. Note that “video” in the present embodiment includes video distributed by broadcast, video distributed via a network, video by package media, and the like.
[0018]
1A and 1B are diagrams for explaining the concept of the embodiment of the present invention. (A) is an example of the graph which shows the relationship between the time and audience rating in * month * day. In the embodiment of the present invention, a video of a time section (hereinafter referred to as a playback section) having an audience rating exceeding a predetermined threshold according to a time length desired by the summary creator is extracted, and the summary video of that time length is extracted. Create In the case of the example of (A), it is the video (a) of the variety program and the video (b) of the news program that have been extracted with the audience rating exceeding the threshold. The extracted video with a high audience rating is edited as a summary video. (B) is an example of a summary video in a video broadcast on a certain channel on the day of month.
[0019]
Here, the principle of the method for generating the summary of the specified time length will be described.
[0020]
In the graph shown in FIG. 1A, when the threshold is moved in the direction of the highest audience rating, the time length of the playback section is shortened, and when the threshold is moved in the direction of the audience rating 0, the time length of the playback section is increased. As can be seen from FIG. 2, the relationship between the threshold value and the time length of the playback section is as shown in the graph of FIG. Therefore, if a playback section time length is designated, a threshold value is uniquely determined, and if a summary video is created using the threshold value, a summary of the designated time length can be created.
[0021]
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0022]
FIG. 3 shows a configuration of summary video generation apparatus 1 according to the embodiment of the present invention. The summary video generation apparatus 1 according to the present embodiment includes an audience rating data acquisition unit 2, a playback segment data creation unit 3, a summary time data creation unit 4, a playback segment acquisition unit 5, a threshold audience rating determination unit 6, and a summary time request acquisition. Unit 7 and summary video generation unit 8. Moreover, it has a memory unit (not shown) for storing each data.
[0023]
The audience rating data acquisition unit 2 acquires audience rating data including at least the time corresponding to the playback time or broadcast time of the video regarding the video to be summarized and the audience rating at that time. The audience rating is the percentage of people who watched the entire viewer or the video obtained from the sampling. Also, the video playback time is the elapsed time from the first part of the video when playing back the video recorded on a recording medium such as a DVD. The time corresponding to the broadcast time may be the broadcast time itself, or may be an elapsed time from the beginning of recording when the broadcast is recorded from a specific time.
[0024]
An example of audience rating data is shown in FIG. The unit of audience rating is%, and the unit of time is, for example, hour (60 minutes). In the present embodiment, a summary of the desired time length can be created in the same manner as when the audience rating is used even if the number of viewers is used instead of the audience rating.
[0025]
When audience rating data created in advance is used, the audience rating data may be acquired from the outside of the summary video generation apparatus 1 via a network as needed, or audience rating data is read from a recording medium or the like. You may store beforehand in the summary image | video production | generation apparatus 1. FIG.
[0026]
The summary video generation device 1 may generate the audience rating data by calculating the audience rating in the summary video generation device 1 instead of using the audience rating data created in advance. As a method for calculating the audience rating, for example, there are the following methods.
[0027]
First, from a plurality of viewer terminals that output the broadcast video or a plurality of viewer terminals that are playing back the stored video, an ID for identifying the time corresponding to the viewed video and the content related to the video Viewing data including is received. Then, the audience rating at that time can be obtained by totaling the number of viewer terminals where the target video was viewed at a specific time from a plurality of viewing data and dividing the number by the total number of viewer terminals. it can. By obtaining the audience rating for each time in the target video content, audience rating data as shown in FIG. 4 can be obtained.
[0028]
The playback section data creation unit 3 calculates a playback section for the audience rating based on the audience rating data, and creates playback section data. As a specific method, for example, while the audience rating data is sought in the range from the maximum value of the audience rating to the minimum value, a time interval of an audience rating larger than the value of the seeking audience rating is recorded. There is a way to go.
[0029]
FIG. 5 shows an example of playback section data. The example shown in the figure is an example when the audience rating is in the range of 10.72 to 10.04.
[0030]
The summary time data creation unit 4 creates audience rate vs. summary time data (summary time data). In this case, the summary time is the sum of the playback sections of each audience rating in the playback section data. Therefore, the summary time data creation unit 4 obtains the sum of the playback sections in the playback section data for each audience rating. An example of the summary time data is shown in FIG.
[0031]
The summary time request acquisition unit 7 acquires the time length of the summary video designated by the creator of the summary video. This can be realized, for example, by using a request using an Internet WWW service.
[0032]
The threshold audience rating determining unit 6 refers to the summary time corresponding to the time length acquired by the summary time request acquiring unit 7 from the summary time data, and determines an audience rating that is a threshold for video extraction. For example, in the example of FIG. 6, if the requested time length is 10, 10.33 is determined as the audience rating as the video extraction threshold. If there is no match between the requested time length and the time length in the summary time data, the audience rating corresponding to the time length closest to the requested time length is determined as a threshold value.
[0033]
The playback section acquisition unit 5 acquires the playback section of the video from the playback section data based on the audience rating that has become the threshold. That is, in the example of the playback section data shown in FIG. 5, when the audience rating that is the threshold is 10.33, 4:00 to 11:00 and 13: 0 to 16:00 are acquired as playback sections.
[0034]
The summary video generation unit 8 extracts the playback section from the target video and generates a summary video. The summary video is generated, for example, by connecting the video in the playback section. In order to extract a video, it may be extracted from a target video stored in an external device via a network, or the target video may be stored in advance in the summary video generation device 1 and extracted from there. Also good.
[0035]
FIG. 7 is a flowchart showing the flow of processing in the summary video generation apparatus 1. The operation of the summary video generation apparatus 1 will be described with reference to FIG.
[0036]
When a summary creator target video content is specified by the summary creator, the summary video generation device 1 checks whether summary time data has been created for the content (step 1), and summary time data has already been created. If so, go to Step 5.
[0037]
If summary time data has not been created, audience rating data acquisition unit 2 first acquires audience rating data (step 2). Then, the playback section data creation unit 3 receives the viewing rate data from the audience rate data acquisition unit 2 and creates playback section data (step 3).
[0038]
Thereafter, the summary time data creation unit 4 creates summary time data using the playback segment data created by the playback segment data creation unit 3 (step 4). Since the summary time data is the same as long as the audience rating data does not change, once the summary time data is created, the processing from step 2 to step 4 can be omitted from the next time.
[0039]
In step 5, the summary time request acquisition unit 7 acquires the summary time length from the user. The summary time length may be acquired first. Then, the threshold audience rating determination unit 6 determines an audience rating as a threshold for generating a summary video from the summary time data and the summary time length (step 6), and the playback section acquisition unit 5 determines the audience rating (threshold). A playback section for extracting summary video is acquired from the playback section data (step 7). Finally, the summary video generation unit 8 generates a summary video by extracting the video of the section specified in the playback section from the target video (step 8).
[0040]
As described above, it is possible to acquire a summary video having a time length requested by the viewer.
[0041]
The summary video generation device 1 can also be realized by describing the processing contents in the summary video generation device 1 of the embodiment of the present invention as a computer program and executing the program using a computer. The computer has a CPU, a memory, a hard disk, an input device, an output device, a CD-ROM drive, a communication processing device, etc., and the function of each part in the summary video generation device 1 is mainly according to the above program by the CPU. This is realized by performing processing. Also, when acquiring data from the outside or giving instructions from the user, input devices, output devices, communication processing devices, etc. are used, and memory or hard disks are used to store or temporarily store processing data. Is used.
[0042]
The above program is recorded on a computer-readable recording medium, for example, FD (floppy (registered trademark) disk), MO, ROM, memory card, CD-ROM, DVD, removable disk, etc., stored or distributed. It is possible to do. The program can also be provided through a network such as the Internet or e-mail.
[0043]
As described above, according to the embodiment of the present invention, the summary is generated based on the audience rating, so that it is possible to create an effective summary video suitable for the interest of the viewer, in addition to being specified. Thus, it is possible to automatically set a threshold value from the time length of the summary video, and it is possible to easily create the summary video without the past data or the experience of the summary video creator. In addition, it is possible to provide a summary video quickly according to the length of time required by the user of the summary video.
[0044]
The present invention is not limited to the above-described embodiments, and various modifications and applications are possible within the scope of the claims.
[0045]
【The invention's effect】
According to the present invention, it is possible to generate a summary video in which a portion with a high audience rating is extracted with a time length specified by the user.
[Brief description of the drawings]
FIG. 1 is a diagram for explaining the concept of an embodiment of the present invention.
FIG. 2 is a graph for explaining a relationship between a threshold value and a time length of a reproduction section.
FIG. 3 is a diagram showing a configuration of a summary video generation apparatus 1 in an embodiment of the present invention.
FIG. 4 is a diagram showing an example of audience rating data in the embodiment of the present invention.
FIG. 5 is a diagram showing an example of reproduction section data in the embodiment of the present invention.
FIG. 6 is a diagram showing an example of summary time data in the embodiment of the present invention.
FIG. 7 is a flowchart showing a flow of processing in the summary video generating apparatus 1 according to the embodiment of the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Summary video production | generation apparatus 2 Audience rating data acquisition part 3 Playback area data creation part 4 Summary time data creation part 5 Playback area acquisition part 6 Threshold audience rating determination part 7 Summary time request | requirement acquisition part 8 Summary video generation part

Claims (6)

要約生成装置が映像又は音声の要約を作成する方法であって、
要約の対象となる映像又は音声の時間毎の視聴率を含む視聴率データを元に、各視聴率に対してその視聴率以上の時間区間を示す再生区間データを作成する再生区間データ作成ステップと、
その再生区間データを元に、各視聴率に対して前記時間区間の時間の総和を示す要約時間データを作成する要約時間データ作成ステップと、
要求される要約時間長を取得する要約時間長取得ステップと、
前記要約時間データと前記要求される要約時間長とから、その要約時間長分の映像又は音声を抽出するための視聴率の閾値を決定する閾値決定ステップと、
視聴率が前記閾値を超えた時間区間を前記再生区間データから取得し、その時間区間の映像又は音声を抽出し、抽出された映像又は音声を用いて要約を生成する生成ステップと
を有することを特徴とする方法。
A summary generation device for creating a video or audio summary,
A playback section data creation step for creating, for each audience rating, playback section data indicating a time segment that is equal to or higher than the audience rating, based on audience rating data including the audience rating for each video or audio to be summarized. ,
Based on the playback section data, a summary time data creating step for creating summary time data indicating the total time of the time section for each audience rating;
A summary time length acquisition step for obtaining a required summary time length;
From the summary time length and that is the summarized time data and the request, the threshold value determining step of determining a threshold value of the audience rating for extracting the video or audio of the summary time length,
In that it has a generating step including an audience obtains a time interval exceeds the threshold value from the playback section data, it extracts the video or audio of the time interval, to generate a summary using the extracted video or audio Feature method.
前記再生区間データ作成ステップは、
特定の視聴率に対してその視聴率以上の視聴率に対応する時間区間を前記視聴率データから取得する処理を前記特定の視聴率の大きさを変えて複数回行うステップを有する請求項に記載の方法。
The reproduction section data creation step includes
In claim 1 including the step of performing a plurality of times a process of acquiring the time interval corresponding to the viewing rate or more audience rating for a particular audience rating from the viewership data by changing the size of the particular audience rating The method described.
映像又は音声の要約を作成する要約生成装置であって、
要約の対象となる映像又は音声の時間毎の視聴率を含む視聴率データを元に、各視聴率に対してその視聴率以上の時間区間を示す再生区間データを作成する再生区間データ作成手段と、
その再生区間データを元に、各視聴率に対して前記時間区間の時間の総和を示す要約時間データを作成する要約時間データ作成手段と、
要求される要約時間長を取得する要約時間長取得手段と、
前記要約時間データと前記要求される要約時間長とから、その要約時間長分の映像又は音声を抽出するための視聴率の閾値を決定する閾値決定手段と、
視聴率が前記閾値を超えた時間区間を前記再生区間データから取得し、その時間区間の映像又は音声を抽出し、抽出された映像又は音声を用いて要約を生成する生成手段と
を有することを特徴とする要約生成装置。
A summary generator for creating a video or audio summary,
Reproduction section data creating means for creating reproduction section data indicating a time section equal to or higher than the audience rating for each audience rating based on audience rating data including the audience rating for each hour of video or audio to be summarized ,
Based on the playback section data, summary time data creating means for creating summary time data indicating the total time of the time section for each audience rating,
A summary time length acquisition means for acquiring a required summary time length;
From the summary time length and that is the summarized time data and the request, the threshold value determining means for determining a threshold value of the audience rating for extracting the video or audio of the summary time length,
Generating means for acquiring a time section in which the audience rating exceeds the threshold from the reproduction section data, extracting video or audio of the time section, and generating a summary using the extracted video or audio ; Feature summary generator.
前記再生区間データ作成手段は、特定の視聴率に対してその視聴率以上の視聴率に対応する時間区間を前記視聴率データから取得する処理を前記特定の視聴率の大きさを変えて複数回行うことにより前記再生区間データを作成する請求項に記載の要約生成装置。The reproduction section data creating means performs a process of acquiring a time section corresponding to a viewer rating higher than the audience rating from the audience rating data for a specific audience rating by changing the size of the particular audience rating a plurality of times. The summary generation device according to claim 3 , wherein the reproduction section data is created by performing. 請求項1又は2に記載の方法における各ステップをコンピュータに実行させるプログラム。The program which makes a computer perform each step in the method of Claim 1 or 2 . 請求項に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。A computer-readable recording medium on which the program according to claim 5 is recorded.
JP2003006388A 2003-01-14 2003-01-14 Summary generation apparatus, summary generation method, summary generation program, and recording medium recording the program Expired - Fee Related JP4019945B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003006388A JP4019945B2 (en) 2003-01-14 2003-01-14 Summary generation apparatus, summary generation method, summary generation program, and recording medium recording the program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003006388A JP4019945B2 (en) 2003-01-14 2003-01-14 Summary generation apparatus, summary generation method, summary generation program, and recording medium recording the program

Publications (2)

Publication Number Publication Date
JP2004220286A JP2004220286A (en) 2004-08-05
JP4019945B2 true JP4019945B2 (en) 2007-12-12

Family

ID=32896776

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003006388A Expired - Fee Related JP4019945B2 (en) 2003-01-14 2003-01-14 Summary generation apparatus, summary generation method, summary generation program, and recording medium recording the program

Country Status (1)

Country Link
JP (1) JP4019945B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4556752B2 (en) * 2005-04-18 2010-10-06 株式会社日立製作所 Recording / playback apparatus having commercial viewing control function
JP2007228334A (en) * 2006-02-24 2007-09-06 Fujifilm Corp Moving image control apparatus, method, and program
JP2008130215A (en) * 2006-11-24 2008-06-05 Sharp Corp Automatic editing apparatus and automatic editing method
JP5017205B2 (en) * 2008-07-25 2012-09-05 ヤフー株式会社 Program analysis apparatus, program analysis method, and program analysis program
KR101628237B1 (en) * 2009-01-21 2016-06-22 삼성전자주식회사 Method and apparatus for forming highlight image
JP2011217116A (en) * 2010-03-31 2011-10-27 Mitsui Sumitomo Insurance Co Ltd Reproducing device, imaging reproducing system, imaging reproducing method, reproducing program and imaging program

Also Published As

Publication number Publication date
JP2004220286A (en) 2004-08-05

Similar Documents

Publication Publication Date Title
JP4615166B2 (en) Video information summarizing apparatus, video information summarizing method, and video information summarizing program
CN101257582B (en) Media generation system
JP5092000B2 (en) Video processing apparatus, method, and video processing system
CN104768082B (en) A kind of audio and video playing information processing method and server
CN101212648B (en) Method and apparatus for synchronizing data streams and metadata of content
CN1836287B (en) Video abstracting
US7277859B2 (en) Digest generation method and apparatus for image and sound content
CN118921502A (en) Method, computer readable medium and system for extracting metadata from a depiction of an event
BRPI0619197A2 (en) detection of repeating content in broadcast media
WO2014182901A1 (en) Timed comments for media
EP1293914A2 (en) Apparatus, method and processing program for summarizing image information
US8068719B2 (en) Systems and methods for detecting exciting scenes in sports video
US12499915B2 (en) Systems and methods of generating personalized video clips for songs using a pool of short videos
CN113170228A (en) Audio processing for extracting variable length disjoint segments from audiovisual content
WO2010029472A1 (en) Inserting advertisements in connection with user-created content
JP2009272816A (en) Server, information processing system and information processing method
JP4019945B2 (en) Summary generation apparatus, summary generation method, summary generation program, and recording medium recording the program
CN115967842B (en) Video seek method, system, video playback server and storage medium
JP3592210B2 (en) Recording device and recording method
CN102067228A (en) Content reproduction order determination system, and method and program thereof
KR102297362B1 (en) Apparatus and method for providing advertisement based on user characteristic using content playing apparatus
CN102611863B (en) Motion picture recording/reproducing apparatus
US20060010366A1 (en) Multimedia content generator
JP4162459B2 (en) Multimedia information reproducing apparatus, multimedia information reproducing method and program
Suzuki et al. AnnoTone: Record-time audio watermarking for context-aware video editing

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070612

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070810

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070904

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070917

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101005

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111005

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121005

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121005

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131005

Year of fee payment: 6

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees