JP7631775B2

JP7631775B2 - Video processing device, video distribution system, video processing method, and program

Info

Publication number: JP7631775B2
Application number: JP2020206456A
Authority: JP
Inventors: 友行小池
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2020-12-14
Filing date: 2020-12-14
Publication date: 2025-02-19
Anticipated expiration: 2040-12-14
Also published as: JP2022093796A

Description

本発明は、映像処理装置、映像配信システム、映像処理方法、およびプログラムに関し、特に、入力信号から映像データを生成および編集する映像処理装置、映像配信システム、映像処理方法、およびプログラムに関する。 The present invention relates to a video processing device, a video distribution system, a video processing method, and a program, and in particular to a video processing device, a video distribution system, a video processing method, and a program that generate and edit video data from an input signal.

関連する技術では、クラウドサーバが、モバイルネットワーク（無線ネットワーク）を介して、カメラと接続されたリアルタイムエンコーダから、入力信号を受信する。クラウドサーバは、入力信号からデコードした映像データと、時刻情報または緊急速報などの補助情報を含む画像データとを合成する。そして、関連する技術では、クラウドサーバが、テレビジョン受信機やモニタなどの表示装置、あるいは、スマートフォンやタブレットデバイスなどのユーザ端末に対して、映像データ上に画像データが重畳された合成データを送信する。 In a related technology, a cloud server receives an input signal from a real-time encoder connected to a camera via a mobile network (wireless network). The cloud server synthesizes video data decoded from the input signal with image data including auxiliary information such as time information or emergency alerts. In a related technology, the cloud server then transmits the synthesized data, in which image data is superimposed on the video data, to a display device such as a television receiver or monitor, or a user terminal such as a smartphone or tablet device.

合成データに関連し、特許文献１には、カメラから取得した実写の映像データと、モデリングによって生成された３Ｄコンピュータグラフィックとを合成し、これによって得られた合成データを、監視用モニタに表示することが記載されている。 In relation to synthetic data, Patent Document 1 describes a method of synthesizing real-life video data acquired from a camera with 3D computer graphics generated by modeling, and displaying the resulting synthetic data on a surveillance monitor.

また、特許文献２には、外部システムより入力された電文データを解析することによって、電文データの内容を手話モーションに変換することが記載されている。さらに、特許文献２には、手話モーションに基づく３Ｄアニメーションを生成し、電文データの言語解析の結果に基づく日本語字幕とともに、生成した３Ｄアニメーションを表示することが記載されている。 Patent Document 2 also describes converting the contents of telegram data into sign language motion by analyzing telegram data input from an external system. Furthermore, Patent Document 2 describes generating 3D animation based on the sign language motion, and displaying the generated 3D animation together with Japanese subtitles based on the results of the language analysis of the telegram data.

特開平０９－２３４４９号公報Japanese Patent Application Publication No. 09-23449 特開２０１６－０３８７４８号公報JP 2016-038748 A

特許文献１に記載の関連する技術では、カメラの故障または通信障害などを原因として、入力信号を受信することができない場合がある。このような場合、映像データの送信が中断される。そのため、自然災害の状況に関する緊急速報などの補助情報を提供することが一時的にできなくなる。 In the related technology described in Patent Document 1, there are cases where the input signal cannot be received due to camera failure or communication failure. In such cases, the transmission of video data is interrupted. As a result, it becomes temporarily impossible to provide auxiliary information such as emergency alerts regarding the situation of natural disasters.

本発明は、上記の課題に鑑みてなされたものであり、その目的は、入力信号を受信することができない場合においても、補助情報を継続的に提供可能な映像処理装置を提供することにある。 The present invention has been made in consideration of the above problems, and its purpose is to provide a video processing device that can continuously provide auxiliary information even when an input signal cannot be received.

上記の課題を解決するために、本発明の一態様に係わる映像処理装置は、入力信号から映像データを生成する映像生成手段と、前記映像データ上に重畳される第１の画像データを入力する画像入力手段と、前記第１の画像データと、前記映像データとを合成する編集手段と、前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する出力手段とを備え、前記映像生成手段は、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能に構成されている。 In order to solve the above problem, a video processing device according to one aspect of the present invention includes a video generation means for generating video data from an input signal, an image input means for inputting first image data to be superimposed on the video data, an editing means for synthesizing the first image data and the video data, and an output means for outputting synthesized data obtained by synthesizing the first image data and the video data, and the video generation means is configured to be able to generate the video data from the first image data instead of the input signal.

本発明の一態様に係わる映像配信システムは、本発明の一態様に係わる映像処理装置と、前記映像処理装置から前記合成データを配信される１または複数のユーザ端末と、１または複数の撮像装置と、前記１または複数の撮像装置のそれぞれから取得した撮影データを、前記入力信号に変換し、前記入力信号を前記映像処理装置へ送信するエンコーダと、を備えている。 A video distribution system according to one aspect of the present invention includes a video processing device according to one aspect of the present invention, one or more user terminals to which the composite data is distributed from the video processing device, one or more imaging devices, and an encoder that converts the captured image data acquired from each of the one or more imaging devices into the input signal and transmits the input signal to the video processing device.

本発明の一態様に係わる映像処理方法では、入力信号から映像データを生成し、前記映像データ上に重畳される第１の画像データを入力し、前記第１の画像データと、前記映像データとを合成し、前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力し、前記映像データの生成において、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能である。 In a video processing method according to one aspect of the present invention, video data is generated from an input signal, first image data is input to be superimposed on the video data, the first image data and the video data are synthesized, and synthesized data obtained by synthesizing the first image data and the video data is output, and in generating the video data, the video data can be generated from the first image data instead of the input signal.

本発明の一態様に係わるプログラムは、入力信号から映像データを生成する処理と、前記映像データ上に重畳される第１の画像データを入力する処理と、前記第１の画像データと、前記映像データとを合成する処理と、前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する処理とをコンピュータに実行させ、前記映像データを生成する処理において、前記コンピュータが、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能であるように構成されている。 A program according to one aspect of the present invention causes a computer to execute a process of generating video data from an input signal, a process of inputting first image data to be superimposed on the video data, a process of synthesizing the first image data and the video data, and a process of outputting synthesized data obtained by synthesizing the first image data and the video data, and is configured such that in the process of generating the video data, the computer is capable of generating the video data from the first image data instead of the input signal.

本発明の一態様によれば、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。 According to one aspect of the present invention, auxiliary information can be continuously provided even when an input signal cannot be received.

実施形態１に係わる映像処理装置の構成を示すブロック図である。1 is a block diagram showing a configuration of a video processing device according to a first embodiment; 実施形態１に係わる映像処理装置のハードウェア構成の一例を示す図である。FIG. 1 is a diagram illustrating an example of a hardware configuration of a video processing device according to a first embodiment. 実施形態１に係わる映像処理装置が出力する合成データの表示例を示す図である。4A and 4B are diagrams illustrating a display example of composite data output by the video processing device according to the first embodiment. 実施形態２に係わる映像処理装置の構成を示すブロック図である。FIG. 11 is a block diagram showing the configuration of a video processing device according to a second embodiment. 実施形態２に係わる映像処理装置のハードウェア構成の一例を示す図である。FIG. 11 is a diagram illustrating an example of a hardware configuration of a video processing device according to a second embodiment. 実施形態２に係わる映像処理装置が出力する合成データの表示例を示す図である。13A and 13B are diagrams illustrating a display example of composite data output by a video processing device according to a second embodiment. 実施形態３に係わる映像処理装置の構成を示すブロック図である。FIG. 11 is a block diagram showing a configuration of a video processing device according to a third embodiment. 実施形態３に係わる映像処理装置のハードウェア構成の一例を示す図である。FIG. 11 is a diagram illustrating an example of a hardware configuration of a video processing device according to a third embodiment. 実施形態３に係わる映像処理装置が出力する合成データの表示例を示す図である。13A and 13B are diagrams showing a display example of composite data output by a video processing device according to a third embodiment. 実施形態４に係わる映像処理装置の構成を示すブロック図である。FIG. 13 is a block diagram showing the configuration of a video processing device according to a fourth embodiment. 実施形態４に係わる映像処理装置のハードウェア構成の一例を示す図である。FIG. 13 is a diagram illustrating an example of a hardware configuration of a video processing device according to a fourth embodiment. 実施形態４に係わる映像処理装置が出力する割り込み映像の表示例を示す図である。13A and 13B are diagrams showing a display example of an interruption video output by a video processing device according to a fourth embodiment. 実施形態５に係わる映像配信システムの構成の一例を概略的に示す図である。FIG. 13 is a diagram illustrating an example of the configuration of a video distribution system according to a fifth embodiment. 実施形態１～４のいずれかに係わる映像処理装置のハードウェア構成の一例を示す図である。FIG. 1 is a diagram illustrating an example of a hardware configuration of a video processing device according to any one of the first to fourth embodiments.

本発明を実施するための形態について、以下で説明する。 The following describes how to implement the present invention.

〔実施形態１〕
図１から図３を参照して、実施形態１について説明する。 [Embodiment 1]
A first embodiment will be described with reference to FIG. 1 to FIG.

（映像処理装置１０）
図１は、本実施形態１に係わる映像処理装置１０の構成を示すブロック図である。図１に示すように、映像処理装置１０は、映像生成部１１、画像入力部１２、編集部１３、および出力部１５を備えている。 (Video Processing Device 10)
1 is a block diagram showing the configuration of a video processing device 10 according to embodiment 1. As shown in FIG. 1, the video processing device 10 includes a video generation unit 11, an image input unit 12, an editing unit 13, and an output unit 15.

映像生成部１１は、入力信号から映像データを生成する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。映像生成部１１は、映像生成手段の一例である。換言すれば、映像生成部１１は、入力信号を第１の画像データに切り替える回路を備える。一例では、映像生成部１１は、静止画である第１の画像データを複製することによって、時系列データである映像データを生成する。これにより、映像生成部１１は、入力信号および第１の画像データのどちらからでも、映像データを生成することができる。なお、ここでの入力信号とは、図示しない外部装置から送信された時系列のデータであり、特に、映像データをエンコードすることによって、通信用のフォーマットに変換された符号化データである。 The video generating unit 11 generates video data from an input signal. The video generating unit 11 is configured to be able to generate video data from first image data instead of the input signal. The video generating unit 11 is an example of a video generating means. In other words, the video generating unit 11 has a circuit that switches the input signal to the first image data. In one example, the video generating unit 11 generates video data, which is time-series data, by duplicating the first image data, which is a still image. This allows the video generating unit 11 to generate video data from either the input signal or the first image data. Note that the input signal here is time-series data transmitted from an external device (not shown), and in particular, is coded data that has been converted into a communication format by encoding the video data.

一例では、映像生成部１１は、無線ネットワークを介して、カメラなどの撮像装置と接続されたリアルタイムエンコーダから、入力信号を受信する。映像生成部１１は、入力信号からデコードした映像データを、編集部１３へ出力する。 In one example, the video generation unit 11 receives an input signal from a real-time encoder connected to an imaging device such as a camera via a wireless network. The video generation unit 11 outputs video data decoded from the input signal to the editing unit 13.

画像入力部１２は、映像データ上に重畳される第１の画像データを入力する。画像入力部１２は、画像入力手段の一例である。 The image input unit 12 inputs the first image data to be superimposed on the video data. The image input unit 12 is an example of an image input means.

一例では、画像入力部１２は、コンピュータグラフィック（以下、ＣＧ（Computer Graphics）と記載する）を、第１の画像データとして、映像生成部１１および編集部１３に入力する。第１の画像データは、例えば、現在時刻を示す時刻情報、または、地震や台風などの自然災害の発生に関する緊急速報を含む。あるいは、第１の画像データは、特許文献２に記載されているように、モデリングされた人物の３Ｄコンピュータグラフィックであってもよい。 In one example, the image input unit 12 inputs computer graphics (hereinafter referred to as CG (Computer Graphics)) as first image data to the video generation unit 11 and the editing unit 13. The first image data includes, for example, time information indicating the current time, or an emergency report regarding the occurrence of a natural disaster such as an earthquake or typhoon. Alternatively, the first image data may be a 3D computer graphic of a modeled person, as described in Patent Document 2.

編集部１３は、第１の画像データと、映像データとを合成する。編集部１３は、編集手段の一例である。 The editing unit 13 combines the first image data with the video data. The editing unit 13 is an example of an editing means.

一例では、編集部１３は、画像入力部１２から、第１の画像データを受信する。また、編集部１３は、映像生成部１１から、映像データを受信する。編集部１３は、第１の画像データと、映像データとを合成することによって、合成データを生成する。ここで合成とは、２つ以上の画像データまたは映像データを組み合わせて、１つの画像データまたは映像データを生成することである。合成の一例は、映像データ上に文字または図形を重畳させるスーパーインポーズである。編集部１３は、生成した合成データを、出力部１５へ出力する。 In one example, the editing unit 13 receives first image data from the image input unit 12. The editing unit 13 also receives video data from the video generation unit 11. The editing unit 13 generates composite data by combining the first image data and the video data. Here, "combining" refers to combining two or more pieces of image data or video data to generate one piece of image data or video data. One example of compositing is superimposing text or graphics onto video data. The editing unit 13 outputs the generated composite data to the output unit 15.

出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。出力部１５は、出力手段の一例である。 The output unit 15 outputs the composite data obtained by combining the first image data and the video data. The output unit 15 is an example of an output means.

一例では、出力部１５は、編集部１３から、合成データを受信する。出力部１５は、無線ネットワークを介して、スマートフォンなどのユーザ端末へ合成データを送信する。しかしながら、出力部１５による合成データの出力先は特に限定されない。 In one example, the output unit 15 receives the composite data from the editing unit 13. The output unit 15 transmits the composite data to a user terminal such as a smartphone via a wireless network. However, there are no particular limitations on the destination to which the composite data is output by the output unit 15.

（ハードウェア構成）
図２を参照して、上述した映像処理装置１０のハードウェア構成の一例を説明する。図２に示すように、映像生成部１１は、入力信号として、入力Ｘ及び入力Ｙを受信する。入力Ｘ及び入力Ｙは、互いに異なっていてもよいし、同じであってもよい。映像生成部１１は、ビデオミキサー（図２ではＭＩＸＥＲと表示）によって、入力Ｘおよび入力Ｙの一方をデコードする。映像生成部１１は、入力Ｘまたは入力Ｙをデコードすることによって得られた映像データを、編集部１３へ出力する。 (Hardware configuration)
An example of a hardware configuration of the above-mentioned video processing device 10 will be described with reference to Fig. 2. As shown in Fig. 2, the video generation unit 11 receives an input X and an input Y as input signals. The input X and the input Y may be different from each other or may be the same. The video generation unit 11 decodes one of the input X and the input Y by a video mixer (shown as MIXER in Fig. 2). The video generation unit 11 outputs video data obtained by decoding the input X or the input Y to the editing unit 13.

画像入力部１２は、３つの画像入力部Ａ～Ｃを備えている。画像入力部Ａから、映像生成部１１および編集部１３へ、第１のコンピュータグラフィック（ＣＧ１と呼ぶ）が入力される。一方、画像入力部ＢおよびＣから、編集部１３へ、それぞれ、第２、第３のコンピュータグラフィック（ＣＧ２、ＣＧ３と呼ぶ）が入力される。 The image input unit 12 has three image input units A to C. A first computer graphic (called CG1) is input from image input unit A to the video generation unit 11 and the editing unit 13. Meanwhile, a second and third computer graphic (called CG2 and CG3) are input from image input units B and C, respectively, to the editing unit 13.

映像生成部１１は、入力Ｘまたは入力Ｙに代えて、画像入力部Ａから入力されるＣＧ１に基づいて、映像データを生成することが可能に構成されている。具体的には、映像生成部１１は、セレクター（図２ではＳＥＬと表示）により、入力Ｘまたは入力Ｙと、画像入力部Ａからの入力とを切り替える。 The image generating unit 11 is configured to be capable of generating image data based on CG1 input from the image input unit A instead of the input X or input Y. Specifically, the image generating unit 11 switches between the input X or input Y and the input from the image input unit A using a selector (shown as SEL in FIG. 2).

編集部１３は、画像入力部Ａ～Ｃと対応する３つのキーヤー（図２ではＫＥＹＥＲ）を備えている。キーヤーは、キーイング処理を実行するソフトウェアである。３つのキーヤーは、それぞれ、対応する画像入力部Ａ～Ｃからの入力（ＣＧ１～ＣＧ３）をＯＮ／ＯＦＦする機能を有する。入力のＯＮ／ＯＦＦとは、映像データ上で、コンピュータグラフィック（以下、ＣＧと呼ぶ）が見える状態（ＯＮ）と、ＣＧが見えない状態（ＯＦＦ）とを切り替えることを指す。ＣＧは、映像データの下側に仮想的に配置されており、映像データの一部が透明化されることによって、ＣＧが見える状態が形成される。ここで、ＣＧが映像データの下側に仮想的に配置されるとは、ＣＧと映像データの画像とを重ねて表示するようにしたとき、映像データによりＣＧが隠されて見えないことを意味する。このとき、映像データを上層、ＣＧを下層と呼ぶ。 The editing unit 13 has three keyers (KEYER in FIG. 2) corresponding to the image input units A to C. The keyer is software that executes keying processing. The three keyers have the function of turning on/off the input (CG1 to CG3) from the corresponding image input units A to C. Turning the input on/off refers to switching between a state in which computer graphics (hereafter referred to as CG) is visible (ON) and a state in which the CG is not visible (OFF) on the video data. The CG is virtually placed below the video data, and the state in which the CG is visible is created by making part of the video data transparent. Here, "virtually placed below the video data" means that when the CG and the image of the video data are displayed superimposed, the CG is hidden by the video data and cannot be seen. In this case, the video data is called the upper layer and the CG is called the lower layer.

また、編集部１３は、デジタルビデオエフェクター（図２ではＤＶＥ（Digital Video Effecter）と表示）を備えている。編集部１３のＤＶＥは、映像生成部１１のＭＩＸＥＲから入力された映像データと、画像入力部Ａ～Ｃから入力されたＣＧ１～ＣＧ３の任意の組み合わせとを合成する。ＤＶＥは、映像データとＣＧ１～ＣＧ３の組み合わせとを合成することによって得られた合成データを、出力部１５へ出力する。 The editing unit 13 also includes a digital video effector (shown as DVE (Digital Video Effector) in FIG. 2). The DVE of the editing unit 13 combines the video data input from the MIXER of the video generation unit 11 with any combination of CG1 to CG3 input from image input units A to C. The DVE outputs the combined data obtained by combining the video data with the combination of CG1 to CG3 to the output unit 15.

出力部１５は、図示しない通信部により、無線ネットワークを介して、スマートフォンなどのユーザ端末へ、合成データを送信（出力）する。 The output unit 15 transmits (outputs) the composite data to a user terminal such as a smartphone via a wireless network using a communication unit (not shown).

（表示例）
図３は、映像処理装置１０が送信（出力）する合成データの表示例を示す図である。図３のフレームは、例えば、合成データを受信したユーザ端末の画面を表す。図３において、「ＣＧ１⇔入力Ｘ」「ＣＧ１⇔入力Ｙ」と示す。これは、合成データにおいて、入力Ｘまたは入力Ｙに基づく映像データと、画像入力部Ａから入力されるＣＧ１に基づく映像データとが切り替えられることを意味する。すなわち、ＣＧ１が画面に表示された状態から、入力Ｘまたは入力Ｙが画面に表示された状態へ、又はその逆に、変化する。この切り替えは、映像生成部１１のセレクター（図２）によって実行される。 (Display example)
Fig. 3 is a diagram showing a display example of the composite data transmitted (output) by the video processing device 10. The frame in Fig. 3 represents, for example, the screen of a user terminal that has received the composite data. In Fig. 3, "CG1⇔Input X" and "CG1⇔Input Y" are shown. This means that in the composite data, video data based on input X or input Y and video data based on CG1 input from image input unit A are switched. That is, the state changes from one in which CG1 is displayed on the screen to one in which input X or input Y is displayed on the screen, or vice versa. This switching is performed by a selector (Fig. 2) in the video generation unit 11.

また、図３に示すように、フレームの右上には、ＣＧ１～ＣＧ３の任意の組み合わせが配置される。ＣＧ１～ＣＧ３の組み合わせは、映像データ上に表示される。ＣＧ１～ＣＧ３の組合せは、編集部１３のキーヤー（図２）によるキーイング処理によって決定される。 Also, as shown in Figure 3, any combination of CG1 to CG3 is placed in the upper right corner of the frame. The combination of CG1 to CG3 is displayed on the video data. The combination of CG1 to CG3 is determined by keying processing by the keyer (Figure 2) of the editing department 13.

（本実施形態の効果）
本実施形態の構成によれば、映像生成部１１は、入力信号から映像データを生成する。画像入力部１２は、映像データ上に重畳される第１の画像データを入力する。編集部１３は、第１の画像データと、映像データとを合成する。出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。入力信号が途絶した場合、映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成することができる。第１の画像データは、例えば、自然災害の発生に関する緊急速報などの補助情報である。これにより、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。 (Effects of this embodiment)
According to the configuration of this embodiment, the video generation unit 11 generates video data from an input signal. The image input unit 12 inputs first image data to be superimposed on the video data. The editing unit 13 synthesizes the first image data and the video data. The output unit 15 outputs synthetic data obtained by synthesizing the first image data and the video data. The video generation unit 11 is configured to be able to generate video data from the first image data instead of the input signal. When the input signal is interrupted, the video generation unit 11 can generate video data from the first image data instead of the input signal. The first image data is, for example, auxiliary information such as an emergency report regarding the occurrence of a natural disaster. This makes it possible to continuously provide auxiliary information even when the input signal cannot be received.

〔実施形態２〕
図４から図６を参照して、実施形態２について説明する。本実施形態２では、第２の画像データを、映像データの背景として提供する構成を説明する。 [Embodiment 2]
A second embodiment will be described with reference to Fig. 4 to Fig. 6. In the second embodiment, a configuration will be described in which second image data is provided as the background of video data.

（映像処理装置２０）
図４は、本実施形態２に係わる映像処理装置２０の構成を示すブロック図である。図４に示すように、映像処理装置２０は、映像生成部１１、画像入力部１２、編集部１３、及び出力部１５を備えている。映像処理装置２０は、背景入力部２４をさらに備えている。映像処理装置２０は、背景入力部２４を備えている点で、前記実施形態１に係わる映像処理装置１０とは異なる。 (Video Processing Device 20)
Fig. 4 is a block diagram showing the configuration of a video processing device 20 according to the second embodiment. As shown in Fig. 4, the video processing device 20 includes a video generation unit 11, an image input unit 12, an editing unit 13, and an output unit 15. The video processing device 20 further includes a background input unit 24. The video processing device 20 differs from the video processing device 10 according to the first embodiment in that the video processing device 20 includes the background input unit 24.

本実施形態２では、画像入力部１２は、第１の画像データに加えて、第２の画像データをさらに入力する。なお、本実施形態２では、前記実施形態１の説明を引用して、重複する構成に関する説明を省略する。 In this second embodiment, the image input unit 12 inputs second image data in addition to the first image data. Note that in this second embodiment, the explanation of the first embodiment is cited, and explanations of overlapping configurations are omitted.

背景入力部２４は、第２の画像データを、映像データの背景として入力する。背景入力部２４は、背景入力手段の一例である。図４に示すように、背景入力部２４は、画像入力部１２から、第２の画像データを受信する。背景入力部２４は、第２の画像データに基づいて、映像データの背景を生成する。背景とは、映像データの下側に仮想的に配置された画像データである。 The background input unit 24 inputs the second image data as the background of the video data. The background input unit 24 is an example of a background input means. As shown in FIG. 4, the background input unit 24 receives the second image data from the image input unit 12. The background input unit 24 generates the background of the video data based on the second image data. The background is image data that is virtually placed below the video data.

第２の画像データは、第１の画像データとは異なる画像データである。一例では、第２の画像データは、前記実施形態１において説明したＣＧ１～ＣＧ３のいずれか又はその任意の組み合わせであってよい。 The second image data is image data that is different from the first image data. In one example, the second image data may be any one of CG1 to CG3 described in the first embodiment or any combination thereof.

（ハードウェア構成）
図５を参照して、上述した映像処理装置２０のハードウェア構成の一例を説明する。図５に示すように、背景入力部２４は、画像入力部１２に含まれる画像入力部Ａ～Ｃと対応する３つのキーヤー（図５ではＫＥＹＥＲと表示）を備えている。背景入力部２４の３つのキーヤーは、編集部１３のキーヤーと同様に、対応する画像入力部Ａ～Ｃからの入力をＯＮ／ＯＦＦする機能を有する。 (Hardware configuration)
An example of the hardware configuration of the above-mentioned video processing device 20 will be described with reference to Fig. 5. As shown in Fig. 5, the background input unit 24 has three keyers (indicated as KEYER in Fig. 5) corresponding to the image input units A to C included in the image input unit 12. The three keyers of the background input unit 24, like the keyers of the editing unit 13, have the function of turning on/off the inputs from the corresponding image input units A to C.

背景入力部２４の３つのキーヤーは、それぞれ、対応する画像入力部Ａ～Ｃから、ＣＧ１～ＣＧ３を受信する。背景入力部２４は、ＣＧ１～ＣＧ３の任意の組み合わせを、第２の画像データとして、編集部１３のＤＶＥに入力する。 The three keyers of the background input unit 24 receive CG1 to CG3 from the corresponding image input units A to C, respectively. The background input unit 24 inputs any combination of CG1 to CG3 to the DVE of the editing unit 13 as second image data.

編集部１３のＤＶＥは、映像生成部１１によって生成された映像データと、画像入力部１２から入力された第１の画像データとともに、背景入力部２４から入力された第２の画像データを合成する。この場合、第１の画像データは、映像データに重畳される一方、第２の画像データは、映像データの背景として合成される。編集部１３は、合成データを出力部１５へ出力する。 The DVE of the editing unit 13 synthesizes the video data generated by the video generation unit 11, the first image data input from the image input unit 12, and the second image data input from the background input unit 24. In this case, the first image data is superimposed on the video data, while the second image data is synthesized as the background of the video data. The editing unit 13 outputs the synthesized data to the output unit 15.

出力部１５は、編集部１３のＤＶＥからの合成データを、ユーザ端末等へ送信する。 The output unit 15 transmits the composite data from the DVE of the editing unit 13 to a user terminal, etc.

（表示例）
図６は、映像処理装置２０が送信（出力）する合成データの表示例を示す。図６のフレームは、例えば、ユーザ端末の画面を表す。図６に示すように、合成データにおいて、入力Ｘまたは入力Ｙに基づく映像データと、画像入力部Ａから入力されるＣＧ１に基づく映像データとが切り替えられる。この切り替えは、映像生成部１１のセレクター（図２）によって実行される。 (Display example)
Fig. 6 shows a display example of the composite data transmitted (output) by the video processing device 20. The frame in Fig. 6 represents, for example, the screen of a user terminal. As shown in Fig. 6, in the composite data, the video data based on the input X or input Y and the video data based on CG1 input from the image input unit A are switched. This switching is performed by the selector (Fig. 2) of the video generation unit 11.

また、図６では、編集部１３のＤＶＥによって、映像データが縮小されている。図６では、映像データが縮小された結果、フレームの右下に背景が表れている。背景は、ＣＧ１～ＣＧ３の任意の組み合わせである。映像データが、フレームの全体に再拡大された場合、図３に例示するように、映像データの背景は見えなくなる。 In addition, in FIG. 6, the video data has been reduced by the DVE of the editing unit 13. In FIG. 6, as a result of reducing the video data, the background appears in the lower right of the frame. The background is any combination of CG1 to CG3. When the video data is re-enlarged to fill the entire frame, the background of the video data becomes invisible, as shown in the example of FIG. 3.

さらに、本実施形態の構成によれば、画像入力部１２は、第１の画像データに加えて、第２の画像データをさらに入力する。背景入力部２４は、第２の画像データを、映像データの背景として入力する。そのため、映像データの背景として、補助情報を提供することができる。 Furthermore, according to the configuration of this embodiment, the image input unit 12 inputs second image data in addition to the first image data. The background input unit 24 inputs the second image data as the background of the video data. Therefore, auxiliary information can be provided as the background of the video data.

〔実施形態３〕
図７から図１０を参照して、実施形態３について説明する。本実施形態３では、第１の画像データとは異なる第３の画像データを、映像データとともに提示する構成を説明する。 [Embodiment 3]
A third embodiment will be described with reference to Fig. 7 to Fig. 10. In the third embodiment, a configuration will be described in which third image data different from the first image data is presented together with video data.

（映像処理装置３０）
図７は、本実施形態３に係わる映像処理装置３０の構成を示すブロック図である。図７に示すように、映像処理装置３０は、映像生成部１１、画像入力部１２´、編集部１３、及び出力部１５を備えている。本実施形態３の構成は、前記実施形態１の構成と同等である。 (Video Processing Device 30)
Fig. 7 is a block diagram showing the configuration of a video processing device 30 according to the present embodiment 3. As shown in Fig. 7, the video processing device 30 includes a video generation unit 11, an image input unit 12', an editing unit 13, and an output unit 15. The configuration of the present embodiment 3 is equivalent to the configuration of the above-mentioned embodiment 1.

しかしながら、前記実施形態１では、画像入力部１２は、第１の画像データを映像生成部１１に入力する。一方、本実施形態３では、画像入力部１２´が、第１の画像データを映像生成部１１に入力するとともに、第３の画像データを出力部１５に入力する。第３の画像データは、第１の画像データと互いに異なっている。一例では、第１の画像データは、現在時刻を示す時刻情報であり、第３の画像データは、自然災害の発生に関する緊急速報である。 However, in the first embodiment, the image input unit 12 inputs the first image data to the video generation unit 11. On the other hand, in the third embodiment, the image input unit 12' inputs the first image data to the video generation unit 11 and inputs the third image data to the output unit 15. The third image data is different from the first image data. In one example, the first image data is time information indicating the current time, and the third image data is an emergency report regarding the occurrence of a natural disaster.

（ハードウェア構成）
図８を参照して、上述した映像処理装置３０のハードウェア構成の一例を説明する。図８に示すように、画像入力部１２´は、画像入力部Ａ～Ｃに加えて、画像入力部Ｄ～Ｅをさらに備えている。 (Hardware configuration)
An example of a hardware configuration of the above-mentioned video processing device 30 will be described with reference to Fig. 8. As shown in Fig. 8, the image input unit 12' further includes image input units D to E in addition to the image input units A to C.

画像入力部Ｄ～Ｅは、それぞれ、第４、第５のコンピュータグラフィック（ＣＧ４、ＣＧ５と呼ぶ）を、出力部１５に入力する。 Image input units D to E input fourth and fifth computer graphics (referred to as CG4 and CG5), respectively, to output unit 15.

出力部１５は、画像入力部Ｄ～Ｅと対応する２つのキーヤー（図９ではＫＥＹＥＲ）を備えている。出力部１５の２つのキーヤーは、対応する画像入力部Ｄ～Ｅからの入力をＯＮ／ＯＦＦする機能を有する。 The output unit 15 has two keyers (KEYER in FIG. 9) corresponding to the image input units D to E. The two keyers of the output unit 15 have the function of turning on/off the input from the corresponding image input units D to E.

出力部１５は、編集部１３から、合成データを受信する。また、出力部１５は、画像入力部Ｄ～Ｅから、ＣＧ４～ＣＧ５を受信する。出力部１５は、キーヤーを用いて、ＣＧ４～ＣＧ５の一方又は両方から、第３の画像データを生成する。出力部１５は、編集部１３から受信した合成データとともに、ＣＧ４～ＣＧ５の任意の組み合わせで構成された第３の画像データを出力する。 The output unit 15 receives the composite data from the editing unit 13. The output unit 15 also receives CG4 to CG5 from the image input units D to E. The output unit 15 uses a keyer to generate third image data from one or both of CG4 to CG5. The output unit 15 outputs the third image data composed of any combination of CG4 to CG5 together with the composite data received from the editing unit 13.

（表示例）
図９は、映像処理装置３０が送信（出力）する合成データの表示例を示す。図９のフレームは、例えば、ユーザ端末の画面を表す。図９に示すように、合成データにおいて、入力Ｘまたは入力Ｙに基づく映像データと、画像入力部Ａから入力されるＣＧ１に基づく映像データとが切り替えられる。この切り替えは、映像生成部１１のセレクター（図２）によって実行される。 (Display example)
Fig. 9 shows a display example of the composite data transmitted (output) by the video processing device 30. The frame in Fig. 9 represents, for example, the screen of a user terminal. As shown in Fig. 9, in the composite data, the video data based on the input X or input Y and the video data based on CG1 input from the image input unit A are switched. This switching is performed by the selector (Fig. 2) of the video generation unit 11.

また、図９に示すように、フレームの右上には、ＣＧ１～ＣＧ３の任意の組み合わせが配置される。ＣＧ１～ＣＧ３の組み合わせは、映像データ上に表示される。ＣＧ１～ＣＧ３の組合せは、編集部１３のキーヤー（図２）によるキーイング処理によって決定される。 Also, as shown in Figure 9, any combination of CG1 to CG3 is placed in the upper right corner of the frame. The combination of CG1 to CG3 is displayed on the video data. The combination of CG1 to CG3 is determined by keying processing by the keyer (Figure 2) of the editing department 13.

さらに、図９に示すように、フレームの左上には、ＣＧ４～ＣＧ５の任意の組み合わせが配置される。ＣＧ４～ＣＧ５の組み合わせは、映像データ上に配置される。ＣＧ４～ＣＧ５の組合せは、出力部１５のキーヤー（図８）によるキーイング処理によって決定される。 Furthermore, as shown in FIG. 9, any combination of CG4 to CG5 is placed in the upper left corner of the frame. The combination of CG4 to CG5 is placed on the video data. The combination of CG4 to CG5 is determined by keying processing by the keyer (FIG. 8) of the output unit 15.

図９において、ＣＧ１～ＣＧ３の表示は、映像データと同一の層（レイヤー）内にある一方、ＣＧ４～ＣＧ５の表示は、映像データの層より上の層に配置されている。言い換えれば、ＣＧ４～ＣＧ５の表示は、映像データに対する前景である。第１の画像データは、編集部１３のＤＶＥによって、映像データと合成される一方、第３の画像データは、映像データと合成されない。図９に示すフレームにおいて、映像データが縮小された場合、ＣＧ１～ＣＧ３の表示は、映像データとともに縮小される一方、ＣＧ４～ＣＧ５の表示は変化しない。このため、ＣＧ４～ＣＧ５の表示は、ユーザが見やすい大きさを常に保つことができる。 In FIG. 9, the displays CG1 to CG3 are in the same layer as the video data, while the displays CG4 to CG5 are located in a layer above the video data. In other words, the displays CG4 to CG5 are in the foreground for the video data. The first image data is composited with the video data by the DVE of the editing unit 13, while the third image data is not composited with the video data. In the frame shown in FIG. 9, when the video data is reduced, the displays CG1 to CG3 are reduced along with the video data, while the displays CG4 to CG5 do not change. As a result, the displays CG4 to CG5 can always be kept at a size that is easy for the user to view.

（本実施形態の効果）
本実施形態の構成によれば、映像生成部１１は、入力信号から映像データを生成する。画像入力部１２´は、映像データ上に重畳される第１の画像データを入力する。編集部１３は、第１の画像データと、映像データとを合成する。出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。入力信号が途絶した場合、映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成することができる。第１の画像データは、例えば、自然災害の発生に関する緊急速報などの補助情報である。これにより、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。 (Effects of this embodiment)
According to the configuration of this embodiment, the video generation unit 11 generates video data from an input signal. The image input unit 12' inputs first image data to be superimposed on the video data. The editing unit 13 synthesizes the first image data and the video data. The output unit 15 outputs synthetic data obtained by synthesizing the first image data and the video data. The video generation unit 11 is configured to be able to generate video data from the first image data instead of the input signal. When the input signal is interrupted, the video generation unit 11 can generate video data from the first image data instead of the input signal. The first image data is, for example, auxiliary information such as an emergency report regarding the occurrence of a natural disaster. This makes it possible to continuously provide auxiliary information even when the input signal cannot be received.

さらに、本実施形態の構成によれば、画像入力部１２´は、第１の画像データを映像生成部１１に入力するとともに、第３の画像データを出力部１５に入力する。出力部１５は、第３の画像データと、合成データとを出力する。第３の画像データは、第１の画像データと互いに異なっている。一例では、第１の画像データは、現在時刻を示す時刻情報であり、第３の画像データは、自然災害の発生に関する緊急速報である。これにより、合成データとは別に、第３の画像データに基づく補助情報を提供することができる。 Furthermore, according to the configuration of this embodiment, the image input unit 12' inputs the first image data to the video generation unit 11, and inputs the third image data to the output unit 15. The output unit 15 outputs the third image data and the composite data. The third image data is different from the first image data. In one example, the first image data is time information indicating the current time, and the third image data is an emergency report regarding the occurrence of a natural disaster. This makes it possible to provide auxiliary information based on the third image data separately from the composite data.

〔実施形態４〕
図１０から図１２を参照して、実施形態４について説明する。本実施形態４では、合成データに代えて、割り込み映像を提示する構成を説明する。 [Embodiment 4]
A fourth embodiment will be described with reference to Fig. 10 to Fig. 12. In the fourth embodiment, a configuration in which an interruption video is presented instead of composite data will be described.

（映像処理装置４０）
図１０は、本実施形態４に係わる映像処理装置４０の構成を示すブロック図である。図１０に示すように、映像処理装置４０は、映像生成部１１、画像入力部１２´、編集部１３、及び出力部１５を備えている。映像処理装置４０は、割込入力部４４をさらに備えている。映像処理装置４０は、割込入力部４４を備えている点で、前記実施形態１に係わる映像処理装置１０とは異なる。 (Video Processing Device 40)
Fig. 10 is a block diagram showing the configuration of a video processing device 40 according to the fourth embodiment. As shown in Fig. 10, the video processing device 40 includes a video generation unit 11, an image input unit 12', an editing unit 13, and an output unit 15. The video processing device 40 further includes an interrupt input unit 44. The video processing device 40 differs from the video processing device 10 according to the first embodiment in that it includes the interrupt input unit 44.

割込入力部４４は、映像データを、割り込み映像データとして入力する。割込入力部４４は、割込入力手段の一例である。一例では、割込入力部４４は、映像生成部１１から、映像データを取得する。割込入力部４４は、受信した映像データを、割り込み映像データとして、出力部１５に入力する。 The interrupt input unit 44 inputs the video data as interrupt video data. The interrupt input unit 44 is an example of an interrupt input means. In one example, the interrupt input unit 44 acquires video data from the video generation unit 11. The interrupt input unit 44 inputs the received video data to the output unit 15 as interrupt video data.

出力部１５は、割込入力部４４から割り込み映像データを受信した場合、合成データに代えて、割り込み映像データを、ユーザ端末等へ送信する。 When the output unit 15 receives interrupt video data from the interrupt input unit 44, it transmits the interrupt video data to a user terminal, etc., instead of the composite data.

（ハードウェア構成）
図１１を参照して、上述した映像処理装置４０のハードウェア構成の一例を説明する。図１１に示すように、映像生成部１１のＭＩＸＥＲから出力された映像データは、割込入力部４４のセレクター（図１１ではＳＥＬと表示）によって、編集部１３を迂回して、割り込み映像データとして、出力部１５へ入力される。一例では、割り込み映像データは、「しばらくお待ちください」などの緊急メッセージを含む。割り込み映像データは、自然災害や事件に関する緊急速報を、ユーザに継続的に通知するために利用されてもよい。 (Hardware configuration)
An example of the hardware configuration of the above-mentioned video processing device 40 will be described with reference to Fig. 11. As shown in Fig. 11, the video data output from the MIXER of the video generating unit 11 is input to the output unit 15 as interrupt video data by a selector (indicated as SEL in Fig. 11) of the interrupt input unit 44, bypassing the editing unit 13. In one example, the interrupt video data includes an emergency message such as "Please wait a moment." The interrupt video data may be used to continuously notify a user of emergency news regarding natural disasters or incidents.

出力部１５は、合成データに代えて、割り込み映像データを出力する。したがって、編集部１３のＤＶＥが故障あるいは動作を停止している場合であっても、割り込み映像データを出力することができる。割り込み映像データは、
（表示例）
図１２は、映像処理装置４０が送信（出力）する割り込み映像データの表示例を示す。図１２のフレームは、例えば、ユーザ端末の画面を表す。図１２に示すように、合成データに代えて、割り込み映像データが、ユーザ端末の画面に表示される。割り込み映像データは、入力Ｘまたは入力Ｙに基づく映像データ、あるいは、第１の画像データに基づく映像データのどちらかである。 The output unit 15 outputs interruption video data instead of the composite data. Therefore, even if the DVE of the editing unit 13 is broken or has stopped working, the interruption video data can be output. The interruption video data is
(Display example)
Fig. 12 shows a display example of interruption video data transmitted (output) by the video processing device 40. The frame in Fig. 12 represents, for example, a screen of a user terminal. As shown in Fig. 12, interruption video data is displayed on the screen of the user terminal instead of the composite data. The interruption video data is either video data based on input X or input Y, or video data based on the first image data.

さらに、本実施形態の構成によれば、割込入力部４４は、映像データを、割り込み映像データとして入力する。出力部１５は、合成データに代えて、割り込み映像データを出力する。これにより、編集部１３が機能停止している場合であっても、映像データを出力することができる。 Furthermore, according to the configuration of this embodiment, the interrupt input unit 44 inputs video data as interrupt video data. The output unit 15 outputs the interrupt video data instead of the composite data. This makes it possible to output video data even if the editing unit 13 is out of function.

〔実施形態５〕
図１３を参照して、実施形態５について説明する。本実施形態５では、前記実施形態１～４のいずれかに係わる映像処理装置を備えた映像配信システムの一例を説明する。 [Embodiment 5]
A fifth embodiment will be described with reference to Fig. 13. In the fifth embodiment, an example of a video distribution system including a video processing device according to any one of the first to fourth embodiments will be described.

（映像配信システム１）
図１３は、本実施形態５に係わる映像配信システム１の構成を概略的に示す図である。映像配信システム１は、１または複数の撮像装置、１または複数のエンコーダ、サーバ、および１または複数のユーザ端末を備えている。なお、図１３に示す撮像装置、エンコーダ、及びユーザ端末の数は増減してよい。一例では、１または複数の撮像装置、１または複数のエンコーダ、サーバ、および１または複数のユーザ端末は、ローカルネットワークによって、通信可能に互いに接続されている。一例では、映像配信システム１のこれらの構成要素は、有線LAN（Local Area Network）または無線LANによって接続されている。あるいは、映像配信システム１において、有線LANまたは無線LANの代わりに、無線MAN（Metropolitan Area Network）又は無線WAN(Wide Area Network)など、より広範囲のモバイルネットワークが利用されてもよい。また、サーバは、特に種類を限定されないが、ローカルサーバであってもよいし、クラウドサーバであってもよい。 (Video distribution system 1)
FIG. 13 is a diagram showing a schematic configuration of a video distribution system 1 according to the fifth embodiment. The video distribution system 1 includes one or more imaging devices, one or more encoders, a server, and one or more user terminals. The number of imaging devices, encoders, and user terminals shown in FIG. 13 may be increased or decreased. In one example, one or more imaging devices, one or more encoders, a server, and one or more user terminals are communicatively connected to each other by a local network. In one example, these components of the video distribution system 1 are connected by a wired LAN (Local Area Network) or a wireless LAN. Alternatively, in the video distribution system 1, a wider range of mobile networks such as a wireless MAN (Metropolitan Area Network) or a wireless WAN (Wide Area Network) may be used instead of the wired LAN or wireless LAN. In addition, the server is not particularly limited in type, and may be a local server or a cloud server.

撮像装置は、撮影により、映像データを生成する。撮像装置は、例えば、監視カメラ、デジタルカメラ、またはスマートフォンである。 The imaging device generates video data by capturing images. The imaging device may be, for example, a surveillance camera, a digital camera, or a smartphone.

エンコーダは、撮像装置から、映像データを受信する。エンコーダは、映像データをエンコードすることによって、映像データを入力信号に変換し、無線ネットワークを介して、サーバに入力信号を送信する。 The encoder receives video data from the imaging device. The encoder converts the video data into an input signal by encoding the video data, and transmits the input signal to the server via the wireless network.

サーバは、無線ネットワーク上で実現されている。サーバは、無線ネットワークを通じて、エンコーダ及びユーザ端末と通信可能である。サーバは、前記実施形態１～４に係わる映像処理装置（すなわち、１０、２０、３０、または４０）のいずれかを備えている。 The server is implemented on a wireless network. The server can communicate with the encoder and the user terminal through the wireless network. The server includes any one of the video processing devices according to the first to fourth embodiments (i.e., 10, 20, 30, or 40).

サーバ内の映像処理装置（１０、２０、３０、または４０）は、前記実施形態１～４において説明したように、入力信号から、映像データを生成する。映像処理装置は、映像データと、第１の画像データとを合成する。あるいは、前記実施形態２において説明したように、映像処理装置は、映像データおよび第１の画像データに加えて、映像データの背景をさらに合成する。そして、映像処理装置は、映像データと、第１の画像データとを合成することによって得られた合成データを、１または複数のユーザ端末の各々へ送信する。 The video processing device (10, 20, 30, or 40) in the server generates video data from an input signal, as described in the first to fourth embodiments. The video processing device synthesizes the video data with the first image data. Alternatively, as described in the second embodiment, the video processing device further synthesizes the background of the video data in addition to the video data and the first image data. The video processing device then transmits the synthesized data obtained by synthesizing the video data with the first image data to each of one or more user terminals.

あるいはまた、前記実施形態３において説明したように、映像処理装置は、合成データとともに、第３の画像データを、１または複数のユーザ端末へ送信する。 Alternatively, as described in the third embodiment, the video processing device transmits the third image data together with the composite data to one or more user terminals.

あるいはまた、前記実施形態４において説明したように、映像処理装置は、合成データに代えて、割り込み映像データを、１または複数のユーザ端末へ送信する。 Alternatively, as described in embodiment 4 above, the video processing device transmits interrupt video data to one or more user terminals instead of composite data.

本実施形態に係わる映像配信システムは、１または複数のユーザ端末に対して、補助情報を継続的に提供することができる。 The video distribution system of this embodiment can continuously provide auxiliary information to one or more user terminals.

（ハードウェア構成について）
前記実施形態１～４で説明した映像処理装置１０～４０の各構成要素は、機能単位のブロックを示している。これらの構成要素の一部又は全部は、例えば図１４に示すような情報処理装置９００により実現される。図１４は、情報処理装置９００のハードウェア構成の一例を示すブロック図である。 (Hardware configuration)
Each of the components of the video processing devices 10 to 40 described in the first to fourth embodiments is represented by a functional block. Some or all of these components are realized by an information processing device 900 as shown in Fig. 14. Fig. 14 is a block diagram showing an example of the hardware configuration of the information processing device 900.

図１４に示すように、情報処理装置９００は、一例として、以下のような構成を含む。 As shown in FIG. 14, the information processing device 900 includes, as an example, the following configuration:

・ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）９０１
・ＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）９０２
・ＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）９０３
・ＲＡＭ９０３にロードされるプログラム９０４
・プログラム９０４を格納する記憶装置９０５
・記録媒体９０６の読み書きを行うドライブ装置９０７
・通信ネットワーク９０９と接続する通信インタフェース９０８
・データの入出力を行う入出力インタフェース９１０
・各構成要素を接続するバス９１１
前記実施形態１～４で説明した映像処理装置１０～４０の各構成要素は、これらの機能を実現するプログラム９０４をＣＰＵ９０１が読み込んで実行することで実現される。各構成要素の機能を実現するプログラム９０４は、例えば、予め記憶装置９０５やＲＯＭ９０２に格納されており、必要に応じてＣＰＵ９０１がＲＡＭ９０３にロードして実行される。なお、プログラム９０４は、通信ネットワーク９０９を介してＣＰＵ９０１に供給されてもよいし、予め記録媒体９０６に格納されており、ドライブ装置９０７が当該プログラムを読み出してＣＰＵ９０１に供給してもよい。・CPU (Central Processing Unit) 901
・ROM (Read Only Memory) 902
・RAM (Random Access Memory) 903
Program 904 loaded into RAM 903
A storage device 905 for storing the program 904
A drive device 907 for reading and writing data from and to the recording medium 906
A communication interface 908 for connecting to a communication network 909
An input/output interface 910 for inputting and outputting data
A bus 911 connecting each component
Each of the components of the video processing devices 10 to 40 described in the first to fourth embodiments is realized by the CPU 901 reading and executing a program 904 that realizes these functions. The program 904 that realizes the functions of each component is, for example, stored in advance in the storage device 905 or the ROM 902, and is loaded into the RAM 903 and executed by the CPU 901 as necessary. The program 904 may be supplied to the CPU 901 via the communication network 909, or may be stored in advance in the recording medium 906, and the drive device 907 may read out the program and supply it to the CPU 901.

上記の構成によれば、前記実施形態１～４において説明した映像処理装置１０～４０が、ハードウェアとして実現される。したがって、前記実施形態１～４０において説明した効果と同様の効果を奏することができる。 According to the above configuration, the image processing devices 10 to 40 described in the first to fourth embodiments are realized as hardware. Therefore, it is possible to achieve the same effects as those described in the first to fourth embodiments.

本発明は、例えば、カメラによって撮影した映像データを、スマートフォンなどのユーザ端末に対して送信する映像処理装置または映像配信システムに利用することができる。 The present invention can be used, for example, in a video processing device or video distribution system that transmits video data captured by a camera to a user terminal such as a smartphone.

（付記）
本発明の一態様は、以下の付記のようにも記載されるが、以下に限定されない。 (Additional Note)
One embodiment of the present invention is described as follows, but is not limited to the following.

（付記１）
入力信号から映像データを生成する映像生成手段と、
前記映像データ上に重畳される第１の画像データを入力する画像入力手段と、
前記第１の画像データと、前記映像データとを合成する編集手段と、
前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する出力手段と
を備え、
前記映像生成手段は、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能に構成されている
映像処理装置。 (Appendix 1)
an image generating means for generating image data from an input signal;
an image input means for inputting first image data to be superimposed on the video data;
an editing means for synthesizing the first image data and the video data;
an output unit for outputting composite data obtained by combining the first image data and the video data;
The image processing device, wherein the image generating means is configured to be able to generate the image data from the first image data instead of the input signal.

（付記２）
前記画像入力手段は、第２の画像データをさらに入力し、
前記第２の画像データを、前記映像データの背景として入力する背景入力手段をさらに備えた
ことを特徴とする付記１に記載の映像処理装置。 (Appendix 2)
The image input means further inputs second image data,
2. The video processing device according to claim 1, further comprising background input means for inputting the second image data as a background of the video data.

（付記３）
前記背景入力手段は、１または複数の前記第２の画像データを選択的に組み合わせて、前記映像データの背景として入力する
ことを特徴とする付記２に記載の映像処理装置。 (Appendix 3)
3. The image processing device according to claim 2, wherein the background input means selectively combines one or a plurality of the second image data and inputs the combined data as a background of the image data.

（付記４）
前記編集手段は、前記映像データおよび前記第１の画像データと、前記背景とを合成する
ことを特徴とする付記２または３に記載の映像処理装置。 (Appendix 4)
4. The image processing device according to claim 2, wherein the editing means combines the image data and the first image data with the background.

（付記５）
前記映像データを、割り込み映像データとして入力する割込入力手段をさらに備えた
ことを特徴とする付記１から４のいずれか１項に記載の映像処理装置。 (Appendix 5)
5. The video processing device according to claim 1, further comprising an interrupt input unit that inputs the video data as interrupt video data.

（付記６）
前記出力手段は、前記合成データに代えて、前記割り込み映像データを出力する
ことを特徴とする付記５に記載の映像処理装置。 (Appendix 6)
6. The video processing device according to claim 5, wherein the output means outputs the interrupt video data instead of the composite data.

（付記７）
前記編集手段は、１または複数の前記第１の画像データを選択的に組み合わせて、前記映像データと合成する
ことを特徴とする付記１から６のいずれか１項に記載の映像処理装置。 (Appendix 7)
7. The video processing device according to claim 1, wherein the editing means selectively combines one or more of the first image data and synthesizes the combined data with the video data.

（付記８）
前記画像入力手段は、第３の画像データをさらに入力し、
前記出力手段は、前記第３の画像データと、前記合成データとを出力する
ことを特徴とする付記１から７のいずれか１項に記載の映像処理装置。 (Appendix 8)
the image input means further inputs third image data;
8. The image processing device according to claim 1, wherein the output means outputs the third image data and the composite data.

（付記９）
付記１から８のいずれか１項に記載の映像処理装置と、
前記映像処理装置から前記合成データを配信される１または複数のユーザ端末と、
１または複数の撮像装置と、
前記１または複数の撮像装置のそれぞれから取得した撮影データを、前記入力信号に変換し、前記入力信号を前記映像処理装置へ送信するエンコーダと、
を備えた映像配信システム。 (Appendix 9)
A video processing device according to any one of claims 1 to 8,
one or more user terminals to which the composite data is delivered from the video processing device;
one or more imaging devices;
an encoder that converts photographic data acquired from each of the one or more image capture devices into the input signal and transmits the input signal to the video processing device;
A video distribution system equipped with the above.

（付記１０）
入力信号から映像データを生成し、
前記映像データ上に重畳される第１の画像データを入力し、
前記第１の画像データと、前記映像データとを合成し、
前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力し、
前記映像データの生成において、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能である
映像処理方法。 (Appendix 10)
Generates video data from the input signal,
inputting first image data to be superimposed on the video data;
combining the first image data with the video data;
outputting composite data obtained by combining the first image data and the video data;
In generating the video data, the video data can be generated from the first image data instead of the input signal.

（付記１１）
入力信号から映像データを生成する処理と、
前記映像データ上に重畳される第１の画像データを入力する処理と、
前記第１の画像データと、前記映像データとを合成する処理と、
前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する処理とをコンピュータに実行させ、
前記映像データを生成する処理において、前記コンピュータが、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能であるように構成されている
プログラム。 (Appendix 11)
A process of generating video data from an input signal;
inputting first image data to be superimposed on the video data;
A process of synthesizing the first image data and the video data;
a process of outputting composite data obtained by combining the first image data and the video data;
The program is configured so that, in the process of generating the video data, the computer is capable of generating the video data from the first image data instead of the input signal.

１映像配信システム
１０映像処理装置
１１映像生成部
１２（１２´）画像入力部
１３編集部
１５出力部
２０映像処理装置
２４背景入力部
３０映像処理装置
４０映像処理装置
４４割込入力部 REFERENCE SIGNS LIST 1 Video distribution system 10 Video processing device 11 Video generation unit 12 (12') Image input unit 13 Editing unit 15 Output unit 20 Video processing device 24 Background input unit 30 Video processing device 40 Video processing device 44 Interrupt input unit

Claims

an image generating means for generating image data from an input signal;
an image input unit for inputting one of a plurality of image data as a first image data to be superimposed on the video data;
an editing means for synthesizing the first image data and the video data;
an output means for outputting composite data obtained by combining the first image data and the video data ;
Equipped with
the image generating means is configured to be able to replace the input signal with replacement image data that is one of the plurality of image data;
When the input signal is replaced with the replacement image data,
The editing means combines the first image data with the replacement image data, and the output means outputs combined data obtained by combining the first image data with the replacement image data.
Image processing device.

The image input means further inputs second image data,
2. The video processing apparatus according to claim 1, further comprising background input means for inputting the second image data as a background of the video data.

3. The image processing apparatus according to claim 2, wherein the background input means selectively combines one or a plurality of the second image data and inputs the combined data as the background of the image data.

4. The image processing apparatus according to claim 2, wherein the editing means combines the image data and the first image data with the background.

5. The image processing device according to claim 1, further comprising an interrupt input unit that inputs the image data as interrupt image data.

6. The image processing apparatus according to claim 5, wherein the output means outputs the interrupt image data instead of the composite data.

7. The image processing apparatus according to claim 1, wherein the editing means selectively combines one or more of the first image data and synthesizes the combined data with the image data.

A video processing device according to any one of claims 1 to 7,
one or more user terminals to which the composite data is delivered from the video processing device;
one or more imaging devices;
an encoder that converts photographic data acquired from each of the one or more image capture devices into the input signal and transmits the input signal to the video processing device;
A video distribution system equipped with the above.

The computer
Generates video data from the input signal,
inputting one of the plurality of image data as a first image data to be superimposed on the video data;
combining the first image data with the video data;
outputting composite data obtained by combining the first image data and the video data;
A video processing method capable of generating the video data from the first image data instead of the input signal,
The computer includes:
When generating the video data, the input signal can be replaced with replacement image data that is one of the plurality of image data;
When the input signal is replaced with the replaced image data,
combining the first image data with the replacement image data;
outputting composite data obtained by combining the first image data and the replacement image data;
Image processing method.

A process of generating video data from an input signal;
A process of inputting one of a plurality of image data as first image data to be superimposed on the video data;
A process of synthesizing the first image data and the video data;
a process of outputting composite data obtained by combining the first image data and the video data;
A program configured to enable the computer to generate the video data from the first image data instead of the input signal in a process of generating the video data,
The computer includes:
In the process of generating the video data, the input signal can be replaced with replacement image data that is one of the plurality of image data;
When the input signal is replaced with the replaced image data,
combining the first image data with the replacement image data;
outputting composite data obtained by combining the first image data and the replacement image data;
program.