Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7704032B2 - 情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム - Google Patents
[go: Go Back, main page]

JP7704032B2 - 情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム - Google Patents

情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム Download PDF

Info

Publication number
JP7704032B2
JP7704032B2 JP2021556033A JP2021556033A JP7704032B2 JP 7704032 B2 JP7704032 B2 JP 7704032B2 JP 2021556033 A JP2021556033 A JP 2021556033A JP 2021556033 A JP2021556033 A JP 2021556033A JP 7704032 B2 JP7704032 B2 JP 7704032B2
Authority
JP
Japan
Prior art keywords
terminal device
imaging device
identification information
information processing
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021556033A
Other languages
English (en)
Other versions
JPWO2021095598A1 (ja
Inventor
慶太 白根
祐哉 木原
一郎 須藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2021095598A1 publication Critical patent/JPWO2021095598A1/ja
Application granted granted Critical
Publication of JP7704032B2 publication Critical patent/JP7704032B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25816Management of client data involving client authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/12Arrangements for observation, testing or troubleshooting
    • H04H20/14Arrangements for observation, testing or troubleshooting for monitoring programmes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/02Arrangements for generating broadcast information; Arrangements for generating broadcast-related information with a direct linking to broadcast information or to broadcast space-time; Arrangements for simultaneous generation of broadcast information and broadcast-related information
    • H04H60/04Studio equipment; Interconnection of studios
    • H04H60/05Mobile studios
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2407Monitoring of transmitted content, e.g. distribution time, number of downloads
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25825Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/64Addressing
    • H04N21/6405Multicasting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268Signal distribution or switching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/28Mobile studios

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Security & Cryptography (AREA)
  • Studio Devices (AREA)

Description

本技術は、情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラムに関する。
生中継の報道やリアルタイムのストリーミングなどの用途において撮影を行う撮像装置においては、撮影している映像が現在どのように放送、配信されているかを確認したいという要望がある。
そこで、例えば、特許文献1では現在放送されている映像をリターン映像として取材者が所持する端末に配信する技術が開示されている(特許文献1)。
特開2015-84478号公報
しかし、取材者が使用している撮像装置に対応付けされていない端末にリターン映像を配信する虞があった。
本技術はこのような点に鑑みなされたものであり、撮像装置に対応付けられた端末にリターン映像を配信することを可能にする情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラムを提供することを目的とする。
上述した課題を解決するために、第1の技術は、端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて端末装置と撮像装置とが対応付けられているか否かを判定し、判定結果に基づいて端末装置をリターン映像の送信対象として設定する制御部を備える情報処理装置である。
また、第2の技術は、端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて端末装置と撮像装置とが対応付けられているか否かを判定し、判定結果に基づいて端末装置にリターン映像を送信する情報処理方法である。
また、第3の技術は、端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて端末装置と撮像装置とが対応付けられているか否かを判定し、判定結果に基づいて端末装置にリターン映像を送信する情報処理プログラムである。
上述した課題を解決するために、第4の技術は、外部撮像装置から受信した外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、外部情報処理装置が第1識別情報と外部撮像装置から受信した第2識別情報とに基づいて端末装置と外部撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する制御部を備える端末装置である。
また、第5の技術は、外部撮像装置から受信した外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、外部情報処理装置が第1識別情報と外部撮像装置から受信した第2識別情報とに基づいて端末装置と外部撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する端末装置の制御方法である。
さらに、第6の技術は、外部撮像装置から受信した外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、外部情報処理装置が第1識別情報と外部撮像装置から受信した第2識別情報とに基づいて端末装置と外部撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する端末装置の制御方法をコンピュータに実行させる制御プログラムである。

情報処理システム10の構成を示すブロック図である。 撮像装置100の構成を示すブロック図である。 端末装置200の構成を示すブロック図である。 情報処理装置300の構成を示すブロック図である。 映像処理装置400の説明図である。 映像処理装置400の他の例の説明図である。 情報処理システム10における処理の第1の例を示すシーケンス図である。 情報処理システム10における処理の第2の例を示すシーケンス図である。 情報処理システム10における処理の第3の例を示すシーケンス図である。 情報処理システム10における処理の第3の例を示すシーケンス図である。 MOJOの構成の一例を示すブロック図である。 MOJOにおける取材の第1の態様の説明図である。 MOJOにおける取材の第2の態様の説明図である。
以下、本技術の実施の形態について図面を参照しながら説明する。なお、説明は以下の順序で行う。
<1.実施の形態>
[1-1.情報処理システム10の構成]
[1-2.撮像装置100の構成]
[1-3.端末装置200の構成]
[1-4.情報処理装置300の構成]
[1-5.情報処理システム10における処理]
<2.本技術の応用例>
[2-1.MOJOの構成]
[2-2.MOJOにおける取材の第1の態様]
[2-3.MOJOにおける取材の第2の態様]
<3.変形例>
<1.実施の形態>
[1-1.情報処理システム10の構成]
まず図1を参照して情報処理システム10の構成について説明する。情報処理システム10は撮像装置100、端末装置200および情報処理装置300とから構成されている。端末装置200と情報処理装置300、撮像装置100と情報処理装置300はインターネットなどのネットワークを介して接続されている。また、端末装置200と撮像装置100は例えば近距離無線通信などにより接続され、対応付けられている。
撮像装置100は映像や画像を撮影し、映像データ、画像データとして情報処理装置300に送信する。なお、本実施の形態は撮像装置100から映像データを送信する場合を例にして説明を行う。
端末装置200は放送中の映像であるリターン映像データを情報処理装置300から受信し、そのリターン映像データを表示してユーザ(取材者)に視聴させる。
情報処理装置300は撮像装置100から送信された映像データを受信し、映像データを所定の放送用の編集処理を施してリターン映像データを生成する外部の映像処理装置のスイッチャに送信する。また、情報処理装置300は外部の映像処理装置が生成してスイッチャから送信されたリターン映像データを端末装置200に送信する。なお、映像データとリターン映像データはともに音声データを含んでいてもよいし、含んでいなくてもよい。
この情報処理システム10は、例えば撮像装置100で撮影した映像を用いて放送を行うシステムにおいて使用される。撮像装置100で撮影した映像を情報処理装置300に送信し、その映像データが放送されている場合、放送用に処理が施された映像データがリターン映像データとして端末装置200に送信される。
[1-2.撮像装置100の構成]
次に図2のブロック図を参照して撮像装置100の構成について説明する。撮像装置100は、制御部101、光学撮像系102、レンズ駆動ドライバ103、撮像素子104、画像信号処理部105、画像メモリ106、記憶部107、通信部108、入力部109、表示部110、マイクロホン111を備えて構成されている。
制御部101は、CPU(Central Processing Unit)、RAM(Random Access Memory)およびROM(Read Only Memory)などから構成されている。CPUがROMに記憶されたプログラムに従い様々な処理を実行してコマンドの発行を行うことによって撮像装置100の全体および各部の制御を行う。また、制御部101は端末装置200および情報処理装置300と接続する際に必要とする、撮像装置100を特定する撮像装置識別情報を記憶しており、制御部101は通信部108を介して端末装置200および情報処理装置300との接続を制御する。さらに、制御部101は撮像装置100が有する機能を示す撮像装置機能情報を記憶しており、その撮像装置機能情報は撮像装置100と情報処理装置300の接続が確立した後に通信部108を介して情報処理装置300に送信される。撮像装置機能情報で示される撮像装置100の機能としては、映像データの送信機能、映像表示機能、音声通話機能、タリー信号提示機能などがある。
光学撮像系102は、被写体からの光を撮像素子104に集光するための撮像レンズ、撮像レンズを移動させてフォーカス合わせやズーミングを行うための駆動機構、シャッタ機構、アイリス機構などから構成されている。これらは制御部101、レンズ駆動ドライバ103からの制御信号に基づいて駆動される。光学撮像系102を介して得られた被写体の光画像は、撮像素子104上に結像される。
レンズ駆動ドライバ103は、例えばマイコンなどにより構成され、制御部101の制御に従い撮像レンズを光軸方向に沿って所定量移動させることにより、目標とする被写体に合焦するようにオートフォーカスを行う。また、制御部101からの制御に従い、光学撮像系102の駆動機構、シャッタ機構、アイリス機構などの動作を制御する。これにより露光時間(シャッタースピード)の調整、絞り値(F値)などの調整がなされる。
撮像素子104は、撮像レンズを通して得られた被写体からの入射光を光電変換して電荷量に変換して撮像信号を出力する。そして、撮像素子104は画素信号を画像信号処理部105に出力する。撮像素子104としては、CCD(Charge Coupled Device)、CMOS(Complementary Metal Oxide Semiconductor)などが用いられる。
画像信号処理部105は撮像素子104から出力された撮像信号に対して、CDS(Correlated Double Sampling)処理によりS/N(Signal/Noise)比を良好に保つためのサンプルホールド、AGC(Auto Gain Control)処理、A/D(Analog/Digital)変換などを行ない、画像信号を作成する。また、画像信号処理部105は記録用の画像信号には記録用の処理を施し、表示用の画像信号には表示用の処理を施す。
画像メモリ106は、揮発性メモリ、例えば、DRAM(Dynamic Random Access Memory)で構成されるバッファメモリである。画像メモリ106は画像信号処理部105によって所定の処理が施された画像データを一時的に蓄えておくものである。
記憶部107は、例えば、ハードディスク、フラッシュメモリなどの大容量記憶媒体である。画像信号処理部105により記録用の画像処理が施された画像信号は例えばJPEG(Joint Photographic Experts Group)などの規格に基づいて圧縮状態または非圧縮状態で保存される。また、保存された画像に関する情報、撮像位置を示す撮像位置情報、撮像日時を示す撮像時刻情報などの付加情報を含むEXIF(Exchangeable Image File Format)データもその画像に対応付けられて保存される。
通信部108は、端末装置200および情報処理装置300と各種データや各種情報の送受信を行なうための通信モジュールである。通信は無線LAN(Local Area Network)、WAN(Wide Area Network)、WiFi(Wireless Fidelity)、4G(第4世代移動通信システム)、5G(第5世代移動通信システム)、ブロードバンドなどインターネットおよび他の装置などと接続できる方法であればどのようなものを用いてもよい。なお、撮像装置100と端末装置200との通信はNFC(Near Field Communication)やZigBee(登録商標)などの近距離無線通信や、WiFiテザリング、USB(Universal Serial Bus)テザリング、Bluetooth(登録商標)テザリングなどのテザリング接続でもよい。
入力部109は撮像装置100に対してユーザが各種指示など行うためのものである。入力部109に対してユーザから入力がなされると、その入力に応じた制御信号が生成されて制御部101に供給される。そして、制御部101はその制御信号に対応した各種処理を行う。入力部204としてはシャッタ入力のためのシャッタボタン、各種操作のための物理ボタンの他、タッチパネル、表示部110としてのディスプレイと一体に構成されたタッチスクリーンなどがある。
表示部110は、画像信号処理部105によりに表示用の処理が施された表示用の画像信号であるスルー画、画像信号処理部105により記録用の画像処理が施されて記憶部107に保存された画像/映像、GUI(Graphical User Interface)などを表示するディスプレイなどの表示デバイスである。
マイクロホン111は映像撮影において音声を収録するためのものである。
撮像装置100は以上のようにして構成されている。撮像装置100としてはデジタルカメラ、一眼レフカメラ、カムコーダー、業務用カメラ、プロ仕様撮影機器などのカメラ機能に特化した装置の他、カメラ機能を備えるスマートフォン、タブレット端末、ウェアラブルデバイス、携帯ゲーム機などでもよい。
[1-3.端末装置200の構成]
次に図3を参照して端末装置200の構成について説明する。端末装置200は制御部201、記憶部202、通信部203、入力部204、表示部205、マイクロホン206、スピーカ207、カメラ208を備えて構成されている。
制御部201は、CPU、RAMおよびROMなどから構成されている。CPUは、ROMに記憶されたプログラムに従い様々な処理を実行してコマンドの発行を行うことによって端末装置200の全体および各部の制御を行う。また、制御部201は撮像装置100および情報処理装置300と接続する際に必要とする、端末装置200を特定する端末装置識別情報を記憶しており、通信部203を介して制御部201が撮像装置100および情報処理装置300との接続を制御する。
また、制御部201は端末装置200が有する機能を示す端末装置機能情報を記憶しており、その端末装置機能情報は端末装置200と情報処理装置300の接続が確立した後に通信部203を介して情報処理装置300に送信される。端末装置機能情報で示される端末装置200の機能としては、リターン映像データの表示機能、映像表示機能、音声通話機能、タリー信号提示機能などがある。特許請求の範囲におけるリターン映像表示機能情報は端末装置機能情報に含まれるものである。また、制御部201は撮像装置100から撮像装置識別情報を受信すると、制御部201内にその撮像装置識別情報を保存する。さらに制御部201は、通信部203を介して情報処理装置300から送信されたリターン映像データおよびタリー信号を受信する制御を行う。
記憶部202は、例えばハードディスク、フラッシュメモリなどの大容量記憶媒体である。記憶部202には端末装置200で使用する各種アプリケーションやデータなどが格納されている。
通信部203は、端末装置200および情報処理装置300とデータや各種情報の送受信を行なうための通信モジュールである。通信は無線LAN、WAN、WiFi、4G、5G、ブロードバンドなどインターネットおよび他の装置などと接続できる方法であればどのようなものを用いてもよい。なお、端末装置200と撮像装置100との通信はNFCやZigBee(登録商標)などの近距離無線通信や、WiFiテザリング、USBテザリング、Bluetooth(登録商標)テザリングなどのテザリング接続でもよい。
入力部204は、端末装置200に対してユーザが情報やメッセージの入力、各種指示など行うためのものである。入力部204に対してユーザから入力がなされると、その入力に応じた制御信号が生成されて制御部201に供給される。そして、制御部201はその制御信号に対応した各種処理を行う。入力部204は物理ボタンの他、タッチパネル、表示部205としてのディスプレイと一体に構成されたタッチスクリーンなどがある。
表示部205は、映像、画像、GUIなどを表示するディスプレイなどの表示デバイスである。情報処理装置300から送信されたリターン映像データは表示部205において表示される。これによりユーザはリターン映像を確認することができる。
マイクロホン206はユーザが端末装置200に音声を入力するために用いるものである。また、マイクロホン206は端末装置200と情報処理装置300間の音声通話、ビデオ通話における音声入力デバイスとしても使用される。
スピーカ207は音声メッセージ、映像の音声などを出力する音声出力デバイスである。スピーカ207は端末装置200と情報処理装置300間の音声通話、ビデオ通話における音声出力デバイスとしても使用される。
カメラ208はレンズ、撮像素子、映像信号処理回路などから構成され、映像や画像を撮影するためのものである。
端末装置200は以上のようにして構成されている。端末装置200の具体例としては例えばスマートフォン、タブレット端末、パーソナルコンピュータ、ウェアラブルデバイス、携帯ゲーム機などがある。端末装置200における処理を行う構成はプログラムで実現されてもよい。
[1-4.情報処理装置300の構成]
次に図4のブロック図を参照して情報処理装置300の構成について説明する。情報処理装置300は、制御部301、通信部302、データ記憶部303、音声通信部304を備えて構成されている。
制御部301は、CPU、RAMおよびROMなどから構成され、CPUがROMに記憶されたプログラムに従い様々な処理を実行してコマンドの発行を行うことによって情報処理装置300の全体および各部の制御を行う。また、制御部301は端末装置200と情報処理装置300とのマッチング判定処理、撮像装置100と情報処理装置300とのマッチング処理を行う。マッチング判定処理の詳細は後述する。
また制御部301は、通信部302を介して撮像装置100および/または端末装置200から送信された情報、撮像装置100から送信された映像データを受信する受信処理を行う。
さらに制御部301は、端末装置200から受信した撮像装置識別情報および端末装置識別情報と、撮像装置100から受信した撮像装置識別情報に基づいて端末装置200と撮像装置100とがペアリングしている(対応付けられた関係)ことを確認して、端末装置100をリターン映像データおよびタリー信号の送信対象として設定する。そして、制御部301は通信部302を介してリターン映像データおよびタリー信号を端末装置200に送信する送信処理を行う。
受信処理は、撮像装置100を特定する撮像装置識別情報および/または端末装置200を特定する端末装置識別情報を受信して制御部301に保存する処理である。識別情報としては装置のシリアルナンバー、モデルの名称などがある。識別情報は、IMEI(International Mobile Equipment Identifier)などの装置固有の識別番号でもよいし、装置識別専用のID情報など、個々の装置を識別することができる情報であればどのようなものでもよい。なお、特許請求の範囲における第1識別情報は端末装置200を特定するための端末装置識別情報と撮像装置100を特定するための撮像装置識別情報を含むものであり、第2識別情報は撮像装置識別情報を含むものである。
また受信処理では、撮像装置100から送信される、撮像装置100が有する機能を示す撮像装置機能情報および/または、端末装置200から送信される端末装置200が有する機能を示す端末装置機能情報を受信して制御部301に保存する処理も行う。撮像装置機能情報で示される撮像装置100の機能としては、映像データの送信機能、映像表示機能、音声通話機能、タリー信号提示機能などがある。撮像装置機能情報は撮像装置100の制御部101に保存されている。端末装置機能情報で示される端末装置200の機能としては、リターン映像データの表示機能、映像表示機能、音声通話機能、タリー信号提示機能などがある。端末装置機能情報は端末装置200の制御部201に保存されている。
さらに受信処理では、撮像装置100から送信された映像データの受信を行う。受信した映像データは所定の放送用の編集処理を施す映像処理装置に送信される。
送信処理は、映像処理装置によって映像データに対して所定の放送用の編集処理が施されて生成されたリターン映像データを通信部302を介して端末装置200に送信する処理である。
さらに送信処理では、撮像装置100および/または端末装置200にタリー信号を送信する。タリー信号とは、どの映像が今放送中なのか、次に映像が放送される撮像装置100はどれか(撮影者は誰か)などを伝達するための信号であり、例えば外部の映像処理装置において生成されてその映像処理装置のスイッチャから通信部302に送信される。
通信部302は、撮像装置100および端末装置200と各種データ、各種情報などの送受信を行なうための通信モジュールである。通信方法としては、無線LAN、WAN、WiFi、4G、5Gなどがある。
データ記憶部303は、受信した映像データ、撮像装置100と端末装置200の識別情報および機能情報などを格納、管理するものである。またデータ記憶部303は映像データに加え、リターン映像データを映像データと対応付けて格納、管理するようにしてもよい。情報処理装置300はアーカイブとして必要や要求に応じてデータ記憶部303に格納してある映像データ、リターン映像データを撮像装置100、端末装置200に送信するようにしてもよい。
音声通信部304は、通信部302を介して撮像装置100および/または端末装置200と音声による通話を行うための音声データの送受信処理を行うものである。
情報処理装置300は以上のようにして構成されている。情報処理装置300はプログラムで構成され、そのプログラムは予めサーバなどにインストールされていてもよいし、ダウンロード、記憶媒体などで配布されて、ユーザが自らサーバなどにインストールするようにしてもよい。また、情報処理装置300はクラウド上で構成されていてもよい。さらに、情報処理装置300はプログラムによって実現されるのみでなく、その機能を有するハードウェアによる専用の装置、回路などを組み合わせて実現されてもよい。
なお、図5に示すように情報処理装置300は映像データに対して放送用の編集処理を施す外部の映像処理装置400に接続されている。映像処理装置400は少なくとも制御部401、通信部402、スイッチャ403を備えて構成されており、例えば放送局500において動作する。また、放送局500にはスタジオ600が設けられている。
スタジオ600では放送局500のプロデューサー、ディレクター、アシスタントディレクター、カメラマンなど(以下総称してスタッフと称する)が放送のための作業を行う。また、スタジオ600は少なくともCCU601およびカメラ602を備える。CCU601はカメラ602で撮影した映像に処理を施して出力したり、映像データなどの伝送するものである。カメラ602はスタジオ600において報道を行うキャスターなどを撮影するものである。
制御部401はCPU、RAMおよびROMなどから構成され、CPUがROMに記憶されたプログラムに従い様々な処理を実行してコマンドの発行を行うことによって映像処理装置400の全体および各部の制御を行う。また、制御部401は放送用の映像編集処理を行う。編集処理としては例えば、映像の分割および結合、クロップ、トリミング、編集、字幕付け、CG合成、エフェクト付与などがある。ただし、放送用の編集処理はこれらに限られず映像データを放送するために行う処理であればどのようなものでもよい。
通信部402は、情報処理装置300などと各種データ、各種情報などの送受信を行なうための通信モジュールである。通信方法としては、無線LAN、WAN、WiFi、4G、5Gなどがある。
スイッチャ403は複数の入力信号を切り換えたり、混合させたりする装置である。撮像装置100が複数ある場合、複数の撮像装置100で撮影されて情報処理装置300を介して映像処理装置400に送信された映像データはスイッチャ403に集まる。そして、どの撮像装置100の映像データを放送に使用するかをスイッチャ403で切り替えにより選択する。さらにスイッチャ403は、映像処理装置400が映像データに対して放送用の編集処理を施してリターン映像データを生成するとそのリターン映像データを情報処理装置300に送信する。リターン映像データは情報処理装置300を介して端末装置200に送信される。
映像処理装置400はハードウェアで構成されてもよいし、プログラムで構成され、そのプログラムは情報処理装置300の機能を備えるサーバなどにインストールされていてもよいし、別のサーバにインストールされていてもよいし、クラウド上で構成されてもよい。
なお、図6Aに示すように映像処理装置400が情報処理装置300としての機能を備えていてもよいし、図6Bに示すように情報処理装置300が映像処理装置400としての機能を備えていてもよい。図6においては放送局とスタジオは省略しているが、図5と同様に情報処理装置300および映像処理装置400が放送局で動作してもよい。
[1-5.情報処理システム10における処理]
次に図7のシーケンス図を参照して情報処理システム10における処理の第1の例について説明する。図7の第1の例は撮像装置100よりも先に端末装置200と情報処理装置300との接続が確立した場合である。
まずステップS101に示すように撮像装置100と端末装置200間でペアリング(対応付け処理)および情報の送受信が行われる。ペアリングは例えばNFCを用いた場合NFC機能を有する装置同士を接触させることにより行うことができる。各種テザリングの場合、認証コードやセッションキー、SSID(Service Set Identifier)、シリアル番号などの識別情報、などの必要な情報を装置間で交換することによりペアリングを行う。これにより端末装置200と撮像装置100がペアリングして近距離無線通信が確立する。このペアリングにおいて撮像装置100の撮像装置識別情報が端末装置200に送信され、ステップS102で端末装置200が撮像装置識別情報を受信する。端末装置200が受信した撮像装置識別情報は制御部201に保存される。
次にステップS103に示すように、端末装置200が情報処理装置300に接続要求を行うとともに、撮像装置識別情報、端末装置識別情報、端末装置機能情報を情報処理装置300に送信する。情報処理装置300はステップS104でその撮像装置識別情報、端末装置識別情報、端末装置機能情報を受信する。端末装置200は予め接続すべき情報処理装置300を把握しており、その把握に基づき端末装置200から情報処理装置300に対して接続要求がなされる。端末装置200と情報処理装置300が接続するということは、情報処理装置300は端末装置200を識別している、すなわち、端末装置識別情報を受信しているということになる。
次にステップS105に示すように情報処理装置300はマッチング判定を開始する。マッチング判定とは、端末装置200から送信された識別情報に基づいて、情報処理装置300と接続が確立している撮像装置100と端末装置200とがペアリングしているか(対応付けられた関係であるか)を確認する処理である。これにより撮像装置100から送信された映像データに基づくリターン映像データの送信先が撮像装置100とペアリングした端末装置200であることを確認することができる。
マッチング判定は端末装置200から受信した撮像装置100の撮像装置識別情報と、撮像装置100から受信した撮像装置識別情報が同一であるかを確認することにより行うことができる。この撮像装置識別情報が同一であることが特許請求の範囲における対応付け条件である。端末装置200から受信した撮像装置100の撮像装置識別情報と、撮像装置100から受信した撮像装置識別情報が同一である場合、対応付け条件を満たすこととなる。
なお、撮像装置100が情報処理装置300と接続していない場合、まだ撮像装置100が撮像装置識別情報を情報処理装置300に送信していない場合には「マッチングなし」という結果になる。マッチング判定の結果がマッチングなしである場合、その結果を撮像装置100および/または端末装置200に送信して表示などによりユーザに通知する。
そして、ステップS106に示すように撮像装置100と情報処理装置300の接続が確立した場合、次にステップS107に示すように撮像装置100は撮像装置識別情報および撮像装置機能情報を情報処理装置300に送信する。そしてステップS108で情報処理装置300が撮像装置識別情報および撮像装置機能情報を受信する。
次にステップS109に示すようにマッチング確認を行う。撮像装置100と端末装置200がペアリングしている場合「マッチングあり」とう結果になる。なお、情報処理装置300はペアリングしている端末装置200と撮像装置100をまとめて一つのデバイスとして認識し、UIに表示するようにしてもよい。
情報処理装置300と撮像装置100の接続が確立した場合、次にステップS110に示すように情報処理装置300は撮像装置100に対して映像データ送信要求を行う。なお、映像データの送信要求は情報処理装置300と撮像装置100との接続が確立していればどのタイミングでも可能であるため、映像データ送信要求は本実施の形態に記載のタイミングに限定されるものではない。
映像データ送信要求を受けた撮像装置100はステップS111に示すように撮影により生成した映像データを情報処理装置300へ送信する。そしてステップS112で情報処理装置300は映像データを受信する。この映像データの送受信は撮像装置100が撮影を行って映像データの生成を続け、かつ、放送において映像データが必要な限り継続して行われる。なお、映像データの送信は情報処理装置300からの映像データ送信要求なしに、情報処理装置300と撮像装置100の接続が確立した段階で行うようにしてもよい。
次にステップS113で、マッチング判定の結果が「マッチングあり」であり、かつ、端末装置200がリターン映像表示機能を備えることを示すリターン映像表示機能情報(端末装置機能情報に含まれる)を受信している場合、制御部301は端末装置200をリターン映像データの送信対象として設定する。端末装置200がリターン映像表示機能を備えることを示すリターン映像表示機能情報を受信することが特許請求の範囲におけるリターン映像条件を満たすことである。
さらに、制御部301はマッチング判定の結果が「マッチングあり」であり、かつ、端末装置200がタリー信号を提示する機能を備えることを示すタリー信号提示機能情報を受信している場合、端末装置200をタリー信号の送信対象として設定する。端末装置200がタリー信号提示機能を備えることを示すタリー信号提示機能情報を受信することが特許請求の範囲におけるタリー信号条件を満たすことである。この送信対象の設定はマッチング判定の結果に基づき行われるため、ステップS109以降であり、端末装置200への送信前であればいつ行ってもよい。
映像処理装置400によりリターン映像データが生成されると、次にステップS114に示すように情報処理装置300はリターン映像データを端末装置200に送信する。マッチング判定により撮像装置100とペアリングしている端末装置200を確認できていることにより、リターン映像データの送信先が端末装置200であることが確認できている。そしてステップS115で端末装置200はリターン映像データを受信する。
このリターン映像データの送受信は撮像装置100が撮影を行って映像データの生成を続け、かつ、リターン映像データが生成される限り継続して行われる。ただし、端末装置200から情報処理装置300にリターン映像データの送信停止の要求があった場合に送信を停止するようにしてもよい。なお、このリターン映像データの送信は、映像データに対して処理が施されてリターン映像データが生成されたら要求の有無に関わらず直ちに行ってもよいし、端末装置200からリターン映像データの送信要求があってから行うようにしてもよい。
リターン映像データの送信と並行して、ステップS116に示すように情報処理装置300から端末装置200にタリー信号を送信し、ステップS117で端末装置200がタリー信号を受信する。なお、タリー信号の送信は必須ではなく必要な場合にのみ行うようにしてもよい。
なお、端末装置200と情報処理装置300の接続が確立した後、端末装置200と情報処理装置300間で音声通話接続を確立するようにしてもよい。これにより、情報処理装置300側にいる人物と端末装置200を使用している人物間で音声通話による連絡、指示、意思疎通などを行うことができる。
図7に示す処理は以上のようにして行われる。
次に図8のシーケンス図を参照して情報処理システム10における処理の第2の例について説明する。図8の第2の例は端末装置200よりも先に撮像装置100と情報処理装置300との接続が確立した場合である。なお、ステップS101およびステップS102におけるペアリング、撮像装置識別情報の送受信は図7と同様である。
ステップS201に示すように撮像装置100と情報処理装置300の接続が確立している場合、ステップS202に示すように撮像装置100が撮像装置識別情報と撮像装置機能情報を情報処理装置300に送信し、ステップS203で情報処理装置300がそれらを受信する。
次にステップS204に示すように情報処理装置300はマッチング判定を開始する。マッチング判定は図7において説明したものと同様である。この時点で端末装置200が情報処理装置300と接続していない場合、「マッチングなし」という結果になる。
次にステップS205に示すように情報処理装置300は接続が確立している撮像装置100に対して映像データ送信要求を行う。
次にステップS206に示すように映像データ送信要求を受けた撮像装置100は撮影により生成した映像データを情報処理装置300へ送信する。そしてステップS207で情報処理装置300は映像データを受信する。この映像データの送受信は撮像装置100が撮影を行って映像データの生成を続け、かつ、放送において映像データが必要な限り継続して行われる。なお、映像データの送信は情報処理装置300からの映像データ送信要求なしに、情報処理装置300と撮像装置100がマッチングした段階で行うようにしてもよい。
そしてステップS208に示すように端末装置200が情報処理装置300に接続要求を行うとともに、撮像装置識別情報、端末装置識別情報、端末装置機能情報を情報処理装置300に送信する。情報処理装置300はステップS209でその撮像装置識別情報、端末装置識別情報、端末装置機能情報を受信する。端末装置200は予め接続すべき情報処理装置300を把握しており、その把握に基づき端末装置200から情報処理装置300に対して接続要求がなされる。端末装置200と情報処理装置300が接続するということは、情報処理装置300は端末装置200を識別している、すなわち、端末装置識別情報を受信しているということになる。
次にステップS210に示すようにマッチング確認を行う。情報処理装置300は端末装置200から受信した撮像装置識別情報と撮像装置100から受信した撮像装置識別情報が同一であることを確認することにより、撮像装置100と端末装置200がペアリングしていることを確認する。撮像装置100と端末装置200がペアリングしている場合「マッチングあり」とう結果になる。
次にステップS211で、上述のステップS109における「マッチングあり」という結果に基づいて制御部301は端末装置200をリターン映像データの送信対象として設定する。また、制御部301は端末装置200をタリー信号の送信対象として設定する。
そして、ステップS212乃至215に示すように図7と同様に情報処理装置300と端末装置200の間でリターン映像データの送受信が行われ、さらに、リターン映像データの送信と並行して、タリー信号を送受信が行われる。
なお、端末装置200と情報処理装置300の接続が確立した後、端末装置200と情報処理装置300間で音声通話接続を確立するようにしてもよい。
図8に示す処理は以上のようにして行われる。
さらに図9および図10のシーケンス図を参照して情報処理システム10における処理の第3の例について説明する。図9および図10の第3の例は端末装置が複数あり、撮像装置100よりも先に端末装置と情報処理装置300との接続が確立した場合である。図9および図10の説明において端末装置は2つとし、それぞれ端末装置200A、端末装置200Bとする。また、識別情報と機能情報については端末装置200Aのものを端末装置識別情報A、端末装置機能情報Aとし、端末装置200Bのものを端末装置識別情報B、端末装置機能情報Bとする。
まずステップS301に示すように撮像装置100と端末装置200A間でペアリング(対応付け処理)および情報の送受信が行われ、ペアリングにより近距離無線通信が確立する。このペアリングにおいて撮像装置100の撮像装置識別情報が端末装置200Aに送信され、ステップS302で端末装置200Aが撮像装置識別情報を受信する。
次にステップS303に示すように、端末装置200Aが情報処理装置300に接続要求を行うとともに、撮像装置識別情報、端末装置識別情報A、端末装置機能情報Aを情報処理装置300に送信する。情報処理装置300はステップS304でその撮像装置識別情報、端末装置識別情報A、端末装置機能情報Aを受信する。
次にステップS305に示すように情報処理装置300はマッチング判定を開始する。撮像装置100が情報処理装置300と接続していない場合、まだ撮像装置100が撮像装置識別情報を情報処理装置300に送信していない場合には「マッチングなし」という結果になる。
次にステップS306に示すように撮像装置100と端末装置200B間でペアリングが行われて近距離無線通信が確立すると、撮像装置100が端末装置200Bに撮像装置識別情報を送信する。端末装置200BはステップS307で撮像装置100の撮像装置識別情報を受信する。
そしてステップS308に示すように端末装置200Bと情報処理装置300の接続が確立している場合、端末装置200Bが撮像装置100の撮像装置識別情報と端末装置200B自身の端末装置識別情報Bと端末装置機能情報Bを情報処理装置300に送信する。情報処理装置300はステップS309で撮像装置識別情報、端末装置識別情報Bおよび端末装置機能情報Bを受信する。
次にステップS310に示すように情報処理装置300はマッチング判定を行い、撮像装置100が情報処理装置300と接続していない場合、まだ撮像装置100が撮像装置識別情報を情報処理装置300に送信していない場合には「マッチングなし」という結果になる。
そして、ステップS311に示すように撮像装置100と情報処理装置300の接続が確立した場合、次にステップS312で撮像装置100は自身の撮像装置識別情報と撮像装置機能情報を情報処理装置300に送信する。そしてステップS313で情報処理装置300が撮像装置識別情報および撮像装置機能情報を受信する。
次にステップS314で、マッチング判定で情報処理装置300は端末装置200Aから受信した撮像装置100の撮像装置識別情報と撮像装置100から受信した撮像装置識別情報が同一であることを確認することにより、端末装置200Aと撮像装置100がペアリングしていることを確認する。
また、マッチング判定で情報処理装置300は端末装置200Bから受信した撮像装置100の撮像装置識別情報と撮像装置100から受信した撮像装置識別情報が同一であることを確認することにより端末装置200Bと撮像装置100がペアリングしていることを確認する。
情報処理装置300と撮像装置100の接続が確立した場合、次にステップS315に示すように情報処理装置300は撮像装置100に対して映像データ送信要求を行う。
次にステップS316に示すように映像データ送信要求を受けた撮像装置100は撮影により生成した映像データを情報処理装置300へ送信する。そしてステップS317で情報処理装置300は映像データを受信する。この映像データの送信は撮像装置100が撮影を行って映像データの生成を続け、かつ、放送において映像データが必要な限り継続して行われる。
次にステップS318で、上述のステップS314における「マッチングあり」という結果に基づいて情報処理装置300の制御部301は端末装置200Aおよび端末装置200Bをリターン映像データの送信対象として設定する。また、制御部301は端末装置200Aおよび端末装置200Bをタリー信号の送信対象として設定する。
外部の映像処理装置400によりリターン映像データが生成されると、次にステップS319に示すように情報処理装置300はリターン映像データを端末装置200Aに送信する。そしてステップS320で端末装置200Aはリターン映像データを受信する。さらにリターン映像データの送信と並行して、ステップS321に示すようにタリー信号送信部308により情報処理装置300から端末装置200Aにタリー信号を送信し、ステップS322で端末装置200Aがタリー信号を受信する。
さらにステップS323に示すように情報処理装置300はリターン映像データを端末装置200Bに送信し、ステップS324で端末装置200Bがリターン映像データを受信する。さらにリターン映像データの送信と並行して、ステップS325に示すように情報処理装置300から端末装置200Bにタリー信号を送信し、ステップS326で端末装置200Bがタリー信号を受信する。なお、端末装置200Aおよび/または端末装置200Bから情報処理装置300にリターン映像データの送信停止の要求があった場合に送信を停止するようにしてもよい。
端末装置200Aと情報処理装置300の接続が確立した後、端末装置200Aと情報処理装置300間で音声通話接続を確立するようにしてもよい。端末装置200Bについても同様である。
図9および図10に示す処理は以上のようにして行われる。なお、図10においては端末装置200Aにリターン映像データを送信した後に端末装置200Bにリターン映像データを送信しているが、送信は同時に行ってもよいし、端末装置200Bへの送信が先でもよい。
端末装置の数は2つに限られずいくつであってもよい。図9および図10に示す端末装置200が複数ある例は、撮影に関わるユーザが複数存在し、リターン映像データを複数のユーザがそれぞれ異なる端末装置で見て確認したい場合などに有用である。
本技術における情報処理システム10の処理は以上のようにして行われる。この処理により、例えば撮像装置100で撮影して映像データを情報処理装置300に送信しているユーザはリターン映像データを端末装置200で受信して表示させることにより、視認性が高い状態でリターン映像を確認することができる。すなわち、撮像装置100のみを用いて撮影時のスルー画とリターン映像の両方を撮像装置100の表示部110に表示するよりも見やすい状態でリターン映像を確認することができる。
<2.本技術の応用例>
[2-1.MOJOの構成]
次に本技術の具体的な応用例について説明する。本技術はMOJO(Mobile Journalism)と称される新たな報道の仕組みに応用することができる。
MOJOとは、ジャーナリストや一般市民などが端末装置を用いて取材や報道などを行うジャーナリズムのことである。インターネットや、スマートフォン等の端末装置の普及により、専用の撮像装置や映像編集装置を持たない一般市民あるいはフリーのジャーナリストでも端末装置内のアプリケーションを用いることによって報道素材の撮影や編集、提供までを容易に行うことが可能となり、MOJOにより従来よりも即時性が高い報道が可能となる。
まず図11を参照してMOJO形式で取材・報道を行う場合での構成の一例について説明する。MOJO形式での取材・報道は、例えばジャーナリスト1000、放送局2000、サーバ3000とから構成されている。放送局2000とサーバ3000、さらにジャーナリスト1000が使用する撮像装置100および端末装置200はインターネットなどのネットワークを介して接続されている。なお、撮像装置100、端末装置200、情報処理装置300は実施の形態で説明したものと同様のものとする。
ジャーナリスト1000は事件発生現場である取材先に向かい、取材を行い、放送局2000に取材内容(映像データ、画像データ、音声データ、テキストなど)を提供する者である。ジャーナリスト1000は撮像装置100および/または端末装置200を用いて取材を行う。
放送局2000はジャーナリスト1000に対して取材の指示を行い、ジャーナリスト1000から提供された取材内容に所定の放送用の編集処理を施して放送する事業体および/または設備である。
サーバ3000は本技術に係る情報処理装置300であり、放送局2000とジャーナリスト1000間の情報、データ、指示などの送受信も担うものである。サーバ3000は放送局2000自体または放送局2000の関連会社、関連団体などが管理運営しているものでもよいし、放送局2000以外の会社が管理運営して放送局2000が使用しているものでもよい。
サーバ3000(情報処理装置300)は制御部301、通信部302、データ記憶部303を備えて構成されている。
制御部301は、CPU、RAMおよびROMなどから構成され、CPUがROMに記憶されたプログラムに従い様々な処理を実行してコマンドの発行を行うことによって情報処理装置300の全体および各部の制御を行う。
通信部302は、撮像装置100および端末装置200と各種データ、各種情報などの送受信を行なうための通信モジュールである。通信方法としては、無線LAN、WAN、WiFi、4G、5Gなどがある。
データ記憶部303は、受信した映像データ、撮像装置100と端末装置200の識別情報および機能情報などを格納、管理するものである。またデータ記憶部303は映像データに加え、リターン映像データを映像データと対応付けて格納、管理するようにしてもよい。情報処理装置300はアーカイブとして必要や要求に応じてデータ記憶部303に格納してある映像データ、リターン映像データを撮像装置100、端末装置200に送信するようにしてもよい。
放送局2000は、少なくともコントロールルーム2100とスタジオ2200を有する。コントロールルーム2100とスタジオ2200では放送局2000のプロデューサー、ディレクター、アシスタントディレクター、カメラマンなど(以下総称してスタッフと称する)が番組放送のための作業を行う。
コントロールルーム2100は少なくとも制御部2101、スイッチャ2102、モニタ2103および通信部2104を備える。制御部2101はコントロールルーム2100の各部および全体を制御するものである。制御部2101はさらにスイッチャ2102とモニタ2103間の映像データなどの送受信、コントロールルーム2100とスタジオ2200のCCU2201(Camera Control Unit)間における映像データなどの送受信も行う。
スイッチャ2102は複数の入力信号を切り換えたり、混合させたりする装置であり、例えばモニタ2103に表示する映像の切り換え操作を担当するスタッフが使用するものである。モニタ2103は放送前の映像、放送用の映像、放送用処理を施している映像など、各種映像を表示する表示デバイスである。
また、スタジオ2200は少なくともCCU2201およびカメラ2202を備える。CCU2201はカメラ2202で撮影した映像に処理を施して出力したり、映像データなどの伝送するものである。カメラ2202はスタジオ2200において報道を行うキャスターなどを撮影するものである。
図11に示すように例えば、放送局2000からサーバ3000を経由してジャーナリスト1000に取材指示や取材情報が送信される。取材情報とは例えば日付、ジャーナリストのID、取材ID、取材場所、タイトル、撮像装置の設定情報などを含むものである。
そしてその取材指示、取材情報に基づいてジャーナリスト1000が取材を行うとジャーナリスト1000は取材内容をサーバ3000を介して放送局2000に送信する。取材内容とは例えば、取材により得られた映像、静止画像、音声、テキストなどを含むものである。
放送局2000においてはスタッフがジャーナリスト1000から送信された取材内容に基づいて番組の構成、収録、編集などを行い、取材内容を番組内で放送する。
[2-2.MOJOにおける取材の第1の態様]
次に図12を参照してMOJOにおける取材の第1の態様について説明する。
MOJOにおけるジャーナリストにはシチズンジャーナリスト(市民ジャーナリスト)、ビデオジャーナリスト、ブロードキャストジャーナリストがある。
シチズンジャーナリストとは、撮影した映像を放送局2000に提供したり、インターネットに投稿したりする一般の市民である。スマートフォンなどの端末装置の普及により一般の市民も容易に事件を撮影することができるようになったことで生まれた存在である。たまたま事件発生現場に遭遇したような場合に取材を行うため、ビデオジャーナリストとブロードキャストジャーナリストよりも即時性の高い報道を行うことができる。
ビデオジャーナリストとは、放送局2000のスタッフやフリージャーナリストなどであり、スマートフォンやデジタルカメラなどのプロ仕様撮影機器よりは携帯性が高い装置で撮影した映像を放送局2000に提供することを職業として行っている者である。よってビデオジャーナリストはブロードキャストジャーナリストよりも迅速に報道を行うことができる。
ブロードキャストジャーナリストとは、放送局2000のスタッフやフリージャーナリストなどで、プロ仕様撮影機器を使用して撮影した映像を放送局2000に提供することを職業として行っている者である。プロ仕様撮影機器はスマートフォンなどの端末装置200や一般的なデジタルカメラなどの撮像装置100に比べて重く大掛かりであるため、シチズンジャーナリスト、ビデオジャーナリストに比べて事件発生現場に到着して取材を開始するまでに時間がかかる。しかし、プロ用撮影機器で撮影するため、シチズンジャーナリスト、ビデオジャーナリストが撮影した映像よりも高画質で詳細な報道を行うことができる。
図12は、端末装置200を使用するビデオジャーナリストとプロ用撮影機器としての撮像装置100を使用するブロードキャストジャーナリストの取材に基づいて放送が行われるMOJOの第1の取材態様である。
この第1の取材態様ではまず放送局2000は事件の発生を知るとサーバ3000を介してまたは直接ビデオジャーナリストおよびブロードキャストジャーナリストに取材を依頼する。
取材依頼を受けたビデオジャーナリストは、端末装置200を用いて取材としての撮影、編集などを行う。なお、この例では端末装置200はプロ仕様撮影機器に比べて携帯性、可搬性に優れているものであるため、ビデオジャーナリストはプロ仕様撮影機器を使用するブロードキャストジャーナリストよりも早く事件発生現場に到着して取材を行うことができる。また、放送局2000は事件発生現場の近くにいて端末装置200を持っているビデオジャーナリストにそのまま取材をすることを依頼することもできる。一方、プロ仕様撮影機器は端末装置200よりも準備に時間を要するためブロードキャストジャーナリストよりも事件現場に到着して取材を行うのが遅くなる場合があると考えられる。
端末装置200を使用しているビデオジャーナリストは事件発生現場における撮影および編集が完了すると取材内容である映像データをサーバ3000を介して放送局2000に送信する。映像データを受信した放送局2000は端末装置200を用いて撮影された映像を用いて第一報の報道を行う。これにより従来のプロ用撮影機器のみを用いていた場合より即時性の高い報道が可能となる。こうした取材方法は、例えば、日中に放送される報道番組等の生放送中に事件が発生した場合に、リアルタイムで事件の内容を報道する際に適している。なお、端末装置200を使用するビデオジャーナリストは事件発生現場でそのまま撮影を継続することも可能である。また、端末装置200が取材内容として編集が完了した映像データを放送局2000に送信する場合を示したが、例えば、端末装置200が行う編集とは放送用の処理でもよいし、あるいはビデオジャーナリストは取材メモ等のテキストデータのみを映像とともに取材内容として放送局2000に送信し、放送局2000側で放送用の処理等の編集が行われてもよい。
プロ仕様撮影機器を使用しているブロードキャストジャーナリストは事件発生現場における撮影および編集が完了すると映像データをサーバ3000を介して放送局2000に送信する。映像データを受信した放送局2000はその映像データを用いて第一報後のさらなる報道を行う。プロ仕様撮影機器は端末装置200よりも高性能であるため、端末装置200により撮影された映像よりも高画質で詳細な報道を行うことができる。こうした取材方法は、例えば日中にビデオジャーナリストによって取材された事件について、追加で取材を行なって夕方や夜の報道番組でさらに詳しい内容を放送する際に適している。ただし、ビデオジャーナリストとは異なるブロードキャストジャーナリストの独自の取材内容であってもよい。なお、ブロードキャストジャーナリストも事件発生現場でそのまま撮影を継続することも可能である。
[2-3.MOJOにおける取材の第2の態様]
図13は端末装置200を使用するシチズンジャーナリストとプロ用撮影機器としての撮像装置100を使用するブロードキャストジャーナリストの取材に基づいて放送が行われるMOJOの第2の取材態様を示すものである。
この第2の取材態様においては放送局2000が使用するサーバ3000等とは別のインターネットにおけるサービスを提供するための外部サーバ4000が存在する。インターネットにおけるサービスには各種SNS(Social Network Service)、動画配信サイト、ブログサイト、インターネットテレビなどがある。
シチズンジャーナリストは放送局2000と雇用関係のない一般の市民であるため、この第2の取材態様においては放送局2000とシチズンジャーナリストは事件の発生を別々に知ることになる。よってシチズンジャーナリストは放送局2000からの取材依頼がなくても自由意思で取材を行う。シチズンジャーナリストは偶然自らが事件を発見したり、事件に遭遇すると直ちに取材として撮影、編集を行うことができる。
事件に遭遇したシチズンジャーナリストは、端末装置200を用いて取材としての撮影などを行う。なお、一般的に端末装置200はプロ仕様撮影機器に比べて携帯性、可搬性、通信機能に優れているためシチズンジャーナリストはブロードキャストジャーナリストよりも早く取材内容を投稿、提供することができると考えられる。なお、シチズンジャーナリストは撮影した映像にテキストを添付したりする場合もある。また、シチズンジャーナリストが撮影した映像に対して放送局2000や放送局2000のサーバ内で編集作業が行われる場合もある。
端末装置200を使用しているシチズンジャーナリストは撮影および編集が完了すると取材内容をインターネット上のSNSや動画配信サイトなどに投稿する。これが放送局2000を介さない第一報の報道となる。これにより放送局2000により行われる従来の報道よりも即時性の高い報道が可能となる。
放送局2000はSNS、動画配信サイト、ブログサイトなどを定期的に検索し、シチズンジャーナリストが事件についてインターネット上に投稿をしていることを把握したらそのシチズンジャーナリストに情報提供依頼を行い、投稿内容を取得する。
投稿内容を取得した放送局2000はその投稿内容を用いて報道を行う。これによりビデオジャーナリストおよびブロードキャストジャーナリストの取材と報道より即時性の高い報道が可能となる。
また、放送局2000はシチズンジャーナリストに依頼してリアルタイムに映像データなどの取材内容の供給を受けるようにしてもよい。これによりシチズンジャーナリストが撮影した映像を使ってリアルタイムの報道(生中継)を行うことが可能となる。
また、プロ仕様撮影機器を使用しているブロードキャストジャーナリストは撮影および編集が完了すると映像データをサーバ3000を介して放送局2000に送信する。映像データを受信した放送局2000はカメラを用いて撮影された映像を用いて第一報後のさらなる報道を行う。プロ仕様撮影機器は端末装置200よりも高性能であるため、端末装置200により撮影された映像よりもより高画質で詳細な報道を行うことができる。また、放送局2000はブロードキャストジャーナリストから送信される映像を使ってリアルタイムの報道(生中継)を行うことも可能となる。
MOJOの取材態様の例は以上のようになっている。なお図12および図13の取材の態様はあくまで一例である。
このような報道の方法では生中継の報道やリアルタイムの動画ストリーミングで報道が行われることもある。そのような生中継、リアルタイムの動画ストリーミングにおいてジャーナリストは現在放送局2000がどのような映像を放送しているのか、自分が撮影している映像がどのように放送されているかを確認したい場合がある。そのような場合に本技術が有用である。
具体的にはジャーナリスト1000(シチズンジャーナリスト、ビデオジャーナリストおよびブロードキャストジャーナリスト)は撮像装置100と端末装置200を所持し、事件発生現場において撮像装置100で撮影および編集を行う。そして撮影データをサーバ3000を介して放送局2000に送信する。放送局2000は撮影データを用いて放送を行いつつ、放送内容をリターン映像データとしてジャーナリスト1000の端末装置200に送信する。ジャーナリスト1000は端末装置200にリターン映像データを表示することにより、撮像装置100で撮影を行いつつ、端末装置200で放送内容を確認することができる。また音声通話により放送局2000とジャーナリスト1000間で指示、相談、打ち合わせなどをすることも可能である。
<3.変形例>
以上、本技術の実施の形態について具体的に説明したが、本技術は上述の実施の形態に限定されるものではなく、本技術の技術的思想に基づく各種の変形が可能である。
実施の形態では映像データを具体例として説明を行ったが、画像データ、音声データ、テキストデータ、統計データ、測定データ、プログラム、アプリケーション用データなどあらゆるデータに本技術は適用可能である。
実施の形態では情報処理装置300は端末装置200にリターン映像データを送信し、さらにタリー信号を送信するように説明したが情報処理装置300はタリー信号のみを送信してもよい。
実施の形態では撮像装置100が撮像装置100自身の識別情報を端末装置200に送信し、端末装置200が端末装置200自身と撮像装置100の識別情報を情報処理装置300に送信した。しかし、端末装置200が識別情報を撮像装置100に送信し、撮像装置100が撮像装置100自身と端末装置200の識別情報を情報処理装置300に送信してもよい。
実施の形態では端末装置200が複数ある場合についても説明したが、撮像装置100が複数あってもよい。
実施の形態では情報処理装置300の制御部301が通信部302を介してリターン映像データを端末装置200に送信する送信処理を行うように説明したが、制御部301はさらに端末装置200の通信環境に応じて異なる送信処理を行ってもよい。ここで、端末装置200の通信環境とは、例えば端末装置200が位置している場所において、端末装置200と基地局間の通信に利用可能な通信方式(5G、4G/LTE、3G等)を示す。
変形例に係る情報処理装置300の制御部301は、端末装置200と基地局間の通信環境が、低速通信方式(4G/LTE、3G等)であるか、低速低容量通信方式よりも高速高容量の通信が可能な高速高容量通信方式(例えば、5G)であるかを、通信環境を示す情報に基づき判定する。ここで、通信環境を示す情報は、例えば端末装置200と基地局との間で確立している通信方式を示す情報であり、端末装置200が基地局を介して情報処理装置300に送信するものであってもよい。この場合、端末装置200から情報処理装置300に送信する他の情報に、この通信環境を示す情報を含めてもよい。また、通信環境を示す情報は、端末装置200の位置を示す位置情報であり、情報処理装置300が端末装置200の位置情報を取得するものであってもよい。この場合、情報処理装置300の制御部301は、事前に記憶する通信エリアマップを参照することで、取得した位置情報が示す端末装置200の位置における通信環境を判定する。
情報処理装置300の制御部301は、判定した通信環境が低速低容量通信方式(4G/LTE、3G等)である場合に、端末装置200に対して少なくともリターン映像を送信するように通信部を制御する。このように、低速低容量通信方式を利用可能な環境下では、必要最小限の映像を送信することで情報量を抑え、安定した通信を行うことが可能となる。
一方、情報処理装置300の制御部301は、判定した通信環境が高速高容量通信方式(例えば、5G)である場合に、ネットワークを仮想化してネットワークリソースを分割(スライス)し、通信する信号の用途や優先度に応じてスライスを使い分けるネットワークスライシングの技術を用いることで、リターン映像に加え、その他複数の信号(送信先の端末装置200とペアリングされている撮像装置100の映像、その他の撮像装置100の映像信号、タリー信号含む)を送信するように通信部を制御する。
ここで、情報処理装置300の制御部301は、送信する信号の用途や特性に応じて、割り当てられるべきスライスを特定するための情報を生成し、信号と、当該信号が割り当てられるべきスライスを特定するための情報(メタデータ)を関連付けて基地局に送信するように通信部を制御する。基地局は、受信した各信号をそれぞれのメタデータにより特定されるスライスに割り当てることで、割り当てられたスライスを用いて各信号を端末装置200に送信する。
例えば、リターン映像は最も優先度の高い信号であり低遅延で送信する必要があるため、制御部301は、当該リターン映像に対して低遅延での送信が確保できるようなスライスを特定するための情報(メタデータ)を生成し、当該リターン映像と関連付け、その他の信号をリターン映像よりも優先度の低い信号として、上記スライスと異なるスライスを特定するための情報(メタデータ)を生成し、それぞれの信号と関連付ける。ここで、信号の種別ごとに、異なるスライスに割り当てるようにしてもよいし、いくつかの信号の種別を共通のスライスに割り当てるようにしてもよい。このように、各々の信号に求められる特性に応じたスライスを割り当てて送信することができ、ユーザは優先度の高いリターン映像を低遅延な状態で確認しつつ、ペアリング先の撮像装置100あるいはその他の撮像装置100で撮影している映像も確認することが可能となる。
なお、ここでは、情報処理装置300の制御部301が、送信する信号が割り当てられるべきスライスを特定するための情報を生成する例を説明したが、情報処理装置300の制御部301は、単に送信する信号の種別(リターン映像、その他信号等)を示す情報を、当該信号に関連付けるものであってもよい。この場合、基地局が、受信した各信号に関連付けられた種別を示す情報に基づき、例えば事前に記憶している信号の種別と、当該種別の信号を割り当てるべきスライスの関係を参照することで、受信した各信号をそれぞれの種別に基づき特定されるスライスに割り当てることで、割り当てられたスライスを用いて各信号を端末装置200に送信することができる。
さらに、他の変形例に係る情報処理装置300は、端末装置200の通信環境に応じて、端末装置200に送信する映像信号に対して映像処理装置400で異なる映像処理を行っても良い。
さらに、他の変形例に係る情報処理装置300は、端末装置200の通信環境に応じて、端末装置200に送信する映像信号に対して異なる映像処理を行う映像処理部(図示せず)を備えても良い。
他の変形例に係る情報処理装置300の映像処理部は、端末装置200の通信環境に応じて、映像に対する解像度変換処理を行う。
情報処理装置300の映像処理部は、制御部301が判定した通信環境が低速低容量通信方式(4G/LTE、3G等)である場合に、リターン映像の解像度(撮像装置100が撮像した映像の解像度であり、例えば4Kや8K等の高解像度)を低下させる解像度変換処理を行うことで低解像度(例えばHD等の低解像度)の映像に解像度変換する。制御部301は、映像処理部が解像度変換した映像信号を基地局に送信するように通信部を制御する。これにより、解像度は低いが受信遅延等を起こすことなくユーザがリターン映像を確認することができる。なお、通信環境が低速低容量通信方式(4G/LTE、3G等)と判定した場合であっても、リターン映像に加え、送信先の端末装置200とペアリングされている撮像装置100の映像、その他の撮像装置100の映像を送信する場合には、映像処理部は、それらの映像のいずれか、またはすべてに対して解像度変換を行うことができる。
なお、映像処理部は、制御部301が判定した通信環境が低速低容量通信方式(4G/LTE、3G等)である場合に、映像の解像度を低下(ダウンコンバート)させる解像度変換処理を行うのではなく、制御部301が判定した通信環境が高速高容量通信方式(例えば、5G)である場合に、映像の解像度を向上(アップコンバート)させる解像度変換処理を行うこともできる。すなわち、情報処理装置300の映像処理部は、制御部301が判定した通信環境が高速高容量通信方式(例えば、5G)である場合に、リターン映像の解像度(撮像装置100が撮像した映像の解像度であり、例えばHD等の低解像度)を向上させる解像度変換処理を行うことで高解像度(例えば4Kや8K等の高解像度)の映像に解像度変換する。制御部301は、映像処理部が解像度変換した映像信号を基地局に送信するように通信部を制御する。これにより、受信遅延等を起こすことなくユーザがより鮮明なリターン映像を確認することができる。このように、通信環境に応じてリターン映像の解像度を調整することで、リターン映像の画質と送受信の安定性の双方を両立した形でユーザがリターン映像を確認することが可能となる。
さらに、他の変形例に係る情報処理装置300の映像処理部は、端末装置200の通信環境に応じて、映像に対するフレームレート変換処理を行う。
情報処理装置300の映像処理部は、制御部301が判定した通信環境が低速低容量通信方式(4G/LTE、3G等)である場合に、リターン映像のフレームレート(撮像装置100が撮像した映像のフレームレートであり、例えば120p等のハイフレームレート)を低下させるフレームレート変換処理を行うことでローフレームレート(例えば30p等のローフレームレート)の映像にフレームレート変換する。制御部301は、映像処理部がフレームレート変換した映像を基地局に送信するように通信部を制御する。これにより、ローフレームレートだが受信遅延等を起こすことなくユーザがリターン映像を確認することができる。なお、通信環境が低速低容量通信方式(4G/LTE、3G等)と判定した場合であっても、リターン映像に加え、送信先の端末装置200とペアリングされている撮像装置100の映像、その他の撮像装置100の映像を送信する場合には、映像処理部は、それらの映像のいずれか、またはすべてに対してフレームレート変換を行うことができる。
なお、映像処理部は、制御部301が判定した通信環境が低速低容量通信方式(4G/LTE、3G等)である場合に、映像のフレームレートを低下(ダウンコンバート)させるフレームレート変換処理を行うのではなく、制御部301が判定した通信環境が高速高容量通信方式(例えば、5G)である場合に、映像のフレームレートを向上(アップコンバート)させるフレームレート変換処理を行うこともできる。すなわち、情報処理装置300の映像処理部は、制御部301が判定した通信環境が高速高容量通信方式(例えば、5G)である場合に、リターンのフレームレート(撮像装置100が撮像した映像のフレームレートであり、例えば30p等のローフレームレート)を向上させるフレームレート変換処理を行うことでハイフレームレート(例えば120p等のハイフレームレート)の映像にフレームレート変換する。制御部301は、映像処理部がフレームレート変換した映像信号を基地局に送信するように通信部を制御する。これにより、受信遅延等を起こすことなくよりハイフレームレートなリターン映像をユーザが確認することができる。
なお、上記の例では、情報処理装置300の映像処理部が、解像度変換処理とフレームレート変換処理をそれぞれ個別に行う例を説明したが、解像度変換処理とフレームレート変換処理をあわせて行うことも可能である。
本技術はMOJOのような報道に限らず、生放送ドラマ、生放送のバラエティ番組などあらゆる放送にも適用可能である。
本技術は以下のような構成も取ることができる。
(1)
端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて前記端末装置と前記撮像装置とが対応付けられているか否かを判定し、判定結果に基づいて前記端末装置をリターン映像の送信対象として設定する制御部を備える
情報処理装置。
(2)
前記制御部は、前記端末装置と前記撮像装置とが対応付けられていることを示す条件である対応付け条件を前記判定結果が満たす場合に前記端末装置を前記リターン映像の送信対象として設定する(1)に記載の情報処理装置。
(3)
前記第1識別情報は前記端末装置を特定するための端末装置識別情報と前記撮像装置を特定するための撮像装置識別情報を含み、前記第2識別情報は前記撮像装置識別情報を含む(1)または(2)に記載の情報処理装置。
(4)
前記制御部は、前記第1識別情報に含まれる前記撮像装置識別情報と前記第2識別情報に含まれる前記撮像装置識別情報とが一致することを前記判定結果が示す場合に、前記端末装置を前記リターン映像の送信対象として設定する(3)に記載の情報処理装置。
(5)
前記制御部は、前記リターン映像を表示する機能を備えることを示すリターン映像表示機能情報を前記端末装置から受信したことを示す条件であるリターン映像条件と、前記対応付け条件の双方を前記判定結果が満たす場合に前記端末装置を前記リターン映像の送信対象として設定する(1)から(4)のいずれかに記載の情報処理装置。
(6)
前記制御部は、さらに、前記判定結果が前記対応付け条件を満たす場合に前記端末装置をタリー信号の送信対象として設定する(2)に記載の情報処理装置。
(7)
前記制御部は、タリー信号を提示する機能を備えることを示すタリー信号提示機能情報を前記端末装置から受信したことを示す条件であるタリー信号条件と、前記対応付け条件の双方を前記判定結果が満たす場合に前記端末装置を前記タリー信号の送信対象として設定する(6)に記載の情報処理装置。
(8)
前記端末装置と前記撮像装置と前記情報処理装置とは、無線方式で通信を行う(1)から(7)のいずれかに記載の情報処理装置。
(9)
端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて前記端末装置と前記撮像装置とが対応付けられているか否かを判定し、
判定結果に基づいて前記端末装置にリターン映像を送信する情報処理方法。
(10)
端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて前記端末装置と前記撮像装置とが対応付けられているか否かを判定し、
判定結果に基づいて前記端末装置にリターン映像を送信する情報処理プログラム。
(11)
外部撮像装置から受信した前記外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、
外部情報処理装置が前記第1識別情報と前記外部撮像装置から受信した第2識別情報とに基づいて端末装置と前記撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する制御部を備える端末装置。
(12)
前記制御部は、前記外部情報処理装置が前記端末装置と前記撮像装置とが対応付けられていることを示す条件である対応付け条件を満たすか否かを判定した結果に基づいて送信した前記リターン映像を受信するよう制御する(11)に記載の端末装置。
(13)
前記第1識別情報は前記端末装置を特定するための端末装置識別情報と前記撮像装置を特定するための撮像装置識別情報を含み、前記第2識別情報は前記撮像装置識別情報を含む(11)または(12)に記載の端末装置。
(14)
前記制御部は、前記外部情報処理装置が前記第1識別情報に含まれる前記撮像装置識別情報と前記第2識別情報に含まれる前記撮像装置識別情報とが一致するか否かを判定した結果に基づいて送信した前記リターン映像を受信するよう制御する(13)に記載の端末装置。
(15)
前記制御部は、前記外部情報処理装置が前記リターン映像を表示する機能を備えることを示すリターン映像表示機能情報を前記端末装置から受信したことを示す条件であるリターン映像条件と、前記対応付け条件の双方を満たすか否かを判定した結果に基づいて送信した前記リターン映像を受信するよう制御する(11)から(14)のいずれかに記載の端末装置。
(16)
前記制御部は、前記外部情報処理装置が、さらに、前記対応付け条件を満たすか否かを判定した結果に基づいて送信したタリー信号を受信するよう制御する(12)に記載の端末装置。
(17)
前記制御部は、前記外部情報処理装置がタリー信号を提示する機能を備えることを示すタリー信号提示機能情報を前記端末装置から受信したことを示す条件であるタリー信号条件と、前記対応付け条件の双方を満たすか否かを判定した結果に基づいて送信した前記タリー信号を受信するよう制御する(16)に記載の端末装置。
(18)
前記撮像装置と前記情報処理装置と前記端末装置とは、無線方式で通信を行う(11)から(17)のいずれかに記載の端末装置。
(19)
外部撮像装置から受信した前記外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、
外部情報処理装置が前記第1識別情報と前記外部撮像装置から受信した第2識別情報とに基づいて端末装置と前記撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する端末装置の制御方法。
(20)
外部撮像装置から受信した前記外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、
外部情報処理装置が前記第1識別情報と前記外部撮像装置から受信した第2識別情報とに基づいて端末装置と前記撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する端末装置の制御方法をコンピュータに実行させる制御プログラム。
10・・・・情報処理システム
100・・・撮像装置
200・・・端末装置
300・・・情報処理装置
303・・・情報受信部
304・・・データ受信部
305・・・データ送信部

Claims (20)

  1. 端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて前記端末装置と前記撮像装置とが対応付けられているか否かを判定し、判定結果に基づいて前記端末装置をリターン映像の送信対象として設定する制御部を備える
    情報処理装置。
  2. 前記制御部は、前記端末装置と前記撮像装置とが対応付けられていることを示す条件である対応付け条件を前記判定結果が満たす場合に前記端末装置を前記リターン映像の送信対象として設定する
    請求項1に記載の情報処理装置。
  3. 前記第1識別情報は前記端末装置を特定するための端末装置識別情報と前記撮像装置を特定するための撮像装置識別情報を含み、前記第2識別情報は前記撮像装置識別情報を含む
    請求項1に記載の情報処理装置。
  4. 前記制御部は、前記第1識別情報に含まれる前記撮像装置識別情報と前記第2識別情報に含まれる前記撮像装置識別情報とが一致することを前記判定結果が示す場合に、前記端末装置を前記リターン映像の送信対象として設定する
    請求項3に記載の情報処理装置。
  5. 前記制御部は、前記リターン映像を表示する機能を備えることを示すリターン映像表示機能情報を前記端末装置から受信したことを示す条件であるリターン映像条件と、前記対応付け条件の双方を前記判定結果が満たす場合に前記端末装置を前記リターン映像の送信対象として設定する
    請求項2に記載の情報処理装置。
  6. 前記制御部は、さらに、前記判定結果が前記対応付け条件を満たす場合に前記端末装置をタリー信号の送信対象として設定する
    請求項2に記載の情報処理装置。
  7. 前記制御部は、タリー信号を提示する機能を備えることを示すタリー信号提示機能情報を前記端末装置から受信したことを示す条件であるタリー信号条件と、前記対応付け条件の双方を前記判定結果が満たす場合に前記端末装置を前記タリー信号の送信対象として設定する
    請求項6に記載の情報処理装置。
  8. 前記端末装置と前記撮像装置と前記情報処理装置とは、無線方式で通信を行う
    請求項1に記載の情報処理装置。
  9. 端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて前記端末装置と前記撮像装置とが対応付けられているか否かを判定し、
    判定結果に基づいて前記端末装置にリターン映像を送信する
    情報処理方法。
  10. 端末装置から受信した第1識別情報と、撮像装置から受信した第2識別情報に基づいて前記端末装置と前記撮像装置とが対応付けられているか否かを判定し、
    判定結果に基づいて前記端末装置にリターン映像を送信する
    情報処理プログラム。
  11. 外部撮像装置から受信した前記外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、
    外部情報処理装置が前記第1識別情報と前記外部撮像装置から受信した第2識別情報とに基づいて端末装置と前記撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する制御部を備える
    端末装置。
  12. 前記制御部は、前記外部情報処理装置が前記端末装置と前記撮像装置とが対応付けられていることを示す条件である対応付け条件を満たすか否かを判定した結果に基づいて送信した前記リターン映像を受信するよう制御する
    請求項11に記載の端末装置。
  13. 前記第1識別情報は前記端末装置を特定するための端末装置識別情報と前記撮像装置を特定するための撮像装置識別情報を含み、前記第2識別情報は前記撮像装置識別情報を含む
    請求項11に記載の端末装置。
  14. 前記制御部は、前記外部情報処理装置が前記第1識別情報に含まれる前記撮像装置識別情報と前記第2識別情報に含まれる前記撮像装置識別情報とが一致するか否かを判定した結果に基づいて送信した前記リターン映像を受信するよう制御する
    請求項13に記載の端末装置。
  15. 前記制御部は、前記外部情報処理装置が前記リターン映像を表示する機能を備えることを示すリターン映像表示機能情報を前記端末装置から受信したことを示す条件であるリターン映像条件と、前記対応付け条件の双方を満たすか否かを判定した結果に基づいて送信した前記リターン映像を受信するよう制御する
    請求項12に記載の端末装置。
  16. 前記制御部は、前記外部情報処理装置が、さらに、前記対応付け条件を満たすか否かを判定した結果に基づいて送信したタリー信号を受信するよう制御する
    請求項12に記載の端末装置。
  17. 前記制御部は、前記外部情報処理装置がタリー信号を提示する機能を備えることを示すタリー信号提示機能情報を前記端末装置から受信したことを示す条件であるタリー信号条件と、前記対応付け条件の双方を満たすか否かを判定した結果に基づいて送信した前記タリー信号を受信するよう制御する
    請求項16に記載の端末装置。
  18. 前記撮像装置と前記情報処理装置と前記端末装置とは、無線方式で通信を行う
    請求項11に記載の端末装置。
  19. 外部撮像装置から受信した前記外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、
    外部情報処理装置が前記第1識別情報と前記外部撮像装置から受信した第2識別情報とに基づいて端末装置と前記撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する
    端末装置の制御方法。
  20. 外部撮像装置から受信した前記外部撮像装置を特定するための撮像装置識別情報と自身を特定するための端末装置識別情報とを対応付けた第1識別情報を送信し、
    外部情報処理装置が前記第1識別情報と前記外部撮像装置から受信した第2識別情報とに基づいて端末装置と前記撮像装置とが対応づけられているか否かを判定した結果に基づいて送信したリターン映像を受信するよう制御する
    端末装置の制御方法をコンピュータに実行させる制御プログラム。
JP2021556033A 2019-11-12 2020-11-04 情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム Active JP7704032B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019204789 2019-11-12
JP2019204789 2019-11-12
PCT/JP2020/041178 WO2021095598A1 (ja) 2019-11-12 2020-11-04 情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム

Publications (2)

Publication Number Publication Date
JPWO2021095598A1 JPWO2021095598A1 (ja) 2021-05-20
JP7704032B2 true JP7704032B2 (ja) 2025-07-08

Family

ID=75912141

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021556033A Active JP7704032B2 (ja) 2019-11-12 2020-11-04 情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム

Country Status (5)

Country Link
US (1) US11979223B2 (ja)
EP (1) EP4044605A4 (ja)
JP (1) JP7704032B2 (ja)
CN (1) CN114631326B (ja)
WO (1) WO2021095598A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022269723A1 (ja) * 2021-06-21 2022-12-29 日本電信電話株式会社 同期制御を行う通信システム、その同期制御方法、受信サーバ及び同期制御プログラム
US11818217B1 (en) * 2022-10-07 2023-11-14 Getac Technology Corporation Device management during emergent conditions

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012230410A (ja) 2010-01-22 2012-11-22 Nihon Video System Co Ltd ビューファインダー装置固定用アダプタ
JP2015084478A (ja) 2013-10-25 2015-04-30 株式会社コスミックエンジニアリング リターン映像の配信装置

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5043829A (en) * 1987-03-30 1991-08-27 Videonics Incorporated Method and an apparatus for controlling a video cassette recorder
JP4310674B2 (ja) * 2000-01-11 2009-08-12 ソニー株式会社 電子機器に接続されているデバイスの選択方法及びこの選択方法を備えた電子機器
GB0301033D0 (en) 2003-01-16 2003-02-19 Sony Uk Ltd Networks and methods and devices therefor
US7567592B2 (en) * 2003-05-01 2009-07-28 Genesis Microchip Inc. Packet based video display interface enumeration method
CN101129069B (zh) * 2004-11-25 2010-12-22 松下电器产业株式会社 转发器装置及其控制方法
EP1968239B1 (en) * 2005-12-26 2019-01-30 Panasonic Corporation Address managing method and communication device
JP2008054300A (ja) * 2006-07-28 2008-03-06 Sharp Corp 表示装置及び表示システム
JP2008158595A (ja) * 2006-12-20 2008-07-10 Sony Corp 情報処理装置
JP5091578B2 (ja) * 2007-07-26 2012-12-05 株式会社東芝 映像処理装置及び映像処理方法
JP5271532B2 (ja) * 2007-12-07 2013-08-21 株式会社日立製作所 映像伝送システム
US8866971B2 (en) * 2007-12-17 2014-10-21 Ati Technologies Ulc Method, apparatus and machine-readable medium for apportioning video processing between a video source device and a video sink device
US8661497B2 (en) * 2008-01-25 2014-02-25 General Instrument Corporation Set-top box for converting media signals based on stored output settings
JP4968091B2 (ja) * 2008-01-30 2012-07-04 ソニー株式会社 電子機器、メッセージ応答方法及びプログラム
JPWO2009101804A1 (ja) * 2008-02-13 2011-06-09 パナソニック株式会社 省電力システム
JP4535161B2 (ja) * 2008-04-01 2010-09-01 ソニー株式会社 電子機器、通信システム、通信方法、およびプログラム
JP4683067B2 (ja) * 2008-04-17 2011-05-11 ソニー株式会社 音声処理装置、音声処理方法およびプログラム
US20090282437A1 (en) * 2008-05-09 2009-11-12 Tap.Tv System and Method for Controlling Media at a Plurality of Output Devices
JP5230267B2 (ja) * 2008-05-27 2013-07-10 キヤノン株式会社 機器制御装置および制御方法
JP2010002189A (ja) * 2008-06-18 2010-01-07 Sanyo Electric Co Ltd 電子機器
WO2011022430A2 (en) * 2009-08-17 2011-02-24 Weigel Broadcasting Co. System and method for remote live audio-visual production
JP2011041204A (ja) * 2009-08-18 2011-02-24 Canon Inc 通信機器
JP5574695B2 (ja) * 2009-12-21 2014-08-20 キヤノン株式会社 通信装置
JP5038469B2 (ja) * 2010-01-22 2012-10-03 株式会社日本ビデオシステム ビューファインダー装置、ビューファインダー装置固定用アダプタ
JP2011172156A (ja) * 2010-02-22 2011-09-01 Sony Corp コンテンツ再生システム、コンテンツ受信装置、音声再生装置、コンテンツ再生方法およびプログラム
JP5565397B2 (ja) * 2011-09-30 2014-08-06 ヤマハ株式会社 オーディオ・ビデオ信号の入力切換装置、入力切換方法およびオーディオ・ビデオシステム
US20130159565A1 (en) * 2011-12-14 2013-06-20 Motorola Mobility, Inc. Method and apparatus for data transfer of touch screen events between devices
JP2013229685A (ja) * 2012-04-24 2013-11-07 Sony Corp 情報処理装置、情報処理方法及びプログラム
JP6061662B2 (ja) 2012-12-17 2017-01-18 キヤノン株式会社 サーバ装置、サーバ装置の制御方法およびプログラム
US9788039B2 (en) * 2014-06-23 2017-10-10 Google Inc. Camera system API for third-party integrations
CN109309843A (zh) 2018-07-25 2019-02-05 北京达佳互联信息技术有限公司 视频发布方法、终端及服务器

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012230410A (ja) 2010-01-22 2012-11-22 Nihon Video System Co Ltd ビューファインダー装置固定用アダプタ
JP2015084478A (ja) 2013-10-25 2015-04-30 株式会社コスミックエンジニアリング リターン映像の配信装置

Also Published As

Publication number Publication date
EP4044605A4 (en) 2022-12-07
US20220385385A1 (en) 2022-12-01
JPWO2021095598A1 (ja) 2021-05-20
EP4044605A1 (en) 2022-08-17
CN114631326B (zh) 2024-07-09
US11979223B2 (en) 2024-05-07
CN114631326A (zh) 2022-06-14
WO2021095598A1 (ja) 2021-05-20

Similar Documents

Publication Publication Date Title
US11647132B2 (en) Communication terminal, method for controlling communication terminal, communication system, and storage medium
CN110677703B (zh) 用于在社交媒体上即时共享视频内容的方法、设备和系统
WO2013132828A1 (ja) 通信システムおよび中継装置
US9692963B2 (en) Method and electronic apparatus for sharing photographing setting values, and sharing system
US11190812B2 (en) Communication apparatus, control method for controlling the same, and recording medium for the same
JP5094704B2 (ja) コンテンツ共有システムおよびコンテンツ共有方法
JP7704032B2 (ja) 情報処理装置、情報処理方法、情報処理プログラム、端末装置、端末装置の制御方法および制御プログラム
CN115777199A (zh) 信息处理装置、信息处理方法和程序
US9445142B2 (en) Information processing apparatus and control method thereof
US12475165B2 (en) Communication device and method for controlling the same
CN108702492A (zh) 一种监控视频的传输方法、装置及设备
CN115702569A (zh) 信息处理设备、信息处理方法、成像设备和图像转发系统
US11082363B2 (en) Communication apparatus performing multi-camera live streaming, control method therefor, and storage medium
KR101529139B1 (ko) 멀티앵글영상촬영을 위한 사용자인터페이스 메뉴 제공방법 및 사용자 인터페이스메뉴 제공장치
US9277261B2 (en) Information processing apparatus and control method thereof
US20160065830A1 (en) Communication apparatus capable of communicating with external apparatus, control method for communication apparatus, and storage medium
US20140320675A1 (en) Camera Capable of Connecting to Mobile Devices, and Operational Methods Thereof
WO2021117679A1 (ja) 端末装置、制御プログラム、情報処理装置、情報処理プログラムおよび情報処理システム
WO2021131349A1 (ja) 撮像装置、撮像装置の制御方法、制御プログラム、情報処理装置、情報処理装置の制御方法および制御プログラム
WO2021153507A1 (ja) 撮像装置、撮像装置の制御方法、制御プログラム、情報処理装置、情報処理装置の制御方法および制御プログラム
JP2015103044A (ja) 情報処理システム、共有サービス利用方法及び情報機器
WO2018137393A1 (zh) 一种图像处理方法及电子设备
JP2016082491A (ja) 画像配信システム及びその管理装置
WO2017203789A1 (ja) 差分画像作成方法、画像復元方法、差分検出装置、画像復元装置及び監視方法
JP2025012419A (ja) 通信装置、制御方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230927

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241001

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20250121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250318

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250527

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250609

R150 Certificate of patent or registration of utility model

Ref document number: 7704032

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150