JP7501559B2 - 表示端末、表示方法、通信システム、通信方法、及びプログラム - Google Patents
表示端末、表示方法、通信システム、通信方法、及びプログラム Download PDFInfo
- Publication number
- JP7501559B2 JP7501559B2 JP2022043090A JP2022043090A JP7501559B2 JP 7501559 B2 JP7501559 B2 JP 7501559B2 JP 2022043090 A JP2022043090 A JP 2022043090A JP 2022043090 A JP2022043090 A JP 2022043090A JP 7501559 B2 JP7501559 B2 JP 7501559B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- wide
- imaging device
- unit
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30168—Image quality inspection
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Studio Devices (AREA)
- Closed-Circuit Television Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
図1は、広視野画像を用いた遠隔コミュニケーションの一例を説明する図である。図1では、3つの拠点A~Cが情報処理システム50を介して通信している。拠点の数は一例に過ぎず、2拠点でも、4拠点以上でもよい。
テナントとは、サービスの提供者(本実施形態では情報処理システム)から画像配信サービスを受けることを契約する際の契約単位に紐づくユーザーのグループを示しており、契約した企業、組織、個人等である。そのため、テナントは、ユーザーグループとも言い換えることができる。ユーザーは一例としてテナントに所属しているが、ユーザー個人でサービスに加入してもよい。テナント(ユーザーグループ)には、ユーザーの他、撮像装置、仮想ルーム等が登録されている。
図2は、通信システム1aの構成概略図の一例である。図1は、図2の通信システム1aを現場との遠隔コミュニケーションに適用した一例である。通信システム1aは、複数の拠点間において、撮像装置10が撮像した広視野画像や通常画角の画像を双方向に送受信するシステムであり、ある拠点から配信される画像を、他の拠点において表示させることで、他の拠点のユーザーが画像を閲覧できるシステムである。なお、広視野画像の一例として、撮像装置10が撮像する全天球画像が配信される。通信システム1aは、例えば、所定の一拠点で撮像された広視野画像を、遠隔地にある他の拠点において閲覧させることができる。
続いて、図3、図4を用いて、本実施形態に係る画像通信システムが有する各装置又は端末のハードウエア構成を説明する。なお、図3、図4に示されているハードウエア構成は、必要に応じて構成要素が追加又は削除されてもよい。
まず、図3を用いて、撮像装置10のハードウエア構成を説明する。図3は、撮像装置10のハードウエア構成の一例を示す図である。以下では、撮像装置10は、二つの撮像素子を使用した全天球(全方位)撮像装置とするが、撮像素子は一つであっても、二つ以上あってもよい。また、必ずしも全方位撮像専用の装置である必要はなく、通常のデジタルカメラやスマートフォン等に後付けの全方位撮像ユニットを取り付けることで、実質的に撮像装置10と同じ機能を有するようにしてもよい。
図4は、通信端末30及び情報処理システム50のハードウエア構成の一例を示す図である。まず、通信端末30について説明する。通信端末30のハードウエア構成は、300番台の符号で示されている。通信端末30は、コンピュータによって構築されており、図4に示されているように、CPU301、ROM302、RAM303、HDD(Hard Disk)304、HDDコントローラ305、ディスプレイ306、外部機器接続I/F308、ネットワークI/F309、バスライン310、キーボード311、ポインティングデバイス312、DVD-RW(Digital Versatile Disk Rewritable)ドライブ314、メディアI/F316、音入出力I/F317、マイク318、スピーカ319、近距離通信回路320及びカメラ321を備えている。
図4に示すように、情報処理システム50の各ハードウエア構成は、括弧内の500番台の符号で示されている。情報処理システム50は、コンピュータによって構築されており、図4に示されているように、通信端末30と同様の構成を備えているため、各ハードウエア構成の説明を省略する。
以下では、図5~図12を用いて広視野画像(全天球画像)の生成方法を説明する。
続いて、図13を用いて、本実施形態に係る通信システム1aの機能構成について説明する。図13は、本実施形態に係る通信システム1aの機能構成の一例を示す図である。なお、図13では、図1に示されている各端末、装置及びサーバのうち、後述の処理又は動作に関連しているものが示されている。
まず、図13を参照して、撮像装置10の機能構成について説明する。撮像装置10は、通信部11、受付部12、撮像処理部13、解析部14、登録要求部15、接続部16、保存処理部17、画像送信制御部18、記憶・読出部19、及び調整部21を有している。これら各部は、図3に示されている各構成要素のいずれかが、SRAM113又はDRAM114上に展開されたプログラムに従ったCPU111からの命令によって動作することで実現される機能、又は機能する手段である。また、撮像装置10は、図3に示されているROM112等によって構築される記憶部1000を有している。
続いて、図13を用いて、通信端末30の機能構成について説明する。通信端末30は、通信部31、受付部32、表示制御部33、撮像部34、接続部36、記憶・読出部39、及びパラメータ生成部41を有している。これら各部は、図4に示されている各構成要素のいずれかが、RAM303上に展開されたプログラム(Webブラウザでも専用のアプリケーションでもよい)に従ったCPU301からの命令によって動作することで実現される機能、又は機能する手段である。また、通信端末30は、図4に示されているROM302又は記録メディア315によって構築される記憶部3000を有している。
次に、情報処理システム50の機能構成について説明する。情報処理システム50は、通信部51、画面生成部52、関連付け処理部53、画像配信制御部54、認証部55、通信グループ管理部56、通信制御部57、コネクション管理部58、記憶・読出部59、API管理部60、パラメータ生成部61を有している。これら各部は、図4に示されている各構成要素のいずれかが、RAM503上に展開されたプログラムに従ったCPU501からの命令によって動作することで実現される機能、又は機能する手段である。また、情報処理システムは、図4に示されているROM502、HDD504又は記録メディア515によって構築される記憶部5000を有している。
記憶部5000には、画像管理情報記憶部5001が構築されている。図14(a)は、画像管理情報記憶部5001に記憶される画像管理情報を示す概念図である。画像管理情報記憶部5001には、図14に示されているような画像管理情報が記憶されている。画像管理情報は、撮像要求により撮像された広視野画像を管理する情報であり、ユーザーが通信端末30から撮像要求を送信すると、1レコードの画像管理情報が生成される。画像管理情報が有する各項目について説明する。
記憶部5000には、仮想ルーム情報記憶部5002が構築されている。図15(a)は、仮想ルーム情報記憶部5002に記憶される仮想ルーム情報を示す概念図である。仮想ルーム情報記憶部5002には、図15(a)に示されているような仮想ルーム情報が記憶されている。仮想ルーム情報は、仮想ルームに関する情報であり、仮想ルームごとに保持される。仮想ルーム情報が有する各項目について説明する。なお、ここでは仮想ルームはテナントに登録されているが、テナントへの登録は必須ではなく、一時的に作成された仮想ルームや共有で利用できる仮想ルームの情報も仮想ルーム情報記憶部5002に記憶される。
記憶部5000には、テナント情報記憶部5003が構築されている。図15(b)は、テナント情報記憶部5003に記憶されるテナント情報を示す概念図である。テナント情報記憶部5003には、図15(b)に示されているようなテナント情報が記憶されている。テナント情報は、テナント(ユーザーグループ)に関する情報であり、テナントごとに保持される。テナント情報が有する各項目について説明する。なお、テナント情報にはユーザー情報など図示する以外に様々な情報が登録されており、図15(b)は一部に過ぎない。
・テナントIDは、テナントを識別する識別情報である。
・テナント名は、ユーザーがテナントを判別するための名称である。なお、テナントIDとテナント名は同一の情報であってもよい。
・テナント登録仮想ルームIDは、テナントに登録された仮想ルームの識別情報である。
・テナント登録デバイスは、テナントに登録されたデバイスに関する情報である。
なお、テナント情報記憶部、テナントID、テナント名、テナント登録仮想ルームID、テナント登録デバイスは、それぞれ、ユーザーグループ情報記憶部、ユーザーグループID、ユーザーグループ名、ユーザーグループ登録仮想ルームID、ユーザーグループ登録デバイスと言い換えることができる。
続いて、図16、図17を参照し、ユーザーbが仮想ルームに入室する処理について説明する。なお、すでに撮像装置10が仮想ルームに対応付けられ、通信端末30Aが広視野画像と通常の画角の画像を情報処理システム50に送信しているものとする(撮像装置10の仮想ルームへの対応付け等については図18以降で説明する)。また、以下では、ユーザーbが仮想ルームに入室することと、ユーザーbが操作する通信端末30Bが仮想ルームに入室することを特に区別しないで説明する。
続いて、図18~図25を参照して、撮像装置10の仮想ルームへの対応付けについて説明する。なお、撮像装置10の仮想ルームへの対応付けは拠点Aのユーザーaが行うとして説明するが、システム管理者やテナント管理者等が行ってもよい。
以上で、撮像装置10等のデバイスが仮想ルームに対応付けられたが、ユーザーaがデバイスに対し画像の送信開始を操作する必要がある。
次に、図25を参照して、図18~図24の一連の画面遷移で説明した仮想ルームへの撮像装置10の登録手順を説明する。図25は、ユーザーaが仮想ルームに撮像装置10を登録する手順を示すシーケンス図の一例である。
図26を参照して、広視野画像や通常の画角の画像が共有される流れを説明する。図26は、広視野画像が共有される流れを説明するシーケンス図の一例である。図26では、通信端末30A、30Bが図17で説明した入室処理を実行し、仮想ルームに入室ずみである。また、通信端末30Aは通常の画角のカメラ9を有し、通信端末30Bと共有されている。通信端末30Aのカメラ9でなく、仮想ルームに対応付けられたスマートグラス88が撮像した画像等が共有されてもよい。また、図26では、図25で説明した登録手順によって、撮像装置10が同じ仮想ルームに接続済みである。
続いて、図28乃至図30を参照して、撮影機能を自動調整する処理について説明する。なお、図28乃至図30の処理は、図27において、自動設定モードが設定されている場合の処理である。図28は、撮影機能を調整する処理(その1)を示すシーケンス図である。図29において、(a)は広視野画像(全天球画像)を示す図、(b)は所定領域T1の所定領域画像を示す図、(c)撮影設定調整後の所定領域画像を示す図である。
S201:ユーザーが、自己の通信端末30のディスプレイ306上に、撮像装置10から情報処理システム50を経由して配信された広視野画像の所定領域である所定領域画像を表示中に、画面操作により仮想的な視点を移動させる。これにより、受付部32は、視点の移動を受け付け、表示制御部33がディスプレイ306上に、例えば、図29(b)に示すような所定領域画像を表示させる。この所定領域画像は、図29(a)に示すような広視野画像の所定領域T1の画像である。このように、図29(b)の所定領域画像は、ぼやけていて画質が適正ではない。
S202:通信端末30のパラメータ生成部41は、ディスプレイ306に表示されている所定領域画像の画質が適正であるかを判断することで、適正でない場合に、上述の適正化するための撮影パラメータを生成する。ここでは、適正でない場合について説明を続ける。
S203:通信端末30の通信部31は、情報処理システム50に対して、撮像装置10の撮影機能の調整要求を送信する。この要求には、ステップS202で生成された撮影パラメータが含まれている。これにより、情報処理システム50の通信部51は、撮影機能の調整要求を受信する。
S204:情報処理システム50の通信部51は、画像管理情報記憶部5001に記憶されている画像管理情報を参考に、要求元の通信端末30と同じ仮想ルームに入っている撮像装置10に対して、撮影機能の調整要求を転送する。これにより、撮像装置10は、撮影機能の調整要求と共に撮影パラメータを受信する。
S205:撮像装置10の調整部21は、ステップS205によって受信された撮影パラメータを用いて、現在、撮影して情報処理システム50に送信中の広視野画像の画質を調整する。この場合、調整部21は、撮像制御ユニット105に対して、調整内容を指示する。なお、調整部21は、所定領域画像の画質が適正化するように調整するが、調整の対象は送信する広視野画像の所定領域ではなく、広視野画像全体である。このように、調整部21は、所定領域の画質が適正化するように広視野画像を調整するため、広視野画像の所定領域以外の領域の画質が却って悪くなる場合がある。
続いて、図30を用い、図28の処理の変形例として、撮影機能を調整する処理(その2)について説明する。
S301:上記ステップS201と同様に、ユーザーが、自己の通信端末30のディスプレイ306上に、撮像装置10から情報処理システム50を経由して配信された広視野画像の所定領域である所定領域画像を表示中に、画面操作により仮想的な視点を移動させる。これにより、受付部32は、視点の移動を受け付け、表示制御部33がディスプレイ306上に、例えば、図29(b)に示すような所定領域画像を表示させる。この所定領域画像は、図29(a)に示すような広視野画像の所定領域T1の画像である。このように、図29(b)の所定領域画像は、ぼやけていて画質が適切ではない。
S302:通信端末30の通信部31は、情報処理システム50に対して、現在表示中の所定領域画像である所定領域を特定するための視点情報を送信する。この場合、表示中の所定領域画像の画質が適正であるか否かは関係なく、視点情報が表示される。これにより、情報処理システム50の通信部51は、視点情報を受信する。
S303:情報処理システム50では、パラメータ生成部61が、現在配信中の広視野画像において、ステップS302で受信された視点情報で特定される所定領域の画質が適正であるかを判断することで、適正でない場合には適正化するための撮影パラメータを生成する。
S304,S305:上述のS204,S205と同様の処理であるため、説明を省略する。
図31は、通信システムが遠隔医療に適用された遠隔コミュニケーションの一例を説明する図である。図32は、遠隔医療の場合において仮想ルームに撮像装置を対応付けるための仮想ルーム対応付け画面の一例を示す図である。
以上説明したように、本実施形態の通信システムは、広視野画像における所定領域である所定領域画像を表示する場合に、視点情報を用いて所定領域を特定することで、できるだけ所定領域画像の画質を適正化することができるという効果を奏する。
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
10 撮像装置
11 通信部(画像送信部の一例、パラメータ受信部の一例)
21 調整部
30 通信端末(録画後に再生表示する場合は「表示端末」ともいう)
31 通信部((第1の/第2の)画像受信部の一例、(第1の)パラメータ送信部の一例、情報送信部の一例)
32 受付部
33 表示制御部
50 情報処理システム
51 通信部((第2の/第1の)画像受信部の一例、パラメータ受信部の一例、情報受信部の一例、(第2の)パラメータ送信部の一例、画像配信制御部の一例)
306 ディスプレイ(表示部の一例)
Claims (8)
- 撮像装置が撮像して得た広範囲の視野角を有する広視野画像を取得することで、当該広視野画像における所定領域である所定領域画像を表示する表示端末であって、
前記所定領域画像を表示部に表示させる表示制御部と、
前記表示部に表示されている前記所定領域画像の画質を適正化するための撮影パラメータを前記撮像装置が受信可能となるように送信するパラメータ送信部と、
前記表示部に表示されている前記所定領域画像の画質が適正であるかを判断することで、適正でない場合に前記撮影パラメータを生成するパラメータ生成部と、
を有し、前記パラメータ送信部は、生成された前記撮影パラメータを送信することを特徴とする表示端末。 - 前記撮影パラメータは、前記撮像装置に対して、露出、ホワイトバランス、ISO感度、シャッタースピード、焦点、ノイズ低減、DR補正、又はHDR合成に関する調整を行うためのパラメータであることを特徴とする請求項1に記載の表示端末。
- 撮像装置が撮像して得た広範囲の視野角を有する広視野画像を取得することで、当該広視野画像における所定領域である所定領域画像を表示する表示端末が実行する表示方法であって、
前記表示端末は、
前記所定領域画像を表示部に表示させる表示制御処理と、
前記表示部に表示されている前記所定領域画像の画質を適正化するための撮影パラメータを前記撮像装置が受信可能となるように送信するパラメータ送信処理と、
前記表示部に表示されている前記所定領域画像の画質が適正であるかを判断することで、適正でない場合に前記撮影パラメータを生成するパラメータ生成処理と、
を実行し、前記パラメータ送信処理は、生成された前記撮影パラメータを送信する処理を含むことを特徴とする表示方法。 - コンピュータに、撮像装置が撮像して得た広範囲の視野角を有する広視野画像を取得することで、当該広視野画像における所定領域である所定領域画像を表示させるためのプログラムであって、
前記コンピュータに、
前記所定領域画像を表示部に表示させる表示制御処理と、
前記表示部に表示されている前記所定領域画像の画質を適正化するための撮影パラメータを前記撮像装置が受信可能となるように送信するパラメータ送信処理と、
前記表示部に表示されている前記所定領域画像の画質が適正であるかを判断することで、適正でない場合に前記撮影パラメータを生成するパラメータ生成処理と、
を実させ、前記パラメータ送信処理は、生成された前記撮影パラメータを送信する処理を含むことを特徴とするプログラム。 - 撮像して得た広範囲の視野角を有する広視野画像を送信する撮像装置と、前記撮像装置が送信した前記広視野画像を取得することで当該広視野画像における所定領域である所定領域画像を表示する表示端末と、を有する通信システムであって、
前記表示端末は、
前記所定領域画像を表示部に表示させる表示制御部と、
前記表示部に表示されている前記所定領域画像の画質を適正化するための撮影パラメータを前記撮像装置が受信可能となるように送信するパラメータ送信部と、
前記表示部に表示されている前記所定領域画像の画質が適正であるかを判断することで、適正でない場合に前記撮影パラメータを生成するパラメータ生成部と、
を有し、前記パラメータ送信部は、生成された前記撮影パラメータを送信し、
前記撮像装置は、
受信された前記撮影パラメータを用いて、前記広視野画像の画質を調整する調整部と、
調整された前記広視野画像を送信する画像送信部と、
を有することを特徴とする通信システム。 - 前記撮影パラメータは、前記撮像装置に対して、露出、ホワイトバランス、ISO感度、シャッタースピード、焦点、ノイズ低減、DR補正、又はHDR合成に関する調整を行うためのパラメータであることを特徴とする請求項5に記載の通信システム。
- 請求項5又は6に記載の通信システムであって、
前記撮像装置と前記表示端末の通信を中継する情報処理システムを有することを特徴とする通信システム。 - 撮像して得た広範囲の視野角を有する広視野画像を送信する撮像装置と、前記撮像装置が送信した前記広視野画像を取得することで当該広視野画像における所定領域である所定領域画像を表示する表示端末と、を有する通信システムが実行する通信方法であって、
前記表示端末は、
前記所定領域画像を表示部に表示させる表示制御処理と、
前記表示部に表示されている前記所定領域画像の画質を適正化するための撮影パラメータを前記撮像装置が受信可能となるように送信するパラメータ送信処理と、
前記表示部に表示されている前記所定領域画像の画質が適正であるかを判断することで、適正でない場合に前記撮影パラメータを生成するパラメータ生成処理と、
を実行し、前記パラメータ送信処理は、生成された前記撮影パラメータを送信する処理を含み、
前記撮像装置は、
前記撮影パラメータを受信する受信処理と、
前記撮影パラメータを用いて、前記広視野画像の画質を調整する調整処理と、
調整された前記広視野画像を送信する送信処理と、
を実行することを特徴とする通信方法。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022043090A JP7501559B2 (ja) | 2022-03-17 | 2022-03-17 | 表示端末、表示方法、通信システム、通信方法、及びプログラム |
| US18/117,475 US12541834B2 (en) | 2022-03-17 | 2023-03-06 | Display terminal, display method, and recording medium |
| JP2024091896A JP7806832B2 (ja) | 2022-03-17 | 2024-06-06 | 情報処理システム、情報処理方法、及びプログラム |
| JP2026004819A JP2026063169A (ja) | 2022-03-17 | 2026-01-15 | 表示端末、表示方法、撮像装置、撮影方法、情報処理システム、情報処理方法、通信システム、通信方法、及びプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022043090A JP7501559B2 (ja) | 2022-03-17 | 2022-03-17 | 表示端末、表示方法、通信システム、通信方法、及びプログラム |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024091896A Division JP7806832B2 (ja) | 2022-03-17 | 2024-06-06 | 情報処理システム、情報処理方法、及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023137080A JP2023137080A (ja) | 2023-09-29 |
| JP7501559B2 true JP7501559B2 (ja) | 2024-06-18 |
Family
ID=88145121
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022043090A Active JP7501559B2 (ja) | 2022-03-17 | 2022-03-17 | 表示端末、表示方法、通信システム、通信方法、及びプログラム |
| JP2024091896A Active JP7806832B2 (ja) | 2022-03-17 | 2024-06-06 | 情報処理システム、情報処理方法、及びプログラム |
| JP2026004819A Pending JP2026063169A (ja) | 2022-03-17 | 2026-01-15 | 表示端末、表示方法、撮像装置、撮影方法、情報処理システム、情報処理方法、通信システム、通信方法、及びプログラム |
Family Applications After (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024091896A Active JP7806832B2 (ja) | 2022-03-17 | 2024-06-06 | 情報処理システム、情報処理方法、及びプログラム |
| JP2026004819A Pending JP2026063169A (ja) | 2022-03-17 | 2026-01-15 | 表示端末、表示方法、撮像装置、撮影方法、情報処理システム、情報処理方法、通信システム、通信方法、及びプログラム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US12541834B2 (ja) |
| JP (3) | JP7501559B2 (ja) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008187393A (ja) | 2007-01-29 | 2008-08-14 | Sony Corp | 露出制御システム、露出制御方法、そのプログラムと記録媒体およびカメラ制御システムとカメラ |
| JP2018006996A (ja) | 2016-06-30 | 2018-01-11 | キヤノン株式会社 | 通信装置、撮像装置およびそれらの制御方法、プログラム並びに記憶媒体 |
| WO2020004013A1 (ja) | 2018-06-25 | 2020-01-02 | ソニー株式会社 | 画像処理装置および画像処理方法 |
Family Cites Families (47)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005333552A (ja) | 2004-05-21 | 2005-12-02 | Viewplus Inc | パノラマ映像配信システム |
| JP2008197829A (ja) * | 2007-02-09 | 2008-08-28 | Sony Corp | 画像処理装置と方法およびプログラムと記録媒体 |
| JP5116514B2 (ja) * | 2008-03-11 | 2013-01-09 | キヤノン株式会社 | 撮像装置および表示制御方法 |
| KR100971777B1 (ko) * | 2009-09-16 | 2010-07-22 | (주)올라웍스 | 파노라마 이미지 사이의 중복을 제거하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체 |
| JP6016332B2 (ja) * | 2011-05-12 | 2016-10-26 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
| JP5891843B2 (ja) * | 2012-02-24 | 2016-03-23 | ソニー株式会社 | クライアント端末、サーバ、およびプログラム |
| JP6518069B2 (ja) * | 2015-01-09 | 2019-05-22 | キヤノン株式会社 | 表示装置、撮像システム、表示装置の制御方法、プログラム、及び記録媒体 |
| JP5846549B1 (ja) * | 2015-02-06 | 2016-01-20 | 株式会社リコー | 画像処理システム、画像処理方法、プログラム、撮像システム、画像生成装置、画像生成方法およびプログラム |
| KR102360453B1 (ko) | 2015-04-10 | 2022-02-09 | 삼성전자 주식회사 | 카메라 설정 방법 및 장치 |
| CN104992408B (zh) * | 2015-06-30 | 2018-06-05 | 百度在线网络技术(北京)有限公司 | 用于用户终端的全景图像生成方法和装置 |
| US20170195579A1 (en) * | 2016-01-05 | 2017-07-06 | 360fly, Inc. | Dynamic adjustment of exposure in panoramic video content |
| WO2017141102A1 (en) * | 2016-02-16 | 2017-08-24 | 6115187 Canada, d/b/a ImmerVision, Inc. | Image distortion transformation method and apparatus |
| KR20180011539A (ko) * | 2016-07-25 | 2018-02-02 | 삼성전자주식회사 | 영상의 처리를 위한 전자 장치 |
| KR20180060236A (ko) * | 2016-11-28 | 2018-06-07 | 엘지전자 주식회사 | 이동 단말기 및 그의 동작 방법 |
| JP6857088B2 (ja) * | 2017-06-20 | 2021-04-14 | キヤノン株式会社 | 画像処理装置およびその制御方法、撮像装置、監視システム |
| JP6907861B2 (ja) | 2017-09-25 | 2021-07-21 | 株式会社リコー | 通信端末、画像通信システム、表示方法、及びプログラム |
| JP7151316B2 (ja) | 2017-09-25 | 2022-10-12 | 株式会社リコー | 通信端末、画像通信システム、表示方法、及びプログラム |
| JP7006133B2 (ja) | 2017-10-27 | 2022-01-24 | 株式会社リコー | 通信システム及び通信方法 |
| CN107967666B (zh) * | 2017-11-09 | 2020-12-08 | 浙江大华技术股份有限公司 | 一种全景图像生成方法及装置 |
| WO2019098609A1 (en) * | 2017-11-14 | 2019-05-23 | Samsung Electronics Co., Ltd. | Method and apparatus for managing a wide view content in a virtual reality environment |
| JP7182920B2 (ja) * | 2018-07-02 | 2022-12-05 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
| US20210309149A1 (en) * | 2018-07-26 | 2021-10-07 | Nec Corporation | Driving support device and driving support method |
| CN110731076A (zh) * | 2018-07-31 | 2020-01-24 | 深圳市大疆创新科技有限公司 | 一种拍摄处理方法、设备及存储介质 |
| CN110798609A (zh) * | 2018-08-02 | 2020-02-14 | 光宝电子(广州)有限公司 | 影像显示方法、影像显示系统以及虚拟窗户 |
| KR102065632B1 (ko) * | 2018-10-22 | 2020-02-11 | 전자부품연구원 | 복수의 가상 카메라를 이용한 게임 내 360 vr 영상 획득 장치 및 방법 |
| CN111726520B (zh) * | 2019-03-20 | 2021-12-10 | 株式会社理光 | 摄影装置、摄影系统、图像处理方法 |
| CN112399033B (zh) * | 2019-08-14 | 2022-04-15 | 杭州海康威视数字技术股份有限公司 | 摄像机组件和监控摄像机 |
| JP7368699B2 (ja) | 2019-08-26 | 2023-10-25 | 株式会社リコー | 画像処理装置、画像通信システム、画像処理方法、及びプログラム |
| WO2021154807A1 (en) * | 2020-01-28 | 2021-08-05 | Gopro, Inc. | Sensor prioritization for composite image capture |
| US10999527B1 (en) * | 2020-02-14 | 2021-05-04 | Gopro, Inc. | Generation of enhanced panoramic visual content |
| CA3170378A1 (en) * | 2020-03-01 | 2021-09-10 | Leia Inc. | Systems and methods of multiview style transfer |
| US11172139B2 (en) * | 2020-03-12 | 2021-11-09 | Gopro, Inc. | Auto exposure metering for spherical panoramic content |
| CN111818262B (zh) * | 2020-07-08 | 2021-12-03 | 杭州萤石软件有限公司 | 图像重建方法及装置 |
| CN111818304B (zh) * | 2020-07-08 | 2023-04-07 | 杭州萤石软件有限公司 | 图像融合方法及装置 |
| JP2022038176A (ja) * | 2020-08-26 | 2022-03-10 | キヤノン株式会社 | 制御装置、制御方法およびプログラム |
| JP7533055B2 (ja) * | 2020-09-15 | 2024-08-14 | ソニーグループ株式会社 | プログラム、情報処理装置および情報処理システム |
| JP7770763B2 (ja) * | 2020-11-20 | 2025-11-17 | キヤノン株式会社 | 撮像システム及び表示装置とその制御方法とプログラム |
| US12322075B2 (en) * | 2021-02-05 | 2025-06-03 | Motorola Solutions, Inc. | Device, method and system for identifying objects in warped images from a fisheye camera |
| US20240098224A1 (en) * | 2021-02-26 | 2024-03-21 | Mitsubishi Electric Corporation | Monitoring camera information transmitting device, monitoring camera information receiving device, monitoring camera system, and monitoring camera information receiving method |
| US11496675B2 (en) * | 2021-04-13 | 2022-11-08 | Plantronics, Inc. | Region of interest based adjustment of camera parameters in a teleconferencing environment |
| US12106534B2 (en) * | 2021-04-19 | 2024-10-01 | Apple Inc. | Cinematic image framing for wide field of view (FOV) cameras |
| CN115606171B (zh) * | 2021-04-28 | 2026-01-23 | 京东方科技集团股份有限公司 | 视频数据处理装置及方法、显示系统 |
| US11647294B2 (en) * | 2021-05-25 | 2023-05-09 | Shanghai Bilibili Technology Co., Ltd. | Panoramic video data process |
| EP4116925B1 (en) * | 2021-07-09 | 2025-02-26 | See Through S.r.l. | Image processing method to generate a panoramic image |
| JP2023030784A (ja) * | 2021-08-24 | 2023-03-08 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
| US11842464B2 (en) * | 2021-09-22 | 2023-12-12 | MFTB Holdco, Inc. | Automated exchange and use of attribute information between building images of multiple types |
| US12032274B2 (en) * | 2022-05-13 | 2024-07-09 | Shenzhen Technology University | Multi-degree-of-freedom attitude adjustment camera apparatus, and control method, device and medium |
-
2022
- 2022-03-17 JP JP2022043090A patent/JP7501559B2/ja active Active
-
2023
- 2023-03-06 US US18/117,475 patent/US12541834B2/en active Active
-
2024
- 2024-06-06 JP JP2024091896A patent/JP7806832B2/ja active Active
-
2026
- 2026-01-15 JP JP2026004819A patent/JP2026063169A/ja active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008187393A (ja) | 2007-01-29 | 2008-08-14 | Sony Corp | 露出制御システム、露出制御方法、そのプログラムと記録媒体およびカメラ制御システムとカメラ |
| JP2018006996A (ja) | 2016-06-30 | 2018-01-11 | キヤノン株式会社 | 通信装置、撮像装置およびそれらの制御方法、プログラム並びに記憶媒体 |
| WO2020004013A1 (ja) | 2018-06-25 | 2020-01-02 | ソニー株式会社 | 画像処理装置および画像処理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023137080A (ja) | 2023-09-29 |
| JP2024107153A (ja) | 2024-08-08 |
| JP7806832B2 (ja) | 2026-01-27 |
| US12541834B2 (en) | 2026-02-03 |
| JP2026063169A (ja) | 2026-04-10 |
| US20230326001A1 (en) | 2023-10-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12238257B2 (en) | Display terminal, displaying method, and recording medium | |
| JP2024127983A (ja) | 情報処理システム、通信システム、画像共有方法、プログラム | |
| US20250159353A1 (en) | Information processing system, communication system, and image transmission method | |
| US20250337854A1 (en) | Display terminal, communication system, and display method | |
| JP7844972B2 (ja) | 表示端末、情報処理システム、通信システム、表示方法、情報処理方法、通信方法、及びプログラム | |
| US20230308764A1 (en) | Display terminal, communication system, method for displaying, method for communicating, and recording medium | |
| JP7501559B2 (ja) | 表示端末、表示方法、通信システム、通信方法、及びプログラム | |
| US12519923B2 (en) | Display terminal, communication system, display method, and communication method | |
| US20260127728A1 (en) | Display terminal, display method, and recording medium | |
| JP2024079567A (ja) | 表示端末、通信システム、表示方法、通信方法、及びプログラム | |
| JP2024095034A (ja) | 表示端末、表示方法、及びプログラム | |
| US20260082131A1 (en) | Communication system, information processing apparatus, and information processing method | |
| US20240179274A1 (en) | Display terminal, communication system, display method, communication method, and recording medium | |
| JP2023184430A (ja) | 表示端末、通信システム、表示方法、通信方法、及びプログラム | |
| JP2024079570A (ja) | 表示端末、通信システム、情報処理システム、表示方法、情報処理方法、通信方法、及びプログラム | |
| JP2024134762A (ja) | 通信システム、撮像装置、通信端末、中継サーバ、プログラム、表示方法 | |
| JP2024033276A (ja) | 通信システム、情報処理システム、動画作成方法、プログラム | |
| JP2024137702A (ja) | 通信端末、通信システム、プログラム、表示方法 | |
| JP2023168896A (ja) | 表示端末、通信システム、表示方法、通信方法、及びプログラム | |
| JP2024033277A (ja) | 通信システム、情報処理システム、映像再生方法、プログラム | |
| JP2025011383A (ja) | 撮像装置、送信方法、プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230118 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240116 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240123 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240325 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240507 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240520 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7501559 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |