Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7781048B2 - Video transmission delay time measurement system and video transmission delay time measurement method - Google Patents
[go: Go Back, main page]

JP7781048B2 - Video transmission delay time measurement system and video transmission delay time measurement method - Google Patents

Video transmission delay time measurement system and video transmission delay time measurement method

Info

Publication number
JP7781048B2
JP7781048B2 JP2022192988A JP2022192988A JP7781048B2 JP 7781048 B2 JP7781048 B2 JP 7781048B2 JP 2022192988 A JP2022192988 A JP 2022192988A JP 2022192988 A JP2022192988 A JP 2022192988A JP 7781048 B2 JP7781048 B2 JP 7781048B2
Authority
JP
Japan
Prior art keywords
blinking
marker
delay time
receiving
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022192988A
Other languages
Japanese (ja)
Other versions
JP2024080092A (en
Inventor
公二 竹内
浩規 慶野
澄子 武田
明典 望月
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Heavy Industries Ltd
Original Assignee
Mitsubishi Heavy Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Heavy Industries Ltd filed Critical Mitsubishi Heavy Industries Ltd
Priority to JP2022192988A priority Critical patent/JP7781048B2/en
Publication of JP2024080092A publication Critical patent/JP2024080092A/en
Application granted granted Critical
Publication of JP7781048B2 publication Critical patent/JP7781048B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Traffic Control Systems (AREA)

Description

本開示は、映像伝送遅延時間測定システム、映像伝送遅延時間測定方法に関する。 This disclosure relates to a video transmission delay time measurement system and a video transmission delay time measurement method.

撮影した映像を、撮影場所から離れた遠隔地に設けられた表示装置に表示する際、映像の撮影から表示までの間に、時間の遅延が生じる。この時間の遅延は、撮影した映像データのエンコード処理、エンコードされた映像データの送信処理、ネットワークによる映像データの伝送、表示装置における映像データの受信処理、受信した映像データのデコード処理、デコードされた映像データに基づく映像の表示処理、等に時間を要することで生じる。 When captured video is displayed on a display device located remotely from the shooting location, a time delay occurs between the time the video is captured and the time it is displayed. This time delay occurs because of the time required for encoding the captured video data, transmitting the encoded video data, transmitting the video data over a network, receiving the video data on the display device, decoding the received video data, and displaying the video based on the decoded video data.

これに対し、特許文献1には、撮像地に配置された点滅マーカと、撮像地に配置された撮像地刻時タイマと、投影地に配置された映像投影装置によって投影表示される点滅マーカの点滅を検出する受光センサと、投影地に配置され、撮像地刻時タイマに同期した投影地刻時タイマと、投影地に配置されて映像投影装置によって投影表示された映像と投影地刻時タイマとを並べて撮像する測定用カメラと、を備えた映像伝送時間測定システムが開示されている。この映像伝送時間測定システムでは、撮像用ビデオカメラによって撮像地刻時タイマと点滅マーカとを一緒に撮像し、その撮像された映像を、映像投影装置によって投影表示する。さらに、投影表示された撮像地刻時タイマの映像と、受光センサからの出力に応じて刻時時刻の表示が固定された投影地刻時タイマとを同時に測定用カメラによって撮像し、撮像された映像から両刻時タイマの刻時時刻を読みとることにより映像伝送時間を決定する。 In response to this, Patent Document 1 discloses a video transmission time measurement system that includes a blinking marker placed at the imaging location, an imaging location time timer placed at the imaging location, a light-receiving sensor that detects the blinking of the blinking marker projected and displayed by a video projection device placed at the projection location, a projection location time timer that is synchronized with the imaging location time timer, and a measurement camera that is placed at the projection location and captures the image projected and displayed by the video projection device and the projection location time timer side by side. In this video transmission time measurement system, the imaging location time timer and the blinking marker are captured together by the imaging video camera, and the captured image is projected and displayed by the video projection device. Furthermore, the measurement camera simultaneously captures the projected and displayed image of the imaging location time timer and the projected location time timer, the time display of which is fixed according to the output from the light-receiving sensor, and the video transmission time is determined by reading the times of both timers from the captured image.

特開2009-171334号公報JP 2009-171334 A

ところで、例えば、船舶、車両、各種の機器類等の対象物を、遠隔地から遠隔操作する技術が知られている。このような遠隔操作を行う際、遠隔操作に応じた対象物の動きが認識できるように、例えば、対象物の移動方向前方を撮影し、操作者は、撮影された映像を目視しながら、対象物の遠隔操作を行うことがある。このような場合に、映像の撮影から、表示までの間に時間の遅延が生じると、不具合が生じることがあるため、映像伝送の遅延時間を、より正確に測定することが望まれる。 Technology is known for remotely controlling objects such as ships, vehicles, and various types of equipment from a remote location. When performing such remote control, an operator may capture an image of the area in front of the object's direction of movement so that the object's movement in response to the remote control can be recognized. The operator may then remotely control the object while viewing the captured image. In such cases, if there is a time delay between capturing the image and displaying it, problems may arise, so it is desirable to measure the delay time in video transmission more accurately.

しかしながら、映像の撮影から表示までの間の遅延時間は、様々な状況に応じて変動し得る。例えば、映像データのエンコードを行うコーデック技術においては、直前の映像に対する映像の差分を圧縮して、伝送するものがある。このようなコーデック技術を用いた場合、撮影した映像において、動きが少なければ、前の映像に対する差分は小さいのに対し、映像中における動きが激しければ、直前の映像に対する差分が大きくなる。映像の差分が大きいほど、映像データのエンコード処理、送信処理等に要する時間が長くなる。
また、例えば、映像データを伝送する各種のネットワークの通信状況等によっても、映像データの伝送処理に要する時間が変動する。
However, the delay time between capturing and displaying a video can vary depending on various circumstances. For example, some codec technologies for encoding video data compress and transmit the difference between a video and the immediately preceding video. When using such codec technologies, if there is little movement in the captured video, the difference between the video and the previous video will be small, whereas if there is a lot of movement in the video, the difference between the video and the immediately preceding video will be large. The larger the difference between the videos, the longer the time required for encoding, transmitting, and other processes of the video data.
Furthermore, the time required for the transmission processing of video data also varies depending on, for example, the communication conditions of various networks that transmit the video data.

このため、実際に映像の撮影、遠隔地への映像データの伝送、遠隔地における映像データの表示を行いながら、映像伝送の遅延時間を、より正確に測定することが望まれる。
これに対し、特許文献1に開示されたような構成は、実際の映像の撮影をしながら、映像伝送の遅延時間を時々刻々と変動し得る映像伝送の遅延時間を測定することを想定したものではない。
For this reason, it is desirable to measure the delay time of video transmission more accurately while actually capturing video, transmitting the video data to a remote location, and displaying the video data at the remote location.
In contrast, the configuration disclosed in Patent Document 1 is not designed to measure the delay time of video transmission, which can fluctuate from moment to moment, while actually capturing video.

本開示は、上記課題を解決するためになされたものであって、実際の映像の撮影をしながら、映像が撮影されてから表示されるまでの遅延時間を測定することができることができる映像伝送遅延時間測定システム、映像伝送遅延時間測定方法を提供することを目的とする。 The present disclosure has been made to solve the above-mentioned problems, and aims to provide a video transmission delay time measurement system and a video transmission delay time measurement method that can measure the delay time from when a video is captured until it is displayed while actually capturing the video.

上記課題を解決するために、本開示に係る映像伝送遅延時間測定システムは、撮影場所に配置された送信ユニットと、前記撮影場所から離れた離間場所に設置された受信ユニットと、を備え、前記送信ユニットは、前記撮影場所でGPS(Global Positioning System)信号を受信する送信側GPS信号受信部と、前記送信側GPS信号受信部で受信された前記GPS信号に同期した送信側基準信号を発信する送信側基準信号発信部と、前記送信側基準信号に基づいて、周期的にマーカ光を点滅させる点滅マーカと、前記撮影場所で、撮影対象、及び前記点滅マーカを含む映像を撮影する撮影装置と、前記撮影装置で撮影された映像のデータを送信するデータ送信部と、を備え、前記受信ユニットは、前記映像のデータを受信するデータ受信部と、受信した前記映像のデータに基づいた映像を表示する表示装置と、前記表示装置に表示された映像における、前記マーカ光の点滅を検知する第一点滅検知部と、前記離間場所でGPS信号を受信する受信側GPS信号受信部と、前記受信側GPS信号受信部で受信された前記GPS信号に同期した受信側基準信号を発信する受信側基準信号発信部と、前記第一点滅検知部で検知された前記マーカ光の点滅状態を示す点滅信号と前記受信側基準信号とに基づいて、前記映像が、前記撮影装置で撮影されたときから、前記表示装置に表示されるまでの映像伝送遅延時間に関する情報を出力する遅延時間情報出力部と、を備える。 In order to solve the above problem, the video transmission delay time measurement system according to the present disclosure comprises a transmission unit disposed at a shooting location and a receiving unit installed at a remote location away from the shooting location, the transmission unit comprising: a transmitting GPS signal receiving unit that receives a GPS (Global Positioning System) signal at the shooting location; a transmitting reference signal transmitting unit that transmits a transmitting reference signal synchronized with the GPS signal received by the transmitting GPS signal receiving unit; a blinking marker that periodically blinks a marker light based on the transmitting reference signal; a shooting device that captures video including the subject and the blinking marker at the shooting location; and a data transmitting unit that transmits data of the video captured by the shooting device, and the receiving unit comprises: a data receiving unit that receives the video data; and a display device that displays video based on the received video data. The system includes a first blinking detection unit that detects blinking of the marker light in the image displayed on the display device, a receiving GPS signal receiving unit that receives a GPS signal at the remote location, a receiving reference signal transmitting unit that transmits a receiving reference signal synchronized with the GPS signal received by the receiving GPS signal receiving unit, and a delay time information output unit that outputs information regarding the image transmission delay time from when the image is captured by the imaging device to when it is displayed on the display device, based on the blinking signal indicating the blinking state of the marker light detected by the first blinking detection unit and the receiving reference signal.

本開示に係る映像伝送遅延時間測定方法は、撮影場所でGPS信号を受信するステップと、受信された前記GPS信号に同期した送信側基準信号を発信するステップと、前記送信側基準信号に基づいて、周期的にマーカ光を点滅させるステップと、前記撮影場所で、撮影対象、及び前記点滅マーカを含む映像を撮影するステップと、撮影された前記映像のデータを送信するステップと、前記撮影場所から離れた離間場所で、前記映像のデータを受信するステップと、受信した前記映像のデータに基づいた映像を表示するステップと、表示された前記映像における、前記マーカ光の点滅を検知するステップと、前記離間場所でGPS信号を受信するステップと、前記離間場所で受信された前記GPS信号に同期した受信側基準信号を発信するステップと、検知された前記マーカ光の点滅状態を示す点滅信号と前記受信側基準信号とに基づいて、前記映像が、前記撮影装置で撮影されたときから、前記表示装置に表示されるまでの映像伝送遅延時間に関する情報を出力するステップと、を含む。 The video transmission delay time measuring method disclosed herein includes the steps of receiving a GPS signal at a shooting location, transmitting a transmitting reference signal synchronized with the received GPS signal, periodically flashing a marker light based on the transmitting reference signal, capturing video at the shooting location including a subject and the flashing marker, transmitting data of the captured video, receiving the video data at a remote location away from the shooting location, displaying video based on the received video data, detecting flashing of the marker light in the displayed video, receiving a GPS signal at the remote location, transmitting a receiving reference signal synchronized with the GPS signal received at the remote location, and outputting information regarding the video transmission delay time from when the video is captured by the shooting device to when it is displayed on the display device based on the detected flashing signal indicating the flashing state of the marker light and the receiving reference signal.

本開示の映像伝送遅延時間測定システム、映像伝送遅延時間測定方法によれば、実際の映像の撮影をしながら、映像伝送の遅延時間を測定することができることができる。 The video transmission delay time measurement system and video transmission delay time measurement method disclosed herein make it possible to measure video transmission delay time while actually capturing video.

本開示の第一実施形態に係る映像伝送遅延時間測定システムの構成を示す図である。1 is a diagram illustrating a configuration of a video transmission delay time measuring system according to a first embodiment of the present disclosure. 上記映像伝送遅延時間測定システムで用いられる信号の一例を示す図である。3 is a diagram showing an example of a signal used in the video transmission delay time measurement system. FIG. 本開示の第一実施形態に係る映像伝送遅延時間測定方法の手順を示すフローチャートである。1 is a flowchart showing the procedure of a video transmission delay time measuring method according to a first embodiment of the present disclosure. 本開示の第二実施形態に係る映像伝送遅延時間測定システムの構成を示す図である。FIG. 10 is a diagram illustrating a configuration of a video transmission delay time measuring system according to a second embodiment of the present disclosure. 上記映像伝送遅延時間測定システムで用いられる信号の一例を示す図である。3 is a diagram showing an example of a signal used in the video transmission delay time measurement system. FIG. 上記映像伝送遅延時間測定システムで用いられる、周期を調整した信号の一例を示す図である。10 is a diagram showing an example of a signal with an adjusted period used in the video transmission delay time measurement system. FIG. 本開示の第三実施形態に係る映像伝送遅延時間測定システムの構成を示す図である。FIG. 10 is a diagram illustrating a configuration of a video transmission delay time measuring system according to a third embodiment of the present disclosure. 本開示の第四実施形態に係る映像伝送遅延時間測定システムの構成を示す図である。FIG. 10 is a diagram illustrating a configuration of a video transmission delay time measuring system according to a fourth embodiment of the present disclosure.

以下、添付図面を参照して、本開示による映像伝送遅延時間測定システム、映像伝送遅延時間測定方法を実施するための形態を説明する。しかし、本開示はこれらの実施形態のみに限定されるものではない。
<第一実施形態>
(映像伝送遅延時間測定システムの構成)
図1に示すように、映像伝送遅延時間測定システム1Aは、撮影場所に配置された送信ユニット2と、撮影場所から離れた離間場所に設置された受信ユニット5と、を備えている。
Hereinafter, embodiments for implementing a video transmission delay time measuring system and a video transmission delay time measuring method according to the present disclosure will be described with reference to the accompanying drawings. However, the present disclosure is not limited to these embodiments.
First Embodiment
(Configuration of video transmission delay time measurement system)
As shown in FIG. 1, the video transmission delay time measuring system 1A includes a transmitting unit 2 placed at a shooting location and a receiving unit 5 installed at a remote location away from the shooting location.

送信ユニット2は、撮影対象Tが撮影可能な撮影場所に配置されている。送信ユニット2は、例えば、不図示の遠隔操作装置によって遠隔操作を行う操作対象に設けられる。
操作対象としては、船舶、車両等の各種移動体が例示できる。これらの移動体の場合、送信ユニット2は、移動体に搭載され、送信ユニット2の撮影装置3で、撮影対象Tとして、移動体の進行方向前方を撮影する。
また、操作対象としては、各種の機器、装置類等が例示できる。この場合、送信ユニット2の撮影装置3で、撮影対象Tとして、機器や装置類において、例えば、遠隔操作対象となる部位等を撮影する。送信ユニット2は、機器、装置類に取り付けてもよいし、機器、装置類の周辺の床、壁、天井等に設けてもよい。
The transmission unit 2 is disposed at a photographing location where it is possible to photograph the subject T. The transmission unit 2 is provided, for example, at an operation subject that is remotely controlled by a remote control device (not shown).
Examples of the operation target include various moving bodies such as ships, vehicles, etc. In the case of these moving bodies, the transmission unit 2 is mounted on the moving body, and the imaging device 3 of the transmission unit 2 captures an image of the area ahead in the direction of travel of the moving body as the imaging target T.
Examples of the operation target include various devices and apparatuses. In this case, the imaging device 3 of the transmission unit 2 captures an image of, for example, a part of the device or apparatus that is to be remotely operated as the imaging target T. The transmission unit 2 may be attached to the device or apparatus, or may be provided on the floor, wall, ceiling, etc. around the device or apparatus.

送信ユニット2は、撮影装置3と、点滅マーカ4と、送信側コントローラ20と、を備えている。
撮影装置3は、撮影場所で、撮影対象T、及び点滅マーカ4を含む映像を撮影する。
The transmitting unit 2 includes a photographing device 3, a blinking marker 4, and a transmitting controller 20.
The photographing device 3 photographs an image including the subject T and the blinking marker 4 at a photographing location.

点滅マーカ4は、撮影装置3で撮影可能な範囲3a内に配置されている。点滅マーカ4としては、LED(Light Emitting Diode)を例示できる。点滅マーカ4は、例えば、撮影装置3に、固定部材31を介して固定されている。これにより、撮影対象Tで振動等が生じた場合に、点滅マーカ4と撮影装置3とが一体的に振動するため、撮影装置3の撮影可能な範囲3a内で、点滅マーカ4が撮影装置3に対して相対的に変位することが抑えられる。点滅マーカ4は、送信側コントローラ20の制御により、予め設定された所定の点滅周期で、マーカ光4mを周期的に点滅させる。撮影装置3では、この点滅マーカ4のマーカ光4mの点滅状態を撮影する。 The blinking marker 4 is positioned within the range 3a that can be photographed by the photographing device 3. An example of the blinking marker 4 is an LED (Light Emitting Diode). The blinking marker 4 is fixed to the photographing device 3, for example, via a fixing member 31. As a result, if vibrations or the like occur in the photographing subject T, the blinking marker 4 and the photographing device 3 vibrate together, preventing the blinking marker 4 from displacing relative to the photographing device 3 within the photographing range 3a of the photographing device 3. The blinking marker 4 periodically blinks its marker light 4m at a predetermined blinking cycle under the control of the transmitting controller 20. The photographing device 3 photographs the blinking state of the marker light 4m of the blinking marker 4.

送信側コントローラ20は、マイクロコンピュータ、CPU(Central Processing Unit)等のコンピュータと、コンピュータの周辺回路や周辺装置等のハードウェアを用いて構成することができる。本実施形態では、送信側コントローラ20は、マイクロコンピュータが搭載された制御基板により構成されている。送信側コントローラ20は、ハードウェアと、コンピュータが実行するプログラム等のソフトウェアとの組み合わせから構成される機能的構成として、撮影制御部21と、マーカ制御部22と、送信側GPS信号受信部23と、送信側基準信号発信部24と、データ送信部25と、を備えている。 The transmitting controller 20 can be configured using a computer such as a microcomputer or CPU (Central Processing Unit), and hardware such as computer peripheral circuits and devices. In this embodiment, the transmitting controller 20 is configured as a control board equipped with a microcomputer. The transmitting controller 20 has a functional configuration consisting of a combination of hardware and software such as a program executed by the computer, including an imaging control unit 21, a marker control unit 22, a transmitting GPS signal receiving unit 23, a transmitting reference signal transmitting unit 24, and a data transmitting unit 25.

撮影制御部21は、撮影装置3の動作を制御する。具体的には、撮影制御部21は、撮影装置3に対し、撮影を実行するための指令を出力する。撮影制御部21は、撮影装置3で撮影した映像のデータのエンコード処理を実行する。なお、映像のデータのエンコード処理は、撮影装置3が備える機能を用いるようにしてもよい。
マーカ制御部22は、点滅マーカ4の点滅動作を制御する。
The photographing control unit 21 controls the operation of the photographing device 3. Specifically, the photographing control unit 21 outputs a command to the photographing device 3 to perform photographing. The photographing control unit 21 executes encoding processing of the data of the video photographed by the photographing device 3. Note that the encoding processing of the video data may be performed using a function provided in the photographing device 3.
The marker control unit 22 controls the blinking operation of the blinking marker 4 .

送信側GPS信号受信部23は、撮影場所で、例えば、GPS信号を受信する。GPS信号は、高精度な時刻情報を含んでいる。
送信側基準信号発信部24は、図2に示すように、送信側GPS信号受信部23で受信されたGPS信号に同期した送信側基準信号Sg1を発信する。GPS信号に同期した送信側基準信号Sg1としては、定められた時間間隔ごとに信号状態が切り替わるパルス信号である、1PPS(Pulse Per Second)信号が例示できる。送信側基準信号Sg1(1PPS信号)は、1秒間の間に、ON、OFFを周期的に繰り返すパルス信号である。
The transmitting GPS signal receiving unit 23 receives, for example, a GPS signal at the shooting location. The GPS signal includes highly accurate time information.
2, the transmitter reference signal transmitter 24 transmits a transmitter reference signal Sg1 synchronized with the GPS signal received by the transmitter GPS signal receiver 23. An example of the transmitter reference signal Sg1 synchronized with the GPS signal is a 1 PPS (Pulse Per Second) signal, which is a pulse signal whose signal state switches at predetermined time intervals. The transmitter reference signal Sg1 (1 PPS signal) is a pulse signal that periodically repeats ON and OFF within one second.

マーカ制御部22は、送信側基準信号発信部24が発信した送信側基準信号Sg1(1PPS信号)に基づいて、点滅マーカ4で、例えば、1秒毎に、周期的にマーカ光4mを点滅させる。点滅マーカ4は、1秒間毎に、点灯状態と消灯状態とを周期的に繰り返す。 The marker control unit 22 causes the marker light 4m of the blinking marker 4 to blink periodically, for example, every second, based on the transmitting reference signal Sg1 (1 PPS signal) transmitted by the transmitting reference signal transmission unit 24. The blinking marker 4 periodically alternates between an on state and an off state every second.

データ送信部25は、撮影装置3で撮影された映像のデータを送信する。データ送信部25は、撮影制御部21でエンコードされた映像のデータを送信するための処理を実行する。なお、撮影装置3で撮影された映像のデータの送信処理を担うデータ送信部25は、撮影装置3が備える機能を用いるようにしてもよい。 The data transmission unit 25 transmits data of the video captured by the camera device 3. The data transmission unit 25 executes processing to transmit the video data encoded by the camera control unit 21. Note that the data transmission unit 25, which is responsible for the transmission processing of the data of the video captured by the camera device 3, may use a function provided by the camera device 3.

受信ユニット5は、撮影場所から離れた離間場所に設置されている。離間場所は、少なくとも、撮影場所を直接目視できない、又は撮影場所を直接目視しにくい程度の距離を、撮影場所からあけている。撮影場所から離間場所までの距離については何ら限定するものではない。本開示の実施形態では、受信ユニット5は、送信ユニット2との間で、各種のネットワーク100を介してデータ通信可能な場所(離間場所)に設置されている。
受信ユニット5は、受信側コントローラ50と、表示装置6と、第一点滅検知部7と、を備えている。
The receiving unit 5 is installed at a remote location away from the shooting location. The remote location is at least a distance from the shooting location that makes it impossible or difficult to directly see the shooting location. There is no limitation on the distance from the shooting location to the remote location. In an embodiment of the present disclosure, the receiving unit 5 is installed at a location (remote location) where data communication is possible between the receiving unit 5 and the transmitting unit 2 via various networks 100.
The receiving unit 5 includes a receiving controller 50 , a display device 6 , and a first blinking detection unit 7 .

受信側コントローラ50は、マイクロコンピュータ、CPU(Central Processing Unit)等のコンピュータと、コンピュータの周辺回路や周辺装置等のハードウェアを用いて構成することができる。本実施形態では、受信側コントローラ50は、マイクロコンピュータが搭載された制御基板により構成されている。受信側コントローラ50は、ハードウェアと、コンピュータが実行するプログラム等のソフトウェアとの組み合わせから構成される機能的構成として、データ受信部51と、表示制御部52と、受信側GPS信号受信部53と、受信側基準信号発信部54と、遅延時間情報出力部55と、を備えている。 The receiving controller 50 can be configured using a computer such as a microcomputer or CPU (Central Processing Unit), and hardware such as computer peripheral circuits and devices. In this embodiment, the receiving controller 50 is configured using a control board equipped with a microcomputer. The receiving controller 50 has a functional configuration consisting of a combination of hardware and software such as a program executed by the computer, including a data receiving unit 51, a display control unit 52, a receiving GPS signal receiving unit 53, a receiving reference signal transmitting unit 54, and a delay time information output unit 55.

データ受信部51は、ネットワーク100を介して、データ送信部25から送信された映像のデータを受信する。
表示制御部52は、表示装置6における映像の表示を制御する。表示制御部52は、データ受信部51で受信した映像のデータのデコード処理、デコードされた映像データに基づく映像の表示処理、等を実行する。なお、データ送信部25から送信された映像のデータの受信処理を担うデータ受信部51、受信した映像のデータのデコード処理、及び映像の表示処理等を担う表示制御部52は、表示装置6が備える機能を用いるようにしてもよい。
The data receiving unit 51 receives the video data transmitted from the data transmitting unit 25 via the network 100 .
The display control unit 52 controls the display of video on the display device 6. The display control unit 52 performs processing such as decoding the video data received by the data receiving unit 51 and displaying the video based on the decoded video data. Note that the data receiving unit 51, which is responsible for receiving the video data transmitted from the data transmitting unit 25, and the display control unit 52, which is responsible for decoding the received video data and displaying the video, may use functions provided in the display device 6.

受信側GPS信号受信部53は、離間場所でGPS信号を受信する。
受信側基準信号発信部54は、受信側GPS信号受信部53で受信されたGPS信号に同期した受信側基準信号Sg2(1PPS信号)を発信する。
The receiving-side GPS signal receiving unit 53 receives the GPS signal at the remote location.
The receiving-side reference signal transmitter 54 transmits a receiving-side reference signal Sg2 (1 PPS signal) synchronized with the GPS signal received by the receiving-side GPS signal receiver 53 .

表示装置6は、表示制御部52による制御に基づき、データ受信部51で受信したデータに基づいた映像を表示する。表示装置6に表示される映像は、撮影装置3によって撮影された、撮影対象T、及び点滅マーカ4の像を含んでいる。つまり、表示装置6に表示される映像の一部には、点滅マーカ4のマーカ光4mの点滅が表示されている。 The display device 6 displays an image based on the data received by the data receiving unit 51 under the control of the display control unit 52. The image displayed on the display device 6 includes an image of the subject T and the blinking marker 4 captured by the imaging device 3. In other words, part of the image displayed on the display device 6 shows the blinking marker light 4m of the blinking marker 4.

第一点滅検知部7は、表示装置6に表示された映像における、マーカ光4mの点滅を検知する。第一点滅検知部7としては、フォトダイオードが例示できる。点滅マーカ4は、撮影装置3に対する位置が固定されている。このため、表示装置6に表示される映像において、点滅マーカ4のマーカ光4mの位置は一定である。第一点滅検知部7は、表示装置6に表示される映像において、点滅マーカ4のマーカ光4mの位置に合わせて固定されている。 The first blinking detection unit 7 detects the blinking of the marker light 4m in the image displayed on the display device 6. An example of the first blinking detection unit 7 is a photodiode. The position of the blinking marker 4 relative to the image capture device 3 is fixed. Therefore, the position of the marker light 4m of the blinking marker 4 is constant in the image displayed on the display device 6. The first blinking detection unit 7 is fixed to match the position of the marker light 4m of the blinking marker 4 in the image displayed on the display device 6.

第一点滅検知部7は、マーカ光4mの点滅状態(点灯、又は消灯)を検知する。第一点滅検知部7は、マーカ光4mの点滅状態を示す点滅信号Sgmを、遅延時間情報出力部55に出力する。 The first blinking detection unit 7 detects the blinking state (on or off) of the marker light 4m. The first blinking detection unit 7 outputs a blinking signal Sgm indicating the blinking state of the marker light 4m to the delay time information output unit 55.

点滅信号Sgmは、点滅マーカ4の点灯及び消灯に応じた信号状態の切り替わりを示す波形信号である。この点滅信号Sgmは、送信側基準信号Sg1(1PPS信号)に基づいて送信ユニット2の点滅マーカ4がマーカ光を点滅させるタイミングに対し、遅延時間を含んでいる。点滅マーカ4がマーカ光を点滅させたタイミングに対する、点滅信号Sgmの遅延時間は、撮影装置3で撮影された映像が、表示装置6に表示されるまでの映像伝送遅延時間と一致している。 The blinking signal Sgm is a waveform signal that indicates the switching of the signal state in response to the lighting and extinguishing of the blinking marker 4. This blinking signal Sgm includes a delay time relative to the timing at which the blinking marker 4 of the transmitting unit 2 blinks the marker light based on the transmitting side reference signal Sg1 (1 PPS signal). The delay time of the blinking signal Sgm relative to the timing at which the blinking marker 4 blinks the marker light matches the video transmission delay time until the video captured by the imaging device 3 is displayed on the display device 6.

遅延時間情報出力部55は、第一点滅検知部7で検知されたマーカ光4mの点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2とに基づいて、映像が、撮影装置3で撮影されたときから、表示装置6に表示されるまでの映像伝送遅延時間Tdに関する情報を出力する。遅延時間情報出力部55としては、受信側基準信号Sg2と、点滅信号Sgmとを、目視可能な波形情報等によって出力(表示)するオシロスコープが例示できる。この場合、遅延時間情報出力部55は、映像伝送遅延時間Tdに関する情報として、受信側基準信号Sg2の波形と、点滅信号Sgmの波形と、を並列して表示する。遅延時間情報出力部55は、受信側基準信号Sg2の信号状態が切り替わるタイミングと、点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、映像伝送遅延時間Tdに関する情報を出力する。
受信ユニット5の担当者は、遅延時間情報出力部55に表示される、受信側基準信号Sg2と、点滅信号Sgmと、の時差から、映像伝送遅延時間Tdを把握することができる。
The delay time information output unit 55 outputs information about the video transmission delay time Td from when the video is captured by the imaging device 3 to when it is displayed on the display device 6, based on the blinking signal Sgm indicating the blinking state of the marker light 4m detected by the first blink detection unit 7 and the receiving-side reference signal Sg2. An example of the delay time information output unit 55 is an oscilloscope that outputs (displays) the receiving-side reference signal Sg2 and the blinking signal Sgm as visible waveform information, etc. In this case, the delay time information output unit 55 displays the waveform of the receiving-side reference signal Sg2 and the waveform of the blinking signal Sgm in parallel as information about the video transmission delay time Td. The delay time information output unit 55 outputs information about the video transmission delay time Td based on the timing at which the signal state of the receiving-side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes.
The person in charge of the receiving unit 5 can ascertain the video transmission delay time Td from the time difference between the receiving side reference signal Sg2 and the blinking signal Sgm, which is displayed on the delay time information output section 55.

ここで、映像伝送遅延時間Tdは、例えば、受信側基準信号Sg2がONになるタイミングと、点滅信号Sgmが消灯状態から点灯状態に切り替わるタイミングとの時差とすることができる。映像伝送遅延時間Tdは、これに限らず、例えば、受信側基準信号Sg2がOFFになるタイミングと、点滅信号Sgmが点灯状態から消灯状態に切り替わるタイミングとの時差としてもよい。 Here, the video transmission delay time Td can be, for example, the time difference between when the receiving side reference signal Sg2 turns ON and when the blinking signal Sgm switches from an off state to an on state. The video transmission delay time Td is not limited to this, and can also be, for example, the time difference between when the receiving side reference signal Sg2 turns OFF and when the blinking signal Sgm switches from an on state to an off state.

なお、遅延時間情報出力部55は、オシロスコープが備える機能により、受信側基準信号Sg2の信号状態が切り替わるタイミングと、点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、映像伝送遅延時間Tdを算出するようにしてもよい。遅延時間情報出力部55としてのオシロスコープは、算出された映像伝送遅延時間Tdの値を、出力(表示)する。
また、遅延時間情報出力部55は、受信側基準信号Sg2の波形、及び点滅信号Sgmの波形に基づき、受信側基準信号Sg2の信号状態が切り替わるタイミングと、点滅信号Sgmの信号状態が切り替わるタイミングとの差を、映像伝送遅延時間Tdとして算出するようにしてもよい。
The delay time information output unit 55 may use a function of the oscilloscope to calculate the video transmission delay time Td based on the timing at which the signal state of the receiving-side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes. The oscilloscope as the delay time information output unit 55 outputs (displays) the calculated value of the video transmission delay time Td.
In addition, the delay time information output unit 55 may calculate the difference between the timing at which the signal state of the receiving side reference signal Sg2 changes and the timing at which the signal state of the flashing signal Sgm changes as the video transmission delay time Td based on the waveform of the receiving side reference signal Sg2 and the waveform of the flashing signal Sgm.

(映像伝送遅延時間測定方法の手順)
図3に示すように、本開示の実施形態に係る映像伝送遅延時間測定方法は、撮影場所でGPS信号を受信するステップS11と、送信側基準信号Sg1を発信するステップS12と、マーカ光を点滅させるステップS13と、映像を撮影するステップS14と、映像のデータを送信するステップS15と、映像のデータを受信するステップS21と、映像を表示するステップS22と、マーカ光の点滅を検知するステップS23と、離間場所でGPS信号を受信するステップS24と、受信側基準信号Sg2を発信するステップS25と、映像伝送遅延時間Tdに関する情報を出力するステップS26と、を含む。
(Video transmission delay time measurement procedure)
As shown in FIG. 3 , the video transmission delay time measuring method according to an embodiment of the present disclosure includes step S11 of receiving a GPS signal at a shooting location, step S12 of transmitting a transmitting-side reference signal Sg1, step S13 of blinking a marker light, step S14 of shooting a video, step S15 of transmitting video data, step S21 of receiving the video data, step S22 of displaying the video, step S23 of detecting the blinking of the marker light, step S24 of receiving a GPS signal at a remote location, step S25 of transmitting a receiving-side reference signal Sg2, and step S26 of outputting information related to the video transmission delay time Td.

撮影場所でGPS信号を受信するステップS11では、送信ユニット2の送信側GPS信号受信部23で、撮影場所において、GPS信号を受信する。 In step S11 of receiving GPS signals at the shooting location, the transmitting GPS signal receiving unit 23 of the transmitting unit 2 receives GPS signals at the shooting location.

送信側基準信号Sg1を発信するステップS12では、送信側GPS信号受信部23で受信されたGPS信号Sg0に同期した送信側基準信号Sg1(図2参照)を発信する。 In step S12 of transmitting the transmitting reference signal Sg1, the transmitting reference signal Sg1 (see Figure 2) synchronized with the GPS signal Sg0 received by the transmitting GPS signal receiving unit 23 is transmitted.

マーカ光を点滅させるステップS13では、マーカ制御部22が、送信側基準信号発信部24が発信した送信側基準信号Sg1(1PPS信号)に基づいて、点滅マーカ4で、例えば、1秒毎に、周期的にマーカ光を点滅させる。 In step S13 of flashing the marker light, the marker control unit 22 causes the flashing marker 4 to flash periodically, for example, every second, based on the transmitting side reference signal Sg1 (1 PPS signal) transmitted by the transmitting side reference signal transmission unit 24.

映像を撮影するステップS14では、撮影制御部21の制御により、撮影装置3が、撮影場所で、撮影対象T、及び点滅マーカ4のマーカ光4mの点滅を含む映像を撮影する。 In step S14 of capturing video, the camera device 3 captures video at the shooting location, including the subject T and the blinking marker light 4m of the blinking marker 4, under the control of the shooting control unit 21.

映像のデータを送信するステップS15では、撮影制御部21が、撮影装置3で撮影した映像のデータのエンコード処理を実行する。さらに、データ送信部25が、撮影制御部21でエンコードされた映像のデータを送信するための処理を実行する。これにより、撮影装置3で撮影された映像のデータが、ネットワーク100を介して、受信ユニット5に送信される。 In step S15 of transmitting the video data, the imaging control unit 21 performs encoding processing on the video data captured by the imaging device 3. Furthermore, the data transmission unit 25 performs processing to transmit the video data encoded by the imaging control unit 21. As a result, the video data captured by the imaging device 3 is transmitted to the receiving unit 5 via the network 100.

映像のデータを受信するステップS21では、データ受信部51が、ネットワーク100を介して、データ送信部25から送信された映像のデータを受信する。 In step S21 of receiving video data, the data receiving unit 51 receives the video data transmitted from the data transmitting unit 25 via the network 100.

映像を表示するステップS22では、表示制御部52が、データ受信部51で受信した映像のデータのデコード処理、デコードされた映像データに基づく映像の表示処理、等を実行する。これにより、表示装置6が、表示制御部52による制御に基づき、データ受信部51で受信したデータに基づいた映像を表示する。表示装置6に表示される映像は、撮影装置3によって撮影された、撮影対象T、及び点滅マーカ4のマーカ光4mの像を含んでいる。 In step S22 of displaying the image, the display control unit 52 performs processes such as decoding the image data received by the data receiving unit 51 and displaying the image based on the decoded image data. As a result, the display device 6 displays the image based on the data received by the data receiving unit 51 under the control of the display control unit 52. The image displayed on the display device 6 includes the image of the subject T and the marker light 4m of the flashing marker 4 captured by the image capturing device 3.

マーカ光の点滅を検知するステップS23では、第一点滅検知部7が、表示装置6に表示された映像における、マーカ光4mの点滅を検知する。第一点滅検知部7は、マーカ光4mの点滅状態(点灯、又は消灯)を検知する。第一点滅検知部7は、マーカ光4mの点滅状態を示す点滅信号Sgmを、遅延時間情報出力部55に出力する。 In step S23 of detecting the blinking of the marker light, the first blinking detection unit 7 detects the blinking of the marker light 4m in the image displayed on the display device 6. The first blinking detection unit 7 detects the blinking state (on or off) of the marker light 4m. The first blinking detection unit 7 outputs a blinking signal Sgm indicating the blinking state of the marker light 4m to the delay time information output unit 55.

離間場所でGPS信号を受信するステップS24では、受信側GPS信号受信部53が、受信ユニット5が配置された離間場所で、GPS信号を受信する。 In step S24 of receiving GPS signals at a remote location, the receiving GPS signal receiving unit 53 receives GPS signals at the remote location where the receiving unit 5 is located.

受信側基準信号Sg2を発信するステップS25では、受信側基準信号発信部54が、受信側GPS信号受信部53で受信されたGPS信号に同期した受信側基準信号Sg2(図2参照)を発信する。受信側基準信号発信部54は、発信した受信側基準信号Sg2を、遅延時間情報出力部55に出力する。 In step S25 of transmitting the receiving-side reference signal Sg2, the receiving-side reference signal transmitter 54 transmits the receiving-side reference signal Sg2 (see Figure 2) synchronized with the GPS signal received by the receiving-side GPS signal receiver 53. The receiving-side reference signal transmitter 54 outputs the transmitted receiving-side reference signal Sg2 to the delay time information output unit 55.

映像伝送遅延時間Tdに関する情報を出力するステップS26では、遅延時間情報出力部55が、点滅信号Sgmと、受信側基準信号Sg2とに基づいて、映像伝送遅延時間Tdに関する情報を出力する。遅延時間情報出力部55が、オシロスコープである場合、オシロスコープに並んで捧持される受信側基準信号Sg2と点滅信号Sgmとの波形情報に基づいて、映像伝送遅延時間Tdを把握することができる。また、遅延時間情報出力部55が、受信側基準信号Sg2の信号状態が切り替わるタイミングと、点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、映像伝送遅延時間Tdを算出するようにしてもよい。 In step S26, which outputs information related to the video transmission delay time Td, the delay time information output unit 55 outputs information related to the video transmission delay time Td based on the blinking signal Sgm and the receiving side reference signal Sg2. If the delay time information output unit 55 is an oscilloscope, the video transmission delay time Td can be determined based on waveform information of the receiving side reference signal Sg2 and the blinking signal Sgm held side by side on the oscilloscope. The delay time information output unit 55 may also calculate the video transmission delay time Td based on the timing at which the signal state of the receiving side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes.

(作用効果)
上記構成の映像伝送遅延時間測定システム1Aによれば、撮影場所に配置された送信ユニット2の撮影装置3で、撮影対象の映像を撮影し、その映像のデータを、データ送信部25により受信ユニット5に送信する。受信ユニット5では、受信した映像のデータに基づいた映像を、表示装置6に表示する。
送信ユニット2では、送信側GPS信号受信部23で受信されたGPS信号に同期した、送信側基準信号Sg1が発信される。一方、受信ユニット5では、受信側GPS振動受信部で受信されたGPS信号に同期した、受信側基準信号Sg2が発信される。これにより、撮影場所と、撮影場所から離間した離間場所とでは、時刻的に同期した送信側基準信号Sg1と、受信側基準信号Sg2とが発信されている。
送信ユニット2では、送信側基準信号Sg1に基づいて、点滅マーカ4のマーカ光4mが周期的に点滅する。撮影装置3では、撮影対象とともに、点滅マーカ4を含む映像を撮影する。受信ユニット5の表示装置6には、撮影対象ととともに点滅マーカ4のマーカ光4mが点滅している映像が表示される。第一点滅検知部7では、表示装置6に表示された映像におけるマーカ光4mの点滅を検知する。したがって、遅延時間情報出力部55では、第一点滅検知部7で検知されたマーカ光4mの点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2とに基づいて、映像が、撮影装置3で撮影されたときから、表示装置6に表示されるまでの映像伝送遅延時間Tdに関する情報を出力する。
ここで、受信側基準信号Sg2は、送信側基準信号Sg1と同期しており、マーカ光4mの点滅は、送信側基準信号Sg1に基づいて行われている。つまり、第一点滅検知部7で検知されたマーカ光4mの点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2との時間差は、撮影場所におけるマーカ光4mの点滅と、離間場所で表示された映像中におけるマーカの点滅との時間差、すなわち、映像伝送遅延時間Tdである。
ここで、遅延時間情報出力部55では、映像伝送遅延時間Tdに関する情報として、第一点滅検知部7で検知されたマーカ光4mの点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2との時間的な差を、目視可能な波形情報等によって出力(表示)するようにしてもよい。
また、遅延時間情報出力部55では、映像伝送遅延時間Tdに関する情報として、第一点滅検知部7で検知されたマーカ光4mの点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2との時間的な差を、算出し、算出した数値を、映像伝送遅延時間Tdとして、出力するようにしてもよい。
このように、撮影装置3で撮影される映像に、撮影対象とともに表示された、点滅マーカ4のマーカ光4mの点滅に基づいて、映像伝送遅延時間Tdを取得することができる。したがって、実際の映像の撮影をしながら、映像伝送の遅延時間を測定することができることができる。
(Action and effect)
According to the video transmission delay time measurement system 1A configured as described above, the camera device 3 of the transmission unit 2 arranged at the shooting location captures video of the subject, and the video data is transmitted to the receiving unit 5 by the data transmission section 25. The receiving unit 5 displays the video based on the received video data on the display device 6.
The transmitting unit 2 transmits a transmitting-side reference signal Sg1 synchronized with the GPS signal received by the transmitting-side GPS signal receiving section 23. Meanwhile, the receiving unit 5 transmits a receiving-side reference signal Sg2 synchronized with the GPS signal received by the receiving-side GPS vibration receiving section. As a result, the transmitting-side reference signal Sg1 and the receiving-side reference signal Sg2 synchronized in time are transmitted between the shooting location and a remote location separated from the shooting location.
In the transmitting unit 2, the marker light 4m of the blinking marker 4 blinks periodically based on the transmitting-side reference signal Sg1. The photographing device 3 photographs an image including the blinking marker 4 along with the subject. The display device 6 of the receiving unit 5 displays an image of the subject and the blinking marker light 4m of the blinking marker 4. The first blinking detection unit 7 detects the blinking of the marker light 4m in the image displayed on the display device 6. Therefore, the delay time information output unit 55 outputs information regarding the image transmission delay time Td from when the image is photographed by the photographing device 3 to when the image is displayed on the display device 6, based on the blinking signal Sgm indicating the blinking state of the marker light 4m detected by the first blinking detection unit 7 and the receiving-side reference signal Sg2.
Here, the receiving-side reference signal Sg2 is synchronized with the transmitting-side reference signal Sg1, and the blinking of the marker light 4m is performed based on the transmitting-side reference signal Sg1. In other words, the time difference between the blinking signal Sgm indicating the blinking state of the marker light 4m detected by the first blinking detection unit 7 and the receiving-side reference signal Sg2 is the time difference between the blinking of the marker light 4m at the shooting location and the blinking of the marker in the image displayed at a distant location, i.e., the video transmission delay time Td.
Here, the delay time information output unit 55 may output (display) as information regarding the video transmission delay time Td the time difference between the flashing signal Sgm indicating the flashing state of the marker light 4m detected by the first flashing detection unit 7 and the receiving side reference signal Sg2 using visible waveform information or the like.
In addition, the delay time information output unit 55 may calculate the time difference between the blinking signal Sgm indicating the blinking state of the marker light 4m detected by the first blinking detection unit 7 and the receiving side reference signal Sg2 as information regarding the video transmission delay time Td, and output the calculated value as the video transmission delay time Td.
In this way, the video transmission delay time Td can be obtained based on the blinking of the marker light 4m of the blinking marker 4 displayed together with the subject in the video captured by the imaging device 3. Therefore, the video transmission delay time can be measured while actually capturing the video.

また、送信側基準信号Sg1、及び受信側基準信号Sg2がパルス信号であり、点滅信号Sgmが、点滅マーカ4の点灯及び消灯に応じた信号状態の切り替わりを示す波形信号であるので、受信側基準信号Sg2と点滅信号Sgmとを比較することで、映像伝送遅延時間Tdを容易に把握することができる。 Furthermore, since the transmitting side reference signal Sg1 and the receiving side reference signal Sg2 are pulse signals and the blinking signal Sgm is a waveform signal that indicates the switching of the signal state in response to the lighting and extinguishing of the blinking marker 4, the video transmission delay time Td can be easily determined by comparing the receiving side reference signal Sg2 and the blinking signal Sgm.

また、遅延時間情報出力部55が、オシロスコープである場合、受信側基準信号Sg2と点滅信号Sgmとを並べて表示することで、映像伝送遅延時間Tdを、視覚的に容易に把握することができる。 Furthermore, if the delay time information output unit 55 is an oscilloscope, the video transmission delay time Td can be easily grasped visually by displaying the receiving side reference signal Sg2 and the blinking signal Sgm side by side.

また、遅延時間情報出力部55では、受信側基準信号Sg2の信号状態が切り替わるタイミングと、点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、映像伝送遅延時間Tdを容易に把握することができる。 In addition, the delay time information output unit 55 can easily determine the video transmission delay time Td based on the timing at which the signal state of the receiving side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes.

さらに、遅延時間情報出力部55では、受信側基準信号Sg2の信号状態が切り替わるタイミングと、点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、映像伝送遅延時間Tdを算出することで、映像伝送遅延時間Tdを容易に正確に把握することもできる。 Furthermore, the delay time information output unit 55 calculates the video transmission delay time Td based on the timing at which the signal state of the receiving side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes, making it possible to easily and accurately determine the video transmission delay time Td.

また、点滅マーカ4と撮影装置3とが、固定部材31によって固定されることで、撮影装置3によって撮影される映像において、振動等によって、点滅マーカ4が撮影装置3に対して相対的に移動してしまうことが抑えられる。したがって、表示装置6に表示される映像において、点滅マーカ4の位置がずれることが抑えられ、第一点滅検知部7でマーカ光4mの点滅を良好に検知できる。 Furthermore, by fixing the flashing marker 4 and the photographing device 3 with the fixing member 31, the flashing marker 4 is prevented from moving relative to the photographing device 3 due to vibrations or the like in the image captured by the photographing device 3. Therefore, the position of the flashing marker 4 is prevented from shifting in the image displayed on the display device 6, allowing the first flashing detection unit 7 to effectively detect the flashing of the marker light 4m.

(第一実施形態の変形例)
なお、上記第一実施形態において、図3に示したような映像伝送遅延時間測定方法による、映像伝送遅延時間の測定は、撮影装置3で映像を撮影している間、継続的に行ってもよいし、適宜の時間間隔をあけて、間欠的に行ってもよい。
(Modification of the first embodiment)
In the first embodiment, the measurement of the video transmission delay time by the video transmission delay time measurement method as shown in FIG. 3 may be performed continuously while the video is being captured by the image capturing device 3, or may be performed intermittently at appropriate time intervals.

<第二実施形態>
次に、本開示に係る映像伝送遅延時間測定システム、映像伝送遅延時間測定方法の第二実施形態について説明する。なお、以下に説明する第二実施形態においては、上記第一実施形態と共通する構成については図中に同符号を付してその説明を省略する。第二実施形態では、上記第一実施形態で示した構成に加えて、映像伝送遅延時間に応じて、点滅マーカ4におけるマーカ光4mの点滅周期を調整する構成を有する点で第一実施形態と異なっている。
Second Embodiment
Next, a second embodiment of the video transmission delay time measurement system and video transmission delay time measurement method according to the present disclosure will be described. In the second embodiment described below, components common to the first embodiment will be denoted by the same reference numerals in the drawings, and their description will be omitted. The second embodiment differs from the first embodiment in that, in addition to the components shown in the first embodiment, the second embodiment includes a configuration for adjusting the blinking period of the marker light 4m in the blinking marker 4 in accordance with the video transmission delay time.

図4は、上記映像伝送遅延時間測定システムの第二実施形態に係る構成を示す図である。
図4に示すように、映像伝送遅延時間測定システム1Bは、上記映像伝送遅延時間測定システム1Aの構成に加えて、受信側点滅マーカ8と、第二点滅検知部72と、遅延時間異常判定部56Aと、点滅周期調整部26Aと、を更に備えている。
FIG. 4 is a diagram showing the configuration of the video transmission delay time measuring system according to the second embodiment.
As shown in Figure 4, in addition to the configuration of the video transmission delay time measurement system 1A, the video transmission delay time measurement system 1B further includes a receiving side blinking marker 8, a second blinking detection unit 72, a delay time abnormality determination unit 56A, and a blinking period adjustment unit 26A.

受信側点滅マーカ8は、受信ユニット5に備えられている。受信側点滅マーカ8は、受信側基準信号Sg2に基づいて、周期的にマーカ光を点滅させる。受信側点滅マーカ8は、受信側基準信号Sg2に基づいて、異なる複数の種類のマーカ光8mを、定められた順序で交互に繰り返し点滅させる。本開示の実施形態で、受信側点滅マーカ8は、異なる複数の色のマーカ光8m(例えば赤色のマーカ光8mR、青色のマーカ光8mB、緑色のマーカ光8mG)を、この順序で繰り返し点滅させる。 The receiving-side blinking marker 8 is provided in the receiving unit 5. The receiving-side blinking marker 8 periodically blinks the marker light based on the receiving-side reference signal Sg2. The receiving-side blinking marker 8 repeatedly blinks multiple different types of marker light 8m alternately in a predetermined order based on the receiving-side reference signal Sg2. In an embodiment of the present disclosure, the receiving-side blinking marker 8 repeatedly blinks multiple different colored marker lights 8m (e.g., red marker light 8mR, blue marker light 8mB, green marker light 8mG) in this order.

本開示の実施形態において、送信ユニット2の点滅マーカ4は、送信側基準信号Sg1に基づいて、異なる複数の種類のマーカ光4mを、定められた順序で交互に繰り返し点滅させる。本開示の実施形態で、点滅マーカ4は、異なる複数の色のマーカ光4m(例えば赤色のマーカ光4mR、青色のマーカ光4mB、緑色のマーカ光4mG)を、この順序で繰り返し点滅させる。つまり、受信側点滅マーカ8と、点滅マーカ4とは、共通する複数の種類種類のマーカ光8m、4mを、同じ順序で繰り返し点滅させる。 In an embodiment of the present disclosure, the blinking marker 4 of the transmitting unit 2 repeatedly blinks multiple different types of marker light 4m alternately in a predetermined sequence based on the transmitting side reference signal Sg1. In an embodiment of the present disclosure, the blinking marker 4 repeatedly blinks multiple different colored marker lights 4m (e.g., red marker light 4mR, blue marker light 4mB, green marker light 4mG) in this sequence. In other words, the receiving side blinking marker 8 and the blinking marker 4 repeatedly blink multiple common types of marker lights 8m, 4m in the same sequence.

第二点滅検知部72は、受信ユニット5に設けられている。第二点滅検知部72は、例えばフォトダイオードであり、受信側点滅マーカ8におけるマーカ光8mの点滅を検知する。図5に示すように、第二点滅検知部72で検知される受信側点滅マーカ8のマーカ光8mの点滅信号Sgrは、受信側基準信号Sg2と同期している。 The second blinking detector 72 is provided in the receiving unit 5. The second blinking detector 72 is, for example, a photodiode, and detects the blinking of the marker light 8m in the receiving-side blinking marker 8. As shown in FIG. 5, the blinking signal Sgr of the marker light 8m in the receiving-side blinking marker 8 detected by the second blinking detector 72 is synchronized with the receiving-side reference signal Sg2.

遅延時間異常判定部56Aは、受信ユニット5に設けられている。遅延時間異常判定部56Aは、遅延時間情報出力部55で取得される映像伝送遅延時間Tdに異常があるか否かを判定する。具体的には、遅延時間異常判定部56Aは、映像伝送遅延時間Tdが、受信側基準信号Sg2の1周期分(上記の例では1秒)以上であるか否かを判定する。
これには、図3に示すような手順で、映像伝送遅延時間Tdを取得する。遅延時間異常判定部56Aは、映像伝送遅延時間Tdを取得する際に用いた、点滅信号Sgmと、点滅信号Sgmに同期した受信側点滅マーカ8の点滅信号Sgrとを比較する。映像伝送遅延時間Tdを取得する際に用いた、点滅信号Sgmの種類(色)と、受信側点滅マーカ8の点滅信号Sgrの種類とが同じであれば、映像伝送遅延時間Tdは、受信側基準信号Sg2の1周期分未満である。
一方、図5に示すように、映像伝送遅延時間Tdを取得する際に用いた、点滅信号Sgmの種類(色)と、受信側点滅マーカ8の点滅信号Sgrの種類とが異なっていた場合、映像伝送遅延時間Tdは、受信側基準信号Sg2の1周期分以上であると判定することができる。この場合、点滅周期調整部26Aにより、点滅マーカ4におけるマーカ光4mの点滅周期を調整する。例えば、点滅周期調整部26Aは、図6に示すように、送信側基準信号Sg1を2倍の長さの周期に調整する。
The delay time abnormality determination unit 56A is provided in the receiving unit 5. The delay time abnormality determination unit 56A determines whether or not there is an abnormality in the video transmission delay time Td acquired by the delay time information output unit 55. Specifically, the delay time abnormality determination unit 56A determines whether or not the video transmission delay time Td is equal to or greater than one period of the receiving-side reference signal Sg2 (one second in the above example).
To this end, the video transmission delay time Td is acquired according to the procedure shown in Fig. 3. The delay time abnormality determination unit 56A compares the blinking signal Sgm used to acquire the video transmission delay time Td with the blinking signal Sgr of the receiving-side blinking marker 8 synchronized with the blinking signal Sgm. If the type (color) of the blinking signal Sgm used to acquire the video transmission delay time Td is the same as the type of the blinking signal Sgr of the receiving-side blinking marker 8, the video transmission delay time Td is less than one period of the receiving-side reference signal Sg2.
On the other hand, as shown in Fig. 5, if the type (color) of the blinking signal Sgm used to acquire the video transmission delay time Td is different from the type of the blinking signal Sgr of the receiving-side blinking marker 8, it can be determined that the video transmission delay time Td is equal to or longer than one period of the receiving-side reference signal Sg2. In this case, the blinking period adjustment unit 26A adjusts the blinking period of the marker light 4m of the blinking marker 4. For example, as shown in Fig. 6, the blinking period adjustment unit 26A adjusts the period of the transmitting-side reference signal Sg1 to twice the length.

その後、図3に示すような手順で、映像伝送遅延時間Tdを再度取得する。遅延時間異常判定部56Aは、映像伝送遅延時間Tdを取得する際に用いた、点滅信号Sgmと、点滅信号Sgmに同期した受信側点滅マーカ8の点滅信号Sgrとが、同じ種類であるか否かを判定する。
このような手順で、映像伝送遅延時間Tdを取得する際に用いた、点滅信号Sgmと、点滅信号Sgmに同期した受信側点滅マーカ8の点滅信号Sgrとが、同じ種類となるまで、点滅周期調整部26Aは、送信側基準信号Sg1を2倍の長さの周期に調整する。
Thereafter, the video transmission delay time Td is acquired again according to the procedure shown in Fig. 3. The delay time abnormality determination unit 56A determines whether the blinking signal Sgm used when acquiring the video transmission delay time Td and the blinking signal Sgr of the receiving side blinking marker 8 synchronized with the blinking signal Sgm are of the same type.
Using this procedure, the blinking period adjustment unit 26A adjusts the period of the transmitting side reference signal Sg1 to twice the length until the blinking signal Sgm used to acquire the video transmission delay time Td and the blinking signal Sgr of the receiving side blinking marker 8 synchronized with the blinking signal Sgm are of the same type.

上述したような映像伝送遅延時間測定システム1Bによれば、上述した第一実施形態と同様の作用効果に加えて、映像伝送遅延時間Tdが、点滅マーカ4におけるマーカ光の点滅周期よりも長い場合等に、点滅周期調整部26Aにより、マーカ光の点滅周期を、映像伝送遅延時間Tdよりも長くすることができる。これにより、映像伝送遅延時間Tdを、より容易に把握することが可能となる。 In addition to the same effects as those of the first embodiment, the video transmission delay time measurement system 1B described above can also, for example, use the blinking cycle adjustment unit 26A to make the blinking cycle of the marker light longer than the video transmission delay time Td when the video transmission delay time Td is longer than the blinking cycle of the marker light in the blinking marker 4. This makes it easier to determine the video transmission delay time Td.

また、上記実施形態によれば、受信側基準信号Sg2に基づいた受信側点滅マーカ8のマーカ光の周期的な点滅が、第二点滅検知部72によって検知される。点滅周期調整部26Aでは、第一点滅検知部7で検知された点滅マーカ4のマーカ光と、第二点滅検知部72で検知された受信側点滅マーカ8におけるマーカ光とに基づいて、点滅マーカ4におけるマーカ光の点滅周期を調整する。例えば、第一点滅検知部7で検知された点滅マーカ4のマーカ光の種類と、第二点滅検知部72で検知された受信側点滅マーカ8におけるマーカ光の種類とが、異なっていた場合、映像伝送遅延時間Tdが、点滅マーカ4におけるマーカ光の点滅周期よりも長いと判断することができる。この場合、点滅周期調整部26Aで、点滅マーカ4におけるマーカ光の点滅周期を調整することによって、映像伝送遅延時間Tdを正確に把握することができる。 Furthermore, according to the above embodiment, the periodic blinking of the marker light of the receiving-side blinking marker 8 based on the receiving-side reference signal Sg2 is detected by the second blinking detection unit 72. The blinking cycle adjustment unit 26A adjusts the blinking cycle of the marker light of the blinking marker 4 based on the marker light of the blinking marker 4 detected by the first blinking detection unit 7 and the marker light of the receiving-side blinking marker 8 detected by the second blinking detection unit 72. For example, if the type of marker light of the blinking marker 4 detected by the first blinking detection unit 7 differs from the type of marker light of the receiving-side blinking marker 8 detected by the second blinking detection unit 72, it can be determined that the video transmission delay time Td is longer than the blinking cycle of the marker light of the blinking marker 4. In this case, the blinking cycle adjustment unit 26A can adjust the blinking cycle of the marker light of the blinking marker 4 to accurately determine the video transmission delay time Td.

なお、上記第二実施形態において、点滅マーカ4のマーカ光4m、受信側点滅マーカ8のマーカ光8mは、色を異ならせることで、複数の種類のマーカ光4m、8mを点滅させるようにしたが、点滅マーカ4のマーカ光4m、受信側点滅マーカ8のマーカ光8mは、例えば、点滅パターンを異ならせることで、複数の種類のマーカ光を点滅させるようにしてもよい。 In the second embodiment described above, the marker light 4m of the blinking marker 4 and the marker light 8m of the receiving side blinking marker 8 were made to blink multiple types of marker light 4m, 8m by differentiating their colors. However, the marker light 4m of the blinking marker 4 and the marker light 8m of the receiving side blinking marker 8 may be made to blink multiple types of marker light by, for example, differentiating their blinking patterns.

また、上記第二実施形態では、点滅周期調整部26Aが、第一点滅検知部7で検知された点滅マーカ4のマーカ光の種類と、第二点滅検知部72で検知された受信側点滅マーカ8におけるマーカ光の種類とに基づいて、点滅マーカ4におけるマーカ光の点滅周期を調整するようにしたが、これに限られない。例えば、表示装置6に表示された点滅マーカ4のマーカ光の種類(色)と、受信側点滅マーカ8におけるマーカ光の種類(色)を、担当者が目視し、判断を行うようにしてもよい。 In addition, in the second embodiment described above, the blinking cycle adjustment unit 26A adjusts the blinking cycle of the marker light of the blinking marker 4 based on the type of marker light of the blinking marker 4 detected by the first blinking detection unit 7 and the type of marker light of the receiving blinking marker 8 detected by the second blinking detection unit 72, but this is not limited to this. For example, a person in charge may visually check the type (color) of the marker light of the blinking marker 4 displayed on the display device 6 and the type (color) of the marker light of the receiving blinking marker 8 and make a judgment.

また、上記第二実施形態では、映像伝送遅延時間Tdを取得する際に用いた、点滅信号Sgmの種類(色)と、受信側点滅マーカ8の点滅信号Sgrの種類とが異なっていた場合、映像伝送遅延時間Tdは、受信側基準信号Sg2の1周期分以上であると判定するようにしたが、これに限られない。例えば、担当者が、点滅信号Sgmと点滅信号Sgrを目視し、色の違いに基づいて、判定を行うようにしてもよい。 In addition, in the second embodiment described above, if the type (color) of the blinking signal Sgm used to acquire the video transmission delay time Td differs from the type of blinking signal Sgr of the receiving side blinking marker 8, the video transmission delay time Td is determined to be equal to or greater than one period of the receiving side reference signal Sg2. However, this is not limited to this. For example, a person in charge may visually check the blinking signal Sgm and the blinking signal Sgr and make a determination based on the difference in color.

<第三実施形態>
次に、本開示に係る映像伝送遅延時間測定システム、映像伝送遅延時間測定方法の第三実施形態について説明する。なお、以下に説明する第三実施形態においては、上記第一実施形態と共通する構成については図中に同符号を付してその説明を省略する。第三実施形態では、上記第二実施形態で示した構成とは異なる構成により、点滅マーカ4におけるマーカ光4mの点滅周期を調整する。
Third Embodiment
Next, a third embodiment of the video transmission delay time measuring system and video transmission delay time measuring method according to the present disclosure will be described. In the third embodiment described below, components common to the first embodiment will be denoted by the same reference numerals in the drawings, and their description will be omitted. In the third embodiment, the blinking period of the marker light 4m in the blinking marker 4 is adjusted using a different configuration from that shown in the second embodiment.

図7は、上記映像伝送遅延時間測定システムの第三実施形態に係る構成を示す図である。
図7に示すように、映像伝送遅延時間測定システム1Cは、上記映像伝送遅延時間測定システム1Aの構成に加えて、送信側時刻情報表示装置200と、時刻差分取得部300と、点滅周期調整部26Bを更に備えている。
FIG. 7 is a diagram showing the configuration of the video transmission delay time measuring system according to the third embodiment.
As shown in Figure 7, in addition to the configuration of the above-mentioned video transmission delay time measurement system 1A, the video transmission delay time measurement system 1C further includes a transmitting side time information display device 200, a time difference acquisition unit 300, and a blinking period adjustment unit 26B.

送信側時刻情報表示装置200は、送信ユニット2に備えられている。送信側時刻情報表示装置200は、撮影場所における撮影場所時刻情報Tpを表示する。送信側時刻情報表示装置200は、例えば、スマートフォン、タブレット端末、パーソナルコンピュータ等であり、GPS信号よりも同期誤差が大きい同期信号として、外部の時刻情報出力部から配信される時刻情報、例えばNTP(Network Time Protocol)サーバから配信される時刻情報を取得可能である。送信側時刻情報表示装置200は、送信側時刻情報表示装置200が備えるモニタ画面等に、取得した時刻情報を、撮影場所における撮影場所時刻情報Tpとして表示する。送信側時刻情報表示装置200は、撮影装置3による撮影視野範囲内に配置される。
すると、撮影装置3は、撮影対象T、点滅マーカ4のマーカ光4m、及び送信側時刻情報表示装置200に表示される撮影場所時刻情報Tpを含む映像を撮影する。これにより、表示装置6は、撮影対象T、マーカ光4mの像に加えて、撮影場所時刻情報Tpが表示される。
The transmitting side time information display device 200 is provided in the transmitting unit 2. The transmitting side time information display device 200 displays shooting location time information Tp at the shooting location. The transmitting side time information display device 200 is, for example, a smartphone, tablet terminal, personal computer, etc., and is capable of acquiring time information distributed from an external time information output unit, for example, time information distributed from an NTP (Network Time Protocol) server, as a synchronization signal with a larger synchronization error than a GPS signal. The transmitting side time information display device 200 displays the acquired time information on a monitor screen or the like provided in the transmitting side time information display device 200 as shooting location time information Tp at the shooting location. The transmitting side time information display device 200 is positioned within the field of view of the shooting device 3.
The photographing device 3 then photographs an image including the subject T, the marker light 4m of the blinking marker 4, and the photographing location time information Tp displayed on the transmitting side time information display device 200. As a result, the display device 6 displays the photographing location time information Tp in addition to the images of the subject T and the marker light 4m.

時刻差分取得部300は、受信ユニット5に備えられている。時刻差分取得部300は、例えば、スマートフォン、タブレット端末、パーソナルコンピュータ等であり、外部の時刻情報出力部から配信される時刻情報として、例えばNTPサーバから配信される時刻情報が取得可能である。これにより、時刻差分取得部300は、離間場所において、撮影場所時刻情報Tpに実質的に同期した離間場所時刻情報を取得可能である。 The time difference acquisition unit 300 is provided in the receiving unit 5. The time difference acquisition unit 300 is, for example, a smartphone, tablet terminal, or personal computer, and is capable of acquiring time information distributed from an external time information output unit, such as time information distributed from an NTP server. This allows the time difference acquisition unit 300 to acquire, at the remote location, remote location time information that is substantially synchronized with the shooting location time information Tp.

また、時刻差分取得部300は、表示装置6に表示される撮影場所時刻情報Tpを撮影可能なカメラ301を備えている。時刻差分取得部300は、カメラ301で撮影した撮影場所時刻情報Tpとして表示されている時刻を、適宜の文字認識処理により読み取る。時刻差分取得部300は、読み取った撮影場所時刻情報Tpと、離間場所で取得される離間場所時刻情報との差分を取得する。 The time difference acquisition unit 300 also includes a camera 301 capable of capturing the shooting location time information Tp displayed on the display device 6. The time difference acquisition unit 300 reads the time displayed as the shooting location time information Tp captured by the camera 301 using appropriate character recognition processing. The time difference acquisition unit 300 acquires the difference between the read shooting location time information Tp and the separated location time information acquired at the separated location.

撮影場所時刻情報Tpと、離間場所で取得される離間場所時刻情報との差分には、撮影装置3で撮影された撮影場所時刻情報Tpが表示装置6に表示されるまでの映像伝送遅延時間が含まれている。時刻差分取得部300では、このようにして取得された差分が、受信側基準信号Sg2の1周期分(上記の例では1秒)以上であるか否かを判定する。時刻差分取得部300では、取得された差分が、受信側基準信号Sg2の1周期分以上であった場合には、時刻差分取得部300が備える通信機能により、ネットワーク100等を介して、送信ユニット2の点滅周期調整部26Bに、撮影場所時刻情報Tpと、離間場所で取得される離間場所時刻情報との差分を通知する。 The difference between the shooting location time information Tp and the separated location time information acquired at the separated location includes the video transmission delay time until the shooting location time information Tp captured by the shooting device 3 is displayed on the display device 6. The time difference acquisition unit 300 determines whether the difference acquired in this manner is equal to or greater than one cycle of the receiving side reference signal Sg2 (one second in the above example). If the acquired difference is equal to or greater than one cycle of the receiving side reference signal Sg2, the time difference acquisition unit 300 notifies the blinking cycle adjustment unit 26B of the transmission unit 2 of the difference between the shooting location time information Tp and the separated location time information acquired at the separated location via the network 100, etc., using the communication function of the time difference acquisition unit 300.

点滅周期調整部26Bでは、時刻差分取得部300からの通知に基づき、撮影場所時刻情報Tpと、離間場所で取得される離間場所時刻情報との差分に応じて、点滅マーカ4におけるマーカ光4mの点滅周期を調整する。 Based on notification from the time difference acquisition unit 300, the blinking cycle adjustment unit 26B adjusts the blinking cycle of the marker light 4m of the blinking marker 4 according to the difference between the shooting location time information Tp and the separated location time information acquired at the separated location.

上述したような映像伝送遅延時間測定システム1Cによれば、上述した第一、第二実施形態と同様の作用効果に加えて、撮影装置3が、送信側時刻情報表示装置200に表示される撮影場所時刻情報Tpを含む映像を撮影すると、時刻差分取得部300では、送信側時刻情報表示装置200に表示される撮影場所時刻情報Tpと、離間場所で取得される離間場所時刻情報との差分を取得する。取得された撮影場所時刻情報Tpと離間場所時刻情報との差分が大きい場合、点滅周期調整部26Bで、マーカ光の点滅周期を調整することで、映像伝送遅延時間Tdを正確に把握することができる。 In addition to the same effects as the first and second embodiments, the video transmission delay time measurement system 1C described above has the following advantages: when the photographing device 3 photographs video including the photographing location time information Tp displayed on the transmitting side time information display device 200, the time difference acquisition unit 300 acquires the difference between the photographing location time information Tp displayed on the transmitting side time information display device 200 and the distant location time information acquired at the distant location. If the difference between the acquired photographing location time information Tp and the distant location time information is large, the blinking cycle adjustment unit 26B adjusts the blinking cycle of the marker light, allowing the video transmission delay time Td to be accurately determined.

<第四実施形態>
次に、本開示に係る映像伝送遅延時間測定システム、映像伝送遅延時間測定方法の第四実施形態について説明する。なお、以下に説明する第四実施形態においては、上記第一実施形態及び第四実施形態と共通する構成については図中に同符号を付してその説明を省略する。第四実施形態では、映像伝送遅延時間測定システムの故障診断機能を有する点で第一~第三実施形態と異なっている。
<Fourth embodiment>
Next, a fourth embodiment of the video transmission delay time measurement system and video transmission delay time measurement method according to the present disclosure will be described. In the fourth embodiment described below, components common to the first and fourth embodiments will be denoted by the same reference numerals in the drawings, and their description will be omitted. The fourth embodiment differs from the first to third embodiments in that it includes a fault diagnosis function for the video transmission delay time measurement system.

図8は、上記映像伝送遅延時間測定システム、映像伝送遅延時間測定方法の第四実施形態に係る映像伝送遅延時間測定システム1Dは、第一~第三実施形態で示した映像伝送遅延時間測定システム1A~1Cと組み合わせた構成とすることができる。図8に示す構成では、映像伝送遅延時間測定システム1Dは、上記第一実施系で示した映像伝送遅延時間測定システム1Aの構成に、故障診断部58を備えている。 Figure 8 shows that the video transmission delay time measurement system 1D according to the fourth embodiment of the video transmission delay time measurement system and video transmission delay time measurement method can be configured in combination with the video transmission delay time measurement systems 1A to 1C shown in the first to third embodiments. In the configuration shown in Figure 8, the video transmission delay time measurement system 1D includes a fault diagnosis unit 58 in addition to the configuration of the video transmission delay time measurement system 1A shown in the first embodiment above.

映像伝送遅延時間測定システム1Dにおいては、点滅マーカ4は、複数設けられている。また、撮影装置3は、不図示の駆動装置によって、その撮影方向が変更可能とされている。そして、撮影装置3、及び点滅マーカ4は、点滅マーカ4の点滅周期に合わせて定位置に戻るように、相対移動可能とされている。複数の点滅マーカ4は、送信側基準信号Sg1(図2参照)に基づいて、同期して点滅する。撮影装置3は、複数の点滅マーカ4が点灯するタイミングで、複数の点滅マーカ4を順次撮影するよう、撮影方向を変更する。これにより、撮影装置3では、複数の点滅マーカ4の点滅周期毎に異なる点滅マーカ4を順次撮影する。 In the video transmission delay time measurement system 1D, multiple blinking markers 4 are provided. The camera device 3 is capable of changing its shooting direction using a drive device (not shown). The camera device 3 and the blinking markers 4 are capable of relative movement so as to return to their fixed positions in accordance with the blinking cycle of the blinking markers 4. The multiple blinking markers 4 blink synchronously based on the transmitting side reference signal Sg1 (see Figure 2). The camera device 3 changes its shooting direction so as to sequentially capture the multiple blinking markers 4 at the timing when the multiple blinking markers 4 are lit. As a result, the camera device 3 sequentially captures different blinking markers 4 for each blinking cycle of the multiple blinking markers 4.

受信側コントローラ50では、上記第一実施形態で説明したように、撮影装置3で撮影された映像に含まれる、点滅マーカ4の点滅状態を示す点滅信号Sgmを用いて、映像伝送遅延時間Tdを取得することができる。 As described in the first embodiment above, the receiving controller 50 can obtain the video transmission delay time Td using the blinking signal Sgm, which indicates the blinking state of the blinking marker 4 and is included in the video captured by the imaging device 3.

故障診断部58は、受信側コントローラ50に備えられている。故障診断部58は、撮影装置3で撮影された映像に基づいて、送信ユニット2の故障の発生の有無を診断する。故障診断部58は、複数の点滅マーカ4の点滅タイミングで順次撮影する映像を比較する。故障診断部58は、複数の点滅マーカ4の点滅タイミングで順次撮影する映像において、撮影された背景の映像に変化がなければ、送信ユニット2が、何らかの原因で故障し、その動作を停止していると診断することができる。故障診断部58は、故障が発生していると診断された場合、その時点で取得した映像伝送遅延時間Tdを無効とすることができる。また、故障診断部58は、故障が発生していると診断された場合、故障の発生を外部に通知するようにしてもよい。 The fault diagnosis unit 58 is provided in the receiving controller 50. The fault diagnosis unit 58 diagnoses whether or not a fault has occurred in the transmission unit 2 based on the video captured by the imaging device 3. The fault diagnosis unit 58 compares the video captured sequentially at the blinking timing of the multiple blinking markers 4. If there is no change in the captured background video in the video captured sequentially at the blinking timing of the multiple blinking markers 4, the fault diagnosis unit 58 can diagnose that the transmission unit 2 has malfunctioned for some reason and has stopped operating. If the fault diagnosis unit 58 diagnoses that a fault has occurred, it can invalidate the video transmission delay time Td acquired at that time. Furthermore, if the fault diagnosis unit 58 diagnoses that a fault has occurred, it may notify the outside of the occurrence of the fault.

上述したような映像伝送遅延時間測定システム1Dによれば、上述した第一~第三実施形態と同様の作用効果に加えて、撮影装置3、及び点滅マーカ4を、点滅マーカ4の点滅周期に合わせて定位置に戻るように、相対移動させることで、撮影装置3、及び点滅マーカ4の少なくとも一方が正常に動作していない場合、撮影装置3により、点滅マーカ4の点滅を正常に撮影できなくなる。したがって、撮影装置3、点滅マーカ4が、正常に動作しているか否かを容易に判断することができる。 In addition to the same effects as the first to third embodiments, the video transmission delay time measurement system 1D described above moves the camera 3 and the blinking marker 4 relative to each other so that they return to their home positions in sync with the blinking cycle of the blinking marker 4. This means that if at least one of the camera 3 and the blinking marker 4 is not operating normally, the camera 3 will not be able to properly capture the blinking of the blinking marker 4. This makes it easy to determine whether the camera 3 and the blinking marker 4 are operating normally.

なお、上記第四実施形態では、複数の点滅マーカ4を備え、撮影装置3の撮影方向を変更する構成としたが、これに限られない。撮影装置3の撮影方向を変更せず、点滅マーカ4を、撮影装置3に対して相対移動させるようにしてもよい。 In the fourth embodiment, multiple blinking markers 4 are provided and the shooting direction of the camera device 3 is changed, but this is not limited to this. The blinking markers 4 may be moved relative to the camera device 3 without changing the shooting direction of the camera device 3.

また、故障診断部58における、撮影装置3で撮影される映像に基づいて、故障診断を行うようにしたが、これに限られない。
例えば、送信ユニット2側で、撮影装置3の故障、点滅マーカ4の故障等が生じた場合、撮影装置3で撮影される映像において、マーカ光4mの点滅周期が、通常より長くなる(点滅しなくなる場合を含む)。
そこで、遅延時間情報出力部55で取得される映像伝送遅延時間Tdが、予め設定された閾値を超えるか否かを判定し、映像伝送遅延時間Tdが閾値以上である場合には、送信ユニット2側に故障が発生していると判断することができる。
Furthermore, although the fault diagnosis unit 58 performs fault diagnosis based on the image captured by the image capturing device 3, the present invention is not limited to this.
For example, if a malfunction occurs in the photographing device 3 or the flashing marker 4 on the transmitting unit 2 side, the flashing period of the marker light 4m in the image captured by the photographing device 3 will become longer than usual (including cases where it stops flashing).
Therefore, it is determined whether the video transmission delay time Td acquired by the delay time information output unit 55 exceeds a preset threshold value, and if the video transmission delay time Td is equal to or greater than the threshold value, it can be determined that a fault has occurred on the transmitting unit 2 side.

また、点滅信号Sgmにおいて、マーカ光4mの点灯継続時間、又は消灯継続時間が、
予め設定した閾値を超えるか否かを判定し、点灯継続時間、又は消灯継続時間が閾値以上である場合には、送信ユニット2側に故障が発生していると判断することができる。
In addition, in the blinking signal Sgm, the lighting duration or extinguishing duration of the marker light 4m is set as follows:
It is determined whether or not a preset threshold is exceeded, and if the duration of lighting or lighting out is equal to or greater than the threshold, it can be determined that a failure has occurred on the transmitting unit 2 side.

上記第四実施形態で示した故障診断部58における診断は、受信ユニット5の担当者の判断によって行うようにしてもよい。 The diagnosis by the fault diagnosis unit 58 shown in the fourth embodiment above may be performed at the discretion of the person in charge of the receiving unit 5.

また、上記各実施形態では、撮影制御部21が、撮影装置3の動作を制御するようにしたが、これに限られない。例えば、撮影装置3に既存のカメラ等を用い、撮影装置3の操作は、担当者が行い、撮影動作の制御は、撮影装置3自体が行うようにしてもよい。
また、撮影装置3で撮影した映像のデータのエンコード処理についても、撮影制御部21ではなく、別途のエンコーダ等で行うようにしてもよい。
In addition, in each of the above embodiments, the photography control unit 21 controls the operation of the photography device 3, but this is not limited to this. For example, an existing camera or the like may be used as the photography device 3, and the photography device 3 may be operated by a person in charge, with the photography operation being controlled by the photography device 3 itself.
Furthermore, the encoding process of the data of the video captured by the imaging device 3 may be performed by a separate encoder or the like, rather than by the imaging control unit 21 .

<付記>
各実施形態に記載の映像伝送遅延時間測定システム1A~1D、映像伝送遅延時間測定方法は、例えば以下のように把握される。
<Additional Notes>
The video transmission delay time measuring systems 1A to 1D and the video transmission delay time measuring methods described in the respective embodiments can be understood, for example, as follows.

(1)第1の態様に係る映像伝送遅延時間測定システム1A~1Dは、撮影場所に配置された送信ユニット2と、前記撮影場所から離れた離間場所に設置された受信ユニット5と、を備え、前記送信ユニット2は、前記撮影場所でGPS信号を受信する送信側GPS信号受信部23と、前記送信側GPS信号受信部23で受信された前記GPS信号に同期した送信側基準信号Sg1を発信する送信側基準信号発信部24と、前記送信側基準信号Sg1に基づいて、周期的にマーカ光を点滅させる点滅マーカ4と、前記撮影場所で、撮影対象、及び前記点滅マーカ4を含む映像を撮影する撮影装置3と、前記撮影装置3で撮影された映像のデータを送信するデータ送信部25と、を備え、前記受信ユニット5は、前記映像のデータを受信するデータ受信部51と、受信した前記映像のデータに基づいた映像を表示する表示装置6と、前記表示装置6に表示された映像における、前記マーカ光の点滅を検知する第一点滅検知部7と、前記離間場所でGPS信号を受信する受信側GPS信号受信部53と、前記受信側GPS信号受信部53で受信された前記GPS信号に同期した受信側基準信号Sg2を発信する受信側基準信号発信部54と、前記第一点滅検知部7で検知された前記マーカ光の点滅状態を示す点滅信号Sgmと前記受信側基準信号Sg2とに基づいて、前記映像が、前記撮影装置3で撮影されたときから、前記表示装置6に表示されるまでの映像伝送遅延時間Tdに関する情報を出力する遅延時間情報出力部55と、を備える。 (1) The video transmission delay time measurement systems 1A to 1D according to the first aspect include a transmission unit 2 disposed at a shooting location and a receiving unit 5 installed at a remote location away from the shooting location. The transmission unit 2 includes a transmission-side GPS signal receiving unit 23 that receives a GPS signal at the shooting location, a transmission-side reference signal transmitting unit 24 that transmits a transmission-side reference signal Sg1 synchronized with the GPS signal received by the transmission-side GPS signal receiving unit 23, a blinking marker 4 that periodically blinks a marker light based on the transmission-side reference signal Sg1, a shooting device 3 that captures video including a subject and the blinking marker 4 at the shooting location, and a data transmitting unit 25 that transmits data of the video captured by the shooting device 3. The receiving unit 5 transmits the video. a display device 6 that displays an image based on the received image data; a first blinking detection unit 7 that detects blinking of the marker light in the image displayed on the display device 6; a receiving GPS signal receiving unit 53 that receives a GPS signal at the separated location; a receiving reference signal transmitting unit 54 that transmits a receiving reference signal Sg2 synchronized with the GPS signal received by the receiving GPS signal receiving unit 53; and a delay time information output unit 55 that outputs information regarding the image transmission delay time Td from when the image is captured by the imaging device 3 to when it is displayed on the display device 6, based on the blinking signal Sgm that indicates the blinking state of the marker light detected by the first blinking detection unit 7 and the receiving reference signal Sg2.

この映像伝送遅延時間測定システム1A~1Dは、撮影場所に配置された送信ユニット2の撮影装置3で、撮影対象の映像を撮影し、その映像のデータを、データ送信部25により受信ユニット5に送信する。受信ユニット5では、受信した映像のデータに基づいた映像を、表示装置6に表示する。
送信ユニット2では、送信側GPS信号受信部23で受信されたGPS信号に同期した、送信側基準信号Sg1が発信される。一方、受信ユニット5では、受信側GPS振動受信部で受信されたGPS信号に同期した、受信側基準信号Sg2が発信される。これにより、撮影場所と、撮影場所から離間した離間場所とでは、時刻的に同期した送信側基準信号Sg1と、受信側基準信号Sg2とが発信されている。
送信ユニット2では、送信側基準信号Sg1に基づいて、点滅マーカ4のマーカ光が周期的に点滅する。撮影装置3では、撮影対象とともに、点滅マーカ4を含む映像を撮影する。受信ユニット5の表示装置6には、撮影対象ととともに点滅マーカ4のマーカ光が点滅している映像が表示される。第一点滅検知部7では、表示装置6に表示された映像におけるマーカ光の点滅を検知する。したがって、遅延時間情報出力部55では、第一点滅検知部7で検知されたマーカ光の点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2とに基づいて、映像が、撮影装置3で撮影されたときから、表示装置6に表示されるまでの映像伝送遅延時間Tdに関する情報を出力する。
ここで、受信側基準信号Sg2は、送信側基準信号Sg1と同期しており、マーカ光の点滅は、送信側基準信号Sg1に基づいて行われている。つまり、第一点滅検知部7で検知されたマーカ光の点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2との時間差は、撮影場所におけるマーカ光の点滅と、離間場所で表示された映像中におけるマーカの点滅との時間差、すなわち、映像伝送遅延時間Tdである。
ここで、遅延時間情報出力部55では、映像伝送遅延時間Tdに関する情報として、第一点滅検知部7で検知されたマーカ光の点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2との時間的な差を、目視可能な波形情報等によって出力(表示)するようにしてもよい。
また、遅延時間情報出力部55では、映像伝送遅延時間Tdに関する情報として、第一点滅検知部7で検知されたマーカ光の点滅状態を示す点滅信号Sgmと、受信側基準信号Sg2との時間的な差を、算出し、算出した数値を、映像伝送遅延時間Tdとして、出力するようにしてもよい。
このように、撮影装置3で撮影される映像に、撮影対象とともに表示された、点滅マーカ4のマーカ光の点滅に基づいて、映像伝送遅延時間Tdを取得することができる。したがって、実際の映像の撮影をしながら、映像伝送の遅延時間を測定することができることができる。
In these video transmission delay time measurement systems 1A to 1D, a video of a subject is captured by a camera 3 of a transmission unit 2 arranged at a shooting location, and the video data is transmitted to a receiving unit 5 by a data transmission unit 25. The receiving unit 5 displays an image based on the received video data on a display device 6.
The transmitting unit 2 transmits a transmitting-side reference signal Sg1 synchronized with the GPS signal received by the transmitting-side GPS signal receiving section 23. Meanwhile, the receiving unit 5 transmits a receiving-side reference signal Sg2 synchronized with the GPS signal received by the receiving-side GPS vibration receiving section. As a result, the transmitting-side reference signal Sg1 and the receiving-side reference signal Sg2 synchronized in time are transmitted between the shooting location and a remote location separated from the shooting location.
In the transmitting unit 2, the marker light of the blinking marker 4 blinks periodically based on the transmitting-side reference signal Sg1. The photographing device 3 photographs an image including the blinking marker 4 along with the subject to be photographed. The display device 6 of the receiving unit 5 displays an image of the subject and the blinking marker light of the blinking marker 4. The first blinking detection unit 7 detects the blinking of the marker light in the image displayed on the display device 6. Therefore, the delay time information output unit 55 outputs information regarding the image transmission delay time Td from when the image is photographed by the photographing device 3 to when the image is displayed on the display device 6, based on the blinking signal Sgm indicating the blinking state of the marker light detected by the first blinking detection unit 7 and the receiving-side reference signal Sg2.
Here, the receiving-side reference signal Sg2 is synchronized with the transmitting-side reference signal Sg1, and the blinking of the marker light is performed based on the transmitting-side reference signal Sg1. In other words, the time difference between the blinking signal Sgm indicating the blinking state of the marker light detected by the first blink detection unit 7 and the receiving-side reference signal Sg2 is the time difference between the blinking of the marker light at the shooting location and the blinking of the marker in the video displayed at a distant location, i.e., the video transmission delay time Td.
Here, the delay time information output unit 55 may output (display) information regarding the video transmission delay time Td, such as the time difference between the flashing signal Sgm indicating the flashing state of the marker light detected by the first flashing detection unit 7 and the receiving side reference signal Sg2, using visible waveform information, etc.
In addition, the delay time information output unit 55 may calculate the time difference between the blinking signal Sgm indicating the blinking state of the marker light detected by the first blinking detection unit 7 and the receiving side reference signal Sg2 as information regarding the video transmission delay time Td, and output the calculated numerical value as the video transmission delay time Td.
In this way, the video transmission delay time Td can be obtained based on the blinking of the marker light of the blinking marker 4 displayed together with the subject in the video captured by the imaging device 3. Therefore, the video transmission delay time can be measured while actually capturing the video.

(2)第2の態様に係る映像伝送遅延時間測定システム1A~1Dは、(1)の映像伝送遅延時間測定システム1A~1Dであって、前記送信側基準信号Sg1、及び前記受信側基準信号Sg2は、定められた時間間隔ごとに信号状態が切り替わるパルス信号であり、前記点滅信号Sgmは、前記点滅マーカ4の点灯及び消灯に応じた信号状態の切り替わりを示す波形信号である。 (2) The video transmission delay time measurement systems 1A to 1D according to the second aspect are the video transmission delay time measurement systems 1A to 1D of (1), in which the transmitting side reference signal Sg1 and the receiving side reference signal Sg2 are pulse signals whose signal state changes at predetermined time intervals, and the blinking signal Sgm is a waveform signal that indicates the switching of the signal state in response to the lighting and extinguishing of the blinking marker 4.

これにより、送信側基準信号Sg1、及び受信側基準信号Sg2がパルス信号であり、点滅信号Sgmが、点滅マーカ4の点灯及び消灯に応じた信号状態の切り替わりを示す波形信号であるので、受信側基準信号Sg2と点滅信号Sgmとを比較することで、映像伝送遅延時間Tdを容易に把握することができる。 As a result, since the transmitting side reference signal Sg1 and the receiving side reference signal Sg2 are pulse signals and the blinking signal Sgm is a waveform signal that indicates the switching of the signal state in response to the lighting and extinguishing of the blinking marker 4, the video transmission delay time Td can be easily determined by comparing the receiving side reference signal Sg2 and the blinking signal Sgm.

(3)第3の態様に係る映像伝送遅延時間測定システム1A~1Dは、(2)の映像伝送遅延時間測定システム1A~1Dであって、前記遅延時間情報出力部55は、前記受信側基準信号Sg2と、前記点滅信号Sgmとを、並べて表示するオシロスコープである。 (3) The video transmission delay time measurement systems 1A to 1D according to the third aspect are the video transmission delay time measurement systems 1A to 1D of (2), in which the delay time information output unit 55 is an oscilloscope that displays the receiving side reference signal Sg2 and the blinking signal Sgm side by side.

これにより、オシロスコープで、受信側基準信号Sg2と点滅信号Sgmとを並べて表示することで、映像伝送遅延時間Tdを、視覚的に容易に把握することができる。 This allows the receiving side reference signal Sg2 and the blinking signal Sgm to be displayed side by side on an oscilloscope, making it easy to visually grasp the video transmission delay time Td.

(4)第4の態様に係る映像伝送遅延時間測定システム1A~1Dは、(2)又は(3)の映像伝送遅延時間測定システム1A~1Dであって、前記遅延時間情報出力部55は、前記受信側基準信号Sg2の信号状態が切り替わるタイミングと、前記点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、前記映像伝送遅延時間Tdに関する情報を出力する。 (4) The video transmission delay time measurement systems 1A to 1D according to the fourth aspect are the video transmission delay time measurement systems 1A to 1D according to (2) or (3), and the delay time information output unit 55 outputs information about the video transmission delay time Td based on the timing at which the signal state of the receiving side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes.

これにより、遅延時間情報出力部55では、受信側基準信号Sg2の信号状態が切り替わるタイミングと、点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、映像伝送遅延時間Tdを容易に把握することができる。 As a result, the delay time information output unit 55 can easily determine the video transmission delay time Td based on the timing at which the signal state of the receiving side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes.

(5)第5の態様に係る映像伝送遅延時間測定システム1A~1Dは、(4)の映像伝送遅延時間測定システム1A~1Dであって、前記遅延時間情報出力部55は、前記受信側基準信号Sg2の信号状態が切り替わるタイミングと、前記点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、前記映像伝送遅延時間Tdを算出し、算出された前記映像伝送遅延時間Tdの値を出力する。 (5) The video transmission delay time measurement systems 1A to 1D according to the fifth aspect are the video transmission delay time measurement systems 1A to 1D of (4), in which the delay time information output unit 55 calculates the video transmission delay time Td based on the timing at which the signal state of the receiving side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes, and outputs the calculated value of the video transmission delay time Td.

これにより、遅延時間情報出力部55では、受信側基準信号Sg2の信号状態が切り替わるタイミングと、点滅信号Sgmの信号状態が切り替わるタイミングと、に基づいて、映像伝送遅延時間Tdを算出することで、映像伝送遅延時間Tdを容易に正確に把握することができる。 As a result, the delay time information output unit 55 can easily and accurately determine the video transmission delay time Td by calculating the video transmission delay time Td based on the timing at which the signal state of the receiving side reference signal Sg2 changes and the timing at which the signal state of the blinking signal Sgm changes.

(6)第6の態様に係る映像伝送遅延時間測定システム1A~1Dは、(1)から(5)の何れか一つの映像伝送遅延時間測定システム1A~1Dであって、前記点滅マーカ4と前記撮影装置3とを固定する固定部材31をさらに備えている。 (6) The sixth aspect of the video transmission delay time measurement system 1A-1D is any one of the video transmission delay time measurement systems 1A-1D described in (1) to (5), and further includes a fixing member 31 that fixes the blinking marker 4 and the image capture device 3.

これにより、撮影装置3によって撮影される映像において、例えば、撮影装置3、点滅マーカ4が、船舶、車両等の移動体、各種の機械等に設けられている場合、振動等によって、点滅マーカ4が撮影装置3に対して相対的に移動してしまうことが抑えられる。したがって、表示装置6に表示される映像において、点滅マーカ4の位置がずれることが抑えられ、第一点滅検知部7でマーカ光の点滅を良好に検知できる。 As a result, in the image captured by the camera device 3, for example, when the camera device 3 and flashing marker 4 are mounted on a moving object such as a ship or vehicle, or on various machines, the flashing marker 4 is prevented from moving relative to the camera device 3 due to vibrations, etc. Therefore, the position of the flashing marker 4 is prevented from shifting in the image displayed on the display device 6, allowing the first flashing detection unit 7 to effectively detect the flashing of the marker light.

(7)第7の態様に係る映像伝送遅延時間測定システム1B、1Cは、(1)から(6)の何れか一つの映像伝送遅延時間測定システム1B、1Cであって、前記送信ユニット2は、前記点滅マーカ4における前記マーカ光の点滅周期を調整可能な点滅周期調整部26A、26Bを更に備える。 (7) The video transmission delay time measurement system 1B, 1C according to the seventh aspect is any one of the video transmission delay time measurement systems 1B, 1C described in (1) to (6), in which the transmission unit 2 further includes a blinking cycle adjustment unit 26A, 26B that can adjust the blinking cycle of the marker light in the blinking marker 4.

これにより、例えば、映像伝送遅延時間Tdが、点滅マーカ4における前記マーカ光の点滅周期よりも長い場合等に、マーカ光の点滅周期を、映像伝送遅延時間Tdよりも長くすることができる。これにより、映像伝送遅延時間Tdを、より容易に把握することが可能となる。 As a result, for example, in cases where the video transmission delay time Td is longer than the blinking period of the marker light in the blinking marker 4, the blinking period of the marker light can be made longer than the video transmission delay time Td. This makes it easier to grasp the video transmission delay time Td.

(8)第8の態様に係る映像伝送遅延時間測定システム1Bは、(7)の映像伝送遅延時間測定システム1Bであって、前記受信ユニット5は、前記受信側基準信号Sg2に基づいて、周期的にマーカ光8mを点滅させる受信側点滅マーカ8と、前記受信側点滅マーカ8におけるマーカ光8mの点滅を検知する第二点滅検知部72と、を更に備え、前記点滅マーカ4と前記受信側点滅マーカ8とは、それぞれ、複数の種類の前記マーカ光4m、8mを同じ順序で点滅可能であり、前記点滅周期調整部26Aは、前記第一点滅検知部7で検知された前記点滅マーカ4の前記マーカ光の種類と、前記第二点滅検知部72で検知された前記受信側点滅マーカ8における前記マーカ光の種類とに基づいて、前記点滅マーカ4における前記マーカ光の点滅周期を調整する。 (8) The video transmission delay time measuring system 1B according to the eighth aspect is the video transmission delay time measuring system 1B of (7), wherein the receiving unit 5 further includes a receiving-side blinking marker 8 that periodically blinks a marker light 8m based on the receiving-side reference signal Sg2, and a second blinking detection unit 72 that detects the blinking of the marker light 8m in the receiving-side blinking marker 8, wherein the blinking marker 4 and the receiving-side blinking marker 8 are each capable of blinking multiple types of marker lights 4m and 8m in the same order, and the blinking cycle adjustment unit 26A adjusts the blinking cycle of the marker light in the blinking marker 4 based on the type of marker light in the blinking marker 4 detected by the first blinking detection unit 7 and the type of marker light in the receiving-side blinking marker 8 detected by the second blinking detection unit 72.

これにより、受信側基準信号Sg2に基づいた受信側点滅マーカ8のマーカ光の周期的な点滅が、第二点滅検知部72によって検知される。点滅周期調整部26Aでは、第一点滅検知部7で検知された点滅マーカ4のマーカ光と、第二点滅検知部72で検知された受信側点滅マーカ8におけるマーカ光とに基づいて、点滅マーカ4におけるマーカ光の点滅周期を調整する。例えば、第一点滅検知部7で検知された点滅マーカ4のマーカ光の種類と、第二点滅検知部72で検知された受信側点滅マーカ8におけるマーカ光の種類とが、異なっていた場合、映像伝送遅延時間Tdが、点滅マーカ4におけるマーカ光の点滅周期よりも長いと判断することができる。そこで、点滅周期調整部26Aで、点滅マーカ4におけるマーカ光の点滅周期を調整することによって、映像伝送遅延時間Tdを正確に把握することができる。 As a result, the second blinking detection unit 72 detects the periodic blinking of the marker light of the receiving-side blinking marker 8 based on the receiving-side reference signal Sg2. The blinking cycle adjustment unit 26A adjusts the blinking cycle of the marker light of the blinking marker 4 based on the marker light of the blinking marker 4 detected by the first blinking detection unit 7 and the marker light of the receiving-side blinking marker 8 detected by the second blinking detection unit 72. For example, if the type of marker light of the blinking marker 4 detected by the first blinking detection unit 7 differs from the type of marker light of the receiving-side blinking marker 8 detected by the second blinking detection unit 72, it can be determined that the video transmission delay time Td is longer than the blinking cycle of the marker light of the blinking marker 4. Therefore, by adjusting the blinking cycle of the marker light of the blinking marker 4 using the blinking cycle adjustment unit 26A, the video transmission delay time Td can be accurately determined.

(9)第9の態様に係る映像伝送遅延時間測定システム1Cは、(7)の映像伝送遅延時間測定システム1Cであって、前記送信ユニット2は、前記撮影場所における撮影場所時刻情報Tpを表示する送信側時刻情報表示装置200をさらに備え、前記撮影装置3は、前記送信側時刻情報表示装置200に表示される前記撮影場所時刻情報Tpを含む前記映像を撮影し、前記受信ユニット5は、前記表示装置6に表示される前記撮影場所時刻情報Tpと、前記離間場所で取得される、前記撮影場所時刻情報Tpに同期した離間場所時刻情報との差分を取得する時刻差分取得部300を備え、前記点滅周期調整部26Bは、取得された差分に基づいて、前記点滅マーカ4における前記マーカ光の点滅周期を調整する。 (9) A video transmission delay time measurement system 1C according to a ninth aspect is the video transmission delay time measurement system 1C of (7), wherein the transmitting unit 2 further includes a transmitting side time information display device 200 that displays shooting location time information Tp at the shooting location, the shooting device 3 captures the video including the shooting location time information Tp displayed on the transmitting side time information display device 200, the receiving unit 5 includes a time difference acquisition unit 300 that acquires the difference between the shooting location time information Tp displayed on the display device 6 and remote location time information synchronized with the shooting location time information Tp acquired at the remote location, and the blinking cycle adjustment unit 26B adjusts the blinking cycle of the marker light of the blinking marker 4 based on the acquired difference.

これにより、撮影装置3が、送信側時刻情報表示装置200に表示される撮影場所時刻情報Tpを含む映像を撮影すると、時刻差分取得部300では、送信側時刻情報表示装置200に表示される撮影場所時刻情報Tpと、離間場所で取得される離間場所時刻情報との差分を取得することができる。取得された撮影場所時刻情報Tpと離間場所時刻情報との差分が大きい場合、点滅周期調整部26Bで、マーカ光の点滅周期を調整することで、映像伝送遅延時間Tdを正確に把握することができる。 As a result, when the photographing device 3 photographs video including the photographing location time information Tp displayed on the transmitting side time information display device 200, the time difference acquisition unit 300 can acquire the difference between the photographing location time information Tp displayed on the transmitting side time information display device 200 and the separated location time information acquired at the separated location. If the difference between the acquired photographing location time information Tp and the separated location time information is large, the blinking cycle adjustment unit 26B can adjust the blinking cycle of the marker light to accurately determine the video transmission delay time Td.

(10)第10の態様に係る映像伝送遅延時間測定システム1Dは、(1)から(9)の何れか一つの映像伝送遅延時間測定システム1Dであって、前記撮影装置3、及び前記点滅マーカ4は、前記点滅マーカ4の点滅周期に合わせて定位置に戻るように、相対移動可能とされている。 (10) A video transmission delay time measurement system 1D according to a tenth aspect is any one of the video transmission delay time measurement systems 1D described in (1) to (9), in which the image capture device 3 and the blinking marker 4 are movable relative to each other so as to return to their fixed positions in accordance with the blinking cycle of the blinking marker 4.

これにより、撮影装置3、及び前記点滅マーカ4を、前記点滅マーカ4の点滅周期に合わせて定位置に戻るように、相対移動させると、撮影装置3と点滅マーカ4とが正常に動作していれば、それぞれ定位置に位置した撮影装置3により、点滅マーカ4の点滅を撮影することができる。撮影装置3、及び点滅マーカ4の少なくとも一方が正常に動作していない場合、撮影装置3により、点滅マーカ4の点滅を正常に撮影できなくなる。したがって、撮影装置3、点滅マーカ4が、正常に動作しているか否かを容易に判断することができる。 As a result, when the camera device 3 and the blinking marker 4 are moved relative to each other so that they return to their home positions in sync with the blinking cycle of the blinking marker 4, if the camera device 3 and the blinking marker 4 are operating normally, the camera device 3 positioned in its home position can capture the blinking of the blinking marker 4. If at least one of the camera device 3 and the blinking marker 4 is not operating normally, the camera device 3 will not be able to capture the blinking of the blinking marker 4 normally. Therefore, it is easy to determine whether the camera device 3 and the blinking marker 4 are operating normally.

(11)第11の態様に係る映像伝送遅延時間測定方法は、撮影場所でGPS信号を受信するステップS11と、受信された前記GPS信号に同期した送信側基準信号Sg1を発信するステップS12と、前記送信側基準信号Sg1に基づいて、周期的にマーカ光を点滅させるステップS13と、前記撮影場所で、撮影対象、及び前記点滅マーカ4を含む映像を撮影するステップS14と、撮影された前記映像のデータを送信するステップS15と、前記撮影場所から離れた離間場所で、前記映像のデータを受信するステップS21と、受信した前記映像のデータに基づいた映像を表示するステップS22と、表示された前記映像における、前記マーカ光の点滅を検知するステップS23と、前記離間場所でGPS信号を受信するステップS24と、前記離間場所で受信された前記GPS信号に同期した受信側基準信号Sg2を発信するステップS25と、検知された前記マーカ光の点滅状態を示す点滅信号Sgmと前記受信側基準信号Sg2とに基づいて、前記映像が、前記撮影装置3で撮影されたときから、前記表示装置6に表示されるまでの映像伝送遅延時間Tdに関する情報を出力するステップS26と、を含む。 (11) The video transmission delay time measurement method according to the eleventh aspect includes step S11 of receiving a GPS signal at a shooting location, step S12 of transmitting a transmitting side reference signal Sg1 synchronized with the received GPS signal, step S13 of periodically flashing a marker light based on the transmitting side reference signal Sg1, step S14 of shooting a video including the subject and the flashing marker 4 at the shooting location, step S15 of transmitting data of the shot video, step S21 of receiving the video data at a remote location away from the shooting location, and step S22 of transmitting the received video data. The method includes step S22 of displaying an image based on the detected data, step S23 of detecting blinking of the marker light in the displayed image, step S24 of receiving a GPS signal at the remote location, step S25 of transmitting a receiving-side reference signal Sg2 synchronized with the GPS signal received at the remote location, and step S26 of outputting information regarding the image transmission delay time Td from when the image is captured by the image capturing device 3 to when it is displayed on the display device 6, based on the detected blinking signal Sgm indicating the blinking state of the marker light and the receiving-side reference signal Sg2.

この映像伝送遅延時間測定方法は、実際の映像の撮影をしながら、映像伝送の遅延時間を測定することができることができる。 This video transmission delay time measurement method makes it possible to measure the video transmission delay time while actually shooting video.

1A~1D…映像伝送遅延時間測定システム
2…送信ユニット
3…撮影装置
3a…範囲
4…点滅マーカ
4m、4mB、4mG、4mR…マーカ光
5…受信ユニット
6…表示装置
7…第一点滅検知部
8…受信側点滅マーカ
8m、8mB、8mG、8mR…マーカ光
20…送信側コントローラ
21…撮影制御部
22…マーカ制御部
23…送信側GPS信号受信部
24…送信側基準信号発信部
25…データ送信部
26A、26B…点滅周期調整部
31…固定部材
50…受信側コントローラ
51…データ受信部
52…表示制御部
53…受信側GPS信号受信部
54…受信側基準信号発信部
55…遅延時間情報出力部
56A…遅延時間異常判定部
58…故障診断部
72…第二点滅検知部
100…ネットワーク
200…送信側時刻情報表示装置
300…時刻差分取得部
301…カメラ
Sg1…送信側基準信号
Sg2…受信側基準信号
Sgm…点滅信号
Sgr…点滅信号
T…撮影対象
Td…映像伝送遅延時間
Tp…撮影場所時刻情報
DESCRIPTION OF SYMBOLS 1A to 1D...Video transmission delay time measuring system 2...Transmitting unit 3...Photographing device 3a...Range 4...Blinking markers 4m, 4mB, 4mG, 4mR...Marker light 5...Receiving unit 6...Display device 7...First blinking detection unit 8...Receiving side blinking markers 8m, 8mB, 8mG, 8mR...Marker light 20...Transmitting side controller 21...Photographing control unit 22...Marker control unit 23...Transmitting side GPS signal receiving unit 24...Transmitting side reference signal transmitting unit 25...Data transmitting units 26A, 26B...Blinking period adjusting unit 31...Fixing member 50 ...Receiving side controller 51...Data receiving unit 52...Display control unit 53...Receiving side GPS signal receiving unit 54...Receiving side reference signal transmitting unit 55...Delay time information output unit 56A...Delay time abnormality determination unit 58...Fault diagnosis unit 72...Second blinking detection unit 100...Network 200...Transmitting side time information display device 300...Time difference acquisition unit 301...Camera Sg1...Transmitting side reference signal Sg2...Receiving side reference signal Sgm...Blinking signal Sgr...Blinking signal T...Photographed object Td...Video transmission delay time Tp...Photographing location time information

Claims (11)

撮影場所に配置された送信ユニットと、前記撮影場所から離れた離間場所に設置された受信ユニットと、を備え、
前記送信ユニットは、
前記撮影場所でGPS(Global Positioning System)信号を受信する送信側GPS信号受信部と、
前記送信側GPS信号受信部で受信された前記GPS信号に同期した送信側基準信号を発信する送信側基準信号発信部と、
前記送信側基準信号に基づいて、周期的にマーカ光を点滅させる点滅マーカと、
前記撮影場所で、撮影対象、及び前記点滅マーカを含む映像を撮影する撮影装置と、
前記撮影装置で撮影された映像のデータを送信するデータ送信部と、を備え、
前記受信ユニットは、
前記映像のデータを受信するデータ受信部と、
受信した前記映像のデータに基づいた映像を表示する表示装置と、
前記表示装置に表示された映像における、前記マーカ光の点滅を検知する第一点滅検知部と、
前記離間場所でGPS信号を受信する受信側GPS信号受信部と、
前記受信側GPS信号受信部で受信された前記GPS信号に同期した受信側基準信号を発信する受信側基準信号発信部と、
前記第一点滅検知部で検知された前記マーカ光の点滅状態を示す点滅信号と前記受信側基準信号とに基づいて、前記映像が、前記撮影装置で撮影されたときから、前記表示装置に表示されるまでの映像伝送遅延時間に関する情報を出力する遅延時間情報出力部と、を備える
映像伝送遅延時間測定システム。
A transmitting unit is disposed at a photographing location, and a receiving unit is disposed at a remote location away from the photographing location,
The transmitting unit
a transmitting-side GPS signal receiving unit that receives a GPS (Global Positioning System) signal at the photography location;
a transmitter-side reference signal transmitter that transmits a transmitter-side reference signal synchronized with the GPS signal received by the transmitter-side GPS signal receiver;
a blinking marker that periodically blinks a marker light based on the transmitting side reference signal;
a photographing device that photographs an image including a photographing target and the blinking marker at the photographing location;
a data transmission unit that transmits data of the video captured by the imaging device,
The receiving unit:
a data receiving unit that receives the video data;
a display device that displays an image based on the received image data;
a first blinking detection unit that detects blinking of the marker light in the image displayed on the display device;
a receiving-side GPS signal receiving unit that receives a GPS signal at the remote location;
a receiving-side reference signal transmitting unit that transmits a receiving-side reference signal synchronized with the GPS signal received by the receiving-side GPS signal receiving unit;
a delay time information output unit that outputs information regarding the video transmission delay time from when the video is captured by the imaging device to when it is displayed on the display device, based on a blinking signal indicating the blinking state of the marker light detected by the first blinking detection unit and the receiving side reference signal.
前記送信側基準信号、及び前記受信側基準信号は、定められた時間間隔ごとに信号状態が切り替わるパルス信号であり、
前記点滅信号は、前記点滅マーカの点灯及び消灯に応じた信号状態の切り替わりを示す波形信号である、
請求項1に記載の映像伝送遅延時間測定システム。
the transmitting-side reference signal and the receiving-side reference signal are pulse signals whose signal states change at predetermined time intervals,
the blinking signal is a waveform signal that indicates switching of a signal state in response to lighting and extinguishing of the blinking marker;
2. The video transmission delay time measuring system according to claim 1.
前記遅延時間情報出力部は、
前記受信側基準信号と、前記点滅信号とを、並べて表示するオシロスコープである
請求項2に記載の映像伝送遅延時間測定システム。
The delay time information output unit
The video transmission delay time measuring system according to claim 2, further comprising an oscilloscope that displays the receiving side reference signal and the blinking signal side by side.
前記遅延時間情報出力部は、
前記受信側基準信号の信号状態が切り替わるタイミングと、前記点滅信号の信号状態が切り替わるタイミングと、に基づいて、前記映像伝送遅延時間に関する情報を出力する
請求項2又は3に記載の映像伝送遅延時間測定システム。
The delay time information output unit
4. The video transmission delay time measuring system according to claim 2, wherein information about the video transmission delay time is output based on a timing at which the signal state of the receiving side reference signal changes and a timing at which the signal state of the blinking signal changes.
前記遅延時間情報出力部は、
前記受信側基準信号の信号状態が切り替わるタイミングと、前記点滅信号の信号状態が切り替わるタイミングと、に基づいて、前記映像伝送遅延時間を算出し、算出された前記映像伝送遅延時間の値を出力する
請求項4に記載の映像伝送遅延時間測定システム。
The delay time information output unit
5. The video transmission delay time measuring system according to claim 4, wherein the video transmission delay time is calculated based on the timing at which the signal state of the receiving side reference signal changes and the timing at which the signal state of the blinking signal changes, and the calculated value of the video transmission delay time is output.
前記点滅マーカと前記撮影装置とを固定する固定部材をさらに備えている
請求項1又は2に記載の映像伝送遅延時間測定システム。
The video transmission delay time measuring system according to claim 1 or 2, further comprising a fixing member for fixing the blinking marker and the image capturing device.
前記送信ユニットは、
前記点滅マーカにおける前記マーカ光の点滅周期を調整可能な点滅周期調整部を更に備える
請求項1又は2に記載の映像伝送遅延時間測定システム。
The transmitting unit
The video transmission delay time measuring system according to claim 1 or 2, further comprising a blinking cycle adjusting unit that adjusts the blinking cycle of the marker light of the blinking marker.
前記受信ユニットは、
前記受信側基準信号に基づいて、周期的にマーカ光を点滅させる受信側点滅マーカと、
前記受信側点滅マーカにおけるマーカ光の点滅を検知する第二点滅検知部と、を更に備え、
前記点滅マーカと前記受信側点滅マーカとは、それぞれ、複数の種類の前記マーカ光を同じ順序で点滅可能であり、
前記点滅周期調整部は、前記第一点滅検知部で検知された前記点滅マーカの前記マーカ光の種類と、前記第二点滅検知部で検知された前記受信側点滅マーカにおける前記マーカ光の種類とに基づいて、前記点滅マーカにおける前記マーカ光の点滅周期を調整する
請求項7に記載の映像伝送遅延時間測定システム。
The receiving unit:
a receiving-side blinking marker that periodically blinks a marker light based on the receiving-side reference signal;
a second blinking detection unit that detects blinking of the marker light of the receiving side blinking marker,
the blinking marker and the receiving-side blinking marker are each capable of blinking a plurality of types of the marker light in the same sequence,
The video transmission delay time measuring system according to claim 7, wherein the blinking cycle adjustment unit adjusts the blinking cycle of the marker light of the blinking marker based on the type of the marker light of the blinking marker detected by the first blinking detection unit and the type of the marker light of the receiving side blinking marker detected by the second blinking detection unit.
前記送信ユニットは、外部の時刻情報出力部から配信された外部時刻情報に基づいて前記撮影場所における撮影場所時刻情報を表示する送信側時刻情報表示装置をさらに備え、
前記撮影装置は、前記送信側時刻情報表示装置に表示される前記撮影場所時刻情報を含む前記映像を撮影し、
前記受信ユニットは、
前記表示装置に表示される前記撮影場所時刻情報と、
前記離間場所で取得される、外部の時刻情報出力部から配信された外部時刻情報に基づいた離間場所時刻情報と、の差分を取得する時刻差分取得部と、を備え、
前記点滅周期調整部は、取得された前記差分に基づいて、前記点滅マーカにおける前記マーカ光の点滅周期を調整する
請求項7に記載の映像伝送遅延時間測定システム。
the transmitting unit further includes a transmitting-side time information display device that displays the photographing location time information at the photographing location based on external time information distributed from an external time information output unit;
the photographing device photographs the image including the photographing location and time information displayed on the transmitting side time information display device,
The receiving unit:
the photographing location and time information displayed on the display device;
a time difference acquisition unit that acquires a difference between remote location time information based on external time information distributed from an external time information output unit and remote location time information acquired at the remote location,
The video transmission delay time measuring system according to claim 7 , wherein the blinking cycle adjusting unit adjusts the blinking cycle of the marker light of the blinking marker based on the acquired difference.
前記撮影装置、及び前記点滅マーカは、前記点滅マーカの点滅周期に合わせて定位置に戻るように、相対移動可能とされている
請求項1又は2に記載の映像伝送遅延時間測定システム。
3. The video transmission delay time measuring system according to claim 1, wherein the image capturing device and the blinking marker are movable relative to each other so as to return to a fixed position in accordance with the blinking cycle of the blinking marker.
撮影場所でGPS信号を受信するステップと、
受信された前記GPS信号に同期した送信側基準信号を発信するステップと、
前記送信側基準信号に基づいて、点滅マーカが、周期的にマーカ光を点滅させるステップと、
撮影装置が、前記撮影場所で、撮影対象、及び前記点滅マーカを含む映像を撮影するステップと、
前記撮影装置で撮影された前記映像のデータを送信するステップと、
前記撮影場所から離れた離間場所で、前記映像のデータを受信するステップと、
表示装置が、受信した前記映像のデータに基づいた映像を表示するステップと、
表示された前記映像における、前記マーカ光の点滅を検知するステップと、
前記離間場所でGPS信号を受信するステップと、
前記離間場所で受信された前記GPS信号に同期した受信側基準信号を発信するステップと、
検知された前記マーカ光の点滅状態を示す点滅信号と前記受信側基準信号とに基づいて、前記映像が、前記撮影装置で撮影されたときから、前記表示装置に表示されるまでの映像伝送遅延時間に関する情報を出力するステップと、を含む
映像伝送遅延時間測定方法。
receiving a GPS signal at a photography location;
transmitting a transmitter reference signal synchronized with the received GPS signal;
a step of periodically blinking a marker light by a blinking marker based on the transmitting side reference signal;
A step in which an image capturing device captures an image including a subject and the blinking marker at the image capturing location;
transmitting data of the video captured by the imaging device;
receiving the image data at a remote location away from the shooting location;
a step of displaying an image based on the received image data by a display device;
detecting blinking of the marker light in the displayed image;
receiving a GPS signal at the remote location;
transmitting a receiver reference signal synchronized with the GPS signal received at the remote location;
and outputting information regarding the video transmission delay time from when the video is captured by the imaging device to when it is displayed on the display device, based on a blinking signal indicating the blinking state of the detected marker light and the receiving-side reference signal.
JP2022192988A 2022-12-01 2022-12-01 Video transmission delay time measurement system and video transmission delay time measurement method Active JP7781048B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022192988A JP7781048B2 (en) 2022-12-01 2022-12-01 Video transmission delay time measurement system and video transmission delay time measurement method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022192988A JP7781048B2 (en) 2022-12-01 2022-12-01 Video transmission delay time measurement system and video transmission delay time measurement method

Publications (2)

Publication Number Publication Date
JP2024080092A JP2024080092A (en) 2024-06-13
JP7781048B2 true JP7781048B2 (en) 2025-12-05

Family

ID=91431958

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022192988A Active JP7781048B2 (en) 2022-12-01 2022-12-01 Video transmission delay time measurement system and video transmission delay time measurement method

Country Status (1)

Country Link
JP (1) JP7781048B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009171334A (en) 2008-01-17 2009-07-30 Hyogo Prefecture Video transmission time measurement system and video transmission time measurement method
JP2011182374A (en) 2010-02-27 2011-09-15 Yutaka Takahashi Method for measuring total delay time of real-time video transmission using timer making still display of photographic time
US20210027625A1 (en) 2019-07-23 2021-01-28 Toyota Jidosha Kabushiki Kaisha Image display device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009171334A (en) 2008-01-17 2009-07-30 Hyogo Prefecture Video transmission time measurement system and video transmission time measurement method
JP2011182374A (en) 2010-02-27 2011-09-15 Yutaka Takahashi Method for measuring total delay time of real-time video transmission using timer making still display of photographic time
US20210027625A1 (en) 2019-07-23 2021-01-28 Toyota Jidosha Kabushiki Kaisha Image display device
CN112309157A (en) 2019-07-23 2021-02-02 丰田自动车株式会社 image display device
JP2021018744A (en) 2019-07-23 2021-02-15 トヨタ自動車株式会社 Image display device

Also Published As

Publication number Publication date
JP2024080092A (en) 2024-06-13

Similar Documents

Publication Publication Date Title
US8558924B2 (en) Camera platform system and imaging system
US9357119B2 (en) Imaging apparatus capable of wireless communication
KR101473769B1 (en) Apparatus for measuring response time, system for measuring response time and method for measuring response time
JP6134301B2 (en) Video transmission system for remote control of construction machinery
JP2015197344A (en) Method and device for continuously monitoring structure displacement
JP2013120093A (en) Information processing apparatus, control method for information processing apparatus and program
JP7781048B2 (en) Video transmission delay time measurement system and video transmission delay time measurement method
JP2017091244A (en) Traffic signal system
EP3540458B1 (en) Optical safety sensor
KR20090078186A (en) Self-diagnosis monitoring information transmission system and method
EP3438942A1 (en) Systems and methods for automatically switching a surveillance camera into an auto corridor mode
JP2017073019A (en) Traffic signal system
JP2018082313A (en) Periphery monitoring device
JP2012063575A (en) Digital camera
WO2016051468A1 (en) Train monitoring system
KR101311951B1 (en) Fire detecing and alarm system
EP4254975B1 (en) Method and system for using a plurality of motion sensors to control a pan-tilt-zoom camera
RU2364927C1 (en) Television tracer of correlative type
KR101579193B1 (en) A Image Detecting System of High Magnification Camera
JP2020036227A (en) Imaging timing control device, imaging system, and imaging method
JP2005219660A (en) In-vehicle electrical component evaluation system
JP2589835B2 (en) Automatic monitoring system for landslide
KR100731592B1 (en) Transmitter / receiver capable of video combination / self-diagnosis and voice communication
JP2005020585A (en) Camera system and communication method
JPS63174200A (en) Intersection traffic flow measuring device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20250108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20250917

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20251028

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20251125

R150 Certificate of patent or registration of utility model

Ref document number: 7781048

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150