Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP4577082B2 - Wireless intercom system - Google Patents
[go: Go Back, main page]

JP4577082B2 - Wireless intercom system - Google Patents

Wireless intercom system Download PDF

Info

Publication number
JP4577082B2
JP4577082B2 JP2005131544A JP2005131544A JP4577082B2 JP 4577082 B2 JP4577082 B2 JP 4577082B2 JP 2005131544 A JP2005131544 A JP 2005131544A JP 2005131544 A JP2005131544 A JP 2005131544A JP 4577082 B2 JP4577082 B2 JP 4577082B2
Authority
JP
Japan
Prior art keywords
signal
wireless
unit
call
interphone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005131544A
Other languages
Japanese (ja)
Other versions
JP2006311226A (en
Inventor
陽子 谷利
一泰 山根
克彦 木村
享 伊藤
義則 室井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Electric Works Co Ltd
Original Assignee
Panasonic Corp
Matsushita Electric Works Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Works Ltd filed Critical Panasonic Corp
Priority to JP2005131544A priority Critical patent/JP4577082B2/en
Publication of JP2006311226A publication Critical patent/JP2006311226A/en
Application granted granted Critical
Publication of JP4577082B2 publication Critical patent/JP4577082B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Interconnected Communication Systems, Intercoms, And Interphones (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

本発明は、カメラ付ドアホン子器とインターホン親機とを信号線で接続し、更に該インターホン親機に無線アダプタを接続して、インターホン無線増設親機を付加して構成された、無線対応型インターホンシステムに関する。   The present invention is a wireless compatible type configured by connecting a door phone with a camera and an interphone master unit with a signal line, further connecting a wireless adapter to the interphone master unit, and adding an interphone wireless extension master unit. Related to intercom system.

下記特許文献1は、この種の無線対応型インターホンシステムを開示しており、カメラ付ドアホン子器を2線式信号線で接続したインターホン親機と、このインターホン親機と有線接続された無線アダプタと、この無線アダプタとの間で無線信号の送受をすることにより、インターホン親機との間で信号送受を行うインターホン副親機とで構成されている。   Patent Document 1 below discloses this type of wireless-compatible intercom system, which includes an interphone master unit in which a camera-equipped doorphone slave unit is connected by a two-wire signal line, and a wireless adapter that is wired to the interphone master unit. And an interphone sub-master device that sends and receives radio signals to and from the interphone master device by sending and receiving radio signals to and from this wireless adapter.

図6は、この種の無線対応型インターホンシステムの動作を示すタイムチャートである。なお、図では、転送、圧縮、フォーマット変換の対象は画像データのみを示しているが、実際には、カメラ付ドアホン子器により集音された音声信号も含まれる。   FIG. 6 is a time chart showing the operation of this type of radio compatible intercom system. In the figure, only the image data is shown for transfer, compression, and format conversion, but in reality, an audio signal collected by the door phone slave unit with camera is also included.

このシステムでは、カメラ付ドアホン子器の呼出釦が操作されたときには、インターホン親機から駆動電源の給電を受けてカメラを駆動させ来客映像を撮影して、画像データを映像信号の形でインターホン親機に転送する。   In this system, when the call button of the door phone with camera is operated, the camera is driven by receiving power from the interphone main unit to drive the camera, and the visitor video is taken. Transfer to the machine.

転送を受けたインターホン親機では、画像データを圧縮し、無線アダプタに転送する。転送を受けた無線アダプタでは、画像データを無線信号にフォーマット変換をし、画像データを蓄積する信号受信変換処理を行う。   The interphone master unit that has received the transfer compresses the image data and transfers it to the wireless adapter. The wireless adapter that has received the transfer converts the format of the image data into a radio signal and performs signal reception conversion processing for storing the image data.

信号受信変換処理において画像データの少なくとも1フレーム分の蓄積が完了すると、無線アダプタは、インターホン無線増設親機(ここでは特許文献1のインターホン副親機の代わりとしてインターホン無線増設親機を用いている)との間で通話呼出処理を行う。すなわち、呼信号を送出し、応答を待つ。そして、応答があれば、インターホン無線増設親機との通信条件が確立され、通話呼出信号を送出し、次の通話呼出処理を行う。   When the storage of at least one frame of image data is completed in the signal reception conversion process, the wireless adapter uses the interphone wireless extension master unit (here, the interphone wireless extension master unit is used instead of the interphone sub-master unit of Patent Document 1). ) And call processing. That is, it sends a call signal and waits for a response. If there is a response, communication conditions with the interphone wireless extension master unit are established, a call call signal is transmitted, and the next call call processing is performed.

この通話呼出処理では、インターホン無線増設親機の応答があれば、蓄積が完了した画像データをインターホン無線増設親機に送出し、これを受けたインターホン無線増設親機は、送出された画像データを伸長し、モニタに表示する。
図7,8は、この種の無線対応型インターホンシステムにおける無線アダプタ、インターホン無線増設親機のそれぞれの動作を示すフローチャートである。
In this call calling process, if there is a response from the interphone wireless extension base unit, the stored image data is sent to the interphone wireless extension base unit, and the interphone wireless extension base unit that has received this sends the transmitted image data. Expand and display on the monitor.
FIGS. 7 and 8 are flowcharts showing the operations of the wireless adapter and the interphone wireless expansion master in this type of wireless compatible intercom system.

図7のフローチャートは、無線アダプタの動作を示している。   The flowchart in FIG. 7 shows the operation of the wireless adapter.

無線アダプタは、電源が入力されているときに(200)、インターホン親機から呼出信号を受信すると(201)、インターホン親機から映像信号を受信し無線信号にフォーマット変換し蓄積をする信号受信変換処理を行う(202)。   When the power is input (200), the wireless adapter receives a call signal from the intercom base unit (201), receives a video signal from the intercom base unit, converts the format into a radio signal, and stores the received signal. Processing is performed (202).

少なくとも1フレーム分の蓄積が完了すると(203)、インターホン無線増設親機との通話呼出処理を行う(205〜207)。通話呼出処理の詳細については先述しているので説明を省略するが、それぞれの応答待ちの間に、所定時間経過しても(208,210)、応答が来ない場合には、インターホン親機に不在を返信する(209,211)。   When the accumulation of at least one frame is completed (203), call calling processing with the interphone wireless extension master unit is performed (205 to 207). The details of the call call processing have been described above, and will not be described. However, even if a predetermined time elapses while waiting for each response (208, 210), if no response is received, the interphone master unit The absence is returned (209, 211).

一方、通話呼出処理に対する応答があったときには、蓄積しておいた画像データをインターホン無線増設親機に送出する(212)。   On the other hand, when there is a response to the call calling process, the stored image data is sent to the intercom wireless extension master unit (212).

図8のフローチャートは、インターホン無線増設親機の動作を示している。   The flowchart of FIG. 8 shows the operation of the interphone wireless extension base unit.

インターホン無線増設親機は、無線アダプタとの間で先述の通話呼出処理を行い(300〜303)、無線アダプタから送出された通話呼出信号に基づいて呼出音を出力する(304)。   The intercom wireless extension base unit performs the above-described call calling process with the wireless adapter (300 to 303), and outputs a ringing tone based on the call calling signal sent from the wireless adapter (304).

ついで、所定時間の間に無線アダプタからの映像信号を送出されてきたときには、これを受信する(306、307)。
特開2000−224316号公報
Next, when a video signal is transmitted from the wireless adapter during a predetermined time, it is received (306, 307).
JP 2000-224316 A

ところで、このようなシステムでは、インターホン親機から無線アダプタ間への画像データは、信号線で伝送されているため、インターホン親機から直接無線信号を無線増設親機に伝送するシステムと比較すると、伝送速度が一般的に遅くなっており、このことは、信号線の回線容量が小さく、画像データの容量が大きいときに顕著となる。   By the way, in such a system, since the image data from the interphone master unit to the wireless adapter is transmitted through the signal line, compared with a system that directly transmits a radio signal from the interphone master unit to the wireless extension master unit, The transmission speed is generally slow, which becomes noticeable when the signal line capacity is small and the image data capacity is large.

更に、この種のシステムでは、無線アダプタは、インターホン親機からの画像データの蓄積を行う信号受信変換処理が、少なくとも1フレーム分完了した後に、インターホン無線増設親機と通話呼出処理を行い、応答があれば蓄積した画像データを送出するようにしているので、結果として、カメラ付ドアホン子器で呼出操作され、来客映像が撮影されてから、その来客映像がインターホン無線増設親機に表示され始めるまでの遅延時間もあり、これらによって、無線増設親機では、インターホン親機で来客の呼出を検出し、呼出チャイムを鳴動させてから相当な時間遅れを生じた後に、来客映像が表示されるため、応答側である無線増設親機側では、システム動作に故障を連想させるような不安と、じれったさを与えている。   Further, in this type of system, the wireless adapter performs a call calling process with the interphone wireless extension base unit after the signal reception conversion processing for storing image data from the interphone base unit is completed for at least one frame, If there is, the stored image data is sent out. As a result, after the call operation is performed with the door phone with camera and the visitor video is shot, the visitor video starts to be displayed on the intercom wireless extension master unit. Because of this, the wireless extension master unit detects the visitor's call by the interphone master unit, and after the ring chime is sounded, the visitor image is displayed after a considerable time delay has occurred. On the responding side, the wireless extension master unit gives anxiety and frustration that reminds the system operation of a failure.

本発明は、このような問題を解決するために提案され、カメラ付ドアホン子器で撮影が開始されてからその来客映像がインターホン無線増設親機に表示され始めるまでの遅延時間を短縮することができる無線対応型インターホンシステムを提供することを目的とする。   The present invention is proposed in order to solve such a problem, and it is possible to shorten the delay time from when shooting is started with a camera-equipped doorphone slave unit until the visitor video is displayed on the intercom wireless extension master unit. An object is to provide a wireless compatible intercom system.

上記目的を達成するため、請求項1では、インターホン親機にカメラ付きドアホン子器を信号線で接続し、更に該インターホン親機に無線アダプタを別の信号線で接続して、インターホン無線増設親機を付加して構成された、無線対応型インターホンシステムであって、上記無線アダプタは、上記カメラ付きドアホン子器が撮影した映像信号を、無線フォーマット信号に変換する第1伝送処理部と、上記インターホン無線増設親機を呼出し、上記第1伝送部によって変換された無線フォーマット信号を、無線送出する第2伝送処理部と、を備え、上記カメラ付きドアホン子器の呼出操作に基づく呼出信号を、上記インターホン親機を通じて受信したときには、上記第1伝送処理部により、上記インターホン親機から送出されてくる映像信号を受信し、無線フォーマット信号に変換して蓄積していく処理と、上記第2の伝送処理部により、上記インターホン無線増設親機に呼信号を送出して、該呼信号に対する応答信号を受信する処理とを、並列的に処理することを特徴とする。
更に、上記において、上記第2の伝送処理部により、上記インターホン無線増設親機に呼信号を送出した後、該呼信号に対する応答信号を所定時間内に受信すれば、更に、通話呼出信号を送出し、その後、該通話呼出信号に対する応答信号を所定時間内に受信すれば、上記第1の伝送処理部により、無線フォーマット信号に変換され蓄積されている映像信号を上記インターホン無線増設親機に送出開始する一方、上記呼信号に対する応答信号が所定時間内に受信できない、あるいは上記通話呼出信号に対する応答信号が所定時間内に受信できないときには、上記インターホン親機に不在を通知するようにしてもよい。
In order to achieve the above object, in claim 1, a door phone with a camera is connected to an interphone base unit via a signal line, and a wireless adapter is connected to the interphone base unit via another signal line, so A wireless compatible intercom system configured by adding a machine, wherein the wireless adapter includes a first transmission processing unit that converts a video signal photographed by the door phone slave unit with a camera into a wireless format signal; A second transmission processing unit that calls the interphone wireless extension base unit and wirelessly transmits the radio format signal converted by the first transmission unit, and a calling signal based on a calling operation of the door phone slave unit with a camera, When the video signal is received through the interphone base unit, the first transmission processing unit receives the video signal transmitted from the interphone base unit. Received and converted into a radio format signal and stored, and the second transmission processing unit sends a call signal to the interphone radio extension base unit and receives a response signal to the call signal Are processed in parallel.
Further, in the above, if the second transmission processing unit sends a call signal to the interphone wireless extension master unit and then receives a response signal for the call signal within a predetermined time, it further sends a call call signal. Then, if a response signal to the call calling signal is received within a predetermined time, the first transmission processing unit sends the video signal converted and stored in the wireless format signal to the interphone wireless extension base unit. On the other hand, when the response signal for the call signal cannot be received within a predetermined time, or when the response signal for the call calling signal cannot be received within the predetermined time, the interphone master unit may be notified of the absence.

請求項では、上記インターホン親機は、少なくとも、上記カメラ付ドアホン子器が撮影した映像信号を圧縮映像信号に変換する映像圧縮手段と、この映像圧縮の圧縮率を制御する圧縮率制御手段とを備えるとともに、圧縮映像信号を上記無線アダプタに送出する構成としており、上記圧縮率制御手段は、上記映像圧縮の圧縮率を、少なくとも映像信号の第1フレームが、以降のフレームの圧縮率よりも高くなるように制御することを特徴とする。 According to a third aspect of the present invention , the interphone master unit includes at least video compression means for converting a video signal captured by the camera-equipped doorphone slave unit into a compressed video signal, and a compression rate control means for controlling the compression rate of the video compression. And the compressed rate signal is sent to the wireless adapter, and the compression rate control means sets the compression rate of the video compression so that at least the first frame of the video signal is higher than the compression rate of subsequent frames. It is characterized by controlling so as to increase.

請求項では、上記インターホン親機は、少なくとも、カメラ付ドアホン子器が撮影した映像信号を圧縮映像信号に変換する映像圧縮手段と、この映像圧縮の圧縮率を制御する圧縮率制御手段とを備えるとともに、圧縮映像信号を上記無線アダプタに送出する構成としており、上記圧縮率制御手段は、上記映像圧縮の圧縮率を、映像信号の第1フレームから、以降のフレームになるほど段階的に小さくなるように制御することを特徴とする。 According to a fourth aspect of the present invention , the interphone master unit includes at least video compression means for converting a video signal photographed by the camera doorphone slave unit into a compressed video signal, and a compression rate control means for controlling the compression rate of the video compression. And the compressed video signal is sent to the wireless adapter, and the compression rate control means gradually reduces the compression rate of the video compression from the first frame of the video signal to the subsequent frames. It is characterized by controlling as follows.

請求項では、上記インターホン親機は、上記カメラ付ドアホン子器を定期的に駆動して、撮影した映像信号を上記無線アダプタに転送する定期転送手段を更に備えており、上記無線アダプタは、上記インターホン親機から定期転送されてきた映像信号を受信する毎に、更新記憶する定期記憶手段を更に備えており、上記伝送処理制御手段は、上記カメラ付きドアホン子器の呼出操作に基づく呼出信号を、上記インターホン親機を通じて受信したときには、上記定期記憶手段に記憶している最新の更新画像を表す映像信号を、カメラ付きドアホン子器が呼出操作に応じて撮影した映像信号よりも先行させて、上記インターホン無線増設親機へ無線送出させることを特徴とする。 In claim 5 , the interphone base unit further includes periodic transfer means for periodically driving the door phone with camera and transferring a captured video signal to the wireless adapter. Each time it receives a video signal periodically transferred from the interphone master unit, it further comprises a periodic storage means for updating and storing, and the transmission processing control means is a call signal based on a call operation of the doorphone slave unit with camera. Is received through the interphone master unit, the video signal representing the latest updated image stored in the periodic storage means is preceded by the video signal photographed by the door phone with camera in response to the calling operation. And wirelessly transmitting to the interphone wireless extension base unit.

本発明によれば、以下の効果を奏する。   The present invention has the following effects.

請求項1、2によれば、第1伝送処理部による信号受信変換処理と、第2伝送処理部による無線アダプタとの間の通話呼出処理とを並列的に開始しているので、従来システムと比べた場合に、カメラ付ドアホン子器による撮影が開始されてから、その来客映像がインターホン無線増設親機に表示され始めるまでの遅延時間を短縮できる。 According to claims 1 and 2 , since the signal reception conversion processing by the first transmission processing unit and the call calling processing between the wireless adapter by the second transmission processing unit are started in parallel, In comparison, it is possible to shorten the delay time from the start of shooting by the camera-equipped doorphone slave unit until the visitor video starts to be displayed on the interphone wireless extension master unit.

請求項3、4によれば、最初の来客映像は、データ量を小さくして、迅速な応答表示ができ、通話を開始した後は、精細な映像を見ながら通話が出来る。 According to the third and fourth aspects, the first visitor video can be displayed quickly with a reduced amount of data, and after starting the call, the call can be made while watching the fine video.

すなわち、請求項によれば、インターホン親機では、無線アダプタに送出する画像データの少なくとも最初の1フレーム分の圧縮率を、以降のフレーム分の画像データの圧縮率よりも高くするので、インターホン無線増設親機側では、第1フレーム目については迅速な応答表示が可能となる。 That is, according to the third aspect , the interphone master unit sets the compression rate for at least the first frame of the image data sent to the wireless adapter higher than the compression rate of the image data for the subsequent frames. On the side of the wireless extension base unit, a quick response display is possible for the first frame.

また、請求項によれば、インターホン親機では、無線アダプタに送出する画像データの圧縮率をフレーム毎に段階的に小さくしていくため、最初の1フレーム分の画像データについてはインターホン無線増設親機における表示遅延時間の短縮ができ、通話が開始されると、第2フレーム以降については後のフレームになるほど、徐々に画像データが鮮明に表示されてゆくという利点がある。 According to the fourth aspect of the present invention , since the interphone base unit gradually reduces the compression rate of the image data sent to the wireless adapter for each frame, the intercom wireless extension is performed for the first one frame of image data. The display delay time in the master unit can be shortened, and when a call is started, there is an advantage that the image data is gradually displayed more clearly as the second and subsequent frames become later frames.

請求項によれば、無線アダプタは、定期記憶手段で定期更新させておいた映像信号を、ドアホン子器の呼出操作によってインターホン親機から受信した映像信号を送出する前に送出するので、無線増設親機で表示すべき第2フレーム目以降の実際の画像を取り込むまでは、定期記憶手段の最新の更新画像を表す映像信号を無線増設親機に送出して表示させることができるので、インターホン親機から無線アダプタへの伝送能力に関係なく、インターホン無線増設親機での画像データの表示遅延時間の短縮が図れる。 According to the fifth aspect , the wireless adapter sends out the video signal that has been periodically updated by the periodic storage means before sending out the video signal received from the intercom master by calling the door phone slave unit. Until the actual image from the second frame to be displayed on the extension base unit is captured, the video signal representing the latest updated image in the periodic storage means can be sent to the radio extension base unit for display. Regardless of the transmission capability from the master unit to the wireless adapter, the display delay time of image data in the interphone wireless extension master unit can be shortened.

以下に、本発明の実施の形態について説明する。なお、ここでは、インターホンとしてテレビインターホンを用いているが、モニタのないインターホンで本発明を構成することもできる。   Embodiments of the present invention will be described below. Here, a television interphone is used as the interphone, but the present invention can also be configured by an interphone without a monitor.

図3は、第1の本発明システムの具体的なブロック図である。
カメラ付ドアホン子器1とテレビインターホン親機2とは信号線L2で接続され、テレビインターホン親機2と無線アダプタ3とは信号線L1で接続されている。そして、無線アダプタ3と無線通信を行うテレビインターホン無線増設親機4を設けている。
FIG. 3 is a specific block diagram of the first inventive system.
The door phone with camera 1 and the TV interphone master unit 2 are connected by a signal line L2, and the TV interphone master unit 2 and the wireless adapter 3 are connected by a signal line L1. And the TV intercom radio | wireless expansion main | base station 4 which performs radio | wireless communication with the radio | wireless adapter 3 is provided.

カメラ付ドアホン子器1は、信号処理部10、スピーカSPに出力される音声信号のレベルを増幅するスピーカアンプA1、マイクMICより入力された音声信号のレベルを増幅するマイクアンプA2、カメラ11、呼出釦12を備えている。
インターホン親機2は、信号処理部20、スピーカSPに出力される音声信号のレベルを増幅するスピーカアンプA1、マイクMICを通じて入力された音声信号のレベルを増幅するマイクアンプA2、モニタ21、操作釦22を備える。
無線アダプタ3は、アダプタ制御手段30Aを有する信号処理部30、第1伝送処理部31、アンテナ32を有する第2伝送処理部32を備えている。
インターホン無線増設親機4は、信号処理部40、アンテナANTを有し、無線アダプタ3との間で、先述した通話呼出処理を行う無線通信部41、スピーカSPに出力される音声信号のレベルを増幅するスピーカアンプA1、マイクMICより入力された音声信号のレベルを増幅するマイクアンプA2、モニタ42、操作釦43を備えている。
The intercom 1 with camera includes a signal processing unit 10, a speaker amplifier A1 that amplifies the level of the audio signal output to the speaker SP, a microphone amplifier A2 that amplifies the level of the audio signal input from the microphone MIC, the camera 11, A call button 12 is provided.
The intercom base unit 2 includes a signal processing unit 20, a speaker amplifier A1 that amplifies the level of the audio signal output to the speaker SP, a microphone amplifier A2 that amplifies the level of the audio signal input through the microphone MIC, a monitor 21, and operation buttons. 22.
The wireless adapter 3 includes a signal processing unit 30 having an adapter control means 30A, a first transmission processing unit 31, and a second transmission processing unit 32 having an antenna 32.
The intercom wireless extension base unit 4 includes a signal processing unit 40 and an antenna ANT. The wireless communication unit 41 performs the above-described call calling processing with the wireless adapter 3 and the level of the audio signal output to the speaker SP. A speaker amplifier A1 for amplifying, a microphone amplifier A2 for amplifying the level of an audio signal input from the microphone MIC, a monitor 42, and an operation button 43 are provided.

無線アダプタ3の第1伝送処理部31は、信号受信変換処理を行い、インターホン親機2から受信した、カメラ付ドアホン子器1により撮影された映像信号を無線信号の形にフォーマット変換して蓄積する。   The first transmission processing unit 31 of the wireless adapter 3 performs a signal reception conversion process, converts the format of the video signal received from the intercom master unit 2 and photographed by the camera-equipped doorphone slave unit 1 into the form of a wireless signal and stores it. To do.

無線アダプタ3の第2伝送処理部32は、インターホン親機2から受信した呼出信号に基づいて、インターホン無線増設親機4との間で通話呼出処理を行い、応答があれば、第1伝送処理部31に蓄積した映像信号をアンテナANTを通じてインターホン無線増設親機4に送出する。   The second transmission processing unit 32 of the wireless adapter 3 performs call calling processing with the interphone wireless extension base unit 4 based on the calling signal received from the interphone base unit 2, and if there is a response, the first transmission processing The video signal stored in the unit 31 is sent to the intercom wireless extension base unit 4 through the antenna ANT.

なお、無線アダプタ3では、第1伝送処理部31と第2伝送処理部32とは、1チップCPUで構成することもできる。   In the wireless adapter 3, the first transmission processing unit 31 and the second transmission processing unit 32 can be configured by a one-chip CPU.

このような構成の第1の本発明では、先述したような、第1伝送処理部31による信号受信変換処理と、第2伝送処理部32による通話呼出処理とを並列的に行う並列伝送処理を行う。
すなわち、インターホン親機2から少なくとも画像データを映像信号として送出されてきたときには、第1伝送処理部によりこれを受信し、無線信号にフォーマット変換をして順次蓄積する信号受信変換処理を行う。
第2伝送処理部32は、このような信号受信変換処理に並行して、インターホン親機2から送出されてきた呼出信号に基づいてインターホン無線増設親機4との間で前述した通話呼出処理をする。
In the first aspect of the present invention configured as described above, the parallel transmission processing in which the signal reception conversion processing by the first transmission processing unit 31 and the call call processing by the second transmission processing unit 32 are performed in parallel as described above. Do.
That is, when at least image data is transmitted as a video signal from the intercom base unit 2, the first transmission processing unit receives it and performs signal reception conversion processing for converting the format into a radio signal and sequentially storing it.
In parallel with such signal reception conversion processing, the second transmission processing unit 32 performs the above-described call call processing with the interphone wireless extension base unit 4 based on the call signal transmitted from the interphone base unit 2. To do.

つまり、並列伝送処理では、カメラ付ドアホン子器1での呼出操作があると、カメラ付ドアホン子器1で撮影される画像データをインターホン親機2から受信して無線信号に変換して蓄積する信号受信変換処理をしながら、インターホン無線増設親機4と通話呼出処理をして呼び出し、インターホン無線増設親機4と通話呼出処理をし応答があったときには、第1伝送処理部31に蓄積しておいた画像データをインターホン無線増設親機4に送出する。   That is, in parallel transmission processing, when there is a call operation on the camera-equipped doorphone slave unit 1, image data captured by the camera-equipped doorphone slave unit 1 is received from the intercom master unit 2, converted into a radio signal, and stored. While performing the signal reception conversion process, the intercom wireless extension base unit 4 is called by calling the call, and the intercom radio extension base unit 4 is called and the call is called and stored in the first transmission processing unit 31. The stored image data is sent to the intercom wireless extension master unit 4.

インターホン無線増設親機4はこれを受け、受信した画像データを伸長し、モニタ表示する。   The intercom wireless extension base unit 4 receives this, expands the received image data, and displays it on the monitor.

このような構成によれば、以下の基本動作をなす。図1は、このような基本動作を示すタイムチャートである。
すなわち、カメラ付ドアホン子器1での呼出があれば、信号線Lの電圧値が変動するので、この変動をインターホン親機2が検知し、呼出を受けたことを認識する。
According to such a configuration, the following basic operation is performed. FIG. 1 is a time chart showing such a basic operation.
That is, if there is a call at the camera-equipped doorphone sub unit 1, the voltage value of the signal line L changes, and the interphone base unit 2 detects this change and recognizes that the call has been received.

すると、インターホン親機2は呼出動作をするとともに、カメラ付ドアホン子器1の駆動電源を供給してカメラを駆動させ、呼出信号を無線アダプタ3、有線増設親機5に送出する。
無線アダプタ3は、第1伝送処理部31により、インターホン親機2から受信した、カメラ付ドアホン子器1により撮影された映像信号を無線信号の形にフォーマット変換して蓄積する信号受信変換処理を行う。
ここで、無線信号の形にフォーマット変換する無線フォーマット変換では、映像信号のフレームを分割するブロック化や、ヘッダ付与などを含むフォーマット変換をしている。
これとともに、インターホン親機2から受信した呼出信号に基づいて、第2伝送処理部32により、インターホン無線増設親機4との間で通話呼出処理を行い、応答があれば、第1伝送処理部31に蓄積した映像信号をインターホン無線増設親機4に送出する。
インターホン無線増設親機4は、無線アダプタ3との通話呼出処理で応答して呼出音を出力する。これとともに、無線アダプタ3から受信した映像信号に基づいて、来客映像をモニタに表示する。
なお、無線増設親機4との無線通信では、映像信号は片方向、音声信号は両方向で、周波数多重化した無線信号として伝送してもよく、音声を別チャネルとして伝送してもよい。また、音声については、従来の無線伝送方式を採用することもできる。
なお、カメラ付ドアホン子器1、インターホン親機2の動作については、従来の技術の説明で示した図5と同様であるため、説明を省略する。
Then, the interphone master unit 2 performs a calling operation, supplies the drive power of the camera-equipped doorphone slave unit 1 to drive the camera, and sends a calling signal to the wireless adapter 3 and the wired extension master unit 5.
The wireless adapter 3 uses the first transmission processing unit 31 to perform a signal reception conversion process in which the video signal received from the interphone master unit 2 and photographed by the camera doorphone slave unit 1 is converted into a wireless signal format and stored. Do.
Here, in the wireless format conversion for converting the format into the form of a wireless signal, the format conversion including block formation for dividing the frame of the video signal and addition of a header is performed.
At the same time, on the basis of the call signal received from the interphone base unit 2, the second transmission processing unit 32 performs call calling processing with the interphone wireless extension base unit 4, and if there is a response, the first transmission processing unit The video signal stored in 31 is sent to the intercom wireless extension base unit 4.
The intercom wireless extension base unit 4 outputs a ringing tone in response to a call calling process with the wireless adapter 3. At the same time, the visitor video is displayed on the monitor based on the video signal received from the wireless adapter 3.
In wireless communication with the wireless extension base unit 4, the video signal may be transmitted in one direction and the audio signal may be transmitted in both directions as a frequency-multiplexed radio signal, or the audio may be transmitted as a separate channel. In addition, a conventional wireless transmission method can be adopted for voice.
The operations of the camera-equipped doorphone slave unit 1 and the interphone master unit 2 are the same as those in FIG.

図2のフローチャートは、無線アダプタ3の基本動作の一例を示している(第1伝送処理部31、第2伝送処理部32は1チップCPUで構成)。なお、インターホン無線増設親機4の基本動作は、図8のフローチャートと同様であるので説明を省略する。   The flowchart of FIG. 2 shows an example of the basic operation of the wireless adapter 3 (the first transmission processing unit 31 and the second transmission processing unit 32 are configured by a one-chip CPU). The basic operation of the intercom wireless extension base unit 4 is the same as that in the flowchart of FIG.

無線アダプタ3は、電源が入っている状態で(100)、インターホン親機2から、カメラ付ドアホン子器1の呼出操作に基づく呼出信号を受信したときには、第2伝送処理部32により通話呼出処理を開始して、インターホン無線増設親機4に呼信号を送出する(103)。これとともに、第1伝送処理部31により、インターホン親機2から送出される映像信号を受信し、無線信号に変換して蓄積する信号受信変換処理を行う(102)。   When the wireless adapter 3 is turned on (100) and receives a call signal based on the call operation of the door phone with camera 1 from the intercom base unit 2, the second transmission processing unit 32 performs call call processing. And a call signal is sent to the intercom wireless extension master unit 4 (103). At the same time, the first transmission processing unit 31 receives the video signal transmitted from the intercom base unit 2 and performs signal reception conversion processing for converting it into a radio signal and storing it (102).

第2伝送処理部32において、呼信号に対する応答、通話呼出信号に対する応答(104〜106)がそれぞれ所定時間内(107,109)にあれば、第1伝送処理部31において映像信号の少なくとも1フレーム分の蓄積が完了しているか判断し(111)、完了していれば、第1伝送処理部31に蓄積しておいた映像信号をインターホン無線増設親機4に送出する(112)。
なお、呼信号、通話呼出信号のそれぞれに対する応答が所定時間内に得られない場合には、インターホン親機2に不在を返信する(108、110)。
In the second transmission processing unit 32, if the response to the call signal and the responses to the call calling signal (104 to 106) are within a predetermined time (107, 109), at least one frame of the video signal is transmitted to the first transmission processing unit 31. (111), if it is completed, the video signal stored in the first transmission processing unit 31 is sent to the intercom wireless extension base unit 4 (112).
If a response to each of the call signal and the call call signal cannot be obtained within a predetermined time, the absence is returned to the intercom base unit 2 (108, 110).

図4は、第2の本発明システムの基本構成の他の例を示すブロック図である。   FIG. 4 is a block diagram showing another example of the basic configuration of the second system of the present invention.

この第2の本発明システムでは、インターホン親機2では、信号処理部20は、映像圧縮手段20A、圧縮率制御手段20Bを備えている。その他の構成は、第1の本発明システムと同様であるので、同一符号を付して説明を省略する。
In the second present invention system, in the interphone master unit 2, the signal processing unit 20 includes a video compression unit 20A and a compression rate control unit 20B. Since other configurations are the same as those of the first system of the present invention, the same reference numerals are given and description thereof is omitted.

この第2の本発明システムでは、圧縮率制御手段20Bにより映像信号のフレーム毎に圧縮率を変化させることを特徴とする。   This second invention system is characterized in that the compression rate is changed for each frame of the video signal by the compression rate control means 20B.

映像圧縮手段20Aは、圧縮率制御手段20Bによる制御を受け、カメラ付ドアホン子器1により撮影された来客映像を所定の圧縮率で圧縮する。   The video compression unit 20A receives the control of the compression rate control unit 20B, and compresses the visitor video shot by the camera-equipped doorphone slave unit 1 at a predetermined compression rate.

圧縮された来客映像は、先述したように、信号線L1を通じて無線アダプタ3に送出される。   The compressed visitor video is sent to the wireless adapter 3 through the signal line L1 as described above.

圧縮率制御手段20Bは、図示しないカウンタを有しており、無線アダプタ3に送るべき映像信号をフレーム単位で管理して、最初の1フレームだけ所定の圧縮率で圧縮するよう映像圧縮手段20Aを制御するが、続く映像信号については、その圧縮率よりも小さな圧縮率で圧縮するよう制御する。   The compression rate control means 20B has a counter (not shown), manages the video signal to be sent to the wireless adapter 3 on a frame basis, and controls the video compression means 20A to compress only the first frame at a predetermined compression rate. Although the control is performed, the subsequent video signal is controlled to be compressed at a compression rate smaller than the compression rate.

つまり、第2フレーム目以降は、原画像に近くなるよう圧縮率を解除した状態で転送する。   That is, after the second frame, transfer is performed in a state where the compression rate is canceled so as to be close to the original image.

なお、最初の1フレーム目からフレーム毎に段階的に圧縮率を小さくし、所定の圧縮率となるように制御してもよい。   Note that the compression rate may be reduced step by step for each frame from the first frame, and control may be performed to achieve a predetermined compression rate.

図5は、第3の本発明システムの基本構成の一例を示すブロック図である。   FIG. 5 is a block diagram showing an example of the basic configuration of the third system of the present invention.

この第3の本発明システムでは、インターホン親機2では、信号処理部20は、定期転送手段20Cを備えている。
In the third system of the present invention, in the intercom base unit 2, the signal processing unit 20 includes a regular transfer means 20C.

また、無線アダプタ3では、定期記憶手段33を備えている。その他の構成については、第1,2の本発明と同様であるので、同一符号を付して説明を省略する。   In addition, the wireless adapter 3 includes a regular storage unit 33. Since other configurations are the same as those of the first and second aspects of the invention, the same reference numerals are given and description thereof is omitted.

インターホン親機2の定期転送手段20Cは、所定時間毎に、カメラ付ドアホン子器1に給電して撮影をさせて映像信号を受信し、無線アダプタ3に送出する。無線アダプタ3は、これを第1伝送処理部31を通じて受信して、定期記憶手段33に、最新の更新画像を表す映像信号として記憶更新してゆく。なお、映像信号の記憶態様は、静止画、動画いずれを問わない。   The regular transfer means 20C of the intercom base unit 2 receives the video signal by feeding power to the doorphone slave unit with camera 1 for every predetermined time, and sends it to the wireless adapter 3. The wireless adapter 3 receives this through the first transmission processing unit 31 and stores and updates it in the regular storage means 33 as a video signal representing the latest updated image. Note that the storage mode of the video signal may be either a still image or a moving image.

伝送処理制御手段30Aは、インターホン親機2から受信した音声信号、映像信号を第2伝送処理部32を通じて無線アダプタ4に送出する前に、定期記憶手段33の音声信号、映像信号を第2伝送処理部32に渡し、第2伝送処理部32を通じて無線アダプタ4に送出する。   The transmission processing control unit 30A performs the second transmission of the audio signal and video signal in the periodic storage unit 33 before sending the audio signal and video signal received from the interphone master unit 2 to the wireless adapter 4 through the second transmission processing unit 32. The data is transferred to the processing unit 32 and sent to the wireless adapter 4 through the second transmission processing unit 32.

すなわち、第2伝送処理部32によるインターホン無線増設親機4との通話呼出処理をした結果、応答があったときには、まず、定期記憶手段33の音声信号、映像信号を第2伝送処理部32に渡してから、第1伝送部31に蓄積された音声信号、映像信号を第2伝送部32に渡す。
したがって、第2伝送処理部32より無線アダプタ4に送出すべき画像データの少なくとも最初の1フレーム目には、バックアップしておいた画像データが挿入されることになる。
That is, when there is a response as a result of a call calling process with the intercom wireless extension base unit 4 by the second transmission processing unit 32, first, the audio signal and video signal of the periodic storage means 33 are sent to the second transmission processing unit 32. Then, the audio signal and the video signal accumulated in the first transmission unit 31 are delivered to the second transmission unit 32.
Therefore, the backed up image data is inserted into at least the first frame of the image data to be sent from the second transmission processing unit 32 to the wireless adapter 4.

第1の本発明の基本動作の一例を示すタイムチャートTime chart showing an example of the basic operation of the first present invention 第1の本発明における無線アダプタの基本動作の一例を示すフローチャートThe flowchart which shows an example of the basic operation | movement of the wireless adapter in 1st this invention 第1の本発明の基本構成の一例を示すブロック図The block diagram which shows an example of the basic composition of the 1st present invention 第2の本発明の基本構成の一例を示すブロック図The block diagram which shows an example of the basic composition of the 2nd present invention 第3の本発明の基本構成の一例を示すブロック図The block diagram which shows an example of the basic composition of 3rd this invention 従来の無線対応型インターホンシステムの基本動作を示すタイムチャートTime chart showing the basic operation of a conventional wireless-compatible intercom system 従来システムにおける無線アダプタの基本動作を示すフローチャートFlow chart showing basic operation of wireless adapter in conventional system 従来システムにおけるインターホン無線増設親機の基本動作を示すフローチャートFlowchart showing the basic operation of the intercom wireless extension master unit in the conventional system

符号の説明Explanation of symbols

1 カメラ付ドアホン子器
2 インターホン親機
3 無線アダプタ
4 インターホン無線増設親機
20A 映像圧縮手段
20B 圧縮率制御手段
20C 定期転送手段
31 第1伝送処理部
32 第2伝送処理部
33 定期記憶手段
L1,L2 信号線
DESCRIPTION OF SYMBOLS 1 Door phone subunit | mobile_unit with a camera 2 Interphone main | base station 3 Wireless adapter 4 Interphone radio | wireless extension main | base station 20A Image | video compression means 20B Compression rate control means 20C Periodic transfer means 31 1st transmission processing part 32 2nd transmission processing part 33 Periodic storage means L1, L2 signal line

Claims (5)

インターホン親機にカメラ付きドアホン子器を信号線で接続し、更に該インターホン親機に無線アダプタを別の信号線で接続して、上記無線アダプタと無線通信を行うインターホン無線増設親機を付加して構成された、無線対応型インターホンシステムであって、
上記無線アダプタは、上記カメラ付きドアホン子器が撮影した映像信号を、無線フォーマット信号に変換する第1伝送処理部と、
上記インターホン無線増設親機を呼出し、上記第1伝送部によって変換された無線フォーマット信号を、無線送出する第2伝送処理部と、を備え、
上記カメラ付きドアホン子器の呼出操作に基づく呼出信号を上記インターホン親機を通じて受信したときには、
上記第1伝送処理部により、上記インターホン親機から送出されてくる映像信号を受信し、無線フォーマット信号に変換して蓄積していく処理と、
上記第2の伝送処理部により、上記インターホン無線増設親機に呼信号を送出して、該呼信号に対する応答信号を受信する処理とを、並列的に処理することを特徴とする無線対応型インターホンシステム。
Connect the intercom base unit to the intercom base unit with a signal line, connect the wireless adapter to the intercom base unit with another signal line, and add the interphone wireless extension base unit that performs wireless communication with the wireless adapter. Wireless intercom system configured as
The wireless adapter includes a first transmission processing unit that converts a video signal captured by the camera doorphone slave unit into a wireless format signal;
A second transmission processing unit that calls the interphone wireless extension base unit and wirelessly transmits the radio format signal converted by the first transmission unit ;
A call signal based on the call operation of the intercom slave unit with the camera, when it receives through the intercom master unit,
By the first transmission processing unit receives the video signal that is transmitted from the interphone parent device, a process of accumulating and converted to a radio format signal,
The wireless transmission type interphone, wherein the second transmission processing unit performs processing in parallel with a process of sending a call signal to the interphone wireless extension base unit and receiving a response signal to the call signal. system.
請求項1において、In claim 1,
上記第2の伝送処理部により、上記インターホン無線増設親機に呼信号を送出した後、該呼信号に対する応答信号を所定時間内に受信すれば、更に、通話呼出信号を送出し、その後、該通話呼出信号に対する応答信号を所定時間内に受信すれば、上記第1の伝送処理部により、無線フォーマット信号に変換され蓄積されている映像信号を上記インターホン無線増設親機に送出開始する一方、If the second transmission processing unit sends a call signal to the interphone wireless extension master unit and then receives a response signal to the call signal within a predetermined time, it further sends a call call signal, and then If a response signal to the call calling signal is received within a predetermined time, the first transmission processing unit starts sending the video signal converted and stored in the wireless format signal to the interphone wireless extension master unit,
上記呼信号に対する応答信号が所定時間内に受信できない、あるいは上記通話呼出信号に対する応答信号が所定時間内に受信できないときには、上記インターホン親機に不在を通知することを特徴とする無線対応型インターホンシステム。A radio-compatible intercom system, wherein a response signal for the call signal cannot be received within a predetermined time or a response signal for the call call signal cannot be received within a predetermined time, and the absence of notification is sent to the interphone master unit. .
請求項1または2において、
上記インターホン親機は、少なくとも、
上記カメラ付ドアホン子器が撮影した映像信号を圧縮映像信号に変換する映像圧縮手段と、この映像圧縮の圧縮率を制御する圧縮率制御手段とを備えるとともに、圧縮映像信号を上記無線アダプタに送出する構成としており、
上記圧縮率制御手段は、上記映像圧縮の圧縮率を、少なくとも映像信号の第1フレームが、以降のフレームの圧縮率よりも高くなるように制御することを特徴とする無線対応型インターホンシステム。
In claim 1 or 2 ,
The intercom base unit is at least
Video compression means for converting a video signal photographed by the door phone with camera to a compressed video signal, and compression rate control means for controlling the compression rate of the video compression, and sending the compressed video signal to the wireless adapter It is configured to
The wireless compatible intercom system, wherein the compression rate control means controls the compression rate of the video compression so that at least the first frame of the video signal is higher than the compression rate of the subsequent frames.
請求項において、
上記インターホン親機は、少なくとも、
カメラ付ドアホン子器が撮影した映像信号を圧縮映像信号に変換する映像圧縮手段と、この映像圧縮の圧縮率を制御する圧縮率制御手段とを備えるとともに、圧縮映像信号を上記無線アダプタに送出する構成としており、
上記圧縮率制御手段は、上記映像圧縮の圧縮率を、映像信号の第1フレームから以降のフレームになるほど段階的に小さくなるように制御することを特徴とする無線対応型インターホンシステム。
In claim 3 ,
The intercom base unit is at least
A video compression means for converting a video signal photographed by the door phone with the camera into a compressed video signal, and a compression rate control means for controlling the compression rate of the video compression, and sending the compressed video signal to the wireless adapter It is composed and
The wireless compatible intercom system, wherein the compression rate control means controls the compression rate of the video compression so that the compression rate is gradually reduced from the first frame of the video signal to the subsequent frames.
請求項1または2において、
上記インターホン親機は、上記カメラ付ドアホン子器を定期的に駆動して、撮影した映像信号を上記無線アダプタに転送する定期転送手段を更に備えており、
上記無線アダプタは、上記インターホン親機から定期転送されてきた映像信号を受信する毎に、更新記憶する定期記憶手段を更に備えており、
上記伝送処理制御手段は、
上記カメラ付きドアホン子器の呼出操作に基づく呼出信号を、上記インターホン親機を通じて受信したときには、
上記定期記憶手段に記憶している最新の更新画像を表す映像信号を、カメラ付きドアホン子器が呼出操作に応じて撮影した映像信号よりも先行させて、上記インターホン無線増設親機へ無線送出させることを特徴とする無線対応型インターホンシステム。
In claim 1 or 2 ,
The intercom master unit further includes periodic transfer means for periodically driving the camera doorphone slave unit and transferring a captured video signal to the wireless adapter,
The wireless adapter further includes a periodic storage means for updating and storing each time a video signal periodically transferred from the interphone master unit is received,
The transmission processing control means includes
When a call signal based on the call operation of the door phone slave unit with a camera is received through the interphone master unit,
The video signal representing the latest updated image stored in the periodical storage means is wirelessly transmitted to the interphone wireless extension base unit before the video signal photographed by the door phone with camera in response to the calling operation. A wireless compatible intercom system characterized by this.
JP2005131544A 2005-04-28 2005-04-28 Wireless intercom system Expired - Fee Related JP4577082B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005131544A JP4577082B2 (en) 2005-04-28 2005-04-28 Wireless intercom system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005131544A JP4577082B2 (en) 2005-04-28 2005-04-28 Wireless intercom system

Publications (2)

Publication Number Publication Date
JP2006311226A JP2006311226A (en) 2006-11-09
JP4577082B2 true JP4577082B2 (en) 2010-11-10

Family

ID=37477587

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005131544A Expired - Fee Related JP4577082B2 (en) 2005-04-28 2005-04-28 Wireless intercom system

Country Status (1)

Country Link
JP (1) JP4577082B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008135884A (en) * 2006-11-27 2008-06-12 Matsushita Electric Works Ltd Intercom system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09205641A (en) * 1996-01-29 1997-08-05 Sony Corp Remote monitoring device
JP2003198737A (en) * 2001-12-25 2003-07-11 Aiphone Co Ltd Video intercom system
JP2003299084A (en) * 2002-03-29 2003-10-17 Matsushita Electric Ind Co Ltd Camera unit and image transmission / reception system using the same
JP2004112663A (en) * 2002-09-20 2004-04-08 Matsushita Electric Ind Co Ltd Remote imaging system

Also Published As

Publication number Publication date
JP2006311226A (en) 2006-11-09

Similar Documents

Publication Publication Date Title
JP2009118474A (en) A system comprising a mobile phone device and a wristwatch type terminal device, a mobile phone device, and a wristwatch type terminal device.
EP3448009B1 (en) Method and apparatus for taking images during a video call on a mobile communication terminal
US20060203080A1 (en) Communication terminals that vary a video stream based on how it is displayed
JP5049243B2 (en) Intercom system
JP4577082B2 (en) Wireless intercom system
JP4371078B2 (en) Wireless intercom system
JP4442507B2 (en) Wireless intercom system
JPH11168770A (en) Wireless image communication device
JP2012023463A (en) Remote operation system, imaging device, communication device, remote operation system control method, imaging device control method, communication device control method, and program
JP4631842B2 (en) Image transfer device
JP2007208608A (en) Door phone system and control method thereof
JP4329723B2 (en) Wireless compatible TV intercom system
JP4701778B2 (en) Wireless intercom system
JP2009239678A (en) Video intercom system
JP2000216895A (en) Door phone equipment
JP4692471B2 (en) Image transfer device
JPH11298886A (en) Visitor response system
JP2001341952A (en) Elevator information transmission system and information transmission device
JP4442485B2 (en) Wireless compatible TV intercom system
JP4586782B2 (en) Image transfer device
JP4670782B2 (en) Image transfer device
JP4171637B2 (en) Extension intercom device and intercom device
JP4640298B2 (en) Image transfer device
JP2001307252A (en) Monitoring system equipment
KR20070097183A (en) Video call method in mobile communication terminal

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070919

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091124

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100129

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100727

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100809

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130903

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees