JP4669366B2 - Intercom device - Google Patents
Intercom device Download PDFInfo
- Publication number
- JP4669366B2 JP4669366B2 JP2005286857A JP2005286857A JP4669366B2 JP 4669366 B2 JP4669366 B2 JP 4669366B2 JP 2005286857 A JP2005286857 A JP 2005286857A JP 2005286857 A JP2005286857 A JP 2005286857A JP 4669366 B2 JP4669366 B2 JP 4669366B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- transmission
- synchronization
- image data
- period
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Time-Division Multiplex Systems (AREA)
- Interconnected Communication Systems, Intercoms, And Interphones (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
Description
本発明は、インターホン装置に係り、特に画像データと音声データを伝送するときの同期伝達手段に、伝送フレームの周期性を利用したインターホン装置に関する。 The present invention relates to an interphone device, and more particularly to an interphone device that uses the periodicity of a transmission frame as a synchronous transmission means when transmitting image data and audio data.
従来から、デジタル化した映像、音声などの周期性のあるデータを同期信号と共に伝送させる同期式データ伝送方式及び装置が開示されている(例えば、特許文献1参照)。 Conventionally, there has been disclosed a synchronous data transmission method and apparatus for transmitting periodic data such as digitized video and audio together with a synchronization signal (see, for example, Patent Document 1).
この装置は、インターホン装置のモニタ付親機、カメラ付子機、制御機などの通信機器に適用され、制御機には、伝送フレームの組み立てと分離を行うデータ整形回路と、このデータ整形回路及びモニタ付親機、カメラ付子機に制御コマンドを送る制御回路と、各部の動作タイミングをつくるタイミング回路と、データの送受信を行うトランシーバとを備え、親機、子機には、伝送フレームの組み立てと分離を行うデータ整形回路と、このデータ整形回路及び制御機に制御コマンドを送る制御回路と、各部の動作タイミングをつくるタイミング回路と、データの送受信を行うトランシーバと、制御機から送られてくる同期信号を再生する同期再生回路とを備えている。 This apparatus is applied to communication devices such as a monitor-equipped master unit, a camera-equipped slave unit, and a controller of an interphone device. The controller includes a data shaping circuit that assembles and separates transmission frames, and the data shaping circuit and A control circuit that sends a control command to the monitor-equipped master unit and camera-equipped slave unit, a timing circuit that creates the operation timing of each unit, and a transceiver that transmits and receives data are assembled. A data shaping circuit that performs separation, a control circuit that sends a control command to the data shaping circuit and the controller, a timing circuit that creates the operation timing of each unit, a transceiver that transmits and receives data, and a controller A synchronous reproduction circuit for reproducing the synchronous signal.
このような装置は、カメラ付子機で映像データ、音声データ及び制御データなどのデータを、データ整形回路にてタイミング回路でつくられた同期信号を付加して伝送フレームとし、トランシーバから伝送路に伝送される。この伝送フレームを、制御機を介してトランシーバで受信したモニタ付親機は、同期再生回路において同期信号を再生し、再生された同期信号に基づきタイミング回路を動作させ、映像データ及び音声データを出力する。 Such a device uses a slave unit with a camera to add data such as video data, audio data, and control data to a transmission frame by adding a synchronization signal generated by a timing circuit in a data shaping circuit to the transmission path from the transceiver. Is transmitted. The master unit with a monitor that has received this transmission frame by the transceiver via the controller reproduces the synchronization signal in the synchronous reproduction circuit, operates the timing circuit based on the reproduced synchronization signal, and outputs video data and audio data To do.
なお、この伝送フレームは図3に示すように、フレームのデータリンク層で付加される制御情報であるフレームヘッダHが格納されるフレームヘッダフィールドと、インターホン装置の通話制御を行うための制御データD1が格納される制御データフィールドと、音声データD2が格納される音声データフィールドと、画像データD3が格納される画像データフィールドとから構成されている。また、フレームヘッダHには、送信側のシステムクロックのカウンタ値のタイムスタンプTSが含まれる。ここで、タイムスタンプTSとは、データを作成した時間であって、復号化する側でタイミング調整するための時間データのことをいう。 As shown in FIG. 3, this transmission frame includes a frame header field in which a frame header H, which is control information added in the data link layer of the frame, is stored, and control data D1 for performing call control of the intercom apparatus. Are stored in the control data field, the sound data field in which the sound data D2 is stored, and the image data field in which the image data D3 is stored. Further, the frame header H includes a time stamp TS of the counter value of the system clock on the transmission side. Here, the time stamp TS is time when data is created, and is time data for timing adjustment on the decoding side.
また、モニタ付親機のタイミング回路は図4に示すように、データ整形回路で分解されたフレームヘッダHからタイムスタンプTSを取り出すタイムスタンプ検出回路51と、分周を行う分周用カウンタ52と、タイムスタンプ検出回路51より入力されるカウント値と、分周用カウンタ52とのカウント値を加減算する加減算器53と、加減算器53の出力を平滑化するフィルタ回路54と、フィルタ回路54で制御される電圧制御発振器(VCO)55とで構成されているシステムクロック生成回路部50を有している。したがって、モニタ付親機のデータ整形回路、トランシーバ等の制御タイミングは、タイミング回路のシステムクロック生成回路部50で生成されたシステムクロックを使用し、システムの同期をとっている。
As shown in FIG. 4, the timing circuit of the monitor-equipped master unit includes a time
しかしながら、背景技術に記載した装置では、同期信号を抽出するために、フレームヘッダに記載されているタイムスタンプTSを使用して、位相ロックループ(PLL)を形成し、システムクロックを生成して、システム全体の同期をとっている。 However, in the apparatus described in the background art, in order to extract the synchronization signal, the time stamp TS described in the frame header is used to form a phase locked loop (PLL), and a system clock is generated. The entire system is synchronized.
このためタイムスタンプTSが入るたびに、システムクロックの誤差を修正しているので、システムクロック周波数が毎回異なる場合があることからシステムクロック自体の揺らぎが大きくなり、精度の良いシステムクロックを得るためには精密な制御が必要であった。また、このようにシステムクロック自体の揺らぎが大きいシステムクロックとなっているので、音声同期のスリップ等が起き易くなり、リップシンクがずれてしまう難点があった。 For this reason, since the system clock error is corrected every time the time stamp TS is entered, the system clock frequency may be different every time. Therefore, the fluctuation of the system clock itself is increased, and in order to obtain an accurate system clock. Needed precise control. In addition, since the system clock itself has a large fluctuation as described above, there is a problem in that slipping of audio synchronization is likely to occur, and lip sync is shifted.
本発明は、このような従来の難点を解決するためになされたもので、伝送フレームを一定周期で送ることで、受信側での同期信号の再生が容易なインターホン装置を提供することを目的とする。 The present invention has been made to solve such a conventional problem, and an object of the present invention is to provide an intercom apparatus that can easily reproduce a synchronization signal on the receiving side by sending a transmission frame at a constant period. To do.
上述の目的を達成する本発明の第1の態様であるインターホン装置は、マイクロホン及びスピーカを有する子機と、通話のためのマイクロホン及びスピーカを有する親機を備え、子機及び親機間でインターホン制御データ、音声データを含む伝送フレームを一定周期のフレーム周期で伝送するインターホン装置において、音声データのサンプリング周期を受信側に正しく伝送するために、サンプリング周期とフレーム周期の関係を1:1、1/p:1又はp:1(pは自然数)の周期とするとともに、音声データ中に同期の取り出し位置を示す同期マーカーを備えたものである。 An intercom apparatus according to a first aspect of the present invention that achieves the above-described object includes a slave unit having a microphone and a speaker, and a master unit having a microphone and a speaker for talking, and the interphone is connected between the slave unit and the master unit. In an interphone device that transmits a transmission frame including control data and audio data at a fixed frame period, the relationship between the sampling period and the frame period is 1: 1, 1 in order to correctly transmit the sampling period of the audio data to the receiving side. / P: 1 or p: 1 (p is a natural number), and a synchronization marker indicating a synchronization extraction position is provided in the audio data.
また、上述の目的を達成する本発明の第2の態様であるインターホン装置は、画像を撮像するためのカメラを有する子機と、画像を表示する表示部を有する親機とを備え、子機及び親機間でインターホン制御データ、画像データを含む伝送フレームを一定周期のフレーム周期で伝送するインターホン装置において、画像データの画面周期を受信側に正しく伝送するために、画面周期とフレーム周期の関係を1:1、1/p:1又はp:1(pは自然数)の周期とするとともに、画像データ中に同期の取り出し位置を示す同期マーカーを備えたものである。 In addition, an intercom apparatus according to a second aspect of the present invention that achieves the above object includes a slave unit having a camera for capturing an image, and a master unit having a display unit for displaying an image. In the interphone device that transmits interphone control data and transmission frames including image data at a fixed frame rate between the master unit and the base unit, the relationship between the screen cycle and the frame cycle is used to correctly transmit the screen cycle of the image data to the receiving side. Is a period of 1: 1, 1 / p: 1, or p: 1 (p is a natural number), and a synchronization marker indicating a synchronization extraction position is provided in the image data.
このような第1の態様、第2の態様によるインターホン装置によれば、デジタルデータ伝送において、サンプリング周期とフレーム周期との関係及び画面周期とフレーム周期との関係をそれぞれ1:1、1/p:1又はp:1(pは自然数)の周期としていることから伝送フレームを一定周期で送ることができるので、伝送フレーム周期を単位として、同期マーカーを検出することで同期再生が受信側で容易にできるようになる。したがって、システムクロック自体の揺らぎを防ぐことができる。ここで、同期マーカーとは、伝送フレーム中の音声データ又は画像データに設けられ同期の取り出し位置を示すデータ先頭符号のことをいう。 According to the intercom apparatus according to the first aspect and the second aspect, in the digital data transmission, the relationship between the sampling period and the frame period and the relation between the screen period and the frame period are 1: 1 and 1 / p, respectively. : 1 or p: 1 (p is a natural number), so transmission frames can be sent at a fixed period, so synchronous playback is easy on the receiving side by detecting a synchronization marker in units of transmission frame period To be able to. Therefore, fluctuations in the system clock itself can be prevented. Here, the synchronization marker refers to a data head code that is provided in audio data or image data in a transmission frame and indicates a synchronization extraction position.
本発明の第3の態様は第1の態様及び第2の態様であるインターホン装置において、画像データ間の時間軸上の同期を取るために、画像データの処理時間を吸収するための音声遅延バッファを設けることによりリップシンクを合わせる機能を備えたものである。これは、画像データ、音声データの再生側で画像データの処理時間が音声データの処理時間より長くなるので、音声遅延バッファで両方の処理時間を合わせることで音声同期と画像同期を合わせて、リップシンクを合わせることができるようになる。ここで、リップシンク(Lip Synchronization)とは、オーディオビジュアル再生で話者の唇の動きと耳に聞こえる音の同期のことをいう。 According to a third aspect of the present invention, in the intercom apparatus according to the first and second aspects, an audio delay buffer for absorbing the processing time of image data in order to synchronize the image data on the time axis Is provided with a function to match the lip sync. This is because the processing time of the image data is longer than the processing time of the audio data on the playback side of the image data and the audio data. You can adjust the sync. Here, lip synchronization refers to the synchronization of the movement of the speaker's lips and the sound heard by the ear during audiovisual playback.
本発明の第4の態様は第1の態様又は第2の態様であるインターホン装置において、一定周期を維持しつつ中継再生するために、伝送フレームを一周期分又は複数周期分格納する一時格納バッファを設け、同期マーカーのタイミングで、一時格納バッファに格納された伝送フレームを送信することにより、中継再生する機能を備えたものである。これにより、一時格納バッファで格納した伝送フレームを一周期分又は複数周期分だけ遅らせて送信することができるので、受信側で遅れを感じることなく音声、画像を再生することができる。 A fourth aspect of the present invention is a temporary storage buffer for storing a transmission frame for one period or a plurality of periods in order to perform relay reproduction while maintaining a constant period in the intercom apparatus according to the first aspect or the second aspect. And having a function of relay reproduction by transmitting the transmission frame stored in the temporary storage buffer at the timing of the synchronization marker. As a result, the transmission frame stored in the temporary storage buffer can be transmitted after being delayed by one cycle or a plurality of cycles, so that the voice and the image can be reproduced without feeling a delay on the receiving side.
本発明の第5の態様は第1の態様であるインターホン装置において、同期マーカーとして、音声データを符号拡張し、拡張する前の音声データに対応する拡張された符号以外の符号を利用して同期信号を拡張された符号に重畳して伝送し再生する機能を備えたものである。これにより、音声データに同期信号を付加することができるので、別途、同期情報をフレームヘッダ等に設ける必要がなくなる。 According to a fifth aspect of the present invention, in the intercom apparatus according to the first aspect, the voice data is sign-extended as a synchronization marker, and synchronization is performed using a code other than the extended code corresponding to the voice data before the extension. It has a function of transmitting and reproducing a signal superimposed on an extended code. As a result, a synchronization signal can be added to the audio data, so that it is not necessary to separately provide synchronization information in the frame header or the like.
本発明の第6の態様は第2の態様であるインターホン装置において、画像同期マーカーとして、画像データを符号拡張し、拡張する前の画像データに対応する拡張された符号以外の符号を利用して同期信号を拡張された符号に重畳して伝送し再生する機能を備えたものである。これにより、画像データに同期信号を付加することができるので、別途、同期情報をフレームヘッダ等に設ける必要がなくなる。 According to a sixth aspect of the present invention, in the intercom apparatus according to the second aspect, as the image synchronization marker, the image data is sign-extended and a code other than the expanded code corresponding to the image data before the expansion is used. It has a function of transmitting and reproducing a synchronization signal superimposed on the extended code. As a result, since a synchronization signal can be added to the image data, there is no need to separately provide synchronization information in the frame header or the like.
本発明の第7の態様は第4の態様、第5の態様及び第6の態様であるインターホン装置において、送信側から画像の同期信号に合わせて、一時格納バッファに格納した同期マーカーを含んだ伝送フレームを一周期分又は複数周期分のデータを遅延して送信することで、受信側にて同期マーカーを取り出すことで同期タイミングを再生してリップシンクを合わせるものである。これにより、1画像分の画像データを送信した後に、1画像分の音声データを送信することができるので、画像データ、音声データの再生側で音声遅延バッファを設ける必要がなくなる。 The seventh aspect of the present invention is the interphone device according to the fourth aspect, the fifth aspect and the sixth aspect, including a synchronization marker stored in a temporary storage buffer in accordance with an image synchronization signal from the transmission side. By transmitting the transmission frame for one cycle or a plurality of cycles with a delay, the synchronization timing is reproduced by taking out the synchronization marker on the receiving side to match the lip sync. As a result, since the audio data for one image can be transmitted after the image data for one image is transmitted, it is not necessary to provide an audio delay buffer on the reproduction side of the image data and audio data.
本発明のインターホン装置によれば、デジタルデータ伝送において、一定周期で伝送される伝送フレームを単位周期として、画像データや音声データの同期を再生するのに必要な同期情報を簡易な回路で構成して送信及び受信できる。また、本発明のインターホン装置によれば、リップシンクを合わせるため、伝送フレームの単位周期を利用し且つ画像データ、音声データの再生側に音声遅延バッファを設けることで、再生側で容易にリップシンクを合わせることができる。また、本発明のインターホン装置によれば、リップシンクを合わせるため、画像データ、音声データの送信側で伝送フレームの単位周期を利用して音声データの送信を遅らせることで、画像データ、音声データの再生側で容易にリップシンクを合わせることができる。 According to the intercom apparatus of the present invention, in digital data transmission, synchronization information necessary for reproducing synchronization of image data and audio data is configured with a simple circuit using a transmission frame transmitted at a constant period as a unit period. Can be sent and received. Further, according to the intercom apparatus of the present invention, in order to match the lip sync, the unit period of the transmission frame is used, and the audio delay buffer is provided on the reproduction side of the image data and the audio data, so that the lip synchronization can be easily performed on the reproduction side. Can be combined. According to the intercom apparatus of the present invention, in order to match the lip sync, the transmission side of the image data and the audio data is delayed by using the unit period of the transmission frame on the transmission side of the image data and the audio data. Lip sync can be easily adjusted on the playback side.
以下、本発明を実施するための最良の実施形態について、図面を参照して説明する。参照する図1は、本発明のインターホン装置の全体構成を示すブロック図である。 DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, the best mode for carrying out the invention will be described with reference to the drawings. FIG. 1 to be referred to is a block diagram showing the overall configuration of the intercom apparatus of the present invention.
本発明の好ましい実施の形態例であるインターホン装置は図1に示すように、集合住宅の集合玄関で呼出操作、撮像及び通話を行う1台以上の集合玄関子機10a、10b、10c、・・・、10mと、撮像した画像の表示、通話を行う複数の居室親機20a、20b、20c、・・・、20nと、通話に際し音声と画像の交換制御を行う制御装置30とを備えている。
As shown in FIG. 1, an intercom apparatus according to a preferred embodiment of the present invention includes one or more
各集合玄関子機10a、10b、10c、・・・、10mは同一の構成とされ、来訪者が呼出操作を行うための操作ボタン101と、操作ボタン101で呼び出した部屋番号等を表示するための表示部102と、集合玄関の来訪者等を撮像するカメラ103と、居住者と通話を行うためのマイクロホン104及びスピーカ105とを備えている。この集合玄関子機10a、10b、10c、・・・、10mは、さらに、撮像した画像をデジタル画像データに変換する画像用符号器106と、マイクロホン104から入力されたアナログ音声信号をデジタル音声データに変換するとともに、居室親機20a、20b、20c、・・・、20nから送信されたデジタル音声データをアナログ音声信号に変換する音声コーデック(CODEC)107と、デジタル画像データ及びデジタル音声データを伝送するための伝送フレームの組み立てと分離を行うデータ整形回路108と、各部の動作タイミングを生成するタイミング生成回路109と、データの送受信を伝送路L10a、L10b、L10c、・・・、L10mを介して行う伝送回路110と、集合玄関子機の各部を制御するとともに制御装置30と通信・通話制御を行うCPU等からなる制御回路111とを備えている。
Each of the
伝送回路110は図2に示すように、データ整形回路108で生成された子機及び親機間でインターホン制御データd1、音声データd2、画像データ3を含む伝送フレームfを、タイミング生成回路109の動作タイミングに基づき一定の周期のフレーム周期Tで伝送することができる。この伝送フレームfは、フレームのデータリンク層で付加される制御情報であるフレームヘッダhが格納されるフレームヘッダフィールドと、インターホン装置の通話制御を行うための制御データd1が格納される制御データフィールドと、音声データd2が格納される音声データフィールドと、画像データd3が格納される画像データフィールドとから構成されている。
As shown in FIG. 2, the
この集合玄関子機10a、10b、10c、・・・、10mは図1に示すように、操作ボタン101及び表示部102は制御回路111に接続され、カメラ103は画像符号器106に接続され、マイクロホン104及びスピーカ105は音声用コーデック107に接続されている。また、制御回路111、画像用符号器106及び音声用コーデック107はそれぞれデータ整形回路108に接続され、データ整形回路108は伝送路L10a、L10b、L10c、・・・、L10mに接続される伝送回路110に接続されている。さらに、音声用コーデック107、データ整形回路108及び伝送回路110はそれぞれタイミング生成回路109に接続されている。なお、制御回路111は、操作ボタン101及び表示部102だけではなく制御が必要な各部にも接続されている。また、音声用コーデック107はデータ整形回路108に対してマイクロホン104及びスピーカ105に対応して2本で接続されている。
As shown in FIG. 1, the collective
制御装置30は図1に示すように、音声、画像のデータを交換するため交換回路301と、デジタル画像データ及びデジタル音声データを伝送するための図2(A)に示す伝送フレームfの組み立てと分離を行うデータ整形回路302と、各部の動作タイミングを生成するタイミング生成回路303と、データの送受信を伝送路L10a、L10b、L10c、・・・、L10m及び伝送路L20a、L20b、L20c、・・・、L20nを介して行う伝送回路304と、集合玄関子機10a、10b、10c、・・・、10m及び居室親機20a、20b、20c、・・・、20nと通信・通話の交換制御を行うCPU等からなる制御回路305とを備えている。
As shown in FIG. 1, the control device 30 exchanges audio and image data, an
この制御装置30はこれら回路を使用して、集合玄関子機10a、10b、10c、・・・、10mで生成された伝送フレームfに含まれた音声データd2のサンプリング周期T1を受信側である居室親機20a、20b、20c、・・・、20nに正しく伝送するために、図2(B)に示すサンプリング周期T1とフレーム周期Tの関係を1:1、1/p:1又はp:1(pは自然数)の周期とするとともに、音声データd2中に同期の取り出し位置を示す同期マーカーMを付加することができる。また、制御装置30はこれら回路を使用して、集合玄関子機10a、10b、10c、・・・、10mで生成された伝送フレームfに含まれた画像データd3の画面周期T2を受信側である居室親機20a、20b、20c、・・・、20nに正しく伝送するために、図2(B)に示す画面周期T2とフレーム周期Tの関係を1:1、1/p:1又はp:1(pは自然数)の周期とするとともに、画像データd3中に同期の取り出し位置を示す同期マーカーMを付加することができる。このように、デジタルデータ伝送において、サンプリング周期T1とフレーム周期Tとの関係及び画面周期T2とフレーム周期Tとの関係をそれぞれ1:1、1/p:1又はp:1(pは自然数)の周期としていることから伝送フレームfを一定周期で送ることができるので、伝送フレーム周期を単位として、同期マーカーMを検出することで同期再生が受信側で容易にできるようになる。したがって、システムクロック自体の揺らぎを防ぐことができる。
The control device 30 uses these circuits to receive the sampling period T1 of the audio data d2 included in the transmission frame f generated by the
各居室親機20a、20b、20c、・・・、20nは図1に示すように同一の構成とされ、集合玄関子機10a、10b、10c、・・・、10mとの応答・終話操作を行うための操作ボタン201と、集合玄関子機10a、10b、10c、・・・、10mのカメラ103で撮像された集合玄関の来訪者等の画像を表示する液晶パネル等の表示部202と、来訪者と通話を行うためのマイクロホン203及びスピーカ204とを備えている。この居室親機20a、20b、20c、・・・、20nは、さらに、集合玄関子機10a、10b、10c、・・・、10mからのデジタル画像データをアナログ画像データに変換する画像用複合器205と、マイクロホン203から入力されたアナログ音声信号をデジタル音声データに変換するとともに、集合玄関子機10a、10b、10c、・・・、10mから送信されたデジタル音声データをアナログ音声信号に変換する音声コーデック(CODEC)206と、デジタル画像データ及びデジタル音声データを伝送するための伝送フレームの組み立てと分離を行うデータ整形回路207と、各部の動作タイミングを生成するタイミング生成回路208と、データの送受信を伝送路L20a、L20b、L20c、・・・、L20nを介して行う伝送回路209と、居室親機の各部を制御するとともに制御装置30と通信・通話制御を行うCPU等からなる制御回路210とを備えている。
As shown in FIG. 1, each
伝送回路209は図2(A)に示すように、データ整形回路207で生成された子機及び親機間でインターホン制御データd1、音声データd2、画像データ3を含む伝送フレームfを、タイミング生成回路208の動作タイミングに基づき一定の周期のフレーム周期Tで伝送することができる。
As shown in FIG. 2A, the
この居室親機20a、20b、20c、・・・、20nは図1に示すように、操作ボタン201は制御回路210に接続され、表示部202は画像用複合器205に接続され、マイクロホン203及びスピーカ204は音声用コーデック206に接続されている。また、制御回路210、画像用復号器205及び音声用コーデック206はそれぞれデータ整形回路207に接続され、データ整形回路207は伝送路L20a、L20b、L20c、・・・、L20nに接続される伝送回路209に接続されている。さらに、音声用コーデック206、データ整形回路207及び伝送回路209はそれぞれタイミング生成回路208に接続されている。なお、制御回路210は、操作ボタン201だけではなく制御が必要な各部にも接続されている。また、音声用コーデック206はデータ整形回路207に対してマイクロホン203及びスピーカ204に対応して2本で接続されている。
As shown in FIG. 1, the
このスピーカ204に対応して音声用コーデック206とデータ整形回路207の間に接続されている接続線には音声遅延バッファ211が接続されている。この音声遅延バッファ211は、集合玄関子機10a、10b、10c、・・・、10mから伝送されてくる伝送フレームfに含まれる音声データd2及び画像データd3間の時間軸上の同期を取るために、画像データd3の処理時間を吸収してリップシンクを合わせるものである。この音声遅延バッファ211を音声用コーデック206とデータ整形回路207の間に設けることにより、で画像データd3の処理時間が音声データd2の処理時間より長くなるので、音声遅延バッファ211で両方の処理時間を合わせることで音声同期と画像同期を合わせて、リップシンクを合わせることができるようになる。
An
このように構成されたインターホン装置のインターホン動作について、以下説明する。 The intercom operation of the intercom apparatus configured as described above will be described below.
集合住宅の集合玄関において、来訪者が集合玄関機10aの操作ボタン101で呼び出し操作すると、制御回路111が表示部102に呼び出した居室番号を表示する。続いて制御回路111は、呼び出しが発生したことを制御装置30に対して通知するための呼出コマンドを送信する。この呼出コマンドは、データ整形回路108にて図2に示す伝送フレームfを構成する制御データフィールドに格納されて伝送回路110に送出され、伝送回路110にて伝送に適した伝送信号に変換されて、伝送路L10aを介して制御装置30に伝送される。
When a visitor calls and operates the
制御装置30では、伝送信号を伝送回路304にて内部信号に変換され、データ整形回路302に送出される。データ整形回路302では、伝送フレームfの制御データフィールドに格納された呼出コマンドを制御回路305に送出するので、制御回路305はその呼出コマンドに基づき呼び出し先の居室親機20aに対して呼出コマンドを送信する。この呼出コマンドは、データ整形回路302にて図2(A)に示す伝送フレームfを構成する制御データフィールドに格納されて伝送回路304に送出され、伝送回路304にて伝送に適した伝送信号に変換されて、伝送路L20aを介して居室親機20aに伝送される。
In the control device 30, the transmission signal is converted into an internal signal by the
居室親機20aでは、伝送回路209にて内部信号に変換され、データ整形回路207に送出される。データ整形回路207では、伝送フレームfの制御データフィールドに格納された呼出コマンドを制御回路210に送出するので、制御回路210はその呼出コマンドに基づき制御装置30に対して、呼出応答コマンドを送信する。この呼出応答コマンドは、データ整形回路207にて図2(A)に示す伝送フレームfを構成する制御データフィールドに格納されて伝送回路209に送出され、伝送回路209にて伝送に適した伝送信号に変換されて、伝送路L20aを介して制御装置30に伝送される。
In the living room master unit 20 a, the
制御装置30では、伝送信号を伝送回路304にて内部信号に変換され、データ整形回路302に送出される。データ整形回路302では、伝送フレームfの制御データフィールドに格納された呼出応答コマンドを制御回路305に送出するので、制御回路305はその呼出応答コマンドに基づき交換回路301で音声、画像のデータの通信路を接続するとともに、通話開始コマンドを集合玄関子機10aと居室親機20aに対して送信する。この通話開始コマンドは、データ整形回路302にて図2に示す伝送フレームfを構成する制御データフィールドに格納されて伝送回路304に送出され、伝送回路304にて伝送に適した伝送信号に変換されて、伝送路L10aを介して集合玄関子機10aに、また、伝送路L20aを介して居室親機20aにそれぞれ伝送される。
In the control device 30, the transmission signal is converted into an internal signal by the
集合玄関子機10aでは、伝送フレームfが伝送回路110にて内部信号に変換され、データ整形回路108に送出される。データ整形回路108では、伝送フレームfの制御データフィールドに格納された通話開始コマンドを制御回路111に送出するので、制御回路111はその通話開始コマンドに基づき集合玄関子機10aを通話状態にする。また、居室親機20aでは、伝送フレームfが伝送回路209にて内部信号に変換され、データ整形回路207に送出される。データ整形回路207では、伝送フレームfの制御データフィールドに格納された通話開始コマンドを制御回路210に送出するので、制御回路210はその通話開始コマンドに基づき居室親機20aを通話状態にする。したがって、集合玄関子機10aと居室親機20aとの間で通話路が形成される。
In the
次に、音声、画像系のインターホン動作について説明する。なお、制御装置30で生成した伝送フレームfは、通話の如何を問わず一定の伝送フレーム周期Tで伝送されている。この伝送フレーム周期Tは図2(B)に示すように、音声データd2のサンプリング周期T1及び画像データd3の画面周期T2より短いものとする。なお、伝送フレーム周期Tと画面周期T2とは同じであってもよい。 Next, voice and image intercom operations will be described. Note that the transmission frame f generated by the control device 30 is transmitted at a constant transmission frame period T regardless of whether a call is made. As shown in FIG. 2B, this transmission frame period T is shorter than the sampling period T1 of the audio data d2 and the screen period T2 of the image data d3. The transmission frame period T and the screen period T2 may be the same.
まず、画像データd3の伝送では、送信側の集合玄関機10aのカメラ103で撮像された画像は、画像用符合器106にて例えば元画像に対して圧縮された符号に符号化される。符号化された画像データd3は、伝送フレームfの画像データフィールドに格納できるサイズに分割され、データ整形回路108に送出される。なお、データ整形回路108は、画面周期T2内に入力される伝送フレームfのうち画像データd3の先頭に同期の取出し位置を示す同期マーカーMを付加する。この際、データ整形回路108は、集合玄関子機10aで生成された伝送フレームfに含まれた画像データd3の画面周期T2を受信側である居室親機20aに正しく伝送するために、図2(B)に示す画面周期T2とフレーム周期Tの関係を1:1、1/p:1又はp:1(pは自然数)の周期とするとともに、画像データd3中に同期の取り出し位置を示す同期マーカーMを付加する。この同期マーカーMが付加された画像データd3は、伝送フレームfの画像データフィールドに格納されて伝送回路110に送出され、伝送回路110にて伝送に適した伝送信号に変換されて、伝送路L10aを介して制御装置30に伝送される。
First, in the transmission of the image data d3, the image captured by the
制御装置30では、伝送信号を伝送回路304にて内部信号に変換され、データ整形回路302に送出される。データ整形回路302では、伝送フレームfの画像データフィールドに格納された同期マーカーMが付加された画像データd3を制御回路305に送出するので、制御回路305はその画像データd3を呼び出し先の居室親機20aに対して送信する。この画像データd3は、データ整形回路302にて図2に示す伝送フレームfを構成する画像データフィールドに格納されて伝送回路304に送出され、伝送回路304にて伝送に適した伝送信号に変換されて、伝送路L20aを介して居室親機20aに伝送される。
In the control device 30, the transmission signal is converted into an internal signal by the
居室親機20aでは、伝送信号を伝送回路209にて内部信号に変換され、データ整形回路207に送出される。データ整形回路207では、伝送フレームfの画像データフィールドに格納された画像データd3から同期マーカーMを検出すると、タイミング生成回路208にて同期再生する。再生した同期信号と、受信した画像データd3を画像用復号器205に入力し画像を伸張することで、表示部202で画像を再生することができる。
In the office master 20a, the transmission signal is converted into an internal signal by the
次に音声データd2の伝送では、送信側の集合玄関機10aのマイクロホン104で集音された音声のアナログ音声信号は、音声用コーデック107でデジタル音声データに変換され、データ整形回路108に送出される。このとき、データ整形回路108は、集合玄関子機10aで生成された伝送フレームfに含まれた音声データd2のサンプリング周期T1を受信側である居室親機20aに正しく伝送するために、図2(B)に示すサンプリング周期T1とフレーム周期Tの関係を1:1、1/p:1又はp:1(pは自然数)の周期とするとともに、音声データd2中に同期の取り出し位置を示す同期マーカーMを付加する。この同期マーカーMが付加された音声データd2は、伝送フレームfの音声データフィールドに格納されて伝送回路110に送出され、伝送回路110にて伝送に適した伝送信号に変換されて、伝送路L10aを介して制御装置30に伝送される。
Next, in the transmission of the audio data d2, the analog audio signal of the audio collected by the
制御装置30では、伝送信号を伝送回路304にて内部信号に変換され、データ整形回路302に送出される。データ整形回路302では、伝送フレームfの音声データフィールドに格納された同期マーカーMが付加された音声データd2を制御回路305に送出するので、制御回路305はその音声データd2を呼び出し先の居室親機20aに対して送信する。この音声データd2は、データ整形回路302にて図2(A)に示す伝送フレームfを構成する音声データフィールドに格納されて伝送回路304に送出され、伝送回路304にて伝送に適した伝送信号に変換されて、伝送路L20aを介して居室親機20aに伝送される。
In the control device 30, the transmission signal is converted into an internal signal by the
居室親機20aでは、伝送信号を伝送回路209にて内部信号に変換され、データ整形回路207に送出される。データ整形回路207では、伝送フレームfの画像データフィールドに格納された画像データd3から同期マーカーMを検出すると、タイミング生成回路208にて同期再生する。この際、音声データd2と画像データd3間の時間軸上の同期を取るために、音声データd2を音声遅延バッファ211で画像データd3の処理時間を吸収するためにデータ送出を遅延させる。したがって、再生した同期信号と、受信した音声データd2を音声用コーデック206に入力することで、画像とリップシンクを合わせた音声をスピーカ204が出力することができる。
In the office master 20a, the transmission signal is converted into an internal signal by the
なお、上述した実施例においては、受信側である居室親機20a、20b、20c、・・・、20nにリップシンクを合わせる機能を設けていたが、これに限らず、送信側である制御装置30に設けてもよい。例えば、図1に示すように、伝送フレームfを一周期分又は複数周期分格納する一時格納バッファ306を伝送回路304に接続させる。これにより、送信側である集合玄関子機10a、10b、10c、・・・、10mから画像の同期信号に合わせて、一時格納バッファ306に格納した同期マーカーMを含んだ伝送フレームfを、一周期分又は複数周期分のデータを遅延して送信することで、受信側である居室親機20a、20b、20c、・・・、20nにて同期マーカーMを取り出すことで同期タイミングを再生してリップシンクを合わせることができる。したがって、1画像分の画像データd3を送信した後に、1画像分の音声データd2を送信することができるので、画像データd3、音声データd2の再生側である居室親機20a、20b、20c、・・・、20nに音声遅延バッファ211を設ける必要がなくなる。
In the above-described embodiment, the function of aligning the lip sync with the
このような同期マーカーとして、音声データd2を符号拡張し、拡張する前の音声データに対応する拡張された符号以外の符号を利用して同期信号を拡張された符号に重畳して伝送し再生する機能を、集合玄関子機10a、10b、10c、・・・、10mのデータ整形回路108に備えてもよい。これにより、音声データd2に同期信号を付加することができるので、別途、同期情報をフレームヘッダ等に設ける必要がなくなる。
As such a synchronization marker, the audio data d2 is sign-extended, and a synchronization signal is superimposed on the extended code and transmitted and reproduced using a code other than the extended code corresponding to the audio data before the extension. The function may be provided in the
また、画像同期マーカーとして、画像データd3を符号拡張し、拡張する前の画像データに対応する拡張された符号以外の符号を利用して同期信号を拡張された符号に重畳して伝送し再生する機能を、集合玄関子機10a、10b、10c、・・・、10mのデータ整形回路108に備えてもよい。これにより、画像データd3に同期信号を付加することができるので、別途、同期情報をフレームヘッダ等に設ける必要がなくなる。
In addition, the image data d3 is sign-extended as an image synchronization marker, and a synchronization signal is superimposed on the expanded code and transmitted and reproduced using a code other than the expanded code corresponding to the image data before the expansion. The function may be provided in the
さらに、一定周期を維持しつつ中継再生するために、伝送フレームfを一周期分又は複数周期分格納する一時格納バッファ306を制御装置30に設け、同期マーカーMのタイミングで、一時格納バッファ306に格納された伝送フレームfを居室親機20a、20b、20c、・・・、20nに送信することにより、中継再生する機能を備えたものである。なお、一時格納バッファ306は伝送回路304に接続されている。これにより、一時格納バッファ306で格納した伝送フレームfを一周期分又は複数周期分だけ遅らせて送信することができるので、受信側である居室親機20a、20b、20c、・・・、20nで遅れを感じることなく音声、画像を再生することができる。
Further, in order to perform relay reproduction while maintaining a constant period, a
これまで本発明について図面に示した特定の実施の形態をもって説明してきたが、本発明は図面に示した実施の形態に限定されるものではなく、本発明の効果を奏する限り、これまで知られたいかなる構成であっても採用することができることはいうまでもないことである。 Although the present invention has been described with the specific embodiments shown in the drawings, the present invention is not limited to the embodiments shown in the drawings, and is known so far as long as the effects of the present invention are achieved. It goes without saying that any configuration can be adopted.
10a、10b、10c、・・・、10m……集合玄関子機
103……カメラ
104……マイクロホン
105……スピーカ
20a、20b、20c、・・・、20n……居室親機
202……表示部
203……マイクロホン
204……スピーカ
211……音声遅延バッファ
30……制御装置
306……一時格納バッファ
f……伝送フレーム
d1……制御データ
d2……音声データ
d3……画像データ
T……フレーム周期
T1……サンプリング周期
T2……画面周期
M……同期マーカー
10a, 10b, 10c,..., 10m ... Collective
f …… Transmission frame d1 …… Control data d2 …… Audio data d3 …… Image data T …… Frame period T1 …… Sampling period T2 …… Screen period M …… Synchronization marker
Claims (7)
前記音声データのサンプリング周期(T1)を受信側に正しく伝送するために、前記サンプリング周期と前記フレーム周期の関係を1:1、1/p:1又はp:1(pは自然数)の周期とするとともに、前記音声データ中に同期の取り出し位置を示す同期マーカー(M)を備えたことを特徴とするインターホン装置。 A handset (10a, 10b, 10c... 10m) having a microphone (104) and a speaker (105), and a base unit (20a, 20b, 20c) having a microphone (203) and a speaker (204) for calling. .. 20n), and an interphone device for transmitting a transmission frame (f) including interphone control data (d1) and audio data (d2) between the slave unit and the master unit at a constant frame period (T) ,
In order to correctly transmit the sampling period (T1) of the audio data to the receiving side, the relationship between the sampling period and the frame period is 1: 1, 1 / p: 1, or p: 1 (p is a natural number). And an intercom apparatus comprising a synchronization marker (M) indicating a synchronization extraction position in the audio data.
前記画像データの画面周期(T2)を受信側に正しく伝送するために、前記画面周期と前記フレーム周期の関係を1:1、1/p:1又はp:1(pは自然数)の周期とするとともに、前記画像データ中に同期の取り出し位置を示す同期マーカー(M)を備えたことを特徴とするインターホン装置。 A slave unit (10a, 10b, 10c... 10m) having a camera (103) for capturing an image and a master unit (20a, 20b, 20c...) Having a display unit (202) for displaying the image. 20n), and an interphone device for transmitting a transmission frame (f) including interphone control data (d1) and image data (d3) between the slave unit and the master unit at a frame period (T) having a constant period.
In order to correctly transmit the screen cycle (T2) of the image data to the receiving side, the relationship between the screen cycle and the frame cycle is a cycle of 1: 1, 1 / p: 1 or p: 1 (p is a natural number). In addition, the interphone apparatus further comprises a synchronization marker (M) indicating a synchronization extraction position in the image data.
7. The intercom apparatus according to claim 4, 5 and 6, wherein the transmission frame including the synchronization marker stored in the temporary storage buffer in accordance with a synchronization signal of the image from a transmission side for one period or An intercom apparatus characterized by delaying and transmitting data for a plurality of periods, and by synchronizing the lip sync by reproducing the synchronization timing by extracting the synchronization marker on the receiving side.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005286857A JP4669366B2 (en) | 2005-09-30 | 2005-09-30 | Intercom device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005286857A JP4669366B2 (en) | 2005-09-30 | 2005-09-30 | Intercom device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2007097080A JP2007097080A (en) | 2007-04-12 |
| JP4669366B2 true JP4669366B2 (en) | 2011-04-13 |
Family
ID=37982174
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005286857A Expired - Fee Related JP4669366B2 (en) | 2005-09-30 | 2005-09-30 | Intercom device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4669366B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FR2915338A1 (en) * | 2007-04-17 | 2008-10-24 | Canon Kk | METHOD FOR TRANSMITTING AND RECEIVING DATA CONTENTS IN A COMMUNICATION NETWORK, COMPUTER PROGRAM PRODUCT, STORAGE MEDIUM AND DEVICES THEREOF |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0698196A (en) * | 1992-09-11 | 1994-04-08 | Hitachi Ltd | Television signal digital transmission system |
| JP2648095B2 (en) * | 1994-07-14 | 1997-08-27 | 日本電気エンジニアリング株式会社 | Image encoding and decoding device |
| FR2725093B1 (en) * | 1994-09-23 | 1996-12-27 | Cit Alcatel | TIME-TO-MULTI-POINT POINT-TO-MULTI-POINT TRANSMISSION NETWORK |
| JP2964899B2 (en) * | 1995-02-28 | 1999-10-18 | 日本電気株式会社 | Encoding and decoding frequency synchronization method |
| JP3894406B2 (en) * | 1999-10-22 | 2007-03-22 | パイオニア株式会社 | Multi-channel data transmission method and system |
| JP2001285235A (en) * | 2000-03-29 | 2001-10-12 | Aiphone Co Ltd | Synchronous data transmission system |
| JP2002101077A (en) * | 2000-09-21 | 2002-04-05 | Sony Corp | Jitter reduction method and jitter reduction device |
| JP2002185936A (en) * | 2000-12-11 | 2002-06-28 | Matsushita Electric Ind Co Ltd | Transmission equipment with delay time correction function |
-
2005
- 2005-09-30 JP JP2005286857A patent/JP4669366B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2007097080A (en) | 2007-04-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20080024659A1 (en) | Video signal processing apparatus and video signal processing method | |
| CN109168059B (en) | A lip synchronization method for playing audio and video separately on different devices | |
| JP2010157906A (en) | Video display device | |
| CN103119952A (en) | Methods for processing multimedia flows and corresponding devices | |
| JP2004282667A (en) | A transmitter and a receiver provided with a reproduction synchronization deviation correction function, and a transmission apparatus having the same | |
| JP2010171625A (en) | Imaging apparatus, sound recorder, and motion picture photographing system | |
| JP2007028261A (en) | Video/audio reproduction apparatus and video/audio reproducing method | |
| JP2009182754A (en) | Image processor | |
| JP4669366B2 (en) | Intercom device | |
| JP5340880B2 (en) | Output control device for remote conversation system, method thereof, and computer-executable program | |
| JP2009010903A (en) | Imaging apparatus and imaging method | |
| JP2002176643A (en) | Synchronization recovery system for video/audio in video/ audio decoding processing | |
| JP2005057430A (en) | Cellular phone terminal and synchronization control method thereof | |
| JP2013145983A (en) | Imaging system, imaging apparatus, imaging method, and imaging program | |
| JP2010219783A (en) | Communication terminal, communication method, and computer program | |
| JP2008228014A (en) | Video conference system, conference video processing method, program, and recording medium | |
| US7898574B2 (en) | Image processor and operating method thereof | |
| JP4059597B2 (en) | Video / audio transceiver | |
| CN114826474B (en) | Audio data processing system, method, device, electronic device and storage medium | |
| JP2004215143A (en) | Time code information conversion device and time code information conversion method | |
| JP6398694B2 (en) | Portable device and recording system having wireless LAN function | |
| JP2006250638A (en) | Camcorder with clock synchronization function | |
| KR100622225B1 (en) | Apparatus and method for synchronizing video and audio data in a mobile phone | |
| JPH06205412A (en) | Video conference system | |
| JP2003339023A (en) | Video playback device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080822 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20101210 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101221 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110114 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140121 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4669366 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |