Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP2833909B2 - Video encoding device - Google Patents
[go: Go Back, main page]

JP2833909B2 - Video encoding device - Google Patents

Video encoding device

Info

Publication number
JP2833909B2
JP2833909B2 JP4696192A JP4696192A JP2833909B2 JP 2833909 B2 JP2833909 B2 JP 2833909B2 JP 4696192 A JP4696192 A JP 4696192A JP 4696192 A JP4696192 A JP 4696192A JP 2833909 B2 JP2833909 B2 JP 2833909B2
Authority
JP
Japan
Prior art keywords
signal
circuit
image
digital image
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP4696192A
Other languages
Japanese (ja)
Other versions
JPH05252510A (en
Inventor
幸男 遠藤
美和 山川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
Nippon Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Electric Co Ltd filed Critical Nippon Electric Co Ltd
Priority to JP4696192A priority Critical patent/JP2833909B2/en
Publication of JPH05252510A publication Critical patent/JPH05252510A/en
Application granted granted Critical
Publication of JP2833909B2 publication Critical patent/JP2833909B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Studio Circuits (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は画像信号を高能率符号化
する動画像符号化装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a moving picture coding apparatus for coding a picture signal with high efficiency.

【0002】[0002]

【従来の技術】従来テレビ会議システムなどにおけるこ
の種の動画像符号化装置は、カメラから入力されるアナ
ログ送信画像を受信画像に合成し送信画像を受信用モニ
タで監視することができる機能(ピクチャインピクチャ
表示)を有しており、合成される送信画像のサイズは固
定であり、人間が外部制御によりONかOFFを決定し
ていた。
2. Description of the Related Art Conventionally, this type of moving picture coding apparatus in a video conference system or the like has a function (picture) of synthesizing an analog transmission image input from a camera with a reception image and monitoring the transmission image on a reception monitor. (In-picture display), the size of the transmission image to be synthesized is fixed, and humans have determined ON or OFF by external control.

【0003】[0003]

【発明が解決しようとする課題】上述した従来の方法で
は、ピクチャインピクチャ表示して受信画像をモニタし
ている場合、受信画像の動きの変化が激しくテレビモニ
タ上を左右上下と変化する画像に対して見る妨げになっ
てしまう欠点があった。また、この様な受信画像の時に
はピクチャインピクチャ表示をいちいち人間がOFFに
する必要があり、非常にわずらわしいという欠点があっ
た。
According to the above-mentioned conventional method, when a received image is monitored by displaying a picture-in-picture, the movement of the received image changes drastically, and an image which changes on the television monitor from left to right and up and down is displayed. On the other hand, there was a drawback that hindered viewing. In addition, in the case of such a received image, it is necessary for a human to turn off the picture-in-picture display each time, and there is a disadvantage that it is very troublesome.

【0004】したがって本発明は、合成される画像の動
きに対応したサイズの合成画像を、人の手を借りること
なく表示できる動画像符号化装置を提供するものであ
る。
Accordingly, an object of the present invention is to provide a moving picture coding apparatus capable of displaying a combined picture having a size corresponding to the movement of a picture to be combined without human intervention.

【0005】[0005]

【課題を解決するための手段】本発明の動画像符号化装
置は、アナログ画像信号を第1のディジタル画像信号に
変換するA/D変換器と、該A/D変換器の出力を高能
率符号化して伝送路へ出力する符号化回路とを有する送
信部と、前記伝送路から受信したデータを高能率復号化
して第2のディジタル画像信号を出力する復号化回路
と、画像合成制御信号により制御されて前記第2のディ
ジタル画像信号に前記第1のディジタル画像信号を合成
してディジタル合成信号を出力する画像合成回路と、前
記第2のディジタル画像信号の動き量を計数しその動き
量を出力する動き量検出回路と、前記動き量検出回路か
らの動き量に応じて前記画像合成回路の前記ディジタル
画像信号の合成がない場合の信号とN種(N≧2)の合
成領域サイズを制御する信号の計M(M=N+1)個の
信号を前記画像合成制御信号として出力する画像合成制
御回路と、前記画像合成回路の出力であるデジタル合成
信号をアナログ信号に変換するD/A変換器とを有する
受信部とから構成されることを特徴とするものである。
SUMMARY OF THE INVENTION A moving picture coding apparatus according to the present invention comprises an A / D converter for converting an analog image signal into a first digital image signal, and an output from the A / D converter having a high efficiency. A transmitting unit having an encoding circuit for encoding and outputting the data to the transmission path, a decoding circuit for efficiently decoding data received from the transmission path and outputting a second digital image signal, and an image synthesis control signal. An image synthesizing circuit that is controlled to synthesize the first digital image signal with the second digital image signal and outputs a digital synthesized signal; counts the amount of motion of the second digital image signal and determines the amount of motion; A motion amount detection circuit to be output, and a signal when the digital image signal is not synthesized by the image synthesis circuit and N kinds (N ≧ 2) of synthesis area sizes are controlled according to the motion amount from the motion amount detection circuit. Image synthesizing control circuit for outputting a total of M (M = N + 1) signals as the image synthesizing control signal, and a D / A converter for converting a digital synthesized signal output from the image synthesizing circuit into an analog signal And a receiving unit having:

【0006】また本発明の動画像符号化装置は、上記の
ような構成において、動き量検出回路が、ディジタル画
像信号を入力し画像フレームの1フレーム分遅延させる
フレームメモリと、前記フレームメモリ出力と前記ディ
ジタル画像信号とのフレーム差分をとって差分値を出力
する減算器と、前記減算器の出力する差分値を計数して
動き量を出力する動き量計数回路とから構成されること
を特徴とするものである。
In the moving picture coding apparatus according to the present invention, in the above-mentioned configuration, the motion amount detecting circuit receives the digital picture signal and delays the picture frame by one frame, and the frame memory output. A subtractor that calculates a frame difference from the digital image signal and outputs a difference value; and a motion amount counting circuit that outputs a motion amount by counting the difference value output by the subtractor. Is what you do.

【0007】さらに本発明の動画像符号化装置は、前述
のような構成に於いて、画像合成制御回路が、動き量を
入力し、前記M個の信号に対応するM段階のしきい値を
表す信号を出力する動き量判定回路と、該しきい値を表
す信号を一定時間保持して前記制御信号として出力する
保持回路とから構成されることを特徴とするものであ
る。
Further, in the moving picture coding apparatus according to the present invention, in the above-described configuration, the picture synthesis control circuit inputs a motion amount and sets a threshold value of M stages corresponding to the M signals. And a holding circuit that holds the signal representing the threshold value for a certain period of time and outputs the signal as the control signal.

【0008】[0008]

【実施例】図1は本発明の一実施例のブロック図であ
る。本実施例では説明の簡略化を図るためには合成領域
サイズMを4として説明する。但し実際に大きさを規定
できる領域の数はNは3つであり、あとの1つは領域サ
イズ0すなわち合成が無いことを意味するものである。
FIG. 1 is a block diagram showing an embodiment of the present invention. In this embodiment, in order to simplify the description, the description will be made assuming that the combined area size M is 4. However, the number of areas for which the size can be actually defined is N, and the other one means that the area size is 0, that is, there is no combination.

【0009】図1において入力端子1から入力されたア
ナログ画像信号aはA/D変換器2に入力される。A/
D変換器2から(第1の)ディジタル画像信号bが出力
され、符号化回路3と画像合成回路8へ入力される。符
号化回路3からは高能率符号化された符号化データcが
伝送路出力端子4へ送出される。伝送路入力端子5から
受信した符号化データdは復号化回路6へ入力される。
高能率復号化された(第2の)ディジタル画像信号e
は、動き量検出回路7と画像合成回路8へ入力される。
動き量検出回路7から出力される動き量fは、画像合成
制御回路9へ入力され、動き量fに応じた画像合成制御
信号gを画像合成回路8へ出力する。画像合成回路8
は、画像合成制御信号gにより制御されて第1のディジ
タル画像信号bを第2のディジタル画像信号eに合成し
ディジタル合成信号hをD/A変換器10へ出力する。
D/A変換器10からアナログ画像信号iが出力され、
出力端子11から送出される。
In FIG. 1, an analog image signal a input from an input terminal 1 is input to an A / D converter 2. A /
The (first) digital image signal b is output from the D converter 2 and input to the encoding circuit 3 and the image synthesizing circuit 8. The encoding circuit 3 sends the encoded data c which has been encoded with high efficiency to the transmission line output terminal 4. The encoded data d received from the transmission line input terminal 5 is input to the decoding circuit 6.
Efficiently decoded (second) digital image signal e
Is input to the motion amount detection circuit 7 and the image synthesis circuit 8.
The motion amount f output from the motion amount detection circuit 7 is input to the image synthesis control circuit 9, and outputs an image synthesis control signal g corresponding to the motion amount f to the image synthesis circuit 8. Image composition circuit 8
Is controlled by an image synthesis control signal g to synthesize the first digital image signal b with the second digital image signal e and output a digital synthesized signal h to the D / A converter 10.
An analog image signal i is output from the D / A converter 10,
It is sent from the output terminal 11.

【0010】動き量検出回路7において、ディジタル画
像信号eはフレームメモリ71と減算器72へ入力され
る。フレームメモリ71は、ディジタル画像信号eを1
フレーム遅延させ減算器72へ出力する。減算器72
は、ディジタル画像信号eとフレームメモリ71からの
1フレーム遅延した画像信号とを引き算し、差分信号j
を動き量計数回路73へ出力する。動き量計数回路73
では、差分信号jを一定周期毎に計数しその値を動き量
fとして出力する。
In the motion detection circuit 7, the digital image signal e is input to a frame memory 71 and a subtractor 72. The frame memory 71 stores the digital image signal e at 1
The frame is delayed and output to the subtractor 72. Subtractor 72
Subtracts the digital image signal e from the image signal delayed by one frame from the frame memory 71 to obtain a difference signal j.
Is output to the motion amount counting circuit 73. Motion amount counting circuit 73
Then, the difference signal j is counted at regular intervals, and the value is output as a movement amount f.

【0011】画像合成制御回路9において、動き量fは
動き量判定回路91に入力される。動き量判定回路91
は、動き量fの平均値を1フレームのデータに対して計
算し、さらにこの平均値が本実施例で設定した4種のし
きい値の何れかであるかを判別し、判別結果を4種の制
御信号として保持回路92へ出力する。保持回路92
は、画像の合成領域サイズや合成ON・OFFを一定時
間継続するよう4種の制御信号を保持して、画像合成制
御信号gを画像合成回路8に出力する。
In the image synthesizing control circuit 9, the motion amount f is input to a motion amount determination circuit 91. Motion amount determination circuit 91
Calculates the average value of the motion amount f for one frame of data, determines whether the average value is one of the four threshold values set in the present embodiment, and determines the determination result as 4 It outputs to the holding circuit 92 as a kind of control signal. Holding circuit 92
Holds an image synthesis control signal g to the image synthesis circuit 8 while holding four types of control signals so that the image synthesis area size and the synthesis ON / OFF are continued for a certain period of time.

【0012】図2は相手から送られてくる受信画像の動
き量に対する4種のしきい値(本実施例ではA〜Dとす
る)に対応して、画像合成回路8へ出力される画像合成
制御信号g(g1〜g4)の動作波形図を示す図であ
り、図3はテレビモニタ上に映し出される画像の合成領
域サイズの様子を示す図である以下図2および図3を併
せ参照して説明すると、 (a) 動き量がしきい値Aより大きくしきい値Bより小さ
い場合は、画像合成回路8でディジタル画像信号bをA
サイズで合成し、図3(a) に示す合成画面としてテレビ
モニタ上に映し出される。 (b) 動き量がしきい値Bより大きく、しきい値Cより小
さい場合は、画像合成回路8でディジタル送信画像信号
bをBサイズで合成し、図3(b) に示す合成画面として
テレビモニタ上に映し出される。 (c) 動き量がしきい値Cより大きく、しきい値Dより小
さい場合は、画像合成回路8でディジタル画像信号bを
Cサイズで合成、図3(c) に示す合成画面としてテレビ
モニタに映し出される。 (d) 動き量がしきい値Dより大きい場合は、画像合成制
御信号gが合成OFFとなり、画像合成回路8ではディ
ジタル画像信号bを合成せず、図3(d) のように受信画
像がそのままテレビモニタ上に映し出される。
FIG. 2 shows an image composition output to the image composition circuit 8 corresponding to four types of thresholds (A to D in this embodiment) with respect to the motion amount of the received image sent from the other party. FIG. 3 is a diagram showing an operation waveform diagram of a control signal g (g1 to g4), and FIG. 3 is a diagram showing a state of a combined area size of an image projected on a television monitor. To explain, (a) when the motion amount is larger than the threshold value A and smaller than the threshold value B, the digital image signal b is
The images are synthesized by size and projected on a TV monitor as a synthesized screen shown in FIG. (b) When the amount of motion is larger than the threshold value B and smaller than the threshold value C, the image synthesizing circuit 8 synthesizes the digital transmission image signal b in B size, and sets the synthesized image shown in FIG. It is projected on the monitor. (c) When the amount of motion is larger than the threshold value C and smaller than the threshold value D, the digital image signal b is synthesized in C size by the image synthesizing circuit 8, and the synthesized image shown in FIG. It is projected. (d) When the motion amount is larger than the threshold value D, the image synthesis control signal g is turned off and the image synthesis circuit 8 does not synthesize the digital image signal b, and the received image is not synthesized as shown in FIG. It is projected on the TV monitor as it is.

【0013】以上はM(=N+1)が4の場合について
説明したが、これに限られるものでないことは言うまで
もない。また、Nは2又はそれ以上に限られる。
Although the case where M (= N + 1) is 4 has been described above, it is needless to say that the present invention is not limited to this. Also, N is limited to two or more.

【0014】[0014]

【発明の効果】以上説明したように本発明は、相手から
送られる受信画像の動きに対して送信画像の合成領域サ
イズや合成ON・OFFを自動的に切り替えるため、受
信画像の動きの変化が激しくテレビモニタ上を上下左右
と変化する画像に対しても見る妨げにならないという効
果がある。
As described above, according to the present invention, since the size of the combined area of the transmission image and the combination ON / OFF are automatically switched with respect to the movement of the reception image sent from the other party, the change of the movement of the reception image is small. This has the effect of not obstructing viewing of an image that changes violently on the television monitor from top to bottom and left and right.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の動画像符号化装置の構成を示すブロッ
ク図である。
FIG. 1 is a block diagram illustrating a configuration of a moving image encoding device according to the present invention.

【図2】ディジタル画像信号の動き量に対応した画像合
成制御信号と画面合成サイズの関係を示す図である。
FIG. 2 is a diagram illustrating a relationship between an image synthesis control signal corresponding to a motion amount of a digital image signal and a screen synthesis size.

【図3】合成画面の各サイズについての例を示す図であ
る。
FIG. 3 is a diagram illustrating an example of each size of a composite screen.

【符号の説明】[Explanation of symbols]

1 入力端子 2 A/D変換器 3 符号化回路 4 伝送路出力端子 5 伝送路入力端子 6 復号化回路 7 動き量検出回路 8 画像合成回路 9 画像合成制御回路 10 D/A変換器 11 出力端子 71 フレームメモリ 72 減算器 73 動き量計数回路 91 動き量判定回路 92 保持回路 a アナログ画像信号 b ディジタル画像信号(第1の) c 符号化データ d 符号化データ e ディジタル画像信号(第2の) f 動き量 g 画像合成制御信号 h ディジタル合成信号 i アナログ画像信号 j 差分信号 REFERENCE SIGNS LIST 1 input terminal 2 A / D converter 3 encoding circuit 4 transmission line output terminal 5 transmission line input terminal 6 decoding circuit 7 motion amount detection circuit 8 image synthesis circuit 9 image synthesis control circuit 10 D / A converter 11 output terminal 71 frame memory 72 subtracter 73 motion amount counting circuit 91 motion amount determination circuit 92 holding circuit a analog image signal b digital image signal (first) c encoded data d encoded data e digital image signal (second) f Motion amount g Image synthesis control signal h Digital synthesized signal i Analog image signal j Difference signal

───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.6,DB名) H04N 7/15 H04N 5/265 H04N 7/24 - 7/68 G09G 5/14──────────────────────────────────────────────────続 き Continued on the front page (58) Field surveyed (Int.Cl. 6 , DB name) H04N 7/15 H04N 5/265 H04N 7/24-7/68 G09G 5/14

Claims (3)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 アナログ画像信号を第1のディジタル画
像信号に変換するA/D変換器と、該A/D変換器の出
力を高能率符号化して伝送路へ出力する符号化回路とを
有する送信部と、前記伝送路から受信したデータを高能
率復号化して第2のディジタル画像信号を出力する復号
化回路と、画像合成制御信号により制御されて前記第2
のディジタル画像信号に前記第1のディジタル画像信号
を合成してディジタル合成信号を出力する画像合成回路
と、前記第2のディジタル画像信号の動き量を計数しそ
の動き量を出力する動き量検出回路と、前記動き量検出
回路からの動き量に応じて前記画像合成回路の前記2つ
のディジタル画像信号の合成がない場合を表す信号とN
種(N≧2)の合成領域サイズを制御する信号を前記画
像合成制御信号として出力する画像合成制御回路と、前
記画像合成回路の出力であるディジタル合成信号をアナ
ログ信号に変換するD/A変換器とを有する受信部とか
ら構成されることを特徴とする動画像符号化装置。
An A / D converter for converting an analog image signal into a first digital image signal, and an encoding circuit for highly efficiently encoding an output of the A / D converter and outputting the encoded signal to a transmission line. A transmitting unit, a decoding circuit for efficiently decoding data received from the transmission path and outputting a second digital image signal, and a second digital image signal controlled by an image synthesis control signal;
An image synthesizing circuit for synthesizing the first digital image signal with the digital image signal and outputting a digital synthesized signal, and a motion amount detecting circuit for counting the amount of motion of the second digital image signal and outputting the amount of motion And a signal indicating that the image synthesizing circuit does not synthesize the two digital image signals according to the amount of motion from the motion amount detecting circuit;
An image synthesizing control circuit for outputting a signal for controlling a kind (N ≧ 2) of synthesis area sizes as the image synthesizing control signal, and a D / A conversion for converting a digital synthesized signal output from the image synthesizing circuit into an analog signal A moving image encoding apparatus comprising:
【請求項2】 前記動き量検出回路が、前記第2のディ
ジタル画像信号を入力し画像フレームの1フレーム分遅
延させるフレームメモリと、該フレームメモリ出力と前
記第2のディジタル画像信号のフレームの差分をとり、
差分値を出力する減算器と、前記減算器の出力する差分
値を計数し動き量を出力する動き量計数回路とから構成
されることを特徴とする、請求項1の動画像符号化装
置。
2. A frame memory, wherein the motion amount detection circuit inputs the second digital image signal and delays it by one frame of an image frame, and a difference between an output of the frame memory and a frame of the second digital image signal. Take
2. The moving picture coding apparatus according to claim 1, further comprising a subtractor that outputs a difference value, and a motion amount counting circuit that counts the difference value output by the subtractor and outputs a motion amount.
【請求項3】 前記画像合成制御回路が、前記2つのデ
ジタル画像信号の合成が無い場合を1つのしきい値の段
階として、動き量を入力しあらかじめ定めた(N+1)
段階のしきい値に対する動き量に応じた信号を出力する
動き量判定回路と、該信号を一定時間保持して前記制御
信号として出力する保持回路とから構成されることを特
徴とする動画像符号化装置。
3. The image synthesizing control circuit receives a motion amount as a stage of one threshold when there is no synthesizing of the two digital image signals, and sets a predetermined (N + 1)
A moving amount determining circuit for outputting a signal corresponding to a moving amount with respect to a threshold value of a step, and a holding circuit for holding the signal for a predetermined time and outputting the signal as the control signal; Device.
JP4696192A 1992-03-04 1992-03-04 Video encoding device Expired - Fee Related JP2833909B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP4696192A JP2833909B2 (en) 1992-03-04 1992-03-04 Video encoding device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP4696192A JP2833909B2 (en) 1992-03-04 1992-03-04 Video encoding device

Publications (2)

Publication Number Publication Date
JPH05252510A JPH05252510A (en) 1993-09-28
JP2833909B2 true JP2833909B2 (en) 1998-12-09

Family

ID=12761880

Family Applications (1)

Application Number Title Priority Date Filing Date
JP4696192A Expired - Fee Related JP2833909B2 (en) 1992-03-04 1992-03-04 Video encoding device

Country Status (1)

Country Link
JP (1) JP2833909B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5114235B2 (en) 2008-02-07 2013-01-09 富士フイルム株式会社 Image display device, image display method, and imaging device

Also Published As

Publication number Publication date
JPH05252510A (en) 1993-09-28

Similar Documents

Publication Publication Date Title
EP0622000B1 (en) Method and apparatus for video camera image film simulation
JP4509146B2 (en) Signal processing device
US5508747A (en) Frame format conversion device for converting image signal frame through frame interpolation
CN1083664C (en) Video signal aspect ratio conversion apparatus
MXPA04011536A (en) Key transport tamper protection.
JP2001507553A (en) Apparatus for receiving, displaying and simultaneously recording television images via a buffer
US20120133792A1 (en) Video signal capturing apparatus, signal processing and control apparatus, and video signal capturing, video signal processing, and transferring system and method
US7274389B1 (en) Camera apparatus and image processing system with variable resolution
US20040017510A1 (en) Video signal processing apparatus
JP2833909B2 (en) Video encoding device
JP2573177B2 (en) Graphic display device in electronic conference system
KR100311009B1 (en) Apparatus and method for converting video format using common format
JP2955984B2 (en) Interpolator
JPH0767098A (en) Video surveillance
JP2009038627A (en) Imaging apparatus
JP3312456B2 (en) Video signal processing device
EP1848203B2 (en) Method and system for video image aspect ratio conversion
KR20060132877A (en) Method and apparatus for deinterlacing video using motion compensated temporal interpolation
JP2846427B2 (en) PAL signal / CIF signal conversion circuit
JPH0583690A (en) Image compression method
JP3081060B2 (en) Multi-screen display high-definition television receiver
JP3514785B2 (en) Image communication terminal
JPH11205692A (en) Imaging device
JP2940264B2 (en) Television receiver
JPS6065672A (en) Image processing device

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 19980909

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071002

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081002

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081002

Year of fee payment: 10

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081002

Year of fee payment: 10

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091002

Year of fee payment: 11

LAPS Cancellation because of no payment of annual fees