JP3583530B2 - Stereoscopic measurement device - Google Patents
Stereoscopic measurement device Download PDFInfo
- Publication number
- JP3583530B2 JP3583530B2 JP31686395A JP31686395A JP3583530B2 JP 3583530 B2 JP3583530 B2 JP 3583530B2 JP 31686395 A JP31686395 A JP 31686395A JP 31686395 A JP31686395 A JP 31686395A JP 3583530 B2 JP3583530 B2 JP 3583530B2
- Authority
- JP
- Japan
- Prior art keywords
- point light
- stereoscopic
- stereoscopic image
- image
- measuring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Eye Examination Apparatus (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、立体表示における立体感を測定する装置に係わり、特に立体画像観視時に表示されている物体の空間上の位置を測定する立体感測定装置に関する。
【0002】
[発明の概要]
本発明は、立体像表示装置における立体感を測定する装置に関するもので、空間上の奥行き位置を示す光源など指標となるものを立体像表示装置近傍に多数配置して、被験者が定位位置(被験者が知覚した表示物体の奥行き方向の位置を『定位位置』と称する)として知覚する位置の指標を点灯させることにより1つの指標を実質的に動かすことに相当させることにより、立体画像観視時に直接、表示画像の空間上の位置の測定ができるようにしたものである。
【0003】
【従来の技術】
立体像表示装置に表示される立体像は、これを観視する者の心理的要素等に左右されるものであり、観視者が立体像をどのように見ているかを知るのは重要なことである。
【0004】
立体像表示装置に立体像を表示するためには、左右眼で視差の異なる多数の画像が必要である。立体画像を作成するに当たっては、心理的要素を加味した複数の画像を作成しなければならず、このためには、観視者の立体感(奥行き感)を測定して客観的に評価する必要がある。
【0005】
従来、立体感を測定する手法としては、予め視差量がわかっている電気的画像と比較しその画像と一致する定位位置を立体画像の空間上の位置として測定する方法が知られている(例えば、岡田勝行、村山陽司、本田捷夫、「VRによる視差画像からの立体画像」、3D Image Conference ’95、P202−207)。
【0006】
この手法は、被写体の像に網目状のパターン(予め視差量がわかっている電気的画像)を重ねて表示し、その交点上での奥行き方向の位置を測定する。この場合、測定者は眼鏡をかけて立体視を行いながら、マウスにより網目状の1点を選択し、左右のマウスボタンをクリックすることでその点の奥行き方向の位置を被写体の奥行き方向に位置に合わせる。このようにして網目上の全ての点を測定すれば、被写体の形状を網目に写し取ることができ、立体形状の測定が可能となる。
【0007】
一方、立体感を測定する他の手法としては、人間の左右眼の輻輳角を測定し、その大きさから観察して空間上の位置を求める両眼眼球運動測定装置を利用するものが知られている。
【0008】
この両眼眼球運動測定装置を利用する手法は、被験者に例えばゴーグル式の光学検出部を装着して立体画像を観視させ、この光学検出部により得られた被験者の両眼の動きから輻輳角を測定し、この輻輳角の大きさによって立体像の空間上の位置を求めるものである。
【0009】
【発明が解決しようとする課題】
しかしながら、予め視差量がわかっている電気的画像と比較しその画像と一致する定位位置を立体画像の空間上の位置として測定する方法では、予め視差量がわかっている電気的画像(網目状のパターン)を作成しなければならず、構成が複雑になる。
【0010】
また、視差や輻輳角から立体感を測る方法は、立体感を視差、輻輳角を用いて間接的に測定しているので、心理的影響が考慮されておらず、誤差が多く正確な立体感を測定するものではなかった。
【0011】
また、人間の左右眼の輻輳角を直に測定する方法では前記ゴーグル等の視線を検出するための装置を被験者に取り付ける必要があり、装置構成が大掛かりになるばかりか、実際の定位位置と輻輳角との関係が必ずしも明確ではなく、測定誤差が発生する、といった課題があった。
【0012】
本発明は上記の事情に鑑みてなされたものであり、その目的は、簡単な装置構成で正確な立体感を測定できる立体感測定装置を提供することにある。
【0013】
【課題を解決するための手段】
上記の目的を達成するために本発明は、左眼画像と右眼画像とを合成して立体画像を表示する立体像表示装置における立体感を測定する立体感測定装置において、前記立体像表示装置の前面近傍に配置されたハーフミラーと、複数の点光源を備えて前記ハーフミラーの手前に整列配置され、前記立体像表示装置の表示画面より前に見える物体の空間上の位置を点光源の位置に基づいて測定するための前方用指標部と、複数の点光源を備えて前記ハーフミラーの手前に整列配置され、前記表示画面より奥に見える物体の空間上の位置を前記ハーフミラーの裏面側に形成される点光源の虚像位置に基づいて測定するための後方用指標部とを具備することを特徴としている。
【0018】
【発明の実施の形態】
図1は本発明に係る立体感測定装置の参考例を示すブロック図である。
同図に示されるように、この立体感測定装置は、操作部1と、制御部2と、駆動部3と、指標部4とを備えている。制御部2と駆動部3とから請求項に記載された点灯制御部が構成されている。
【0019】
操作部1は、ポテンショメータ5と、このポテンショメータ5の出力電圧レベルをディジタル化して前記制御部2に出力するAD変換器6とを備えている。前記ポテンショメータ5は、安定化電源51と可変抵抗器52とから成り、安定化電源51で発生した電圧を可変抵抗器52により分圧して操作電圧を生成する。
【0020】
制御部2は、操作部1から供給されるディジタル電圧信号に基づいて指標部4を構成する後述する点光源のいずれを点灯するかを制御する制御信号を生成して駆動部3に供給するものである。
【0021】
駆動部3は、制御部2からの制御信号を入力し、この制御信号に応じて後述する点光源を点灯させる機能を有する。
【0022】
指標部4は、光源7を備え、光源7は複数の点光源7−1,7−2,……,7−nで構成されている。なお、この指標部4の各点光源7−1,7−2,……,7−nとしては、視認性が良いこと、応答速度が速いこと、及び経済性の点からして発光ダイオード(LED)が好適である
図2は、操作部1、制御部2、駆動部3、及び指標部4の配置関係を示している。操作部1、制御部2、及び駆動部3は、筐体8内に収納されている。この筐体8には、スライドスイッチ9が設けられており、被験者がこのスライドスイッチ9を操作することによって前記ポテンショメータ5の可変抵抗器52からスライドスイッチ9の操作量相当の電圧が生成されるようになっている。
【0023】
また、図2に示されるように、指標部4は立体像表示装置10の近傍に配置され、点光源7−1,7−2,……,7−nは被験者の視線方向と略平行に配列されている。
【0024】
次にこの参考例の作用について説明する。
【0025】
被験者は、図2に示されるように、立体像表示装置10の立体表示画面11に正対した状態で、立体画像12を正視する。次に画面を見ながらスライドスイッチ9を操作する。指標部4の点光源7は、このスライドスイッチ9の操作に連動して点灯位置を変えるので、被験者は、観視中の立体画像の空間上の位置を点光源の点灯位置により報知する。これにより、何番目の点光源が点灯したかが分かるので、立体表示画面11からその点灯位置までの距離Lを測定することにより、立体画像12の空間上の位置、すなわち定位位置が分かるのである。
【0026】
このように、この参考例においては、被験者が視認した立体画像の空間上の位置を該当する点光源を点灯させることにより報知するようにしたので、正確かつ容易に立体像の空間上の位置を測定することができる。
【0027】
《他の参考例》
なお、他の参考例として、制御部2にペンレコーダを接続し、制御部2から出力される制御信号を取り込んで被験者の奥行き調整の状況を示す軌跡を描かせるようにしても良い。このように構成することにより、ペンレコーダに記録された軌跡波形から奥行き調整時間など人間の立体視の基本特性についての測定が可能となる。
【0028】
《実施例》
本発明の実施例では、図3の平面図に示されるように、立体像表示装置10の手前にハーフミラー13を配置するとともに、それぞれが複数の点光源を整列配置して成る前方用指標部4Fと後方用指標部4Rとを配置し、立体表示画面の前後の奥行き方向の測定を可能とするように構成したものである。
【0029】
すなわち、立体像表示装置10の手前に配置されたハーフミラー13を使用した構成では、前方用指標部4Fによって、表示画面より前に見える物体の空間上の位置を測定すると共に、後方用指標部4Rによって、ハーフミラー13を介して表示画面より奥に見える物体の空間上の位置を測定するようにしたものである。図3の後方用指標部4Rを前方に平行移動させると、それに連れてハーフミラー13を介して見える後方用指標部4Rの虚像も移動し、この虚像が、立体像表示装置10に重なって見えるように位置させて、後方用指標部4Rの対応する光源の位置を認識することにより正確な定位位置の測定を行うことができる。
【0030】
図4は本発明に係る立体感測定装置のさらに他の参考例を示す構成説明図である。
【0031】
この参考例は、操作部14と駆動部15と指標部16とを備えている。
【0032】
操作部14は、安定化電源51と可変抵抗器52で構成されたポテンショメータで構成され、可変抵抗器の操作量に相当するアナログ電圧を生成して前記駆動部15に供給する。
【0033】
駆動部15は、操作部14から供給されたアナログ電圧を入力して後述する指標部16の点光源の駆動信号を生成する。この駆動部15により請求項記載の点灯制御部が構成されている。
【0034】
指標部16は、図5に示されるように、1つの点光源17と、この点光源を取り付けるモータレール18とを備えている。このモータレール18内には、溝19が被験者の視線方向に略平行に形成されており、この溝19内を点光源17が図示しないモータによって移動可能に配置されている。なお、他の構成は図1に示した実施の形態と同一である。
【0035】
上記構成において、被験者は、立体像表示装置10の立体表示画面11に正対した状態で、立体画像12を正視する。次に画面を見ながらスライドスイッチ9を操作する。点光源17は、このスライドスイッチ9の操作に連動してモータレール18内を移動するので、被験者は、観視中の立体画像の空間上の位置Lを点光源17のスライド位置によって報知する。これにより、点光源がどの位置で停止したが分かるので、その位置に応じて立体画像の空間上の位置が分かるのである。
【0036】
【発明の効果】
以上説明したように本発明によれば、簡単な装置構成で正確な立体感を測定することが可能となる。また、表示画面より前に見える物体の空間上の位置を測定できるばかりでなく、立体像表示装置があるために指標部を物理的に設置できない表示画面より奥に見える物体の空間上の位置をも測定することができ、立体感の客観的評価の精度がより一層向上するという効果を奏する。
【図面の簡単な説明】
【図1】本発明に係る立体感測定装置の参考例を示すブロック図である。
【図2】本発明に係る立体感測定装置の参考例における指標部の構成を示す説明
図である。
【図3】本発明に係る立体感測定装置の実施例を示す構成説明図である。
【図4】本発明に係る立体感測定装置のさらに他の参考例を示す構成説明図である。
【図5】本発明に係る立体感測定装置のさらに他の参考例における指標部の構成を示す説
明図である。
【符号の説明】
1,14 操作部
2 制御部
3,15 駆動部
4,16 指標部
4F 前方指標部
4R 後方指標部
5 ポテンショメータ
51 安定化電源
52 可変抵抗器
6 AD変換器
7,17 光源
7−1〜7−n 点光源
8 筐体
9 スライドスイッチ
10 立体像表示装置
11 立体表示画面
12 立体画像
13 ハーフミラー
18 モータレール
19 溝[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a device for measuring a three-dimensional effect in a three-dimensional display, and more particularly to a three-dimensional effect measuring device for measuring a position in space of an object displayed during stereoscopic image viewing.
[0002]
[Summary of the Invention]
The present invention relates to a device for measuring a three-dimensional effect in a three-dimensional image display device, in which a number of indices such as a light source indicating a depth position in space are arranged in the vicinity of the three-dimensional image display device, and a subject is positioned at a stereotactic position (subject). The perceived position of the display object in the depth direction is referred to as a “localization position”). By turning on the index at the position perceived as “localization position”, the one index is substantially moved, and this is directly equivalent to the stereoscopic image viewing. , The position of a display image in space can be measured.
[0003]
[Prior art]
The three-dimensional image displayed on the three-dimensional image display device depends on the psychological factors of the viewer, and it is important to know how the viewer views the three-dimensional image. That is.
[0004]
In order to display a three-dimensional image on a three-dimensional image display device, a large number of images having different parallax between the left and right eyes are required. When creating a three-dimensional image, it is necessary to create a plurality of images that take into account psychological factors. For this purpose, it is necessary to measure the three-dimensional effect (depth effect) of the viewer and evaluate it objectively. There is.
[0005]
Conventionally, as a technique for measuring a stereoscopic effect, a method is known in which a stereoscopic image is compared with an electric image whose parallax amount is known in advance, and a localization position that matches the image is measured as a spatial position of the stereoscopic image (for example, , Okada Katsuyuki, Murayama Yoji, Honda Katsuo, "3D Image from VR Parallax Image", 3D Image Conference '95, P202-207).
[0006]
According to this method, a mesh-like pattern (an electric image whose parallax amount is known in advance) is superimposed on an image of a subject and displayed, and the position in the depth direction at the intersection is measured. In this case, the measurer selects one mesh-shaped point with the mouse while performing stereoscopic vision with glasses, and clicks the left and right mouse buttons to position the point in the depth direction of the subject in the depth direction of the subject. Adjust to If all points on the mesh are measured in this way, the shape of the subject can be copied to the mesh, and a three-dimensional shape can be measured.
[0007]
On the other hand, another method for measuring the three-dimensional effect is known that uses a binocular eye movement measurement device that measures the angle of convergence of the left and right eyes of a human and observes the size of the angle to determine a position in space. ing.
[0008]
The method of using the binocular eye movement measurement apparatus is to attach a goggle type optical detection unit to a subject to view a stereoscopic image, and obtain a convergence angle based on the movement of the subject's binocular obtained by the optical detection unit. Is measured, and the spatial position of the stereoscopic image is obtained from the magnitude of the convergence angle.
[0009]
[Problems to be solved by the invention]
However, in the method of comparing with an electric image whose parallax amount is known in advance and measuring a localization position matching the image as a position in the space of the stereoscopic image, an electric image (a mesh-like image) whose parallax amount is known in advance is used. Pattern), which complicates the configuration.
[0010]
In the method of measuring the three-dimensional effect from the parallax and the angle of convergence, the three-dimensional effect is indirectly measured using the parallax and the angle of convergence. Was not measured.
[0011]
In the method of directly measuring the convergence angles of the left and right eyes of the human, it is necessary to attach a device for detecting the line of sight, such as the goggles, to the subject, which requires not only a large device configuration but also an actual localization position and convergence. There is a problem that the relationship with the angle is not always clear and a measurement error occurs.
[0012]
The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a three-dimensional effect measurement device capable of measuring an accurate three-dimensional effect with a simple device configuration.
[0013]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides a stereoscopic image measuring apparatus for measuring a stereoscopic effect in a stereoscopic image display device for displaying a stereoscopic image by combining a left eye image and a right eye image, wherein the stereoscopic image display device A half mirror arranged near the front of the device, and a plurality of point light sources are arranged and arranged in front of the half mirror, and the position in the space of the object seen in front of the display screen of the stereoscopic image display device is set as the point light source. A front indicator for measuring based on a position, and a plurality of point light sources, arranged in front of the half mirror, and the position in space of an object that is visible behind the display screen on the back surface of the half mirror. And a rear indicator for measuring based on the virtual image position of the point light source formed on the side.
[0018]
BEST MODE FOR CARRYING OUT THE INVENTION
FIG. 1 is a block diagram showing a reference example of a three-dimensional effect measuring device according to the present invention.
As shown in the figure, the three-dimensional effect measurement device includes an operation unit 1, a
[0019]
The operation unit 1 includes a
[0020]
The
[0021]
The
[0022]
The index unit 4 includes a
[0023]
As shown in FIG. 2, the index unit 4 is disposed near the stereoscopic image display device 10, and the point light sources 7-1 , 7 -2 ,..., 7 -n are substantially parallel to the subject's line of sight. Are arranged.
[0024]
Next, the operation of this reference example will be described.
[0025]
As shown in FIG. 2, the subject looks straight at the stereoscopic image 12 while facing the stereoscopic display screen 11 of the stereoscopic image display device 10. Next, the slide switch 9 is operated while looking at the screen. Since the point
[0026]
As described above, in this reference example , the position in the space of the stereoscopic image visually recognized by the subject is notified by lighting the corresponding point light source, so that the position in the space of the stereoscopic image can be accurately and easily determined. Can be measured.
[0027]
《 Other reference examples 》
As another reference example , a pen recorder may be connected to the
[0028]
"Example"
In the embodiment of the present invention , as shown in the plan view of FIG. 3 , a half mirror 13 is arranged in front of the three-dimensional image display device 10, and a front indicator section is formed by arranging a plurality of point light sources. 4F and a rear indicator 4R are arranged to enable measurement in the depth direction before and after the stereoscopic display screen.
[0029]
That is, in the configuration using the half mirror 13 disposed in front of the three-dimensional image display device 10, the front indicator 4F measures the spatial position of the object seen before the display screen, and the rear indicator. 4R measures the position in space of an object that is visible behind the display screen via the half mirror 13. When the rear index portion 4R in FIG. 3 is moved forward in parallel, the virtual image of the rear index portion 4R seen through the half mirror 13 moves accordingly, and this virtual image appears to overlap the stereoscopic image display device 10. In such a manner, by accurately recognizing the position of the corresponding light source of the rear indicator 4R, it is possible to accurately measure the localization position.
[0030]
FIG. 4 is a structural explanatory view showing still another reference example of the three-dimensional effect measuring apparatus according to the present invention.
[0031]
This reference example includes an
[0032]
The
[0033]
The
[0034]
As shown in FIG. 5, the
[0035]
In the above configuration, the subject views the stereoscopic image 12 directly while facing the stereoscopic display screen 11 of the stereoscopic image display device 10. Next, the slide switch 9 is operated while looking at the screen. Since the point light source 17 moves in the
[0036]
【The invention's effect】
As described above , according to the present invention, it is possible to measure an accurate three-dimensional effect with a simple device configuration. In addition to being able to measure the position in space of an object that can be seen before the display screen, the position in space of an object that can be seen deeper than the display screen where the index unit cannot be physically installed due to the presence of a stereoscopic image display device can be measured. And the accuracy of the objective evaluation of the three-dimensional effect is further improved.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a reference example of a three-dimensional effect measurement apparatus according to the present invention.
FIG. 2 is an explanatory diagram showing a configuration of an index unit in a reference example of the three-dimensional effect measurement device according to the present invention.
FIG. 3 is a configuration explanatory view showing an embodiment of a three-dimensional effect measuring apparatus according to the present invention.
FIG. 4 is a configuration explanatory view showing still another reference example of the three-dimensional effect measuring device according to the present invention.
FIG. 5 is an explanatory view showing a configuration of an indicator section in still another reference example of the three-dimensional effect measurement device according to the present invention.
[Explanation of symbols]
1,14
Claims (1)
前記立体像表示装置の前面近傍に配置されたハーフミラーと、
複数の点光源を備えて前記ハーフミラーの手前に整列配置され、前記立体像表示装置の表示画面より前に見える物体の空間上の位置を点光源の位置に基づいて測定するための前方用指標部と、
複数の点光源を備えて前記ハーフミラーの手前に整列配置され、前記表示画面より奥に見える物体の空間上の位置を前記ハーフミラーの裏面側に形成される点光源の虚像位置に基づいて測定するための後方用指標部と、
を具備することを特徴とする立体感測定装置。 In a stereoscopic effect measuring device for measuring a stereoscopic effect in a stereoscopic image display device that displays a stereoscopic image by synthesizing a left eye image and a right eye image,
A half mirror arranged near the front surface of the stereoscopic image display device,
A forward index for measuring a position in space of an object that is arranged in front of the half mirror with a plurality of point light sources and is visible before a display screen of the stereoscopic image display device based on the position of the point light source. Department and
A plurality of point light sources are arranged and arranged in front of the half mirror, and a position in the space of an object that is visible behind the display screen is measured based on a virtual image position of the point light source formed on the back side of the half mirror. A rear indicator section for
A three-dimensional effect measurement device comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP31686395A JP3583530B2 (en) | 1995-12-05 | 1995-12-05 | Stereoscopic measurement device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP31686395A JP3583530B2 (en) | 1995-12-05 | 1995-12-05 | Stereoscopic measurement device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH09154817A JPH09154817A (en) | 1997-06-17 |
| JP3583530B2 true JP3583530B2 (en) | 2004-11-04 |
Family
ID=18081758
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP31686395A Expired - Fee Related JP3583530B2 (en) | 1995-12-05 | 1995-12-05 | Stereoscopic measurement device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3583530B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5869770B2 (en) * | 2010-03-16 | 2016-02-24 | 国立大学法人 東京大学 | Visual cognitive inspection system, training system and support system |
| JP5926546B2 (en) * | 2011-12-02 | 2016-05-25 | キヤノン株式会社 | Image processing apparatus and method |
-
1995
- 1995-12-05 JP JP31686395A patent/JP3583530B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH09154817A (en) | 1997-06-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4871270B2 (en) | System and method for operating in a virtual three-dimensional space and system for selecting operations via a visualization system | |
| US20200201038A1 (en) | System with multiple displays and methods of use | |
| US6345893B2 (en) | Ergonomic systems and methods for operating computers | |
| CA2991659C (en) | System and method for scanning anatomical structures and for displaying a scanning result | |
| JP3651204B2 (en) | Stereoscopic image display device, stereoscopic image display method, and recording medium | |
| US6389153B1 (en) | Distance information generator and display device using generated distance information | |
| CN106199964B (en) | Binocular AR headset capable of automatically adjusting depth of field and method for adjusting depth of field | |
| IL292427B1 (en) | Imaging modification, display and visualization using augmented and virtual reality eyewear | |
| JP3900446B2 (en) | Image display method and apparatus | |
| JP2001522098A5 (en) | ||
| US12064317B2 (en) | Dental observation device and method for displaying dental image | |
| JP2016524478A (en) | Method and apparatus for stereoscopic display of image data | |
| CN111417885B (en) | System and method for determining pose of augmented reality glasses | |
| JP2014106532A (en) | Three-dimensional image display device | |
| JP6357513B2 (en) | Visualization device | |
| US10650713B2 (en) | Head mounted display | |
| JP3583530B2 (en) | Stereoscopic measurement device | |
| KR102366242B1 (en) | Method for controlling depth of objects in mirror display system | |
| Pala et al. | Optical cross-talk and visual comfort of a stereoscopic display used in a real-time application | |
| ITMI20012054A1 (en) | DEVICE FOR DISPLAYING INFORMATION IN A VEHICLE | |
| US10620432B1 (en) | Devices and methods for lens position adjustment based on diffraction in a fresnel lens | |
| CN111812857B (en) | Display device, method and application | |
| JP4590134B2 (en) | 3D camera | |
| JP3444935B2 (en) | Image generator | |
| JP2000330709A (en) | Device for inputting spatial coordinate |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040121 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040127 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040329 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040720 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040729 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090806 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100806 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |