Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6188328B2 - 3D image display method - Google Patents
[go: Go Back, main page]

JP6188328B2 - 3D image display method - Google Patents

3D image display method Download PDF

Info

Publication number
JP6188328B2
JP6188328B2 JP2013003699A JP2013003699A JP6188328B2 JP 6188328 B2 JP6188328 B2 JP 6188328B2 JP 2013003699 A JP2013003699 A JP 2013003699A JP 2013003699 A JP2013003699 A JP 2013003699A JP 6188328 B2 JP6188328 B2 JP 6188328B2
Authority
JP
Japan
Prior art keywords
array
micro
dimensional
image
mirror
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013003699A
Other languages
Japanese (ja)
Other versions
JP2014134736A (en
Inventor
洪恩 廖
洪恩 廖
誠 岩原
誠 岩原
健純 土肥
健純 土肥
Original Assignee
有限会社ディー・エッチ・エス
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 有限会社ディー・エッチ・エス filed Critical 有限会社ディー・エッチ・エス
Priority to JP2013003699A priority Critical patent/JP6188328B2/en
Publication of JP2014134736A publication Critical patent/JP2014134736A/en
Application granted granted Critical
Publication of JP6188328B2 publication Critical patent/JP6188328B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Description

本発明は三次元表示装置に係り、数少ないマイクロ凸レンズ二次元アレイと感光体の組み合わせ、または、数少ないマイクロプロジェクタで三次元画像を表示する方法に関する。   The present invention relates to a three-dimensional display device, and more particularly to a combination of a few micro convex lens two-dimensional arrays and a photoreceptor, or a method for displaying a three-dimensional image with a few micro projectors.

マイクロ凸レンズ二次元アレイと感光体を組み合わせると、三次元的な光線の記録再生能力があることを、フランスのM.G.Lippmannが見いだし、1908年に論文として提案した。現在この方法は“IP”(Integral Photography)と呼ばれている。   The combination of a micro-convex lens two-dimensional array and a photoconductor has the ability to record and reproduce three-dimensional light rays. G. Lippmann found and proposed in 1908 as a paper. This method is currently called “IP” (Integral Photography).

また、特許文献1に、「光ビームを二次元走査し空中に投影する基本ユニットを複数個二次元的に配列するとともに、該各基本ユニットに所定の画像信号を入力し、二次元走査の動きに対応して該ビーム光源を輝度変調することを特徴とする三次元画像表示装置」が提案されていて、従来のレンズアレイを用いたインテグラルフォトグラフィでは不可避なレンズの収差をなくすことが可能である。   Patent Document 1 states that “a plurality of basic units that two-dimensionally scan a light beam and project it in the air are two-dimensionally arranged, and a predetermined image signal is input to each basic unit to The three-dimensional image display device is characterized in that the beam light source is modulated in luminance in response to the above, and it is possible to eliminate lens aberrations that are unavoidable in integral photography using a conventional lens array. It is.

特開2012−98341号公報JP 2012-98341 A

前述の、Integral Photography(フランスのM.G.Lippmannが提案した、マイクロ凸レンズ二次元アレイと感光体を組み合わせた三次元画像記録再生方式)が優れた三次元画像表示能力を持っていることはよく知られているが、マイクロ凸レンズを二次元に並べるとともに、該レンズ背面の各々に微小二次元画像を配する必要があり、非常に構造が複雑であるという問題があった。   The above-mentioned Integral Photography (a three-dimensional image recording / reproducing system combining a micro-convex lens two-dimensional array and a photoreceptor, proposed by MG Lipmanmann, France) has an excellent three-dimensional image display capability. As is known, it is necessary to arrange micro convex lenses two-dimensionally and to arrange a micro two-dimensional image on each of the rear surfaces of the lens, which causes a problem that the structure is very complicated.

また、特許文献1では、「光ビームを二次元走査し空中に投影する基本ユニットを複数個二次元的に配列するとともに、該各基本ユニットに所定の画像信号を入力し、二次元走査の動きに対応して該ビーム光源を輝度変調することを特徴とする三次元画像表示装置」が提案されていて、従来のレンズアレイを用いたインテグラルフォトグラフィでは不可避なレンズの収差をなくすことが可能であるが、前記Integral Photographyと同様に基本ユニットを複数個二次元的に配列する必要があり、構造が複雑だという問題があった。   Further, in Patent Document 1, “a plurality of basic units that two-dimensionally scan a light beam and project it in the air are arranged two-dimensionally, and a predetermined image signal is input to each basic unit to perform two-dimensional scanning movements”. The three-dimensional image display device is characterized in that the beam light source is modulated in luminance in response to the above, and it is possible to eliminate lens aberrations that are unavoidable in integral photography using a conventional lens array. However, there is a problem that the structure is complicated because it is necessary to arrange a plurality of basic units two-dimensionally as in the case of the integral photography.

本発明では、鏡を組合せることにより、マイクロ凸レンズ一次元アレイと感光体の組み合わせ、または、基本ユニットを一次元的に配列し、該マイクロ凸レンズ一次元アレイと該感光体の組み合わせ、または、該基本ユニットの数を劇的に減少させる三次元画像表示を提供することにある。   In the present invention, a combination of a micro-convex lens one-dimensional array and a photoreceptor, or a basic unit is arranged one-dimensionally by combining a mirror, and a combination of the micro-convex lens one-dimensional array and the photoreceptor, or It is to provide a three-dimensional image display that dramatically reduces the number of basic units.

上記課題を解決するために、本発明では以下の手段を提供する。   In order to solve the above problems, the present invention provides the following means.

本発明では、マイクロ凸レンズアレイと平面ディスプレイの組み合わせ、または、基本ユニットを一次元的に配列したものと、高速で振動する鏡を組合せることにより、マイクロ凸レンズアレイと該平面ディスプレイの組み合わせ、または、基本ユニットは一元的に並んでいるにもかかわらず、該高速で振動する振動する鏡に反射した画像を観察することで、あたかも二次元配列であるかのように表示する。   In the present invention, a combination of a micro convex lens array and a flat display, or a combination of a micro convex lens array and the flat display by combining a one-dimensional arrangement of basic units and a mirror that vibrates at high speed, or Although the basic units are arranged in a unified manner, the image reflected on the vibrating mirror that vibrates at high speed is observed, so that it is displayed as if it is a two-dimensional array.

本発明では、マイクロ凸レンズ一次元アレイと平面ディスプレイの組み合わせ、または、基本ユニットを一次元的に配列したものに、高速で振動する鏡を組合せることにより、該マイクロ凸レンズアレイと該感光体の組み合わせのレンズ数、または、該基本ユニットの数を劇的に減少させる三次元画像表示を提供する。   In the present invention, a combination of the micro-convex lens array and the photosensitive member is combined with a combination of a one-dimensional array of micro-convex lenses and a flat display, or a mirror that vibrates at high speed with a one-dimensional arrangement of basic units. A three-dimensional image display that dramatically reduces the number of lenses or the number of basic units.

IP表示原理を説明する図Diagram explaining the IP display principle 図1の斜視図1 is a perspective view of FIG. IP表示はマイクロプロジェクタアレイと等価であることを説明する図The figure explaining that IP display is equivalent to a micro projector array 本発明に用いる横一列レンズアレイのIPの一例を示す斜視図The perspective view which shows an example of IP of the horizontal line lens array used for this invention 本発明に用いる横一列プロジェクタアレイの一例を示す斜視図The perspective view which shows an example of the horizontal 1 row projector array used for this invention 本発明の一実施例の構成の概要を説明する図The figure explaining the outline | summary of a structure of one Example of this invention. 本発明の一実施例の振動鏡が第2の位相にある状態を示す図The figure which shows the state which has the vibrating mirror of one Example of this invention in a 2nd phase. 本発明の一実施例の振動鏡が第3の位相にある状態を示す図The figure which shows the state which has the vibrating mirror of one Example of this invention in a 3rd phase. 本発明の一実施例の振動鏡が第4の位相にある状態を示す図The figure which shows the state which has the vibration mirror of one Example of this invention in a 4th phase. 本発明の一実施例で見える見掛けのプロジェクタ配列を示す図The figure which shows the apparent projector arrangement | sequence visible in one Example of this invention 横一列プロジェクタアレイの他の例の動作を説明する図The figure explaining operation of other examples of a horizontal line projector array

以下、本発明の実施の形態を詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail.

図1は、従来のIntegral Photography(フランスのM.G.Lippmannが提案した、マイクロ凸レンズ二次元アレイと感光体を組み合わせた三次元画像記録再生方式)により、頂点A、B、Cを持つある三次元像7を表示している様子を示した図である。   FIG. 1 shows a certain tertiary having vertices A, B, and C by conventional Integral Photography (a three-dimensional image recording / reproducing method combining a micro-convex lens two-dimensional array and a photoreceptor proposed by MG Lipmanmann, France). It is the figure which showed a mode that the original image 7 was displayed.

ここに、1はマイクロ凸レンズ二次元アレイ、2は該マイクロ凸レンズ二次元アレイの焦点面に置かれた平面ディスプレイで、該平面ディスプレイには該マイクロ凸レンズ二次元アレイの各レンズで投射される各平面画像で3’a、3’b、3’c・・・が表示されていて、全体画像はG3’、4はバックライトである。   Here, 1 is a two-dimensional array of micro-convex lenses, 2 is a flat display placed on the focal plane of the two-dimensional array of micro-convex lenses, and each plane projected by each lens of the two-dimensional array of micro-convex lenses on the flat display 3′a, 3′b, 3′c... Are displayed in the image, and the entire image is G3 ′ and 4 is a backlight.

図2は、前記マイクロ凸レンズ二次元アレイ、平面ディスプレイ、バックライトからなるIntegral Photographyの斜視図であり、マイクロ凸レンズ二次元アレイ、その各レンズに対応した平面画像の数は多く、複雑である。   FIG. 2 is a perspective view of Integral Photography comprising the micro convex lens two-dimensional array, a flat display, and a backlight. The micro convex lens two-dimensional array and the number of planar images corresponding to each lens are large and complicated.

図3は、特許文献1に説明したように、Integral Photography はマイクロプロジェクタの集合と考えることができる。   In FIG. 3, as described in Patent Document 1, Integral Photography can be considered as a set of micro projectors.

ここに、1’は該マイクロプロジェクタの投影レンズ、3’は該マイクロプロジェクタの平面画像、4’は該マイクロプロジェクタの光源である。   Here, 1 'is a projection lens of the microprojector, 3' is a planar image of the microprojector, and 4 'is a light source of the microprojector.

Integral Photographyでは、マイクロ凸レンズを二次元に並べるとともに、該レンズ背面の各々に微小二次元画像を配する必要があるし、基本ユニットを複数個二次元的に配列する必要があり、構造が複雑だという問題があった。   In Integral Photography, it is necessary to arrange micro-convex lenses in two dimensions, and to arrange a micro two-dimensional image on each of the back surfaces of the lenses, and to arrange a plurality of basic units in two dimensions, and the structure is complicated. There was a problem.

図4は、本発明に用いる横一列レンズアレイ1”と平面ディスプレイ2”、バックライト4”を示した図である。   FIG. 4 is a diagram showing a horizontal row lens array 1 ″, a flat display 2 ″, and a backlight 4 ″ used in the present invention.

図5は、図4に示したものと同様の光線群を射出する横一列マイクロプロジェクタアレイPa、Pb、Pc・・・を示した図である。   FIG. 5 is a diagram showing a horizontal single row micro projector array Pa, Pb, Pc... That emits a light beam group similar to that shown in FIG.

図6において、該横一列配置のマイクロプロジェクタアレイGpは、上下左右に異なる光線を射出可能なので、高速で往復直線運動する振動する平面鏡M1とM2の組合せにより、視点Vpには振動の位相に対応した異なる光線を到達させることができる。   In FIG. 6, the micro projector array Gp arranged in a horizontal row can emit different light beams vertically and horizontally, so that the viewpoint Vp corresponds to the phase of vibration by combining the vibrating plane mirrors M1 and M2 that reciprocate linearly at high speed. Different rays can be reached.

ここに、Crはクランクで、図示はしていないがモータで高速回転させる。Rはロッドで、クランクの偏芯軸とM1、M2を組み合わせた可動鏡をピン連結している。SSは固定されたスライドシャフト、SBは該スライドシャフトSSを摺動するスライドブッシュで、M1、M2を組み合わせた可動鏡を直線運動しかできないように支持している。   Here, Cr is a crank and is rotated at high speed by a motor (not shown). R is a rod, and a movable mirror that combines the eccentric shaft of the crank and M1 and M2 is pin-connected. SS is a fixed slide shaft, and SB is a slide bush that slides on the slide shaft SS, and supports a movable mirror combining M1 and M2 so that only a linear motion can be performed.

このように構成した結果、前記モータの回転運動は、該クランクCr、該ロッドR、該スライドシャフトSS、該スライドブッシュSBによって構成されるリンクにより、回転運動が往復直線運動に変換され、M1、M2を組み合わせた該可動鏡が高速で往復直線運動(振動)することになる。   As a result of this configuration, the rotational motion of the motor is converted into a reciprocating linear motion by a link constituted by the crank Cr, the rod R, the slide shaft SS, and the slide bush SB, and M1, The movable mirror combined with M2 reciprocates linearly (vibrates) at high speed.

図6は該可動鏡が最上位置にある位相状態を示していて、M1、M2を組み合わせた該可動鏡は最上位にあり、視点Vpから見ると一次元配列のプロジェクタアレイGpの鏡像I−Gp は最上位に見える。   FIG. 6 shows a phase state in which the movable mirror is in the uppermost position. The movable mirror combining M1 and M2 is in the uppermost position, and is viewed from the viewpoint Vp as a mirror image I-Gp of the one-dimensional array of projector arrays Gp. Looks at the top.

図7は、モータが図6の状態から約90度回転した後の状態を示した図で、M1、M2を組み合わせた該可動鏡は中間の高さにあり、視点Vpから見ると一次元配列のプロジェクタアレイGpの鏡像I−Gpは視点と同じ高さに見える。   FIG. 7 is a view showing a state after the motor has been rotated about 90 degrees from the state of FIG. 6. The movable mirror combining M1 and M2 is at an intermediate height and is a one-dimensional array when viewed from the viewpoint Vp. The mirror image I-Gp of the projector array Gp is seen at the same height as the viewpoint.

図8は、さらにモータが図7の状態から約90度回転した後の状態を示した図で、M1、M2を組み合わせた該可動鏡は最下位にあり、視点Vpから見ると一次元配列のプロジェクタアレイGpの鏡像I−Gpも最も低い位置に見える。   FIG. 8 is a diagram showing a state after the motor has further rotated about 90 degrees from the state of FIG. 7. The movable mirror combining M1 and M2 is at the lowest position, and is one-dimensionally arranged from the viewpoint Vp. The mirror image I-Gp of the projector array Gp also appears at the lowest position.

図9は、モータが図8の状態から約90度回転した後の状態を示した図で、M1、M2を組み合わせた該可動鏡は中間の高さにあり、視点Vpから見ると一次元配列のプロジェクタアレイGpの鏡像I−Gpは視点と同じ高さに見える。   FIG. 9 is a view showing a state after the motor has been rotated about 90 degrees from the state of FIG. 8, and the movable mirror combining M1 and M2 is at an intermediate height and is one-dimensionally arranged from the viewpoint Vp. The mirror image I-Gp of the projector array Gp is seen at the same height as the viewpoint.

図10は、図6〜図9に示したような位相変化を高速で繰り返した結果、視点Vpから見える像を説明した図で、動いているにもかかわらず残像で人間にはちらつかずに見える速度(例えば毎秒48回以上)で該モータを回転させれば、M1、M2を組み合わせた該可動鏡もこの速度で往復運動することになり、プロジェクタアレイGpの鏡像は、複数の鏡像I−Gp−a、I−Gp−b、I−Gp−c・・・が常に固定され対置に積層しているように見えるので、従来例の二次元配置プロジェクタアレイと同様の三次元画像を観察することができる。   FIG. 10 is a diagram illustrating an image that can be seen from the viewpoint Vp as a result of repeating the phase change as shown in FIGS. 6 to 9 at high speed. If the motor is rotated at a speed (for example, 48 times or more per second), the movable mirror combining M1 and M2 also reciprocates at this speed, and the mirror image of the projector array Gp includes a plurality of mirror images I-Gp. -A, I-Gp-b, I-Gp-c... Are always fixed and appear to be stacked in a counter-position, so that a three-dimensional image similar to that of the conventional two-dimensionally arranged projector array is observed. Can do.

ここに、視点Vpは左右(図面に直交する方向)に移動は可能である。   Here, the viewpoint Vp can move left and right (in a direction orthogonal to the drawing).

また、図6では、図5に示した横一列のマイクロプロジェクタアレイで説明したが、図4に示したレンズアレイが1次元配列のIntegral Photography を用いてもよい。   In FIG. 6, the horizontal row of microprojector arrays shown in FIG. 5 has been described. However, the lens array shown in FIG. 4 may use a one-dimensional array of integral photography.

図11は、特許文献1と同様の光ビームを二次元走査し空中に投影する基本ユニットを複数個一次元的に配列したものの斜視図で、これも横一列配置のマイクロプロジェクタアレイとして機能するので本発明のプロジェクタアレイに利用できる。   FIG. 11 is a perspective view of a plurality of basic units that are two-dimensionally scanned and projected in the air with the same light beam as in Patent Document 1, and this also functions as a micro-projector array arranged in a horizontal row. It can be used for the projector array of the present invention.

本発明を実施した三次元画像表示装置に於いては、マイクロプロジェクタの数が劇的に減少させうるので、構造が簡単でローコストなディスプレイを提供できる。   In the three-dimensional image display apparatus embodying the present invention, the number of microprojectors can be drastically reduced, so that a display having a simple structure and a low cost can be provided.

1 マイクロ凸レンズ二次元アレイ
1’ マイクロプロジェクタの投影レンズ
1” 本発明の第1の実施例のレンズアレイ
2 平面ディスプレイ
2” 本発明の第1の実施例の平面ディスプレイ
3’a、3’b、3’c・・・ 三次元像を表示する各平面画像
3’ マイクロプロジェクタの平面画像
4 バックライト
4’ マイクロプロジェクタの光源
4” 本発明の第1の実施例のバックライト
7 ある三次元像
A ある三次元像の第一の頂点
B ある三次元像の第二の頂点
C ある三次元像の第三の頂点
Cr クランク
Gp マイクロプロジェクタ群
I−Gp プロジェクタ群Gpのある瞬間の鏡像
I−Gp−a、I−Gp−b、I−Gp−c・・・ プロジェクタ群Gpの各鏡像
M1 第1の平面鏡
M2 第2の平面鏡
Pa、Pb、Pc・・・ 各マイクロプロジェクタ
R ロッド
SB スライドブッシュ
SS スライドシャフト
Vp 視点
DESCRIPTION OF SYMBOLS 1 Micro convex lens Two-dimensional array 1 'Projection lens 1 "of microprojector Lens array 2 of 1st Example of this invention Planar display 2" Planar display 3'a, 3'b of 1st Example of this invention, 3′c... Each planar image displaying a 3D image 3 ′ planar image 4 of the microprojector 4 backlight 4 ′ light source 4 ′ of the microprojector backlight 7 according to the first embodiment of the present invention 3D image A First vertex B of a three-dimensional image Second vertex C of a three-dimensional image Third vertex of a three-dimensional image Cr Crank Gp Micro-projector group I-Gp Mirror image I-Gp- at a certain moment of the projector group Gp a, I-Gp-b, I-Gp-c ... Each mirror image M1 of the projector group Gp First plane mirror M2 Second plane mirror Pa, Pb, Pc ... Each micro projector R SB Slide bush SS Slide shaft Vp Viewpoint

Claims (1)

横一列に配列したマイクロプロジェクタアレイ、あるいは、横一列に配列したマイクロプロジェクタアレイを数段積み重ねたものから射出される光線群を、人間の残像で動いていることが分からないほどの高速で振動する直交する2枚の平面鏡に反射させ、視点からは、あたかも前記マイクロプロジェクタアレイによる画像が上下に積層しているように見えるように前記直交する2枚の平面鏡を設定したことを特徴とする三次元画像表示方法。 A group of light beams emitted from a microprojector array arranged in a horizontal row, or a stack of microprojector arrays arranged in a horizontal row, vibrates at a high speed so that it cannot be seen that it is moving by a human afterimage. Three-dimensional, characterized in that the two plane mirrors are set so that they are reflected by two plane mirrors orthogonal to each other, and from the viewpoint, the images by the microprojector array appear to be stacked vertically. Image display method.
JP2013003699A 2013-01-11 2013-01-11 3D image display method Expired - Fee Related JP6188328B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013003699A JP6188328B2 (en) 2013-01-11 2013-01-11 3D image display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013003699A JP6188328B2 (en) 2013-01-11 2013-01-11 3D image display method

Publications (2)

Publication Number Publication Date
JP2014134736A JP2014134736A (en) 2014-07-24
JP6188328B2 true JP6188328B2 (en) 2017-08-30

Family

ID=51413028

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013003699A Expired - Fee Related JP6188328B2 (en) 2013-01-11 2013-01-11 3D image display method

Country Status (1)

Country Link
JP (1) JP6188328B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7079146B2 (en) * 2018-05-18 2022-06-01 シャープ株式会社 3D display device
CN110058421B (en) * 2019-05-05 2023-11-21 成都工业学院 A photocompatible three-dimensional display print

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4261856B2 (en) * 2002-09-20 2009-04-30 キヤノン株式会社 Stereoscopic image display device
JP4871539B2 (en) * 2005-07-25 2012-02-08 キヤノン株式会社 3D image display device
JP2012098341A (en) * 2010-10-29 2012-05-24 Dhs:Kk Three-dimensional image display method

Also Published As

Publication number Publication date
JP2014134736A (en) 2014-07-24

Similar Documents

Publication Publication Date Title
JP5148960B2 (en) Volume scanning type 3D aerial image display
US20180284441A1 (en) Wide field head mounted display
US9535255B2 (en) Autostereoscopic projection device and display apparatus
JP2002518914A (en) 3D display system
JP5176718B2 (en) Aerial image display device
US20140085436A1 (en) Systems and Methods for Convergent Angular Slice True-3D Display
KR101652405B1 (en) Three dimensional image display apparatus
US20070146358A1 (en) Three-dimensional display
WO2005062609A1 (en) Wide field display using a light modulator
JP4405525B2 (en) 3D beam acquisition device
JP7715150B2 (en) Image generation device, image generation method, and program
JP6188328B2 (en) 3D image display method
KR20210045078A (en) Apparatus and method for displaying three dimensional image
US20170134718A1 (en) Rear-projection autostereoscopic 3d display system
Kanebako et al. Time-multiplexing display module for high-density directional display
JP6188327B2 (en) 3D image display method
JP2010054917A (en) Naked-eye stereoscopic display device
JP6060729B2 (en) 3D projection device
Uchida et al. 360-degree three-dimensional table-screen display using small array of high-speed projectors
US20060255242A1 (en) Image display apparatus and image pickup apparatus having the same
KR100636165B1 (en) Stereoscopic display
JP2018007110A (en) Display device and screen
KR102532078B1 (en) Tabletop 3-dimensional display using holographic micro-lens array screen
JP2015049263A (en) 3D image display device
US20150346502A1 (en) Autostereoscopic three-dimensional projector and method of displaying thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161021

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170704

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170801

R150 Certificate of patent or registration of utility model

Ref document number: 6188328

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees