JP7396628B2 - Image projection device, exhibition device, evaluation device, evaluation method and evaluation system - Google Patents
Image projection device, exhibition device, evaluation device, evaluation method and evaluation system Download PDFInfo
- Publication number
- JP7396628B2 JP7396628B2 JP2019187439A JP2019187439A JP7396628B2 JP 7396628 B2 JP7396628 B2 JP 7396628B2 JP 2019187439 A JP2019187439 A JP 2019187439A JP 2019187439 A JP2019187439 A JP 2019187439A JP 7396628 B2 JP7396628 B2 JP 7396628B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- screen
- retinal
- evaluation
- wearer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000011156 evaluation Methods 0.000 title claims description 45
- 230000002207 retinal effect Effects 0.000 claims description 129
- 210000005252 bulbus oculi Anatomy 0.000 claims description 86
- 210000001508 eye Anatomy 0.000 claims description 42
- 230000004270 retinal projection Effects 0.000 claims description 33
- 210000001331 nose Anatomy 0.000 claims description 30
- 210000003128 head Anatomy 0.000 claims description 25
- 230000003287 optical effect Effects 0.000 claims description 11
- 230000008859 change Effects 0.000 claims description 7
- 230000032683 aging Effects 0.000 claims description 6
- 210000001142 back Anatomy 0.000 claims description 6
- 208000030533 eye disease Diseases 0.000 claims description 5
- 238000013459 approach Methods 0.000 claims description 4
- 238000004458 analytical method Methods 0.000 claims description 3
- 210000000695 crystalline len Anatomy 0.000 description 64
- 210000001525 retina Anatomy 0.000 description 41
- 239000011521 glass Substances 0.000 description 39
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 27
- 239000000463 material Substances 0.000 description 15
- 239000011347 resin Substances 0.000 description 12
- 229920005989 resin Polymers 0.000 description 12
- 210000001747 pupil Anatomy 0.000 description 9
- 238000013461 design Methods 0.000 description 8
- 238000002834 transmittance Methods 0.000 description 7
- 208000034699 Vitreous floaters Diseases 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 239000007787 solid Substances 0.000 description 6
- 230000004304 visual acuity Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 208000002177 Cataract Diseases 0.000 description 5
- 238000011161 development Methods 0.000 description 5
- 230000018109 developmental process Effects 0.000 description 5
- 230000003028 elevating effect Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 239000004033 plastic Substances 0.000 description 5
- 229920003023 plastic Polymers 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 4
- 210000000056 organ Anatomy 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000000465 moulding Methods 0.000 description 3
- 239000000123 paper Substances 0.000 description 3
- 241000282412 Homo Species 0.000 description 2
- 206010040925 Skin striae Diseases 0.000 description 2
- 230000004075 alteration Effects 0.000 description 2
- 230000004323 axial length Effects 0.000 description 2
- 230000003925 brain function Effects 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 210000004709 eyebrow Anatomy 0.000 description 2
- 210000000744 eyelid Anatomy 0.000 description 2
- 239000005338 frosted glass Substances 0.000 description 2
- 230000004305 hyperopia Effects 0.000 description 2
- 201000006318 hyperopia Diseases 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000004379 myopia Effects 0.000 description 2
- 208000001491 myopia Diseases 0.000 description 2
- 229920000515 polycarbonate Polymers 0.000 description 2
- 239000004417 polycarbonate Substances 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 208000024891 symptom Diseases 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 239000012780 transparent material Substances 0.000 description 2
- JOYRKODLDBILNP-UHFFFAOYSA-N Ethyl urethane Chemical compound CCOC(N)=O JOYRKODLDBILNP-UHFFFAOYSA-N 0.000 description 1
- 206010020675 Hypermetropia Diseases 0.000 description 1
- 238000012356 Product development Methods 0.000 description 1
- 208000007014 Retinitis pigmentosa Diseases 0.000 description 1
- 206010045178 Tunnel vision Diseases 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 229920000122 acrylonitrile butadiene styrene Polymers 0.000 description 1
- 206010064930 age-related macular degeneration Diseases 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000002845 discoloration Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004907 flux Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000005304 joining Methods 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 208000002780 macular degeneration Diseases 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 201000003152 motion sickness Diseases 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000013041 optical simulation Methods 0.000 description 1
- 210000004279 orbit Anatomy 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000011505 plaster Substances 0.000 description 1
- 238000006116 polymerization reaction Methods 0.000 description 1
- 229920001296 polysiloxane Polymers 0.000 description 1
- 230000004256 retinal image Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 230000035882 stress Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 229920001169 thermoplastic Polymers 0.000 description 1
- 229920001187 thermosetting polymer Polymers 0.000 description 1
- 239000002023 wood Substances 0.000 description 1
- 239000002759 woven fabric Substances 0.000 description 1
Images
Landscapes
- Eyeglasses (AREA)
Description
本発明は、眼鏡型画像表示装置の画像投影装置、展示装置、評価装置、評価方法及び評価システムに関するものである。 The present invention relates to an image projection device, an exhibition device, an evaluation device, an evaluation method, and an evaluation system for a glasses-type image display device.
従来から頭部に装着した眼前の表示部にコンピュータ等から送られてきた映像を表示するヘッドマウントディスプレイ(HMD)が提案されている。HMDは装用者の眼の座標に対し表示部の座標が固定されていることが望ましく、眼鏡型ヘッドマウントディスプレイ(眼鏡型HMD)が有望である。眼鏡型HMDには、眼鏡とディスプレイ(表示部)が一体となった眼鏡一体型や、眼鏡のフレーム等に表示部を含む機器を装着する眼鏡併設型がある。眼鏡の形状を簡略化したスカウター型や、ゴーグルやヘルメット等に表示部を組み込んで固定するなどしたタイプも眼鏡型HMDの拡張、もしくは変形した形状として理解される。以下、このようなHMDを眼鏡型画像表示装置と記載する。
ヘッドマウントディスプレイはカメラ等で撮影した映像や映画、あるいは文字情報等の外部データに基づく映画像をユーザーに目視可能なように、あるいはユーザーの網膜に直接投影して表示する装置である。眼鏡型画像表示装置の例として、特許文献1~2を示す。
特許文献1は、ユーザーが能動的に虚像を目視する眼鏡型HMDの例である。また、特許文献2は網膜投影眼鏡型ヘッドマウントディスプレイの例である。網膜投影眼鏡型HMDは、レーザー光を走査して網膜に直接投影するもので、光束が細いことから、フォーカスフリーの特性を得ることが期待されている。光学系としては、マクスウエル視の光学系が採用されることが多い。
2. Description of the Related Art Head-mounted displays (HMDs) have been proposed that display images sent from a computer or the like on a display section mounted on the head in front of the eyes. It is desirable for the HMD to have the coordinates of the display section fixed relative to the coordinates of the wearer's eyes, and a glasses-type head-mounted display (glasses-type HMD) is promising. Glass-type HMDs include a glasses-integrated type in which glasses and a display (display section) are integrated, and a glasses-attached type in which a device including a display section is attached to a frame of glasses or the like. A scouter type, which has a simplified shape of glasses, and a type in which a display section is incorporated and fixed into goggles, a helmet, etc., are also understood as extensions or modified shapes of the glasses type HMD. Hereinafter, such an HMD will be referred to as a glasses-type image display device.
A head-mounted display is a device that displays videos and movies taken with a camera or the like, or movie images based on external data such as character information, so that the user can see them visually, or by directly projecting them onto the user's retinas.
ところで、これら眼鏡型HMDの開発において、開発中の眼鏡型HMDの画像が実際人の眼においてどのような見え方をしているのかを客観的に判断したり、その画像から眼鏡型HMDを評価したいという要望がある。
例えば、眼鏡型ディスプレイを展示会や店頭などで展示する際の課題としては、例えば来場者やクライアントが実際に掛けてみないと、その眼鏡型HMDがどのような見え方をするかが判断できない。例えば、AR(拡張現実技術)は、現実世界にデジタル映像を重ねて表示するもので、眼鏡型HMDでARを実現すれば、現実世界にデジタル世界の物が存在しているように情報提示することが可能となるが、実際にユーザーがどのように見えるかは、眼鏡型HMDをかけてみないと判断できない。これは、製品開発時だけでなく、製品販売時の眼鏡型HMDとしても課題である。
また、眼鏡型HMDでは、光学設計ソフト等を用いた光学シミュレーションで網膜へ投影される光束を計算して光学系を開発していたが、実際にどのように見えるかについては、眼鏡型HMDを直接掛けてみなければ判断は難しい。眼鏡型HMDを直接掛けて画像を分析して評価するのは、眼鏡を装用する際の鼻の高さや被験者ごとにどのように見えるかが異なり、複数の開発者にて評価結果を共有することが難しいからである。また、網膜投影眼鏡型HMDでは一般的にレーザー光が用いられているが、開発初期段階では、開発者が開発中のレーザー光を網膜に投影しても安全であるかという安全性の課題がある。
By the way, in the development of these glasses-type HMDs, it is necessary to objectively judge how the images of the glasses-type HMD under development actually look to the human eye, and to evaluate the glasses-type HMD from those images. There is a desire to do so.
For example, a problem when displaying a glasses-type HMD at a trade show or store is that it is impossible to judge how the glasses-type HMD will look until a visitor or client actually puts it on. . For example, AR (Augmented Reality Technology) displays digital images superimposed on the real world, and if AR is realized with a glasses-type HMD, information will be presented as if things from the digital world exist in the real world. However, it is not possible to judge how the user actually looks unless he or she puts on the glasses-type HMD. This is a problem not only during product development but also for eyeglass-type HMDs during product sales.
In addition, for eyeglass-type HMDs, the optical system was developed by calculating the light flux projected onto the retina through optical simulation using optical design software, but as for how it actually looks, It is difficult to judge unless you try it directly. The reason for analyzing and evaluating images by directly wearing glasses-type HMDs is that the height of the nose when wearing glasses and how each subject looks differs, so evaluation results can be shared among multiple developers. This is because it is difficult. Additionally, although laser light is generally used in retinal projection glasses-type HMDs, in the early stages of development, developers were faced with the issue of safety, such as whether it would be safe to project the laser light being developed onto the retina. be.
上記課題を解決するために第1の手段では、眼鏡型画像表示装置を被装着者が装着して目視した際の画像を想定して画像を投影させるための画像投影装置において、少なくとも眼位置に形成された透孔と、耳輪部位置に形成された第1の支持部と、鼻根から鼻背にかけての外鼻部位置に形成された第2の支持部と、を有する人の頭部分のマスク模型と、前記透孔の背後に配置され、投影された画像を視認可能に表示する網膜スクリーンと、を備え、前記第1の支持部と前記第2の支持部によって前記眼鏡型画像表示装置を支持するようにした。
これによって、第三者はスクリーンに投影された画像をスクリーンを見ることで、被装着者が眼鏡型画像表示装置を装着して実際に見ている画像を想定してそれに近い画像を疑似的に見ることができる。そして、このように被装着者が実際に見ている画像に近い画像を、被装着状態にて第三者として客観的に見ることで開発者の開発の際の一助になるととともに、開発者以外の、例えば、一般の人々にこのような画像をデモンストレーション的に見せることで眼鏡型画像表示装置を装着しなくても人の眼にどのような画像が映るものかを実感させることができる。
特に、眼鏡型画像表示装置に実際の外界の景色ではない画像情報や文字情報等を表示させる場合などにおいては、被装着者や第三者等のユーザーが眼鏡型画像表示装置を装用することなく疑似的に実感できることとなる。また、眼鏡型画像表示装置が網膜投影眼鏡型HMDであればピントのずれなく網膜に結像されることが眼鏡型HMDを装用することなく疑似的に実感できることとなる。
ここで、第三者がスクリーンに投影された画像を見る際には、スクリーンの前面または背面のどちらからでもよいが、特に、スクリーンは画像を透過するものが良く、透過した画像を背面より見ることがスクリーンに投影される画像を投影に対して同軸上で観察できるためよい。
ここで、「画像」とは、静止画だけでなく、動画等の「映像」も含むものである。
In order to solve the above-mentioned problems, a first means includes an image projection device for projecting an image based on the image when a wearer wears a glasses-type image display device and views the image. A human head portion having a through hole formed therein, a first support portion formed at the helix position, and a second support portion formed at the external nose position from the root of the nose to the dorsum of the nose. The eyeglass-type image display device includes a mask model, and a retinal screen that is placed behind the through hole and displays the projected image in a visible manner, and is controlled by the first support portion and the second support portion. I decided to support it.
This allows a third party to view the image projected on the screen and create a pseudo-image similar to the image the wearer is actually viewing while wearing the glasses-type image display device. You can see it. In this way, by objectively viewing an image close to the image that the wearer actually sees while wearing it as a third party, it will not only help the developer during development, but also allow non-developers to For example, by showing such an image to the general public as a demonstration, it is possible to make the general public realize what kind of image appears in the human eye without wearing a glasses-type image display device.
In particular, when displaying image information, text information, etc. that is not the actual scenery of the outside world on the eyeglass-type image display device, users such as the wearer or a third party do not have to wear the eyeglass-type image display device. This allows you to experience it in a simulated way. Further, if the eyeglass-type image display device is a retinal projection eyeglass-type HMD, it is possible to virtually experience that an image is formed on the retina without a shift in focus without wearing the eyeglass-type HMD.
Here, when a third party views the image projected on the screen, it is possible to view the image from either the front or the back of the screen, but it is especially preferable that the screen is transparent to the image, and the transmitted image is viewed from the back. This is advantageous because the image projected onto the screen can be observed coaxially with respect to the projection.
Here, "images" include not only still images but also "videos" such as moving images.
ここに、「眼鏡型画像表示装置」は、眼鏡型をした被験者(被装着者)に画像を提示するための装置で、被験者が顔に装着して用いるものである。この装置は、被験者が装用した際に被験者の網膜に画像が投影される装置であり、網膜への投影パターンとして、例えば当該被験者が能動的に虚像を目視する場合や、眼鏡を介して被験者の網膜にレーザー光等による直接投影した画像を当該被験者が受動的に目視する場合がある。画像投影装置はそのような人の眼の見え方を模した画像を想定して画像投影する装置である。「能動的に目視」するとは、例えば眼鏡のレンズやレンズに隣接配置された透明板等に投影された画像から視覚的情報を得るために被装着者がその画像を能動的に目視する、つまり画像に対する視力(フォーカス)が合っている状態での目視を想定している。「受動的に目視」するとは、例えば網膜投影眼鏡型HMDから画像を網膜に照射して投影する場合や、網膜投影眼鏡型HMDからの光線を反射板に反射させて画像を網膜に照射して投影する場合を想定している。網膜投影方式では視力(フォーカス)が合っているいないは関係ない。一般的にはコヒーレント光であるレーザー光を画像投影光として使用する。 Here, the "glasses-type image display device" is a device for presenting an image to a test subject (wearer) wearing glasses, which the test subject wears on his or her face. This device is a device that projects an image onto the subject's retina when worn by the subject, and the projection pattern on the retina can be used, for example, when the subject actively views a virtual image, or when the subject is viewing a virtual image through glasses. The subject may passively view an image directly projected onto the retina using laser light or the like. An image projection device is a device that projects an image that simulates the way a person's eyes see. "Actively viewing" means, for example, that the wearer actively views the image projected onto the lens of eyeglasses or a transparent plate placed adjacent to the lens in order to obtain visual information from the image. It is assumed that the image is viewed visually in a state where the visual acuity (focus) is correct. "Passively viewing" means, for example, when an image is projected onto the retina from a retinal projection glasses type HMD, or when the light beam from a retinal projection glasses type HMD is reflected on a reflector and the image is projected onto the retina. It is assumed that the image will be projected. With the retinal projection method, it doesn't matter whether the visual acuity (focus) is correct or not. Generally, laser light, which is coherent light, is used as image projection light.
「網膜スクリーン」は、眼鏡型画像表示装置を被装着者が装着して見る際の画像を被装着状態において被装着者や第三者が観察するために、眼鏡型画像表示装置の画像が投影される網膜を模したスクリーンである。このスクリーンは、被装着者の網膜に映る画像を映すスクリーンであり、透孔の背後に実際の網膜と見立てて配置されるスクリーンである。網膜と同じ曲率を有することがよいが、網膜と同じ曲率を有していなくともよい。画像を拡大もしくは縮小して表示させるため、網膜と相似形状であることがよい。眼球の大きさによって曲率は一様ではなく、分析をコンピュータ装置で行うことが多いため、例え平面のスクリーンであっても補正計算をして実際の網膜画像と同等の画像に変換することができる。スクリーンを網膜と同じ曲率もしくは相似形状とする場合には、補正計算をしなくても、もしくは補正計算の補正量を少なくして、被装着者の網膜に映る画像をスクリーンに映すことができてよい。
また、網膜スクリーンは投影された画像が背面から視認可能とされることがよい。その際には、前方の透孔から投影された画像がスクリーンに投影された際にはスクリーン上で結像され、なおかつ結像された画像が背面に透過される必要がある。このような条件を満たすために網膜スクリーンの材質としては、完全に透明ではないが光透過性のある素材で構成することがよい。例えば、半透明や白濁した薄い光透過性プラスチック、紙、不織紙、薄手で細い糸で密に織った織物、同様に密に編んだ編み物等がよい。素材の色は白色や乳白色がよいが、投影された画像が背面から視認可能であれば黒や灰色でもよい。
「透孔」とは、眼鏡型画像表示装置からの映像を通す穴のことである。透孔は単にくり抜かれた穴でもよく、その穴に水晶体や瞳孔を模した透明板やレンズ等がはまっていてもよい。若年者に比べて高齢者では水晶体が黄色くなることが知られている。透孔に黄色いレンズやフィルターをはめることにより高齢者が眼鏡型画像表示装置を掛けた際の見え方を再現できるためよい。
A "retinal screen" is a screen on which the image of the eyeglass-type image display device is projected so that the wearer or a third party can observe the image that the wearer sees while wearing the eyeglass-type image display device. This is a screen that imitates the retina. This screen is a screen that projects an image that is reflected on the retina of the wearer, and is a screen that is placed behind the transparent hole to look like an actual retina. It is preferable to have the same curvature as the retina, but it is not necessary to have the same curvature as the retina. In order to enlarge or reduce the image for display, it is preferable that the shape is similar to the retina. The curvature is not uniform depending on the size of the eyeball, and analysis is often performed using computer equipment, so even if the screen is flat, correction calculations can be made to convert it into an image equivalent to the actual retinal image. . If the screen has the same curvature or similar shape to the retina, the image reflected on the wearer's retina can be projected onto the screen without performing correction calculations or by reducing the amount of correction calculation. good.
Further, it is preferable that the projected image of the retinal screen is made visible from the back side. In this case, when the image projected from the front through-hole is projected onto the screen, it needs to be formed on the screen, and the formed image needs to be transmitted to the back side. In order to satisfy these conditions, it is preferable that the retinal screen be made of a material that is not completely transparent but has light transmittance. For example, translucent or cloudy thin light-transmitting plastics, paper, non-woven paper, densely woven fabrics made of thin and thin threads, similarly densely knitted fabrics, etc. are suitable. The color of the material is preferably white or milky white, but black or gray may be used as long as the projected image is visible from the rear.
A "through hole" is a hole through which an image from a glasses-type image display device passes. The transparent hole may be simply a bored hole, or a transparent plate or lens imitating a crystalline lens or pupil may be fitted into the hole. It is known that the crystalline lens becomes yellower in older people than in younger people. By fitting yellow lenses or filters into the transparent holes, it is possible to reproduce the way elderly people see when wearing eyeglass-type image display devices.
「マスク模型」は、例えば実際の人の頭部分に模した仮面である。例えば0.5mm~10mm程度の厚みで構成され、材質としては眼鏡を耳輪部に掛けさせることができる程度の形状保持力があることが必要であるが、それが可能であれば材質は問わない。例えば、プラスチック、石膏、木、紙、金属等で構成が可能である。また、作成方法としては、例えば手作りしたり頭部を型取りしたりしてもよく、頭部の3Dデータに基づいて金型を用いた成型や切削、3Dプリンター等の加工装置で作成してもよい。成型や3Dプリンターで製造する場合には素材は熱可塑性プラスチック(例えば、ABS樹脂、PLA樹脂等)や熱硬化性プラスチックを用いることができる。マスク模型に用いる素材の光透過性(透明性)は任意に設定することができる。光透過性の低い素材を用いれば、外光の影響少なく網膜スクリーンに投影される画像を被装着者や第三者が観察することができる。網膜スクリーンに投影される画像の質を評価したい場合には、マスク模型に用いる素材は光透過性が低い、もしくは、不透過のものを用いることが特によい。一方で、光透過性の高い素材を用いれば、マスク模型を通して外部から網膜スクリーンに投影される画像を確認することができるためよい。皮膚と同程度の柔らかさをもつシリコーンなどを表面に用いても眼鏡型画像表示装置の装着状態を再現できるためよい。3Dデータは実測して得たものでもCGデータでもよい。
また、マスク模型は頭部全体でもよく、また頭部全体ではなく本発明の目的に応じた部分だけで構成するようにしてもよい。少なくとも眼位置に形成された透孔と、耳輪部位置に形成された第1の支持部と、鼻根から鼻背にかけての外鼻部位置に形成された第2の支持部とを有する必要があるが、それ以外の器官を備えているマスク模型でもよい。例えば、頭部において後頭部のみがない形状や口や顎付近まで含めたマスク模型であってもよい。また、例えば眼位置に形成された透孔と、耳輪部位置に形成された第1の支持部と、鼻根から鼻背にかけての外鼻部位置に形成された第2の支持部とを有する顔部分を帯状に輪切りにした形状でもよい。
また、人は目や鼻や耳の位置にそれらの器官に相当する窪みや突起があればかなり「人の顔」と認識する脳機能がある。そのため、マスク模型において外鼻部、眼の透孔、耳輪部ということがわかる程度、あるいはそれと想定して作成している場合には擬似的ではなくとも外鼻部、眼の透孔、耳輪部に相当すると解釈できる。例えば、マスク模型において外鼻部の位置と耳輪部の位置に眼鏡をセットするためのそれらに相当する突起があればそれが、実際の外鼻部と耳輪部とは形状がかなり異なっていても外鼻部と耳輪部に相当すると解釈するものである。もちろん、マスク模型において外鼻部と耳輪部に模してもよい。
また、マスク模型は平らな上面を有する基盤上に設置されることがよい。それによってマスク模型、眼鏡、スクリーン等を基盤上に一緒に置き、基盤に載せて基盤とともに移動させたり収納したりすることができるようになるため便利である。基盤は平板状であったり、平板部を天板とするようなケース状であったりしてもよい。後述するようにマスク模型を回動させたり傾動させるような形状にしてもよい。
「眼鏡」は被装着者が能動的に目視することを想定するのであれば、被装着者の視力を補正するための所定のレンズ度数のレンズを配置してもよい。一方、例えば、網膜投影眼鏡型HMDであればレンズは必ずしも必要ではない。尚、これら定義は以下の手段においても同様である。
A "mask model" is, for example, a mask imitating the head of an actual person. For example, the material must have a thickness of about 0.5 mm to 10 mm, and the material must have enough shape retention power to allow glasses to be hung on the helix, but the material does not matter as long as it is possible to do so. . For example, it can be constructed of plastic, plaster, wood, paper, metal, etc. In addition, the creation method may be, for example, handmade or making a mold of the head, or it may be created by molding using a mold, cutting, or using a processing device such as a 3D printer based on the 3D data of the head. Good too. In the case of manufacturing by molding or 3D printer, thermoplastic plastic (for example, ABS resin, PLA resin, etc.) or thermosetting plastic can be used as the material. The light transmittance (transparency) of the material used for the mask model can be set arbitrarily. If a material with low light transmittance is used, the wearer or a third party can observe the image projected on the retinal screen with less influence from external light. When it is desired to evaluate the quality of the image projected onto the retinal screen, it is particularly preferable to use a material for the mask model that has low light transmittance or is opaque. On the other hand, it is preferable to use a material with high light transmittance because it is possible to check the image projected onto the retinal screen from the outside through the mask model. Even if the surface is made of silicone or the like, which has the same softness as the skin, it is possible to reproduce the wearing state of the eyeglass-type image display device. The 3D data may be obtained by actual measurement or CG data.
Further, the mask model may be the entire head, or may be made up of only a portion suitable for the purpose of the present invention instead of the entire head. It is necessary to have at least a through hole formed at the eye position, a first support part formed at the helix position, and a second support part formed at the external nasal position from the root of the nose to the dorsum of the nose. However, a mask model with other organs may also be used. For example, the mask model may have a shape in which only the occiput of the head is missing, or a mask model that includes the vicinity of the mouth and chin. For example, it has a through hole formed at the eye position, a first support part formed at the helix position, and a second support part formed at the external nasal part position from the root of the nose to the dorsum of the nose. It may also be a shape in which the face part is cut into strips.
In addition, humans have brain functions that allow them to recognize a face as a ``human face'' if there are depressions or projections corresponding to the eyes, nose, or ears. Therefore, if the mask model is made with the assumption that the external nose, eye holes, and helix are clearly visible, or if it is created assuming that the external nose, eye holes, and helix are It can be interpreted as equivalent to . For example, if a mask model has protrusions that correspond to the positions of the external nose and helix for setting glasses, even if the shapes of the actual external nose and helix are quite different. It is interpreted to correspond to the external nose and helix. Of course, the external nasal part and the helix part may be imitated in the mask model.
Further, the mask model may be placed on a base having a flat top surface. This is convenient because it becomes possible to place the mask model, glasses, screen, etc. on the base together, place them on the base, and move or store them together with the base. The base may be in the form of a flat plate, or in the form of a case with the flat plate serving as a top plate. As will be described later, the mask model may be shaped to rotate or tilt.
If the "glasses" are intended to be actively viewed by the wearer, lenses with a predetermined lens power for correcting the wearer's visual acuity may be arranged. On the other hand, for example, in the case of a retinal projection glasses type HMD, a lens is not necessarily required. Note that these definitions also apply to the following means.
また、第2の手段として、前記マスク模型は前記透孔と前記第1の支持部と前記第2の支持部を含む帯状の領域のみの形態とされているようにした。
必要最小限の部分のみで構成することで、余計な部分が排除でき画像の観察がしやすくなる。また、スクリーンの操作や撮影装置を設置する場合にも余計な部分を排除することがそれらの操作の上で都合がよい。例えば、眉間から小鼻(鼻翼)にかけての領域であるとそれほど上下幅が大きくならず、かつ眼鏡を置くのに必要十分な頭部の器官が配置されるため、上方からのぞき込むのに適する。帯状の領域はリング状(つまり頭部全周)に構成されてもよく、後頭部側は必須ではないため後頭部側がないように構成してもよい。後頭部側がない場合には、網膜スクリーンに投影された画像を投影と同軸にて、すなわち同じ目線にて観察することができるため、よい。
また、第3の手段として、マスク模型には、マスク模型外部からマスク模型内のスクリーンの様子を観察するための「観察窓」を設置することがよい。観察窓はマスク模型の一部に穴を空け、例えば、マスク模型の後頭部を無くすなどすることで設置することができる。観察窓は特に後頭部に設置することが網膜スクリーンに投影される画像を同軸上で観察できるためよい。観察窓には、網膜スクリーンの様子を拡大して観察するためのレンズ等を設置してもよい。ミラーやハーフミラー等を組み合わせることで、例えば頭頂などに観察窓を設置した場合であっても後頭に設置した場合と同様に網膜スクリーンに投影された画像を視認することができる。
また、第4の手段として、前記網膜スクリーンは前記透孔に対して接近又は離間可能に配置されるようにした。
これによって、近視や遠視の人や大人と子供などの眼球(眼軸長)の違いや人による眼球の大きさの違い等を想定して画像のスクリーンに映る位置を調節することが可能となる。
また、第5の手段として、前記網膜スクリーンは眼球様の球体形状又は球体形状の一部にて構成されているようにした。
スクリーンをあたかも人の眼のような球体形状に構成することで、人の網膜への結像状態を再現できるようになる。また、デモンストレーションとして実検させる場合に「人の眼での見え方」を見せられているような実感を看者に与えることができる。球体形状であるがスクリーンに画像を投影させるための瞳孔に対応する位置にマスク模型に形成された透孔側に向いた開口部を有することがよい。この開口部の大きさは瞳孔径となる2mm~8mm程度に形成すれば、眼鏡型画像表示装置を被装着者が装着した際の視角(画角)を再現できるためよい。開口部は画像が透過できるのであれば瞳孔のように円形である必要はない。球体は人の眼球の大きさが異なるため、異なる径の球体をいくつか用意しておくことがよい。また、画像が投影されれば球体形状でなくともその一部であっても構わず、むしろ投影に無関係な部分がなければ画像が見やすくなるためよい。球体は前方部分は透孔を除き不透過な素材で構成し、後方部分はスクリーンとするため透過な素材で構成することがよい。前方部分を不透過とすることにより、意図しない光がスクリーンに入射することを遮ることができるためよい。
Further, as a second means, the mask model is configured to have only a band-shaped region including the through hole, the first support portion, and the second support portion.
By configuring only the minimum necessary parts, unnecessary parts can be eliminated, making it easier to observe the image. Furthermore, when operating the screen or installing a photographing device, it is convenient to eliminate unnecessary parts. For example, the area between the eyebrows and the wings of the nose is suitable for gazing from above because the vertical width is not very large and the necessary and sufficient head organs are located to accommodate glasses. The band-shaped region may be configured in a ring shape (that is, the entire circumference of the head), and since the occipital region is not essential, it may be configured without the occipital region. It is good if there is no occipital side because the image projected on the retinal screen can be observed coaxially with the projection, that is, from the same line of sight.
Moreover, as a third means, it is preferable to install an "observation window" in the mask model for observing the state of the screen inside the mask model from outside the mask model. The observation window can be installed by making a hole in a part of the mask model, for example, by removing the back of the mask model's head. It is particularly advantageous to place the observation window at the back of the head because the image projected onto the retinal screen can be observed coaxially. A lens or the like for magnifying and observing the state of the retinal screen may be installed in the observation window. By combining mirrors, half mirrors, etc., even if the observation window is installed at the top of the head, the image projected on the retinal screen can be viewed in the same way as when it is installed at the back of the head.
Further, as a fourth means, the retinal screen is arranged so as to be able to approach or move away from the through hole.
This makes it possible to adjust the position of the image on the screen, taking into account differences in the eyeballs (axial length) of myopic or farsighted people, adults and children, and differences in the size of the eyeballs between people. .
Further, as a fifth means, the retinal screen is configured to have an eyeball-like spherical shape or a part of a spherical shape.
By configuring the screen into a spherical shape that resembles the human eye, it becomes possible to reproduce the state of image formation on the human retina. Furthermore, when the system is used as a demonstration, it is possible to give the viewer a feeling of being shown ``how the human eye sees''. Although it has a spherical shape, it is preferable to have an opening facing toward the transparent hole formed in the mask model at a position corresponding to the pupil for projecting an image onto the screen. It is preferable to form the opening to a size of about 2 mm to 8 mm, which corresponds to the pupil diameter, because the visual angle (angle of view) when the wearer wears the eyeglass-type image display device can be reproduced. The aperture does not need to be circular like a pupil, as long as the image can pass through it. Since people's eyeballs have different sizes, it is a good idea to prepare several spheres with different diameters. Further, as long as the image is projected, it does not matter if it is not in a spherical shape or in a part of the sphere; rather, it is better if there are no parts unrelated to the projection because the image becomes easier to see. It is preferable that the front part of the sphere is made of an impermeable material except for the holes, and the rear part is made of a transparent material to serve as a screen. Making the front portion opaque is advantageous because it can block unintended light from entering the screen.
また、第6の手段として、前記網膜スクリーンの前記球体の半径は、10~15mmであるようにした。人の眼球の眼軸長は正視の大人で24mm~26mm程度であるが、子供で20mm、強度近視の大人で30mm程度と知られている。そのため、前記球体の半径を10~15mmとすることで、様々な年齢の様々な視力の被装用者の網膜に映る状態を再現できるようになる。
また、第7の手段として、前記網膜スクリーンの前記球体の半径は、20~60mmであるようにした。このようにすることで、実際の眼球よりも大きな網膜スクリーンに大きく映像を投影することができる。実際の眼球の大きさの2~3倍の大きさにすることになるため、スクリーンに映る画像が大きくなり、被装用者や第三者などの観察者が、画像を確認しやすくなる。ここで、網膜スクリーンの前記球体の半径は大きければ大きいほど(実際の眼球よりも大きくするほど)画像を大きく映すことができるが、眼鏡型画像表示装置を保持するためのマスク模型の内部に納まる必要があるため、最大でも実際の眼球の3倍程度であることがよい。眼鏡型画像表示装置が網膜投影HMDである場合には、光線がレーザー光であるため、眼球と相似形状で網膜スクリーンを大きくすれば、被装着者が装着した際の画像を大きな画像にて確認することができる。眼鏡型画像表示装置が網膜投影HMDでない場合には、実際の眼の場合と同じになるように、眼鏡型画像表示装置から投影された画像の焦点をレンズ等で調整することがよい。
また、第8の手段として、前記マスク模型と前記網膜スクリーンは、それぞれ独立に任意の方向へ回転できる構造を持つようにした。前記マスク模型を回転できる構造を持たせることで、被装着者が顎を上げたり首を振ったりするなど、顔を動かした時を再現できるようになり、前記網膜スクリーンを回転できる構造を持たせることで、被装着者が眼を動かしたときを再現できるようになる。このようにすることで、眼鏡型画像表示装置の映像が、どの程度の眼の回旋量でどのように見えるのかなどを再現できるようになる。
Further, as a sixth means, the radius of the sphere of the retinal screen is 10 to 15 mm. The axial length of the human eyeball is approximately 24 mm to 26 mm for emmetropic adults, 20 mm for children, and approximately 30 mm for severely myopic adults. Therefore, by setting the radius of the sphere to 10 to 15 mm, it becomes possible to reproduce the conditions reflected on the retinas of wearers of various ages and with various visual acuities.
Further, as a seventh means, the radius of the sphere of the retinal screen is 20 to 60 mm. By doing so, it is possible to project a large image onto a retinal screen that is larger than the actual eyeball. Since the size is two to three times the actual size of the eyeball, the image displayed on the screen becomes larger, making it easier for observers such as the wearer and third parties to confirm the image. Here, the larger the radius of the sphere of the retinal screen (the larger it is than the actual eyeball), the larger the image can be projected, but the larger the radius of the sphere is, the larger the image can be projected. Because of the necessity, it is preferable that the size is at most three times the actual eyeball. If the eyeglass-type image display device is a retinal projection HMD, the light beam is a laser beam, so if the retinal screen is made larger with a similar shape to the eyeball, the wearer can check the image on a larger screen when wearing the device. can do. When the eyeglass-type image display device is not a retinal projection HMD, it is preferable to adjust the focus of the image projected from the eyeglass-type image display device with a lens or the like so that it is the same as that of the actual eye.
Moreover, as an eighth means, the mask model and the retinal screen have a structure that allows them to rotate independently in any direction. By providing a structure that allows the mask model to rotate, it becomes possible to reproduce when the wearer moves his or her face, such as lifting the chin or shaking the head, and by providing a structure that allows the retinal screen to rotate. This makes it possible to reproduce the situation when the wearer moves his or her eyes. By doing so, it becomes possible to reproduce how the image on the eyeglass-type image display device looks depending on the amount of rotation of the eye.
また、第9の手段として、前記網膜スクリーンに前記被装着者が目視した際の画像を想定して投影するためのレンズを有するようにした。
眼鏡型画像表示装置が網膜投影眼鏡型HMDの場合には、前記網膜投影スクリーンに直接映像が投影されるため必ずしもレンズは必要ないが、被装着者が能動的に虚像を目視する眼鏡型HMDの場合には、眼鏡型画像表示装置から投影される画像を網膜スクリーン上に結像させるためのレンズが必要になる。このとき、前記網膜スクリーンに前記被装着者が目視した際の画像を想定して、網膜スクリーンへの結像させるような非球面のレンズ形状であることがよい。このような非球面形状は、光線追跡などの方法により光学設計することができる。また、光学設計において、レンズを結像状態は、被装着者の水晶体を通過した光線の結像状態を再現するものであることが被装着者の見え方をより再現できるためよい。
また第10の手段として、前記レンズは前記透孔に対して接近又は離間可能に配置されているようにした。
眼球の大きさの違いや、近視や遠視の度数に合わせてレンズと網膜であるスクリーンの位置を調節するためである。また、眼鏡型画像表示装置に表示されている画像までの距離は眼鏡型画像表示装置ごとに異なるため、その距離を補正して網膜スクリーンに結像させるためである。これによって、人の眼に近い様々な画像表示をスクリーンにすることができる。
また、第11の手段として、前記網膜スクリーンは、前記被装着者が目視した際の画像を前記被装着者の加齢による見え方を疑似的に再現して投影する調整フィルターを有するようにした画像投影装置であることをその特徴とする。
これによって、被装着者の加齢による見え方を疑似的に再現する調整フィルターを通して画像が網膜スクリーンに投影されることとなる。ヒトの水晶体は、加齢とともに黄色く変色し、短波長の光の透過率が減少することから、網膜に青い光が到達しにくく短波長領域の色の弁別能力が低下し、画像が黄色や茶色、赤みがかって見えることになる。この加齢による変色の程度を疑似的に再現するフィルターを通した画像を網膜スクリーンに投影することで、画像表示装置を目視した際の加齢による色弁別の低下度合いを評価できることとなる。この調整フィルターの製作に当たっては、色調や濃度が調整されるだけでなく、分光透過率が制御されているとよい。
また、第12の手段として、前記網膜スクリーンは、前記被装着者が目視した際の画像を前記被装着者の眼疾患による見え方を疑似的に再現して投影する調整フィルターを有するようにした画像投影装置であることをその特徴とする。
これによって、被装着者の眼疾患による見え方を疑似的に再現する調整フィルターを通して画像が網膜スクリーンに投影されることとなる。眼疾患として、白内障や加齢黄斑変性、視野狭窄、網膜色素変性症、飛蚊症などが挙げられるが、角膜、水晶体、硝子体、網様体、虹彩など、網膜よりも前方にある眼球構造の異常や特性に由来する疾患が対象となる。例えば、白内障の場合には、散乱の程度を調整することで疑似的に白内障の見え方を再現するフィルターを用いることがよい。また、視野狭窄の場合には、視野の掛け具合を再現したフィルターを用いることがよい。ここで、「調整フィルター」は板状やレンズ上が好ましいがそれに限らない。例えば、飛蚊症などの場合には、球状の網膜スクリーンの内部にゲル・透明樹脂・ガラス等を充填し、そのゲル・透明樹脂・ガラス等に脈理や部分的な固形物を生成しておくことで飛蚊症を疑似的に再現する調整フィルターとすることができる。充填するのは必ずしも個体である必要は無い。例えば2枚の透明樹脂の間に液体を満たし固形物を封入してもよい。
Further, as a ninth means, the retinal screen is provided with a lens for projecting an image assumed to be viewed by the wearer on the retinal screen.
When the eyeglass-type image display device is a retinal projection eyeglass-type HMD, the image is directly projected onto the retinal projection screen, so a lens is not necessarily required. In some cases, a lens is required to focus the image projected from the eyeglass-type image display device onto the retinal screen. At this time, it is preferable that the lens has an aspherical lens shape that forms an image on the retinal screen assuming an image that the wearer views on the retinal screen. Such an aspherical shape can be optically designed by a method such as ray tracing. In addition, in optical design, it is preferable that the imaging state of the lens be such that it reproduces the imaging state of light rays that have passed through the crystalline lens of the wearer, since this can better reproduce the way the wearer sees.
Moreover, as a tenth means, the lens is arranged so as to be able to approach or move away from the through hole.
This is to adjust the position of the lens and retina screen, depending on the size of the eyeballs and the degree of nearsightedness or farsightedness. Further, since the distance to the image displayed on the eyeglass-type image display device differs depending on the eyeglass-type image display device, the purpose is to correct the distance and form the image on the retinal screen. As a result, various image displays similar to those seen by the human eye can be displayed on the screen.
Furthermore, as an eleventh means, the retinal screen has an adjustment filter that projects an image viewed by the wearer that simulates the appearance of the wearer due to aging. Its feature is that it is an image projection device.
As a result, an image is projected onto the retinal screen through an adjustment filter that simulates the appearance of the wearer as he or she ages. The human crystalline lens turns yellow with age and its transmittance for short wavelength light decreases, making it difficult for blue light to reach the retina and reducing the ability to discriminate colors in the short wavelength range, resulting in images that appear yellow or brown. , it will appear reddish. By projecting an image passed through a filter that simulates the degree of discoloration due to age onto a retinal screen, it is possible to evaluate the degree of decline in color discrimination due to age when viewing the image display device. When manufacturing this adjustment filter, it is preferable not only to adjust the color tone and density but also to control the spectral transmittance.
Further, as a twelfth means, the retinal screen has an adjustment filter that projects an image viewed by the wearer that simulates the way the wearer sees due to an eye disease. Its feature is that it is an image projection device.
As a result, an image is projected onto the retinal screen through an adjustment filter that simulates the way the wearer sees due to his/her eye disease. Eye diseases include cataracts, age-related macular degeneration, tunnel vision, retinitis pigmentosa, and floaters. The targets are diseases derived from abnormalities and characteristics of. For example, in the case of cataracts, it is preferable to use a filter that simulates the appearance of cataracts by adjusting the degree of scattering. In addition, in the case of visual field narrowing, it is preferable to use a filter that reproduces the degree of visual field coverage. Here, the "adjustment filter" is preferably in the form of a plate or on a lens, but is not limited thereto. For example, in the case of floaters, the inside of a spherical retinal screen is filled with gel, transparent resin, glass, etc., and striae or partial solid matter is generated in the gel, transparent resin, glass, etc. It can be used as an adjustment filter to simulate floaters. What is filled does not necessarily have to be solid. For example, a liquid may be filled between two sheets of transparent resin to encapsulate a solid substance.
また第13の手段として、前記網膜スクリーンに映る画像を撮影するための撮影装置が配置されているようにした。
これによって、スクリーンの画像を記録することができ、取得した画像をフィルター処理や拡大などのデジタル処理をすることで細部まで分析することが可能となる。撮影装置は画像を記録することができればよく、例えばスチールカメラ、ビデオカメラ等がよい。配置する位置としては例えばスクリーンの後方がよい。
また第14の手段として、前記撮影装置によって撮影された画像の画像データはモニターに出力されるようにした。
撮影装置によって撮影された画像がモニターに出力されれば、モニターをみることで直接網膜スクリーンを見なくとも確認でき、また拡大してより細かな部分を確認したりすることもできる。コンピュータ装置のモニターであることがよい。コンピュータ装置によって併せて保存したり、データを修正したり、解析したりすることが可能となる。このように、前記画像投影装置は、撮影装置、モニター、コンピュータ装置、コンピュータ装置上で動作するプログラム等を含むシステムであることがよい。
また第15の手段として、前記眼鏡型画像表示装置は、網膜投影眼鏡型ヘッドマウントディスプレイであるようにした。網膜投影眼鏡型ヘッドマウントディスプレイは、網膜に直接画像を投影する装置であるため、簡易な構成で網膜スクリーンに画像を投影できるためよい。
また第16の手段として、第1の手段~第12の手段のいずれかの画像投影装置は、前記眼鏡型画像表示装置を被装着者が装着して目視した際の画像を評価するための評価装置であるようにした。
網膜スクリーンに投影される画像の質(結像状態やゆがみ、色収差などの光学系由来の収差、画像度などの画質や、画角など)を評価することにより、眼鏡型画像表示装置を装着した際に被装着者が目視する画像を、非装着状態で客観的に評価することができる。そのため、画像投影装置は評価装置でもある。
また第17の手段として、第1の手段~第12の手段のいずれかの画像投影装置は、眼鏡型画像表示装置を被装着者が装着して目視した際の画像を確認するための展示装置であるようにした。
画像投影装置はその画像を被装着者や第三者に確認させることで、眼鏡型画像表示装置を装着した際に被装着者が目視する画像を、非装着状態で提示することができる。この展示装置は、見え方を確認したい複数の眼鏡型画像表示装置を取り換えて画像を投影することにより、異なる製品の違いを目視等で確認することが可能になる。
Further, as a thirteenth means, a photographing device for photographing an image reflected on the retinal screen is arranged.
This allows the screen image to be recorded, and by digitally processing the captured image, such as filtering and enlarging, it becomes possible to analyze it in detail. The photographing device only needs to be capable of recording images, and is preferably a still camera, a video camera, or the like. For example, it is preferable to place it behind the screen.
Further, as a fourteenth means, image data of an image photographed by the photographing device is outputted to a monitor.
If the image taken by the imaging device is output to the monitor, it can be checked by looking at the monitor without looking directly at the retinal screen, and it can also be enlarged to check finer details. Preferably, it is a monitor for a computer device. Computer equipment also allows for storage, modification, and analysis of the data. In this way, the image projection device is preferably a system including a photographing device, a monitor, a computer device, a program running on the computer device, and the like.
Furthermore, as a fifteenth means, the eyeglass-type image display device is a retinal projection eyeglass-type head-mounted display. The retinal projection glasses type head-mounted display is a device that projects an image directly onto the retina, so it is advantageous because it can project an image onto the retinal screen with a simple configuration.
Further, as a sixteenth means, the image projection device of any one of the first means to the twelfth means performs an evaluation for evaluating an image when the wearer wears and visually views the eyeglass-type image display device. It was designed to be a device.
By evaluating the quality of the image projected on the retinal screen (imaging condition, distortion, aberrations caused by the optical system such as chromatic aberration, image quality such as image resolution, angle of view, etc.), the eyeglass-type image display device is attached. Images visually viewed by the wearer can be objectively evaluated without the wearer wearing the wearer. Therefore, the image projection device is also an evaluation device.
Further, as a seventeenth means, the image projection device according to any one of the first means to the twelfth means is an exhibition device for confirming an image when a wearer wears the eyeglass-type image display device and visually views it. I made it so that
By having the wearer or a third party confirm the image, the image projection device can present an image that the wearer would see when wearing the eyeglass-type image display device, even when the wearer is not wearing the glasses. This display device makes it possible to visually confirm the differences between different products by replacing the plurality of eyeglass-type image display devices whose appearance you want to see and projecting images.
また第18の手段として、眼鏡型画像表示装置を被装着者が装着して目視した際の画像を、前記被装着者が前記眼鏡型画像表示装置を非装着の状態で、装着状態を模して評価するための評価方法において、少なくとも眼位置に形成された透孔と、耳輪部位置に形成された第1の支持部と、鼻根から鼻背にかけての外鼻部位置に形成された第2の支持部と、を有する人の頭部分のマスク模型と、前記透孔の背後に配置され、投影された画像を視認可能に表示する網膜スクリーンと、を備え、前記第1の支持部と前記第2の支持部によって前記眼鏡型画像表示装置を支持し、前記スクリーンに前記眼鏡型画像表示装置の画像を投影した際の画像を投影させることで得られる、前記スクリーンの画像変化に基づいて前記眼鏡型画像表示装置の光学系を評価するようにした。
このようにすることで、眼鏡型画像表示装置を被装着者が装用して目視した際の画像を、非装着状態で評価し、網膜スクリーンに投影された画像の質より眼鏡型画像表示装置の光学系、すなわち、眼鏡型画像表示装置を装着して目視した際の画像の見え方を評価することができる。
例えば、眼鏡型画像表示装置を他の種類に変えたことによる画像の違い(変化)によって、眼鏡型HMDとしてのその眼における好適な眼鏡型HMDがどちらであるかを比較して評価したり、例えば、画像の条件を変えることによって画像の条件に応じた最適な眼鏡型HMDを選んだりすることである。画像の条件の違い、とは、例えば眼球に当たるスクリーンを水平方向に回動させたり、例えば頭部に当たるマスク模型を動かして眼鏡に投影される画像やユーザーの網膜に直接投影される画像の背景となる外界の景色を変化させる場合などである。
Furthermore, as an eighteenth means, an image viewed when the wearer wears the eyeglass-type image display device is simulated in a state where the wearer does not wear the eyeglass-type image display device. In the evaluation method for evaluating the performance of the patient, at least a through hole formed at the eye position, a first support part formed at the helix position, and a first support part formed at the external nasal position from the root of the nose to the dorsum of the nose. a mask model of a human head portion having a second support part; and a retinal screen disposed behind the through hole to visibly display a projected image, the first support part and Based on an image change of the screen obtained by supporting the glasses-type image display device by the second support part and projecting an image of the glasses-type image display device onto the screen. The optical system of the eyeglass-type image display device was evaluated.
By doing this, the image when the wearer wears the eyeglass-type image display device and views it without wearing it is evaluated, and the quality of the image projected on the retinal screen is evaluated based on the quality of the eyeglass-type image display device. It is possible to evaluate how an image looks when visually viewed while wearing an optical system, that is, a glasses-type image display device.
For example, depending on the difference (change) in the image caused by changing the eyeglass-type image display device to another type, it is possible to compare and evaluate which eyeglass-type HMD is suitable for the eye as the eyeglass-type HMD, For example, by changing the image conditions, an optimal glasses-type HMD can be selected according to the image conditions. Differences in image conditions include, for example, rotating the screen that hits the eyeball in the horizontal direction, moving the mask model that hits the head, and changing the background of the image that is projected onto glasses or the image that is projected directly onto the user's retina. For example, when changing the scenery of the external world.
また第19の手段として、前記評価は前記網膜スクリーンを前記透孔に対して接近又は離間させた際の画像変化を分析した結果に基づいて行うようにした。
このようにすることで、例えば、大人と子供や、近視と遠視など、眼の大きさの異なる被装用者においてどのように眼鏡型画像表示装置の画像が提示されるのか、すなわち、どのように見えるのかを評価することができる。ここで評価とは、例えば単に網膜スクリーンに投影された画像を見て主観的に判断してもよく、網膜スクリーンに投影された画像をコンピュータで分析して焦点が合っている画像になっているかなどを分析した上で評価してもよい。
また、第20の手段として、第18又は第19の手段において、前記評価は前記スクリーンを回動させた際の画像変化を分析した結果に基づいて行うようにした。
また、第21の手段として、第17の手段~第20の手段において、前記評価は前記マスク模型を回動させた際の画像変化を分析した結果に基づいて行うようにした。
これらのようにすることで、眼球を動かした時の画像の変化や、顔を動かした時の画像の変化を評価できることとなるため、例えば、眼鏡型画像表示装置に表示される映像の画角や、眼を回転させた時の視認性が良いかどうか、映像に対する酔い易さ、画像のゆがみなどを評価できることとなる。
Furthermore, as a nineteenth means, the evaluation is performed based on the results of analyzing image changes when the retinal screen is moved closer to or farther away from the through hole.
By doing this, it is possible to determine how images on the eyeglass-type image display device are presented to users with different eye sizes, such as adults and children, or nearsightedness and farsightedness. You can evaluate whether you can see it. Evaluation here can be made by simply looking at the image projected on the retinal screen and making a subjective judgment, or by analyzing the image projected on the retinal screen using a computer to determine whether the image is in focus. You may evaluate after analyzing the following.
Further, as a twentieth means, in the eighteenth or nineteenth means, the evaluation is performed based on the result of analyzing the image change when the screen is rotated.
Further, as a twenty-first means, in the seventeenth means to the twentieth means, the evaluation is performed based on the result of analyzing an image change when the mask model is rotated.
By doing this, it is possible to evaluate the changes in the image when the eyeballs are moved or the image changes when the face is moved. It is possible to evaluate things such as whether visibility is good when the eyes are rotated, how easy it is to get motion sickness when viewing images, and image distortion.
また、第22の手段として、第17の手段~第21の手段において、前記網膜スクリーンの画像は撮影装置によって撮影されてその画像データはコンピュータ装置に出力され、前記コンピュータ装置のソフトウェアによって分析した結果に基づいて前記評価がされるようにした評価システムであることをその特徴とする。
これによって、眼鏡型画像表示装置を装着した際に目視する画像がどのように見えるか、コンピュータ装置のソフトウェアによって客観的で正確な評価をする評価システムを提供することが可能となる。
Further, as a twenty-second means, in the seventeenth means to twenty-first means, the image of the retinal screen is photographed by a photographing device, the image data is output to a computer device, and the result is analyzed by software of the computer device. A feature of the evaluation system is that the evaluation is performed based on the following.
As a result, it is possible to provide an evaluation system that objectively and accurately evaluates how the image viewed when wearing the eyeglass-type image display device is viewed using the software of the computer device.
上記発明では、被装着者が眼鏡型画像表示装置を装着した際に目視する画像がどのように見えるか、非装着状態において客観的に見ることができる。そのため、開発者の開発の際の一助になる。また、開発者以外でも、例えば、一般の人々に眼鏡型画像表示装置を装着した際に目視する画像を非装着状態においてデモンストレーション的に見せることができ、第三者にどのような画像が映るものかを実感させることができる。 In the above invention, it is possible to objectively see how an image viewed when the wearer wears the eyeglass-type image display device is seen when the wearer is not wearing the eyeglass-type image display device. Therefore, it helps developers during development. In addition, even people other than the developer can, for example, demonstrate the images that the general public would see when wearing the eyeglass-type image display device when they are not wearing it. It can make you feel that way.
以下、本発明の具体的な実施の形態について図面に基づいて説明する。
(実施の形態1)
図1~図3に示すように、本発明の実施の形態1の画像投影装置、展示装置又は評価装置の一部となるマスク模型1は基盤としての平板で硬質なベース板2の上に固着されている。マスク模型1は頭部の3Dデータに基づいて3Dプリンターによって製造されている。本実施の形態のマスク模型1は乳白色に濁った光透過性のあるPLA樹脂で構成されている。マスク模型1は眉間から小鼻(鼻翼)にかけての領域が頭部外周に沿って帯状かつリング状に構成されている。マスク模型1の上下端面は平行でかつ水平になるようにカットされている。マスク模型1は頭部(顔面)外面の凹凸に応じた凹凸面を有するマスクであり、本実施の形態では一例として2.5mm厚さに構成されている。マスク模型1の前面中央位置には外鼻部1aが形成されている。外鼻部1aの左右の眼となる位置には眼球を露出させるための眼孔としての透孔1bが形成されている。マスク模型1の左右側面位置には耳介の一部である耳輪部1cが形成されている。
Hereinafter, specific embodiments of the present invention will be described based on the drawings.
(Embodiment 1)
As shown in FIGS. 1 to 3, a
実施の形態1では、マスク模型1によって包囲される領域の内側であって、ベース板2の上に網膜スクリーン装置3又はカメラ付き網膜スクリーン装置4のいずれかが配置される。図1、図2及び図4に基づいて網膜スクリーン装置3を、図3及び図5に基づいてカメラ付き網膜スクリーン装置4について説明する。
図1、図2及び図4に示すように、網膜スクリーン装置3は疑似網膜と疑似眼球を兼ねた疑似眼球体5を備えている。疑似眼球体5はマスク模型1と同様3Dデータに基づいて3Dプリンター又は金型、ゴムの簡易型を用いた樹脂成型等、もしくは、樹脂材を切削等する事等によって製造されている。疑似眼球体5は乳白色に濁った光透過性のあるPLA樹脂で構成されている。疑似眼球体5はほぼ真球状に構成され、前方に円形の瞳を模した透孔6が形成されている。疑似眼球体5の透孔6に対面した後方側領域が人の眼において網膜が形成される領域となる網膜を模したスクリーン領域Sとされる。
疑似眼球体5の下方には筒状の取り付け部7が形成され、取り付け部7の内周には雌ネジ8が形成されている。疑似眼球体5は架台9に対して高さ調整部材としての雄ネジ10よって支持されている。架台9は円柱形状に構成されたプラスチック製の中実体である。雄ネジ10は架台9上面中央位置に立設固定されている。疑似眼球体5は取り付け部7の雌ネジ8が雄ネジ10に螺合されており、疑似眼球体5と雄ネジ10とを相対的に回動させることによって雄ネジ10の軸方向に沿って疑似眼球体5を進退させて疑似眼球体5の高さを変更することができる(つまり調節可能である)。
In the first embodiment, either the
As shown in FIGS. 1, 2, and 4, the
A
図3及び図5に示すように、カメラ付き網膜スクリーン装置4も網膜スクリーン装置3と同様に疑似網膜と疑似眼球を兼ねた疑似眼球体15を備えている。疑似眼球体15は網膜スクリーン装置3の疑似眼球体5と同様3Dデータに基づいて3Dプリンターによって製造されている。疑似眼球体15も乳白色に濁った光透過性のあるPLA樹脂で構成されている。疑似眼球体15は中空の球体であってほぼ真球状に構成され、前方に円形の瞳を模した透孔16が形成されている。疑似眼球体15の透孔16に対面した後方側領域が人の眼において網膜が形成される領域となる網膜を模したスクリーン領域Sとされる。
疑似眼球体15はカメラ支持プレート17と接合されている。カメラ支持プレート17は疑似眼球体15の後方に延出され、ブラケット18を介して撮影手段としてのカメラ19が載置されている。カメラ19はスクリーン領域Sの全域を撮影できる画角を有する。
疑似眼球体15及びカメラ支持プレート17は架台20に対して高さ調整部材としての支柱21によって支持されている。架台20は円柱形状に構成されたプラスチック製の中実体である。架台20上面中央位置に支柱支持部22が形成されており、支柱21は支柱支持部22内に嵌合されている。支柱21先端寄り外周には雄ネジ23が形成されており、支柱支持部22内周に形成された雌ネジ24に螺合されている。そのため、支柱21と架台20とを相対的に回動させることによって支柱21は架台20に対して軸方向に沿って進退する(上下する)ため疑似眼球体15及びカメラ19の高さを調整することが可能となっている。
As shown in FIGS. 3 and 5, like the
The
The
図1~図3に示すように、マスク模型1には眼鏡25が設置される。眼鏡25は装用者側から見た際の左側のテンプル26側には網膜投影HMDとしての網膜投影装置が内蔵されている。網膜投影装置はテンプル26内に内蔵されたレーザー光射出装置27と、レーザー光源34と、レーザー光源34からレーザー光射出装置27へレーザー光を送出する光ファイバー32とから構成される。レーザー光による情報はレーザー光射出装置27から左側のレンズ28に向かって照射されるようになっている。左側のレンズ28の眼球側にはミラー29が配設されている。眼鏡25はマスク模型1の外鼻部1aと耳輪部1cを支持部として支持されるようになっており、支持状態で左右のレンズ28がマスク模型1の左右透孔1bの前面にそれぞれ配置される。
As shown in FIGS. 1 to 3,
このような構成において、マスク模型1に眼鏡25が設置された(掛けさせた)状態で、網膜スクリーン装置3又はカメラ付き網膜スクリーン装置4のいずれかを選択してマスク模型1の左側透孔1bの後位置のベース板2の上に配置する。そして、網膜投影装置を操作してそのスイッチをオン状態とすることで、レーザー光の画像がミラー29に反射されて、疑似眼球体5のスクリーン領域Sに投射される(図6及び図7の状態)。
実施の形態1において図1、図2及び図4では網膜スクリーン装置3を設置した状態であり、図3及び図5はカメラ付き網膜スクリーン装置4を設置した状態である。
図6に示すように、カメラのない網膜スクリーン装置3を設置した場合は主としてディスプレイ装置として疑似眼球体5のスクリーン領域Sに画像を投射させる。例えば、網膜投影装置を備えた眼鏡25がどのような見え方をするのかをデモンストレーションとして実検させることができる。特に、マスク模型1は頭部上方がカットされた形状であるため、看者は上方斜め後方からのぞき込むことで網膜スクリーン装置3のスクリーン領域Sを正確に背面から目視することができる。また、マスク模型1はベース板2と一体化しているため、ベース板2を回転させることでマスク模型1と網膜スクリーン装置3はスクリーン領域Sに画像を投射させたまま向きを変えることができる。また、網膜スクリーン装置3はマスク模型1と違い固定されていないため、疑似眼球体5を回動させたり前後に移動させたりしえ透孔6の向きをずらして、スクリーン領域Sに投影される画像がどのように変化するかを実検することができる。
また、図7のようにカメラ付き網膜スクリーン装置4であればデモンストレーションとして実検させることもできるが、カメラ19で撮影した画像データをコンピュータ装置30に出力し、そのディスプレイ画面32に拡大画像を表示させてデモンストレーションを行ったり、拡大画像に基づいて画像を分析し、その結果として網膜投影装置を評価することができる。また、コンピュータ装置30内のソフトウェア(プログラム)によって画像データに基づいてその画像を分析し、その結果として網膜投影装置を評価することができる。つまり、カメラ付き網膜スクリーン4を選択した場合にはディスプレイ装置であり網膜投影装置の評価装置でもある。
In such a configuration, with the
In the first embodiment, FIGS. 1, 2, and 4 show a state in which a
As shown in FIG. 6, when a
Furthermore, as shown in FIG. 7, if the
(実施の形態2)
次に図8(a)~(c)及び図9に基づいて実施の形態2について説明する。実施の形態2では、実施の形態1と同じマスク模型1、ベース板2、眼鏡25、レーザー光源34等を使用しており、カップ型スクリーン装置35のみが異なる。そのため、カップ型スクリーン装置35についてのみ詳しく構成を説明する。
カップ型スクリーン装置35を網膜スクリーン装置3やカメラ付き網膜スクリーン装置4のような眼球様のスクリーンではないタイプとしたものであって、実施の形態1と同様に左側透孔1bの後位置のベース板2の上に配置する。
図8(a)(b)に示すように、実施の形態2のカップ型スクリーン装置35は実施の形態1とは異なりスクリーンが疑似眼球体ではなく、上記疑似眼球体5、15のスクリーン領域Sに対応する球冠状の領域のみからなるカップ型スクリーン36を備えている。カップ型スクリーン36は疑似眼球体15は乳白色に濁った光透過性のあるPLA樹脂で構成されている。カップ型スクリーン36は支柱37によって架台38上に凹側の面が前方を指向するように固定されている。架台38は直方体形状の中空の箱体であって、後方にはブラケット39によって支持された撮影手段としてのカメラ40が配設されているカメラ40はカップ型スクリーン36の全域を撮影できる画角を有する。架台38の天板38aの前方寄り下方位置には棚板41が吊り下げ状に配置されている。棚板39の上位置の天板38a部分には前後に伸びる溝42が形成されている。天板38aと棚板41によってレンズスライド部43が形成される。
レンズスライド部43にはレンズセット44が配設されている。レンズセット44はレンズフレーム45に着脱可能に支持された水晶体を模したレンズ46と、レンズフレーム45を支持する支柱47と、支柱47を支持する方形のスライダ48とから構成されている。レンズフレーム45はフランジ部45aにおいて雌ネジが形成された取り付け孔49に対してネジ50を使用して締め付け固定されており、ネジ50を緩めることでレンズ46をレンズフレーム45から取り外して交換することができる。
レンズセット44はスライダ47が棚板41に載置されてレンズスライド部43に収容されており、天板38a上面に延出された支柱46は溝42の長手方向に沿って前後移動可能とされている。この収容状態でレンズ46はカップ型スクリーン36の前面に配置されレンズ46の光軸方向はカップ型スクリーン36の中心位置を指向する。レンズ46のカップ型スクリーン36に対する相対的な距離は支柱46が溝42に沿って前後移動することによって変更することが可能とされている。溝42に沿ってレンズセット44の前後移動した際の位置を示す目盛り51が刻設されている。
(Embodiment 2)
Next, Embodiment 2 will be described based on FIGS. 8(a) to 8(c) and FIG. 9. In the second embodiment, the
The cup-shaped
As shown in FIGS. 8(a) and 8(b), the cup-shaped
A lens set 44 is arranged in the
In the lens set 44, a
このような構成において、マスク模型1に眼鏡25を掛けさせた状態で、カップ型スクリーン装置35をベース板2上であってマスク模型1の左側透孔1bの後方位置に配置する。そして、網膜投影装置を操作してそのスイッチをオン状態とすることで、レーザー光の画像がミラー29に反射されて疑似眼球体であるカップ型スクリーン36に投射される(図9の状態)。
実施の形態2のカップ型スクリーン装置35はカメラ40付きであるため、実施の形態1と同様にカメラ40で撮影した画像データをコンピュータ装置30に出力し、そのディスプレイ画面31に拡大画像を表示させてデモンストレーションを行ったり、拡大画像に基づいて画像を分析し、その結果として網膜投影装置を評価することができる。また、コンピュータ装置30内のソフトウェア(プログラム)によって画像を分析し、その結果として網膜投影装置を評価することができる。また、装用するユーザーの視力や眼球の大きさの違いを想定して、適宜レンズセット44を移動させて条件を変更することで画像を分析し網膜投影装置を評価することができる。
In such a configuration, the cup-shaped
Since the cup-shaped
(実施の形態3)
次に図10及び図11(a)(b)に基づいて実施の形態3について説明する。実施の形態3では実施の形態1と同じマスク模型1、網膜スクリーン装置3、眼鏡25、レーザー光源34等を使用している。実施の形態3では基盤としてマスク模型1前面を上下方向に揺動させるための俯仰装置53を備えている。そのため、実施の形態3では俯仰装置53についてのみ詳しく構成を説明する。
俯仰装置53は架台52を備えている。架台52の天板52aは平板に構成され前下がりとなるように(つまり後方側が前方側に比べて高くなっている)配置されている。天板52a上にはマスク模型1が載置される基盤としての揺動プレート54が設置されている。揺動プレート54は側面視においてL字状に構成された幅広の板部材である。揺動プレート54は架台52の天板52a後方に固定された後背プレート56に対してヒンジ55によって連結されている。揺動プレート54はヒンジ55を揺動中心として上下方向に揺動可能に後背プレート56に支持されている。
架台52の天板52a上であって揺動プレート54内側前方寄りにはジャッキ装置57が配設されている。本実施の形態3ではジャッキ装置57はパンタグラフ式であり2つの下側アーム58と2つの上側アーム59によって構成されるリンク機構をネジ棒60を回動させることで図示しない雌ネジとの螺合関係によってリンク機構の左右の連結部61を接近・離間させる構成である。ネジ棒60はハンドル62によって揺動プレート54の外側から操作される。ジャッキ装置57は座板63を基準に押し板64によって揺動プレート54を押して上動させる。
このような俯仰装置53上にマスク模型1を載置し、マスク模型1背後に網膜スクリーン装置3を設置し、眼鏡25を掛けさせた状態で俯仰装置53を操作するものとする。ジャッキ装置57が最も下がっているデフォルト状態では図11(a)のようにマスク模型1は水平方向よりも若干下方向を向くような配置となる。作業者はハンドル62を回転させることでジャッキ装置57を操作し、徐徐にマスク模型1を上方向に向かせていく。図11(b)はほぼ水平方向を向いた状態である。ジャッキ装置57を操作することで水平方向よりも上を向くような位置に配置することができる。
このように、ハンドル62によってジャッキ装置57を操作することでマスク模型1前面を上下方向に揺動させることができ、そのように揺動させることによって変化する外界画像(つまり投影された画像の背景画像)を分析して網膜投影装置を評価することができる。揺動量はハンドル62の回転数や揺動プレート54の上面の角度、揺動プレート54と架台52の天板52aとの離間距離等によって測定可能である。
(Embodiment 3)
Next,
The elevating device 53 includes a pedestal 52. The top plate 52a of the pedestal 52 is formed into a flat plate and is arranged so as to slant forward (that is, the rear side is higher than the front side). A swing plate 54 serving as a base on which the
A jack device 57 is disposed on the top plate 52a of the pedestal 52 on the inside front side of the swing plate 54. In the third embodiment, the jack device 57 is of a pantograph type, and a link mechanism constituted by two lower arms 58 and two upper arms 59 is screwed into a female thread (not shown) by rotating a threaded rod 60. The configuration is such that the left and right connecting portions 61 of the link mechanism are brought closer and separated depending on the relationship. The threaded rod 60 is operated from the outside of the swing plate 54 by a handle 62. The jack device 57 uses a push plate 64 to push the swing plate 54 upward with respect to the seat plate 63.
The
In this way, by operating the jack device 57 with the handle 62, the front surface of the
(実施の形態4)
次に図12(a)~(c)に基づいて実施の形態4について説明する。実施の形態4では実施の形態1と同じマスク模型1、カメラ付き網膜スクリーン装置4、眼鏡25等を使用している。実施の形態4では基盤としてマスク模型1前面を水平方向に回動させるための回動装置71を備えている。そのため、実施の形態4では回動装置71についてのみ詳しく構成を説明する。
回動装置71は架台72を備えている。図12(c)に示すように、架台72の天板72aの中央には上方に向かって突出する突起73が形成されている。図12(b)に示すように、実施の形態4ではマスク模型1は円形のベース板74上に固定されている。ベース板74の中央裏面位置には凹部75が形成されている。ベース板74はこの凹部75内に突起73が嵌合されることでこの部分を回動中心として架台72上において周方向に回動可能に載置されている。ベース板74裏面と架台72の天板72aは滑らかに構成されベース板74はストレスなく回動できる。架台72の天板72aのベース板74の前面に隣接した位置にはマスク模型1の位置を示す目盛り76が印刷されている。マスク模型1のデフォルト位置、つまり正面に正対した位置であってベース板74の上面には目印となるドット77が印刷されている。ドット77はデフォルト位置において目盛り76の中央位置方向に配置されている。
このような回動装置71上にマスク模型1を載置し、マスク模型1背後にカメラ付き網膜スクリーン装置4を設置し、眼鏡25を掛けさせた状態で回動装置71を操作するものとする。デフォルト位置に配置したマスク模型1をベース板74を回動させることで水平方向に向きを変えることができ、そのように回動させることによって首を水平に回動させた場合の変化する外界画像(つまり投影された画像の背景画像)を分析して網膜投影装置を評価することができる。マスク模型1の回動量は目盛り76に対するドット77位置の変位によって測定可能である。
(Embodiment 4)
Next,
The rotation device 71 includes a pedestal 72. As shown in FIG. 12(c), a projection 73 that projects upward is formed at the center of the top plate 72a of the pedestal 72. As shown in FIG. 12(b), in the fourth embodiment, the
The
(実施の形態5)
次に図13(a)(b)に基づいて実施の形態5について説明する。
実施の形態4ではマスク模型1、網膜スクリーン装置3が一緒に回動するケースであったが、マスク模型1とは独立で網膜スクリーン装置3が回動するように構成しても良い。図13(a)では前もってベース板2、74や揺動プレート54のようなスクリーンが設置される台の上に網膜スクリーン装置3の設置位置が決められ、その位置に突起81が形成されている。網膜スクリーン装置3の架台9の底面中心位置には突起81が嵌挿される小孔82(つまり、凹部)が形成されている。図13(b)に示すように、小孔82と突起81を照合させて網膜スクリーン装置3をセットすることで網膜スクリーン装置3はこの突起81と小孔82の係合位置を中心に周方向に回動できることとなる。突起81の周囲であって台上には架台9の径よりも大きな径の水平方向測定円83が印刷されている。水平方向測定円83の周囲には目盛りが形成されており、網膜スクリーン装置3はこの目盛りによってどの方向に向いているかを判断できる。このような網膜スクリーン装置3を使用すれば、首を回さずに眼だけで周囲の景色を追っている場合の変化する外界画像(つまり投影された画像の背景画像)を分析して網膜投影装置を評価することができる。
(Embodiment 5)
Next,
In the fourth embodiment, the
(実施の形態6)
次に図14に基づいて実施の形態6について説明する。実施の形態6は実施の形態1のバリエーションであり、実施の形態1の網膜スクリーン装置3の代わりに他の構成の網膜スクリーン装置91を使用する。網膜スクリーン装置91は疑似網膜と疑似眼球を兼ねた疑似眼球体92を備えている。疑似眼球体92はマスク模型1と同様3Dデータに基づいて3Dプリンターによって製造されている。疑似眼球体92は乳白色に濁った光透過性のあるPLA樹脂で構成されている。疑似眼球体92は真球状に構成され、前方に円形の瞳を模した透孔93が形成されている。疑似眼球体92の透孔93に対面した後方側領域が人の眼において網膜が形成される領域となる網膜を模したスクリーン領域Sとされる。疑似眼球体92は支持装置95によって支持されている。支持装置95は架台96と架台96に立設された支柱97と支持金具98とから構成されている。架台99は円柱形状に構成されたプラスチック製の中実体である。支柱97の下部寄り外周には雄ネジ97aが形成されており、架台96側の雌ネジ96aに螺合されている。そのため、架台99と支柱97とを相対的に回動させることによって支柱97は上下に進退する(つまり調節可能である)。支持金具98は支柱97上端に嵌着されるキャップ部98aと、キャップ部98a上部から上方に略U字状に延出されるアーム部98bと、アーム部98bの左右の先端内側に突出した一対の突起部98cから構成されている。突起部98cは疑似眼球体92の側面の直径位置に形成された図示しない凹部内に係合されている。突起部98cはアーム部98bの弾性によって付勢状態で疑似眼球体92を挟持しており、突起部98cに支持された疑似眼球体92は突起部98cの軸方向に対して回動可能に支持される。突起部98cは疑似眼球体92を充分な付勢力で保持しており、疑似眼球体5は垂直方向(俯仰方向)に回転し任意の角度で保持可能となっている。
このように構成することで、疑似眼球体5を俯仰させたり、疑似眼球体92の高さを変更したり、疑似眼球体92の透孔93の水平方向の向きを変えたりと様々な位置変化が可能となり、疑似眼球体92の透孔93の向きを自在に変えることができ、様々な目視状態を再現することが容易となり、スクリーン領域Sに投影される様々な画像の変化を実検することができる。
(Embodiment 6)
Next, a sixth embodiment will be described based on FIG. 14.
With this configuration, various positional changes can be made, such as elevating the
(実施の形態7)
上記実施の形態2では、カップ型スクリーン装置35の前方にレンズセット44を配設するようにして、疑似眼球体は用いないようにしていたが、図15(a)(b)に示すような疑似眼球体形状のスクリーン装置にレンズをセットするようなモデルでもよい。
図15(a)(b)に示す網膜スクリーン装置101では、疑似網膜と疑似眼球を兼ねた疑似眼球体102はテーブル103の左右の支柱104に支持されている。疑似眼球体102は真球状に構成され、前方に円形の瞳を模した透孔105が形成されている。疑似眼球体102の透孔105に対面した後方側領域が人の眼において網膜が形成される領域となる網膜を模したスクリーン領域Sとされる。透孔105の中心下方位置にはスリット106が形成されている。網膜スクリーン装置101にはレンズセット109が組み合わされる。レンズセット109は水晶体を模したレンズ110と、レンズ110を支持するワイヤ111及び支持プレート112とから構成されている。レンズ110の上下配置位置は支持プレート112をテーブル103上に設置した際の透孔105と照合させるように調節されている。このようなレンズ110と疑似眼球体102の位置関係の態様として「疑似眼球体と同化(実際の眼球と同じ位置)」、「疑似眼球体の外側」、「疑似眼球体の内側」の3種類が考えられる。このような網膜スクリーン装置101の背後にカメラのような撮影装置を配置することで、レンズの位置に応じた異なる画像を取得することができる。
このような構成によって、より実際の眼を想定したレンズの移動が可能となり、様々な目視状態を再現することが容易となり、スクリーン領域Sに投影される様々な画像の変化を実検することができる。
(Embodiment 7)
In the second embodiment described above, the lens set 44 is disposed in front of the cup-shaped
In the
With such a configuration, it is possible to move the lens in a way that more closely simulates the actual eye, making it easy to reproduce various visual conditions, and making it possible to actually inspect changes in various images projected onto the screen area S. can.
(実施の形態8)
次に図16(a)~(c)、図17(a)~(c)等に基づいて実施の形態8について説明する。実施の形態8は実施の形態1のバリエーションで実施の形態1と同じベース板2、眼鏡25、レーザー光源34等を使用し、マスク模型121と網膜スクリーン装置123の構成が異なる。そのため、以下ではマスク模型123と網膜スクリーン装置123についてのみ詳しく構成を説明する。
図16(a)~(c)に示すように、実施の形態8のマスク模型121は、後頭に観察窓122を有する構成になっている。実施の形態8のマスク模型121は実施の形態1のマスク模型1と同様の素材で構成され、上下端面は平行でかつ水平になるようにカットされている。マスク模型121には実施の形態1のマスク模型1と同様に外鼻部121a、透孔121b、耳輪部121cが形成されている。マスク模型121の透孔121bは上下まぶたのない眼窩の輪郭に略沿った円形形状に形成されている。マスク模型121では図示していないが、まぶたを形成するなどしてもよい。マスク模型121は両耳輪部121c後方位置でカットされて非透光性素材からなる遮光壁125が配設されている。遮光壁125には横長長方形形状の観察窓122が形成されている。観察窓122の縁に隣接した遮光壁125の4つの位置には目盛り127が刻設されている。目盛り127は網膜スクリーン装置123を移動させたり取り替えたり等した際の見え方の違いを客観的に比較する際に用いられる。マスク模型121の上面にはマスク模型121内部を遮光するための遮光屋根部128が設置されている。
(Embodiment 8)
Next,
As shown in FIGS. 16(a) to 16(c), the mask model 121 of the eighth embodiment has an observation window 122 at the back of the head. The mask model 121 of the eighth embodiment is made of the same material as the
実施の形態8においては、図17(a)に示す内殻部135A~135Cの違いによって複数種類の網膜スクリーン装置123を使用可能である。網膜スクリーン装置123は実施の形態1の網膜スクリーン装置3と同様に疑似眼球体130を備えている。疑似眼球体130は中空の球体であってほぼ真球状に構成され、前方に円形の瞳を模した透孔131が形成されている。疑似眼球体130の透孔131に対面した後方側領域が人の眼において網膜が形成される領域となる網膜を模したスクリーン領域Sとされる。実施の形態8の疑似眼球体130も実施の形態1と同様に架台132に対して高さ調整部材としての雄ネジ133よって支持されている。
疑似眼球体130は疑似眼球体5と同じ構成の乳白色に濁った光透過性のあるPLA樹脂からなる外殻部134と、外殻部134内に嵌合される球体で調整フィルターとしての透明な内殻部135との二重構造で構成されている。図18に示すように、外殻部134は透孔131を前方に配置した際の上下を極として極方向で前後に半球状に2分割されており、それらを接合して外殻部134が完成する。前方側に配置される半球体を前方外殻部134aとし、後方側に配置される半球体を後方外殻部134bとする。疑似眼球体130は前方外殻部134aを塗装などにより反射・吸収・散乱させ、又は不透明の別材料で作製する等して遮光する事で、透孔131を通った光のみをスクリーンに表示できるようになる。後方外殻部134bはスクリーンとして作用するため、ある程度の透過性を有し、透過した画像が背面より目視、または、撮影できるようになっている。透孔131の周りは黒や茶色に塗装等する事で虹彩を表現するなどすると、意図しない迷光が混入するのを防げるためよい。
内殻部135は外殻部134の半球形状に対応した半球形状に2分割されており、外殻部134の内周面に密着状に配置される。
図17(a)~(c)に示すように、実施の形態8では3種類の内殻部135A~135Cが用意されている。
図17(a)に示す内殻部135Aは、透明性の高いウレタンを重合時に線状の屈折率の異なる部分(「脈理」と呼称する)が散点的に発生する条件にて固めた飛蚊症の見え方を疑似的に再現したフィルターである。図17(b)に示す内殻部135Bは、透明なポリカーボネートから構成され、透孔131に面する領域は20歳のヒトの水晶体の色を模した薄い黄色に着色されている。図17(c)に示す内殻部135Cは、透明なポリカーボネートから構成され、透孔131に面する領域は60歳のヒトの水晶体の色を模した茶色に着色されるとともに若干すりガラス状に処理がされており白内障の見え方が再現されている。
In the eighth embodiment, a plurality of types of
The
The inner shell part 135 is divided into two hemispherical shapes corresponding to the hemispherical shape of the
As shown in FIGS. 17(a) to 17(c), in the eighth embodiment, three types of
The
このように構成することで、画像投影装置は次のような作用・効果が得られる。
まず、マスク模型121は遮光壁125と遮光屋根部128で覆われるため、マスク模型121内への採光が抑えられる。そのため観察窓122から覗いた場合には疑似眼球体130のスクリーン領域Sが特に明るく表示されることとなる。図19(a)~(c)は網膜投影HMDである眼鏡25を実施の形態8のマスク模型121に設置した(掛けさせた)状態における疑似眼球体130のスクリーン領域Sを観察窓122から目視した際の様子の例を図示したものである。
眼鏡25から長方形の画像を投影した場合、投影される画像が正しく網膜スクリーンに投影されると図19(a)のようになるが、同じ画像を投影しても眼鏡25が被装着者に対して位置がずれている場合、すなわち、画像の光軸がずれている場合には図19(b)のように変形した画像となる事になる。このような評価を用いれば、網膜投影HMDが正しく見えるように調整することができる。
また、網膜スクリーンに投影される画像の評価は、変形だけはなく、例えば、図17(a)の内殻部135Aを用いれば、網膜スクリーンに投影される画像は図19(c)のようになり、飛蚊症の被装着者が眼鏡25を用いた場合の見え方を評価できることとなる。また、図17(b)と図17(c)の内殻部135Bや内殻部135Cを入れ替えて用いれば、加齢による見え方の変化を評価できるようになる。このようにして様々な被装着者を想定して眼球スクリーンを交換して評価することで、加齢や眼疾患による見え方の差に対応した眼鏡型画像表示装置を開発することに用いることができる。また、展示物として用いれば、実際に眼鏡型画像表示装置を装着しなくても被装着者や第三者に対し、加齢や眼の状態(疾患状態)の影響でどのように眼鏡型画像表示装置の見え方が変化するのかを示す事ができ、購買検討の判断に用いることができるようになる。
With this configuration, the image projection device can obtain the following functions and effects.
First, since the mask model 121 is covered with the light-shielding wall 125 and the light-shielding roof 128, light entering into the mask model 121 is suppressed. Therefore, when looking through the observation window 122, the screen area S of the
When a rectangular image is projected from the
In addition, the evaluation of the image projected on the retinal screen is not limited to deformation. For example, if the
上記実施の形態は本発明の原理およびその概念を例示するための具体的な実施の形態として記載したにすぎない。つまり、本発明は上記の実施の形態に限定されるものではない。本発明は、例えば次のように変更した態様で具体化することも可能である。
・上記各実施の形態のマスク模型1の形状は一例であり、他の形状のマスク模型であってもよい。例えば、他の器官(例えば口)を備えていてもよい。また、例えば頭部全体があってもよい。また、例えば、頭部において耳輪部よりも後方はなくともよい。
・上記のマスク模型1の外鼻部1a、眼の透孔1bや耳輪部1c等では実際の人のそれら器官に似せて擬似的な外観にしていたが、これはマスク模型1が人の顔をモデルに作成したマスク模型であるためである。人は目や鼻や耳の位置にそれらの器官に相当する窪みや突起があればかなり「人の顔」と認識する脳機能がある。そのため、外鼻部、眼の透孔、耳輪部ということがわかる、あるいはそれと想定して作成している場合には擬似的ではなくとも外鼻部、眼の透孔、耳輪部に相当する。
・眼鏡25は網膜投影HMDを搭載していたが、HMDとしてユーザーが能動的に虚像を見るような機種でもよい。例えば、眼鏡レンズに虚像(画像)を投影させたり、眼鏡レンズに重ねたスクリーンとなる透明プレートに虚像(画像)を投影させたりして、その画像を眼鏡装用者自身が能動的に目視するような場合である。
・上記では網膜スクリーン装置3、カメラ付き網膜スクリーン装置4、カップ型スクリーン装置35、網膜スクリーン装置91、網膜スクリーン装置101はいずれも片眼(左目)に配置したが両目に配置しても右目だけに配置するようにしてもよい。
・上記実施の形態1~7の網膜スクリーン装置3、カメラ付き網膜スクリーン装置4、カップ型スクリーン装置35、網膜スクリーン装置91、網膜スクリーン装置101は相互に入れ替えてマスク模型1の背後に配置するようにしてもよい。
・実施の形態2のカップ型スクリーン装置35ではカメラ40が配設されていたが、カメラ40がなくともよい。
・材質は上記以外でもよい。マスク模型1は型を使用して成形してもよい。疑似眼球体5、15やカップ型スクリーン36も同様である。
・実施の形態2ではレンズセット44のレンズ46を取り替えてユーザーの視力に応じたレンズ度数にしていたが、レンズセット44自体を交換可能としてもよい。
・カップ型スクリーン36は網膜形状に対応して湾曲(球冠状)させていたが、このような湾曲面ではなく、平面であってもよい。コンピュータ装置30によって湾曲した実際に網膜に映るような画像に補正することが可能だからである。
・実施の形態3や実施の形態4にカメラ付き網膜スクリーン装置4、カップ型スクリーン装置35、網膜スクリーン装置91、網膜スクリーン装置101を使用するようにしてもよい。また、実施の形態4に網膜スクリーン装置3や網膜スクリーン装置91、網膜スクリーン装置101を使用するようにしてもよい。つまり、適宜いろいろなタイプのスクリーン装置を取り替えて使用することは自由である。
・実施の形態8において二重構造の疑似眼球体130の内殻部135は更にさまざまなパターンを用意して交換して使用するようにしてもよい。例えば、内殻部135Aのような飛蚊症の症状と内殻部135Bや内殻部135Cのような加齢による見え方を組み合わせてもよい。例えば内殻部135Cにおいて白内障の症状を摸すために若干すりガラス状に処理したが、この処理をしなかったり処理をする場合に様々な曇り具合の状態を用意するようにしてもよい。
本願発明は上述した実施の形態に記載の構成に限定されない。上述した各実施の形態や変形例の構成要素は任意に選択して組み合わせて構成するとよい。また各実施の形態や変形例の任意の構成要素と、発明を解決するための手段に記載の任意の構成要素または発明を解決するための手段に記載の任意の構成要素を具体化した構成要素とは任意に組み合わせて構成するとよい。これらについても本願の補正または分割出願等において権利取得する意思を有する。
また、意匠出願への変更出願により、全体意匠または部分意匠について権利取得する意思を有する。図面は本装置の全体を実線で描画しているが、全体意匠のみならず当該装置の一部の部分に対して請求する部分意匠も包含した図面である。例えば当該装置の一部の部材を部分意匠とすることはもちろんのこと、部材と関係なく当該装置の一部の部分を部分意匠として包含した図面である。当該装置の一部の部分としては、装置の一部の部材としてもよいし、その部材の部分としてもよい。
The embodiments described above are merely described as specific embodiments for illustrating the principles and concepts of the present invention. That is, the present invention is not limited to the above embodiments. The present invention can also be embodied in the following modified aspects, for example.
- The shape of the
・The external
- Although the
- In the above, the
- The
- Although the
・Materials other than those listed above may be used. The
- In the second embodiment, the
- Although the cup-shaped
- The
- In
The present invention is not limited to the configuration described in the embodiments described above. The components of each of the embodiments and modifications described above may be arbitrarily selected and combined. Also, any component of each embodiment or modification, any component described in the means for solving the invention, or a component that embodies any component described in the means for solving the invention. It may be configured in any combination. The applicant intends to obtain rights to these matters through amendments to the application or divisional applications.
In addition, the applicant intends to obtain rights to the entire design or partial design by filing a conversion application to a design application. Although the drawing depicts the entire device using solid lines, the drawing includes not only the overall design but also the partial design claimed for some parts of the device. For example, it is a drawing that not only includes some members of the device as a partial design, but also includes some parts of the device as a partial design regardless of the members. The part of the device may be a part of the device or a part of the device.
1…マスク模型、1a…外鼻部位置に形成された第2の支持部、1b…透孔、1c…耳輪部位置に形成された第1の支持部、5、15、92、102…スクリーンとしての疑似眼球体、25…眼鏡、36…スクリーンとしてのカップ型スクリーン。
DESCRIPTION OF
Claims (22)
少なくとも眼位置に形成された透孔と、耳輪部位置に形成された第1の支持部と、鼻根から鼻背にかけての外鼻部位置に形成された第2の支持部と、を有する人の頭部分のマスク模型と、
前記透孔の背後に配置され、投影された画像を視認可能に表示する網膜スクリーンと、を備え、
前記第1の支持部と前記第2の支持部によって前記眼鏡型画像表示装置を支持することを特徴とする画像投影装置。 In an image projection device for projecting an image assuming the image when a wearer wears a glasses-type image display device and visually views the device,
A person who has at least a through hole formed at the eye position, a first support part formed at the helix position, and a second support part formed at the external nose position from the root of the nose to the dorsum of the nose. A mask model of the head part of
a retinal screen disposed behind the through hole and visibly displaying the projected image;
An image projection device characterized in that the glasses-type image display device is supported by the first support portion and the second support portion.
少なくとも眼位置に形成された透孔と、耳輪部位置に形成された第1の支持部と、鼻根から鼻背にかけての外鼻部位置に形成された第2の支持部と、を有する人の頭部分のマスク模型と、
前記透孔の背後に配置され、投影された画像を視認可能に表示する網膜スクリーンと、を備え、
前記第1の支持部と前記第2の支持部によって前記眼鏡型画像表示装置を支持し、前記網膜スクリーンに前記眼鏡型画像表示装置の画像を投影した際の画像を投影させることで得られる、前記網膜スクリーンの画像変化に基づいて前記眼鏡型画像表示装置の光学系を評価することを特徴とする評価方法。 An evaluation method for evaluating an image obtained when a wearer wears a glasses-type image display device and visually views the image while the wearer is not wearing the glasses-type image display device, simulating a wearing state. In,
A person who has at least a through hole formed at the eye position, a first support part formed at the helix position, and a second support part formed at the external nose position from the root of the nose to the dorsum of the nose. A mask model of the head part of
a retinal screen disposed behind the through hole and visibly displaying the projected image;
The eyeglass-type image display device is supported by the first support portion and the second support portion, and the image obtained by projecting the image of the eyeglass-type image display device onto the retinal screen is obtained. An evaluation method comprising evaluating an optical system of the eyeglass-type image display device based on a change in the image on the retinal screen.
21. The image of the retinal screen is taken by a photographing device, the image data is output to a computer device, and the evaluation is performed based on the result of analysis by software of the computer device. An evaluation system using the evaluation method described in any of the above.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018195579 | 2018-10-17 | ||
| JP2018195579 | 2018-10-17 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020065252A JP2020065252A (en) | 2020-04-23 |
| JP7396628B2 true JP7396628B2 (en) | 2023-12-12 |
Family
ID=70387618
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019187439A Active JP7396628B2 (en) | 2018-10-17 | 2019-10-11 | Image projection device, exhibition device, evaluation device, evaluation method and evaluation system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7396628B2 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017094886A1 (en) | 2015-12-02 | 2017-06-08 | 株式会社坪田ラボ | Irradiation device |
| WO2017183582A1 (en) | 2016-04-19 | 2017-10-26 | コニカミノルタ株式会社 | Optical characteristic measuring device |
| WO2018034181A1 (en) | 2016-08-18 | 2018-02-22 | 株式会社Qdレーザ | Image inspection device, image inspection method, and image inspection device component |
| JP2018072524A (en) | 2016-10-27 | 2018-05-10 | 富士通株式会社 | Evaluation method, evaluation program, and evaluation apparatus |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3520592B2 (en) * | 1995-02-15 | 2004-04-19 | ソニー株式会社 | Video camera imaging device |
-
2019
- 2019-10-11 JP JP2019187439A patent/JP7396628B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017094886A1 (en) | 2015-12-02 | 2017-06-08 | 株式会社坪田ラボ | Irradiation device |
| WO2017183582A1 (en) | 2016-04-19 | 2017-10-26 | コニカミノルタ株式会社 | Optical characteristic measuring device |
| WO2018034181A1 (en) | 2016-08-18 | 2018-02-22 | 株式会社Qdレーザ | Image inspection device, image inspection method, and image inspection device component |
| JP2018072524A (en) | 2016-10-27 | 2018-05-10 | 富士通株式会社 | Evaluation method, evaluation program, and evaluation apparatus |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020065252A (en) | 2020-04-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12474598B2 (en) | Projection of defocused images on the peripheral retina to treat refractive error | |
| Zaidel | A technique for presenting lateralized visual input with prolonged exposure | |
| AU2005204712B2 (en) | Device and method for determining centering data used for eyeglasses | |
| JP7846191B2 (en) | Waveguide with integrated optical elements and method for fabricating the same. | |
| US12357168B2 (en) | Holographic real space refractive system | |
| WO2021252319A1 (en) | Projection of defocused images on the peripheral retina to treat refractive error | |
| CN109964167A (en) | Method for determining eye parameters of a user of a display device | |
| KR20150036147A (en) | Device and method for measuring objective ocular refraction and at least one geometric-morphological parameter of an individual | |
| TW202038846A (en) | Method and apparatus for measuring vision function | |
| CN120856880A (en) | Method and system for rendering images using pupil-enhanced accommodation of the eye | |
| EP1360542B1 (en) | Method for simulating and demonstrating the optical effects of glasses on the human face | |
| CN104869901B (en) | The instable method of personnel's posture caused by for measuring vision | |
| JP7396628B2 (en) | Image projection device, exhibition device, evaluation device, evaluation method and evaluation system | |
| US11614623B2 (en) | Holographic real space refractive system | |
| CN115039012A (en) | Augmented and virtual reality display system for eye assessment | |
| WO2023064792A1 (en) | Adaptive system for the treatment of myopia progression | |
| JP3328095B2 (en) | Eye optical system simulation apparatus and eye optical system simulation method | |
| Fink et al. | A ray tracer for ophthalmological applications | |
| US20240366333A1 (en) | Virtual reality system for anticipated visual outcomes of eye treatments | |
| CA3193959A1 (en) | Holographic real space refractive system | |
| JP2009089901A (en) | Training implement for improving presbyopia, myopia and hyperopia and training implement for improving visual acuity to view the side | |
| DE102024101088A1 (en) | Optical arrangement for determining objective and subjective refraction and centration of the eyes and method for its operation | |
| Hu | Developing and Optimizing Soft-edge Occlusion System for Light Dimming Using Transmissive Liquid Crystal Displays | |
| RU2270467C1 (en) | Goggles-trainers | |
| KR20240136331A (en) | Method for simulating the ocular lens on the eye of a subject viewing a virtual three-dimensional scene using a light field display |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220928 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230726 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230809 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230915 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231115 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231122 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7396628 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |