JP7823885B2 - Meal simulation system, meal simulation method, and program - Google Patents
Meal simulation system, meal simulation method, and programInfo
- Publication number
- JP7823885B2 JP7823885B2 JP2022143928A JP2022143928A JP7823885B2 JP 7823885 B2 JP7823885 B2 JP 7823885B2 JP 2022143928 A JP2022143928 A JP 2022143928A JP 2022143928 A JP2022143928 A JP 2022143928A JP 7823885 B2 JP7823885 B2 JP 7823885B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- identification information
- mouth
- simulation system
- virtual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- User Interface Of Digital Computer (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Description
本発明は、食事シミュレーションシステム、食事シミュレーション方法、及びプログラムに関する。 The present invention relates to a meal simulation system, a meal simulation method , and a program.
高齢化社会においては、平均寿命と健康寿命(日常生活に制限のない期間)の乖離が問題とされている。健康寿命を延ばすためには運動機能の維持が必要である。また、運動機能を維持するためには、食事による栄養摂取が重要となる。 In an aging society, the discrepancy between average life expectancy and healthy life expectancy (the period of time during which one is free from restrictions on daily life) is becoming a problem. Maintaining physical function is necessary to extend healthy life expectancy. Furthermore, consuming nutrients through diet is important for maintaining physical function.
特許文献1には、食感に乏しい介護食を咀嚼しているときも、利用者に違和感を与えることなく、擬似的に噛み応えのある食感を与える技術が記載されている。これにより、食事の満足感や楽しさの向上、咀嚼能力の維持向上を図ることができる。 Patent Document 1 describes a technology that provides a pseudo-chewy texture to users without causing them any discomfort when chewing care foods with poor texture. This can improve the satisfaction and enjoyment of meals and maintain and improve chewing ability.
消化器の手術を行った高齢者、患者等は、一時的に食事を摂取することができない場合がある。また、嚥下障害で誤嚥などのリスクがあり、安全に食事をとることができない場合がある。そうすると、食事に対する意欲が減退し、益々安全に食事をとることが困難となってしまう可能性がある。 Elderly people and patients who have undergone digestive surgery may temporarily be unable to eat. Furthermore, swallowing disorders may put them at risk of aspiration, making it difficult for them to eat safely. This can lead to a loss of motivation to eat, making it increasingly difficult for them to eat safely.
本発明は、このような課題に鑑みてなされたものであって、視覚、嗅覚、味覚を用いて食事の擬似体験をすることで、安全な栄養摂取のための食事に対する意欲を引き出すことが可能な食事シミュレーションシステム、食事シミュレーション方法、及びプログラムを提供する。 The present invention has been made in consideration of such problems, and provides a meal simulation system, a meal simulation method , and a program that can stimulate motivation to eat for safe nutritional intake by providing a simulated meal experience using the senses of sight, smell, and taste.
本発明の第1の態様によれば、食事シミュレーションシステムは、利用者の頭部に装着され、当該利用者の現実空間での動きに応じた仮想体の映像を表示可能なゴーグルデバイスと、利用者の口内に装着され、所定の識別情報を受信した場合に当該識別情報に対応する味又は香りを利用者の口内に放出可能な口内装着デバイスと、制御装置と、を備え、前記制御装置は、前記ゴーグルデバイスを通じて、利用者に向けて一つ又は複数種類の仮想食物を表示させる表示処理部と、利用者が持つ食事用具が現実空間内における前記仮想食物の位置に運ばれた場合に、当該運ばれた位置に対応する前記仮想食物の種類を示す識別情報を取得する識別情報取得部と、利用者の口元に前記食事用具が運ばれた場合に、当該利用者の口内に装着された前記口内装着デバイスに向けて、前記取得された識別情報を送信する送信部と、を備える。 According to a first aspect of the present invention, a meal simulation system comprises a goggle device worn on a user's head and capable of displaying an image of a virtual object in accordance with the user's movements in real space; an oral device worn in the user's mouth and capable of releasing a taste or aroma corresponding to predetermined identification information into the user's mouth upon receiving the identification information; and a control device. The control device comprises a display processing unit that displays one or more types of virtual food to the user through the goggle device; an identification information acquisition unit that, when eating utensils held by the user are brought to the position of the virtual food in real space, acquires identification information indicating the type of virtual food corresponding to the location where the eating utensils are brought; and a transmission unit that, when the eating utensils are brought to the user's mouth, transmits the acquired identification information to the oral device worn in the user's mouth.
本発明の第2の態様によれば、第1の態様に係る食事シミュレーションシステムにおいて、前記口内装着デバイスは、前記識別情報を受信した場合に、当該受信に続いて利用者の咀嚼動作を感知した場合に、前記識別情報に対応する味又は香りを利用者の口内に放出する。 According to a second aspect of the present invention, in the eating simulation system according to the first aspect, when the intraoral device receives the identification information and senses the user's chewing motion following the reception, it releases a taste or aroma corresponding to the identification information into the user's mouth.
本発明の第3の態様によれば、第1又は第2の態様に係る食事シミュレーションシステムは、前記ゴーグルデバイスによる仮想食物の重畳表示の対象となる受け面を有し、前記受け面上において前記食事用具が近づいた位置を感知可能なセンサを内蔵する皿デバイスをさらに備える。 According to a third aspect of the present invention, the meal simulation system according to the first or second aspect further includes a plate device having a receiving surface onto which virtual food is superimposed and displayed by the goggle device, and incorporating a sensor capable of detecting the position on the receiving surface to which the eating utensil approaches.
本発明の第4の態様によれば、第1から第3の何れか一の態様に係る食事シミュレーションシステムにおいて、前記表示処理部は、前記食事用具が現実空間内における前記仮想食物の位置に運ばれた場合、前記食事用具の動きに合わせて、当該仮想食物の少なくとも一部を示す映像を重畳表示させる。 According to a fourth aspect of the present invention, in the eating simulation system according to any one of the first to third aspects, when the eating utensils are brought to the position of the virtual food in real space, the display processing unit superimposes and displays an image showing at least a portion of the virtual food in accordance with the movement of the eating utensils.
本発明の第5の態様によれば、食事シミュレーション方法は、利用者の頭部に装着され、当該利用者の現実空間での動きに応じた仮想体の映像を表示可能なゴーグルデバイスと、利用者の口内に装着され、所定の識別情報を受信した場合に当該識別情報に対応する味又は香りを利用者の口内に放出可能な口内装着デバイスと、を用いて行う食事シミュレーション方法であって、前記ゴーグルデバイスを通じて、利用者に向けて一つ又は複数の仮想食物を表示させるステップと、利用者が持つ食事用具が現実空間内における前記仮想食物の位置に運ばれた場合に、当該運ばれた位置に対応する前記仮想食物の識別情報を取得するステップと、利用者の口元に前記食事用具が運ばれた場合に、当該利用者の口内に装着された前記口内装着デバイスに向けて、前記取得された識別情報を送信するステップと、を有する。 According to a fifth aspect of the present invention, a meal simulation method is performed using a goggle device that is worn on a user's head and is capable of displaying an image of a virtual object in accordance with the user's movements in real space, and an oral device that is worn in the user's mouth and is capable of releasing a taste or aroma corresponding to predetermined identification information into the user's mouth when the device receives the identification information. The meal simulation method includes the steps of: displaying one or more virtual foods to the user through the goggle device; acquiring identification information for the virtual food corresponding to the position where the eating utensil held by the user is brought to the position of the virtual food in real space; and transmitting the acquired identification information to the oral device worn in the user's mouth when the eating utensil is brought to the user's mouth.
本発明の第6の態様によれば、プログラムは、利用者の頭部に装着され、当該利用者の現実空間での動きに応じた仮想体の映像を表示可能なゴーグルデバイスと、利用者の口内に装着され、所定の識別情報を受信した場合に当該識別情報に対応する味又は香りを利用者の口内に放出可能な口内装着デバイスと、を有する食事シミュレーションシステムのコンピュータに、前記ゴーグルデバイスを通じて、利用者に向けて一つ又は複数の仮想食物を表示させるステップと、利用者が持つ食事用具が現実空間内における前記仮想食物の位置に運ばれた場合に、当該運ばれた位置に対応する前記仮想食物の識別情報を取得するステップと、利用者の口元に前記食事用具が運ばれた場合に、当該利用者の口内に装着された前記口内装着デバイスに向けて、前記取得された識別情報を送信するステップと、を実行させる。 According to a sixth aspect of the present invention, the program causes a computer of a meal simulation system having a goggle device that is worn on a user's head and capable of displaying an image of a virtual object in accordance with the user's movements in real space, and an oral device that is worn in the user's mouth and that, upon receiving predetermined identification information, is capable of releasing a taste or aroma corresponding to the identification information into the user's mouth. The computer then executes the following steps: displaying one or more virtual foods to the user through the goggle device; acquiring, when an eating utensil held by the user is brought to the position of the virtual food in real space, identification information of the virtual food corresponding to the position where the eating utensil is brought; and, when the eating utensil is brought to the user's mouth, transmitting the acquired identification information to the oral device worn in the user's mouth.
本発明に係る食事シミュレーションシステム、食事シミュレーション方法、及びプログラムによれば、視覚、嗅覚、味覚を用いて食事の擬似体験をすることで、安全な栄養摂取のための食事に対する意欲を引き出すことができる。
According to the meal simulation system, meal simulation method , and program of the present invention, a simulated meal experience can be achieved using the senses of sight, smell, and taste, thereby stimulating motivation to eat for safe nutritional intake.
<第1の実施形態>
以下、本発明の第1の実施形態に係る食事シミュレーションシステムについて、図1~図4を参照しながら説明する。
First Embodiment
A meal simulation system according to a first embodiment of the present invention will be described below with reference to FIGS.
(食事シミュレーションシステムの全体構成)
図1は、第1の実施形態に係る食事シミュレーションシステムの全体構成を示す図である。
図1に示す食事シミュレーションシステム1は、例えば消化器の手術や、嚥下障害により食事を摂取することができない利用者Aが、栄養の摂取と同時に食事の訓練を行うためのものである。
(Overall configuration of the meal simulation system)
FIG. 1 is a diagram showing the overall configuration of a meal simulation system according to the first embodiment.
The meal simulation system 1 shown in FIG. 1 is for user A, who is unable to eat due to, for example, digestive surgery or swallowing disorder, to practice eating while taking in nutrients.
図1に示すように、食事シミュレーションシステム1は、制御装置10と、ゴーグルデバイス11と、口内装着デバイス(マウスピース型デバイス)12と、皿デバイス13と、箸型デバイス14とを備える。 As shown in FIG. 1, the meal simulation system 1 includes a control device 10, a goggle device 11, an intraoral device (mouthpiece-type device) 12, a plate device 13, and a chopstick-type device 14.
ゴーグルデバイス11は、利用者Aの頭部に装着され、当該利用者の現実空間での動きに応じた仮想体の映像を表示可能とされる(いわゆるAR、MR技術が適用される)ものである。 The goggle device 11 is worn on the head of user A and is capable of displaying images of virtual objects that correspond to the user's movements in real space (applying so-called AR and MR technologies).
口内装着デバイス12は、利用者Aの口内に装着され、外部(制御装置10)から所定の識別情報を受信した場合に当該識別情報に対応する味又は香りを利用者の口内に放出可能なものとされる。 The oral device 12 is worn in the mouth of user A, and when it receives specific identification information from the outside (control device 10), it is capable of releasing a flavor or aroma corresponding to that identification information into the user's mouth.
皿デバイス13は、ゴーグルデバイス11による仮想食物の重畳表示の対象となる受け面を有する。皿デバイス13は、受け面上において食事用具(後述の箸型デバイス14)が接触した位置を感知可能な接触感知センサを内蔵する。 The plate device 13 has a receiving surface onto which virtual food is superimposed and displayed by the goggle device 11. The plate device 13 has a built-in contact sensor that can detect the position on the receiving surface where an eating utensil (the chopstick-shaped device 14, described below) comes into contact.
箸型デバイス14は、本物の箸の形状を模したものとされ、利用者によって把持されるものである。この箸型デバイス14の先端には、皿デバイス13が備える接触感知センサ、および、口内装着デバイス12が備える接触感知センサに対し、この箸型デバイス14との接触があったことを感知させるための接触感知部材が具備される。箸型デバイス14は、本実施形態の食事用具の一態様である。なお、他の実施形態では、食事用具として、箸型デバイス14に代えて、先端に接触感知部材を具備するフォーク型デバイス、スプーン型デバイスを用いてもよい。 The chopstick-type device 14 is modeled after the shape of real chopsticks and is held by the user. The tip of the chopstick-type device 14 is equipped with a contact-sensing member that enables the contact-sensing sensor of the plate device 13 and the contact-sensing sensor of the oral device 12 to detect contact with the chopstick-type device 14. The chopstick-type device 14 is one aspect of the eating utensils of this embodiment. Note that in other embodiments, instead of the chopstick-type device 14, a fork-type device or spoon-type device equipped with a contact-sensing member at its tip may be used as the eating utensil.
(制御装置の構成)
図2は、第1の実施形態に係る制御装置の構成を示す図である。
制御装置10は、食事シミュレーションシステム1全体の制御を司るコンピュータである。制御装置10は、CPU100、メモリ101および通信インタフェース102からなる一般的なコンピュータであってよい。
(Configuration of control device)
FIG. 2 is a diagram showing the configuration of the control device according to the first embodiment.
The control device 10 is a computer that controls the entire meal simulation system 1. The control device 10 may be a general computer that includes a CPU 100, a memory 101, and a communication interface 102.
CPU100は、予め用意されたプログラム(アプリケーション)に従って種々の機能を発揮するプロセッサである。 The CPU 100 is a processor that performs various functions according to pre-prepared programs (applications).
メモリ101は、CPU100が動作に必要な命令やデータが保持される記憶領域である。 Memory 101 is a storage area that stores instructions and data required for the CPU 100 to operate.
通信インタフェース102は、上述の各種デバイスと無線で通信を行うためのインタフェースである。 The communication interface 102 is an interface for wirelessly communicating with the various devices mentioned above.
図2に示すように、制御装置10のCPU100は、表示処理部1000、識別情報取得部1001および送信部1002としての機能を発揮する。 As shown in FIG. 2, the CPU 100 of the control device 10 functions as a display processing unit 1000, an identification information acquisition unit 1001, and a transmission unit 1002.
表示処理部1000は、ゴーグルデバイス11を通じて利用者Aに向けて一つ又は複数種類の仮想食物(複数種類の食材からなるステーキ料理であれば、例えば、ステーキ肉と副菜のセットなど)を表示させる。表示処理部1000は、皿デバイス13の受け面に仮想食物が重畳されるように表示する。これにより、利用者Aに対し、皿の上に食事が盛り付けられているように見せることができる。 The display processing unit 1000 displays one or more types of virtual food (for example, a set of steak meat and side dishes in the case of a steak dish made from multiple ingredients) to user A through the goggle device 11. The display processing unit 1000 displays the virtual food so that it is superimposed on the receiving surface of the plate device 13. This allows user A to see the food as if it were being served on a plate.
識別情報取得部1001は、利用者Aが持つ箸型デバイス14の先端部分(接触感知部材)が、皿デバイス13の受け部のいずれかの位置への接触を感知した場合に、当該接触の位置に対応する仮想食物の種類を示す識別情報を取得する。例えば、箸型デバイス14の先端部分が、皿デバイス13の受け面のうち「ステーキ肉」が表示される位置に触れた場合、識別情報取得部1001は、「ステーキ肉」に対応する識別情報を取得する。また、箸型デバイス14の先端部分が、皿デバイス13の受け面のうち「副菜」の表示位置に触れた場合、識別情報取得部1001は、「副菜」に対応する識別情報を取得する。 When the identification information acquisition unit 1001 detects that the tip (touch-sensing member) of the chopsticks device 14 held by user A has contacted any position on the receiving surface of the plate device 13, it acquires identification information indicating the type of virtual food corresponding to the position of contact. For example, if the tip of the chopsticks device 14 touches the position on the receiving surface of the plate device 13 where "steak meat" is displayed, the identification information acquisition unit 1001 acquires identification information corresponding to "steak meat." Also, if the tip of the chopsticks device 14 touches the position on the receiving surface of the plate device 13 where "side dish" is displayed, the identification information acquisition unit 1001 acquires identification information corresponding to "side dish."
送信部1002は、利用者Aの口元に箸型デバイス14の先端が運ばれた場合に当該利用者の口内に装着された口内装着デバイス12に向けて、識別情報取得部1001が取得した識別情報を送信する。 When the tip of the chopsticks-type device 14 is brought to the mouth of user A, the transmission unit 1002 transmits the identification information acquired by the identification information acquisition unit 1001 to the oral device 12 worn in the mouth of the user.
なお、本実施形態に係る制御装置10は、図1に示したように、他の各種デバイスとは別体のコンピュータであるものとして説明しているが、他の実施形態においてはこの態様に限定されない。即ち、他の実施形態においては、制御装置10は、ゴーグルデバイス11、口内装着デバイス12、皿デバイス13又は箸型デバイス14のいずれかに実装される態様であってもよいし、上述の制御装置10の各機能が複数種類の他のデバイスに渡って実装される態様であってもよい。 Note that, while the control device 10 according to this embodiment is described as a computer separate from various other devices, as shown in FIG. 1, other embodiments are not limited to this configuration. That is, in other embodiments, the control device 10 may be implemented in any of the goggle device 11, the oral device 12, the plate device 13, or the chopsticks-type device 14, or the functions of the control device 10 described above may be implemented across multiple types of other devices.
(口内装着デバイスの構成)
図3は、第1の実施形態に係る口内装着デバイスの構成を示す図である。
図3に示すように、口内装着デバイス12は、マウスピース部120と、タンク部121とを有してなる。
(Configuration of oral device)
FIG. 3 is a diagram showing the configuration of the intra-oral device according to the first embodiment.
As shown in FIG. 3 , the oral device 12 includes a mouthpiece portion 120 and a tank portion 121 .
マウスピース部120は、利用者Aの口内に含まれる形で装着される。マウスピース部120には、咀嚼動作を感知するための咀嚼感知センサ120Aが配されている。 The mouthpiece 120 is worn in the mouth of user A. A chewing sensor 120A is provided in the mouthpiece 120 to detect chewing movements.
タンク部121は、接触感知センサ121aと、複数のタンク121bおよびアクチュエータ121cを有する。接触感知センサ121aは、箸型デバイス14の先端部分(接触感知部材)との接触を感知するセンサである。 The tank section 121 has a contact sensor 121a, multiple tanks 121b, and an actuator 121c. The contact sensor 121a is a sensor that detects contact with the tip of the chopstick-type device 14 (touch-sensing member).
タンク121bは、複数種類の感覚形成素材が収容される。感覚形成素材は、味覚形成素材(甘味料、酸味料、塩味料、うま味料、苦味料など)、嗅覚形成素材(食べ物のにおい)などが含まれる。 Tank 121b contains multiple types of sensory-forming materials. Sensory-forming materials include taste-forming materials (sweeteners, sourness, saltiness, umami, bitterness, etc.), smell-forming materials (food smells), etc.
アクチュエータ121cは、電気信号に応じて、各タンク121bに収容された感覚形成素材を、利用者Aの口内(マウスピース部120)へと送出するための駆動部材である。例えば、感覚形成素材は液体の状態でタンク121bに収容されており、アクチュエータ121cは、液体である感覚形成素材を口内に送出する。また、感覚形成素材は気体の状態でタンク121bに収容されており、アクチュエータ121cは、気体である感覚形成素材を口内に送出してもよい。更に、アクチュエータ121cは、液体の状態で収容された感覚形成素材を気体(煙状)に加工して口内に送出してもよい。 Actuator 121c is a driving member for delivering the sensation-forming material contained in each tank 121b into user A's mouth (mouthpiece portion 120) in response to an electrical signal. For example, the sensation-forming material may be contained in tank 121b in liquid form, and actuator 121c delivers the liquid sensation-forming material into the mouth. Alternatively, the sensation-forming material may be contained in tank 121b in gaseous form, and actuator 121c delivers the gaseous sensation-forming material into the mouth. Furthermore, actuator 121c may process the sensation-forming material contained in liquid form into gas (smoke-like) and deliver it into the mouth.
(食事シミュレーションシステムの処理フロー)
図4は、第1の実施形態に係る食事シミュレーションシステムの処理フローを示す図である。
図4に示す処理フローは、食事シミュレーションシステム1の運用中に繰り返し実行される。
(Processing flow of the meal simulation system)
FIG. 4 is a diagram showing a processing flow of the meal simulation system according to the first embodiment.
The processing flow shown in FIG. 4 is repeatedly executed during operation of the meal simulation system 1.
制御装置10の表示処理部1000は、ゴーグルデバイス11を通じて、皿デバイス13の受け面に料理(仮想食物)を表示させる(ステップS1)。そうすると、利用者Aは、ゴーグルデバイス11に表示される映像を見ながら、皿デバイス13上の仮想食物を箸型デバイス14で取る動作を行う。 The display processing unit 1000 of the control device 10 displays a dish (virtual food) on the receiving surface of the plate device 13 via the goggle device 11 (step S1). User A then uses the chopsticks device 14 to pick up the virtual food on the plate device 13 while viewing the image displayed on the goggle device 11.
次に、制御装置10の識別情報取得部1001は、皿デバイス13の受け面に映し出された料理のうち、どの食べ物に箸型デバイス14の先端部分が触れたか(すなわち、利用者Aがどの食べ物を選択したか)を検出し、その食べ物の種類を示す識別情報を取得する(ステップS2)。例えば、箸型デバイス14の先端部分が、皿デバイス13の受け面のうち「ステーキ肉」が表示される位置に触れた場合、識別情報取得部1001は、「ステーキ肉」に対応する識別情報を取得する。 Next, the identification information acquisition unit 1001 of the control device 10 detects which food item displayed on the receiving surface of the plate device 13 has been touched by the tip of the chopsticks-type device 14 (i.e., which food User A selected), and acquires identification information indicating the type of food (Step S2). For example, if the tip of the chopsticks-type device 14 touches the position on the receiving surface of the plate device 13 where "steak meat" is displayed, the identification information acquisition unit 1001 acquires identification information corresponding to "steak meat."
制御装置10の表示処理部1000は、ゴーグルデバイス11に表示される食べ物の映像を更新して、ステップS2で取得した識別情報に対応する食べ物を箸でつまんだ状態の映像を表示させる(ステップS3)。例えば、ステップS2で「ステーキ肉」に対応する識別情報を取得した場合、表示処理部1000は、ゴーグルデバイス11に「ステーキ肉」を箸でつまんだ状態の映像を表示させる。また、表示処理部1000は、皿デバイス13の受け面に重畳表示された「ステーキ肉」の映像についても、箸でつまんだ分の一部が欠けた「ステーキ肉」の映像に切り替わるように、映像を更新する。利用者Aは、箸で食べ物をつまんだ映像を確認すると、箸型デバイス14の先端部分を自身の口元に近付ける動作を行う。このとき、表示処理部1000は、箸型デバイス14の動きに合わせて、箸でつまんだ食べ物の映像が移動するように、ゴーグルデバイス11に逐次、映像の更新及び表示を行わせてもよい。 The display processing unit 1000 of the control device 10 updates the image of the food displayed on the goggle device 11 to display an image of the food corresponding to the identification information acquired in step S2 being picked up with chopsticks (step S3). For example, if identification information corresponding to "steak meat" is acquired in step S2, the display processing unit 1000 causes the goggle device 11 to display an image of the "steak meat" being picked up with chopsticks. The display processing unit 1000 also updates the image of the "steak meat" superimposed on the receiving surface of the plate device 13 so that it is replaced with an image of the "steak meat" with a portion of the food being picked up with the chopsticks missing. When user A sees the image of the food being picked up with chopsticks, he or she moves the tip of the chopstick-type device 14 closer to his or her mouth. At this time, the display processing unit 1000 may cause the goggle device 11 to sequentially update and display the image so that the image of the food being picked up with chopsticks moves in accordance with the movement of the chopstick-type device 14.
口内装着デバイス12は、タンク部121に設けられた接触感知センサ121aにより、箸型デバイス14の先端部分が接触したことを感知する(ステップS4)。そうすると、口内装着デバイス12は、箸型デバイス14の接触を制御装置10に通知する。 The contact sensor 121a provided in the tank section 121 detects that the tip of the chopsticks-type device 14 has come into contact with the oral device 12 (step S4). The oral device 12 then notifies the control device 10 of the contact of the chopsticks-type device 14.
次に、制御装置10の送信部1002は、口内装着デバイス12への箸型デバイス14の接触が感知されると、ステップS2で取得した識別情報を口内装着デバイス12に送信する(ステップS5)。 Next, when the transmitter 1002 of the control device 10 detects contact of the chopsticks-type device 14 with the oral device 12, it transmits the identification information acquired in step S2 to the oral device 12 (step S5).
また、利用者Aは、箸型デバイス14の先端部分を口に近付けた後、咀嚼動作を行う。そうすると、口内装着デバイス12は、マウスピース部120の咀嚼感知センサ120Aにより利用者の咀嚼動作を感知して、制御装置10から受信した識別情報に応じた感覚形成素材をマウスピース部120に流出させる(ステップS6)。例えば、制御装置10から「ステーキ肉」に対応する識別情報を受信した場合、「ステーキ肉」に対応した感覚形成素材を流出させる。この感覚形成素材は、味覚形成素材及び嗅覚形成素材の一方のみを含んでいてもよいし、両方を含んでいてもよい。これにより、利用者Aは、現実の食事に近いリアルな感覚を得ることができる。 Furthermore, user A brings the tip of the chopstick-type device 14 close to his mouth and then begins to chew. The intraoral device 12 then detects the user's chewing action using the chewing sensor 120A of the mouthpiece 120, and causes the mouthpiece 120 to dispense a sensory-forming material corresponding to the identification information received from the control device 10 (step S6). For example, if the device receives identification information corresponding to "steak meat" from the control device 10, it will dispense a sensory-forming material corresponding to "steak meat." This sensory-forming material may contain either a taste-forming material or an olfactory-forming material, or both. This allows user A to experience a realistic sensation similar to that of eating a real meal.
(作用効果)
以上のとおり、本実施形態に係る食事シミュレーションシステム1において、制御装置10は、ゴーグルデバイス11に仮想食物を表示させるとともに、口内装着デバイス12にこの仮想食物の種類に対応する識別情報を送信して、味又は香を利用者の口内に放出させる。
(Action and effect)
As described above, in the meal simulation system 1 according to this embodiment, the control device 10 displays virtual food on the goggle device 11 and transmits identification information corresponding to the type of virtual food to the oral device 12, thereby releasing the taste or aroma into the user's mouth.
このような構成によれば、食事シミュレーションシステム1は、視覚、味覚、嗅覚を通して、利用者Aが現実の食事をしているようなリアルな擬似体験を与えることができる。これにより、食事シミュレーションシステム1は、利用者Aに食事をしている満足感を与え、利用者Aの食事に対する意欲を引き出すことができる。 With this configuration, meal simulation system 1 can provide user A with a realistic simulated experience of eating a real meal through sight, taste, and smell. As a result, meal simulation system 1 can give user A a sense of satisfaction from eating and stimulate user A's desire to eat.
また、本実施形態に係る食事シミュレーションシステム1において、口内装着デバイス12は、利用者Aの咀嚼動作を感知して、識別情報に応じた感覚形成素材を利用者の口内に放出する。 Furthermore, in the meal simulation system 1 according to this embodiment, the oral device 12 senses the chewing action of user A and releases a sensory-generating material into the user's mouth according to the identification information.
このような構成によれば、食事シミュレーションシステム1は、利用者Aが現実の食べ物を食べているような感覚を与えることができる。 With this configuration, the meal simulation system 1 can give user A the feeling that he or she is eating real food.
また、本実施形態に係る食事シミュレーションシステム1は、ゴーグルデバイス11により仮想食物の映像が重畳表示される受け面を有し、受け面上において箸型デバイス14が近づいた一を感知可能なセンサを内蔵する皿デバイス13を備える。 The meal simulation system 1 according to this embodiment also includes a receiving surface on which an image of virtual food is superimposed using a goggle device 11, and a plate device 13 with a built-in sensor that can detect when a chopstick-shaped device 14 approaches the receiving surface.
このような構成によれば、食事シミュレーションシステム1は、仮想食物が含む複数の食べ物のうち、利用者Aがどの食べ物に箸型デバイス14を近づけた(選択した)かを検知して、利用者Aが選択した食べ物に対応した感覚を利用者Aに与えることができる。また、利用者Aは、1回の食事シミュレーションで複数の食べ物を食べる感覚を得ることができる。これにより、食事シミュレーションシステム1は、利用者Aの食事に対する満足感及び意欲をさらに向上させることができる。 With this configuration, the meal simulation system 1 can detect which of the multiple foods included in the virtual food selection user A has brought the chopsticks-type device 14 close to (selected), and provide user A with a sensation corresponding to the food selected by user A. Furthermore, user A can get the sensation of eating multiple foods in a single meal simulation. This allows the meal simulation system 1 to further increase user A's satisfaction and motivation with regard to eating.
また、本実施形態に係る食事シミュレーションシステム1において、制御装置10は、箸型デバイス14が仮想食物の位置に運ばれたときに、箸型デバイス14の動きに合わせて仮想食物の一部を示す映像(例えば、食べ物を箸でつまむ映像)を重畳表示させる。 Furthermore, in the meal simulation system 1 according to this embodiment, when the chopstick-shaped device 14 is brought to the position of the virtual food, the control device 10 superimposes an image showing a portion of the virtual food (for example, an image of food being picked up with chopsticks) in accordance with the movement of the chopstick-shaped device 14.
このような構成によれば、食事シミュレーションシステム1は、利用者Aに対し、あたかも現実の食べ物を箸でつまんで食べているような、リアルな体験を与えることができる。 With this configuration, the meal simulation system 1 can provide user A with a realistic experience, as if he or she were picking up real food with chopsticks and eating it.
上述の実施形態においては、制御装置10の各種処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって上記各種処理が行われる。また、コンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、CD-ROM、DVD-ROM、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしてもよい。 In the above-described embodiment, the various processing steps of the control device 10 are stored in the form of a program on a computer-readable recording medium, and the computer reads and executes this program to perform the various processes described above. Furthermore, computer-readable recording media refers to magnetic disks, magneto-optical disks, CD-ROMs, DVD-ROMs, semiconductor memories, etc. Alternatively, this computer program may be distributed to a computer via a communications line, and the computer that receives the program may execute the program.
上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。また、制御装置10の機能は、クラウドコンピューティングを利用して実現されるものであってもよい。 The above program may be one that realizes some of the functions described above. Furthermore, it may be a so-called differential file (differential program) that can realize the functions described above in combination with a program already recorded in the computer system. Furthermore, the functions of the control device 10 may be realized using cloud computing.
以上のとおり、本開示に係るいくつかの実施形態を説明したが、これら全ての実施形態は、例として提示したものであり、発明の範囲を限定することを意図していない。これらの実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で種々の省略、置き換え、変更を行うことができる。これらの実施形態及びその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 As described above, several embodiments of the present disclosure have been described. However, all of these embodiments are presented as examples and are not intended to limit the scope of the invention. These embodiments may be embodied in a variety of other forms, and various omissions, substitutions, and modifications may be made without departing from the spirit of the invention. These embodiments and their variations are included within the scope of the invention and its equivalents as set forth in the claims, as well as within the scope and spirit of the invention.
<変形例1>
上述の実施形態において、食事シミュレーションシステム1が利用者Aの頭部に装着されるゴーグルデバイス11を一つのみ有している態様を例に説明したが、これに限られることはない。例えば、利用者Aが一人で食事をとることができない場合、介助者が利用者Aの食事の介助を行う場合がある。このようなケースに適用できるよう、食事シミュレーションシステム1は、複数のゴーグルデバイス11を有していてもよい。変形例1では、食事シミュレーションシステム1が、利用者Aの頭部に装着される第1のゴーグルデバイス11と、介助者の頭部に装着される第2のゴーグルデバイス11との、2つのゴーグルデバイスを有している態様を例として説明する。
<Modification 1>
In the above-described embodiment, an example has been described in which the meal simulation system 1 has only one goggle device 11 worn on the head of user A, but this is not limited to this. For example, if user A is unable to eat a meal by himself, a caregiver may assist user A with eating. To be applicable to such cases, the meal simulation system 1 may have multiple goggle devices 11. In Variation 1, an example will be described in which the meal simulation system 1 has two goggle devices: a first goggle device 11 worn on the head of user A and a second goggle device 11 worn on the head of the caregiver.
変形例1では、介助者は、利用者Aの代わりに箸型デバイス14を操作して、皿デバイス13上の仮想食物を取って利用者Aの口元に運ぶ動作を行う。また、制御装置10の表示処理部1000は、図4のステップS1及びS3において、利用者Aに装着された第1のゴーグルデバイス11と、介助者に装着された第2のゴーグルデバイス11との両方に仮想食物の映像を同期して表示させる。なお、第1のゴーグルデバイス11及び第2のゴーグルデバイス11それぞれに表示される映像は、介助者及び利用者Aそれぞれの視点位置にあわせて、同じ仮想食物の別アングルの映像となるように調整されたものである。このように、第1のゴーグルデバイス11及び第2のゴーグルデバイス11それぞれに映像を表示させることにより、介助者及び利用者Aが同じ仮想食物の情報(皿デバイス13上にどのような食べ物が載っているか、利用者Aの口元にどの食べ物を運んだか等)を共有することができる。これにより、介助者を必要とする利用者Aも、現実の食事をしているような疑似体験を得ることができる。 In Variation 1, the caregiver operates the chopstick-type device 14 on behalf of user A to pick up virtual food from the plate device 13 and bring it to user A's mouth. In steps S1 and S3 of FIG. 4 , the display processing unit 1000 of the control device 10 synchronizes and displays images of the virtual food on both the first goggle device 11 worn by user A and the second goggle device 11 worn by the caregiver. The images displayed on the first goggle device 11 and the second goggle device 11 are adjusted to display images of the same virtual food from different angles, in accordance with the viewpoints of the caregiver and user A, respectively. Displaying images on the first goggle device 11 and the second goggle device 11 in this way allows the caregiver and user A to share the same virtual food information (such as what food is on the plate device 13 and which food has been brought to user A's mouth). This allows user A, who requires a caregiver, to have a simulated experience of eating a real meal.
<変形例2>
また、上述の実施形態において、口内装着デバイス12のタンク121bに食べ物に対応した感覚形成素材が収容されている態様を例に説明したが、これに限られることはない。変形例2では、口内装着デバイス12のタンク121bには、食べ物のにおいを消す消臭素材が更に含まれていてもよい。
<Modification 2>
In the above embodiment, the tank 121b of the oral device 12 contains a sensation-forming material corresponding to food, but the present invention is not limited to this. In a second modification, the tank 121b of the oral device 12 may further contain a deodorizing material that eliminates the smell of food.
変形例2では、例えば、ゴーグルデバイス11を介して表示される仮想食物に、「水」、「シャーベット」のような箸休め用の飲み物又は食べ物が含まれている。利用者Aが箸休め用の食べ物を食べる動作をすると、口内装着デバイス12のマウスピース部120に消臭素材が送出され、利用者Aが直前に食べた仮想食物のにおいが消される。 In variant 2, for example, the virtual food displayed via the goggle device 11 includes palate cleanser drinks or foods such as "water" or "sherbet." When user A makes a motion to eat the palate cleanser food, a deodorizing material is delivered to the mouthpiece portion 120 of the oral device 12, eliminating the smell of the virtual food that user A has just eaten.
ここでは、箸休め用の食べ物として「シャーベット」が用意されている例について説明する。図4のステップS1において、制御装置10の表示処理部1000は、仮想食物の一つとして、「シャーベット」の映像を表示させる。 Here, we will explain an example in which "sherbet" is prepared as a palate cleanser. In step S1 of FIG. 4, the display processing unit 1000 of the control device 10 displays an image of "sherbet" as one of the virtual foods.
図4のステップS2において、制御装置10の識別情報取得部1001は、箸型デバイス14(スプーン型デバイスであってもよい)の先端が「シャーベット」の表示位置に触れたことを検出して、「シャーベット」に対応する識別情報を取得する。 In step S2 of FIG. 4, the identification information acquisition unit 1001 of the control device 10 detects that the tip of the chopsticks-type device 14 (or a spoon-type device) has touched the display position of "sherbet" and acquires the identification information corresponding to "sherbet."
図4のステップS3~S5は、上述の実施形態と同様である。 Steps S3 to S5 in Figure 4 are the same as in the above-described embodiment.
また、図4のステップS6において、口内装着デバイス12は、制御装置10から受信した「シャーベット」の識別情報に対応する消臭素材をマウスピース部120に流出させる。 Furthermore, in step S6 of FIG. 4, the oral device 12 dispenses the deodorizing material corresponding to the identification information for "sherbet" received from the control device 10 into the mouthpiece portion 120.
食べ物のにおいは、利用者Aに食べ物の味を想起させることができる。このため、食事シミュレーションシステム1は、嗅覚形成素材を利用者Aの口内に送出することにより、利用者Aに食べ物を食べた体験を与えることができる。一方で、食事シミュレーションシステム1は、消臭素材を利用者Aの口内に送出して直前に食べた食べ物のにおいを消すことにより、利用者Aが次に食べる食べ物をよりよく味わえるようにすることができる。これにより、利用者Aの口内で異なる食べ物のにおいが混ざってしまい、利用者Aの食事に対する意欲が減退してしまうことを抑制することができる。 The smell of food can remind user A of the taste of the food. Therefore, meal simulation system 1 can give user A the experience of eating food by delivering an olfactory sense-forming material into user A's mouth. On the other hand, meal simulation system 1 can enable user A to better enjoy the next food they eat by delivering a deodorizing material into user A's mouth to eliminate the smell of the food they just ate. This can prevent the smells of different foods from mixing in user A's mouth, which could cause user A to lose interest in eating.
なお、箸休め用の飲み物として「水」を用意する場合、食事シミュレーションシステム1は、箸型デバイス14に加えて、「水」が入った映像が重畳表示されるコップ型デバイスを有していてもよい。この場合、図4のステップS2において、制御装置10の識別情報取得部1001は、利用者Aがコップ型デバイスを持ち上げる動作を検出すると、「水」に対応する識別情報を取得する。以降は、上記した変形例2における処理の流れと同じである。 If "water" is prepared as a palate cleanser, the meal simulation system 1 may have, in addition to the chopsticks-shaped device 14, a cup-shaped device on which an image of "water" is superimposed. In this case, in step S2 of FIG. 4, when the identification information acquisition unit 1001 of the control device 10 detects that user A is lifting the cup-shaped device, it acquires identification information corresponding to "water." The subsequent processing flow is the same as that in Variation 2 described above.
<第2の実施形態>
以下、本発明の第1の実施形態に係る食事シミュレーションシステムについて、図5を参照しながら説明する。
Second Embodiment
A meal simulation system according to a first embodiment of the present invention will be described below with reference to FIG.
図5は、第2の実施形態に係る食事シミュレーションシステムの全体構成を示す図である。
図5に示すように、第2の実施形態に係る食事シミュレーションシステム1の制御装置10は、内蔵された記録媒体に、複数種類の咀嚼音、咀嚼の触感情報D(以下、単に「咀嚼音情報D」とも記載する。)を有している。また、第2の実施形態に係る食事シミュレーションシステム1の口内装着デバイス12は、骨伝導デバイス122を更に備える。
FIG. 5 is a diagram showing the overall configuration of a meal simulation system according to the second embodiment.
5 , the control device 10 of the meal simulation system 1 according to the second embodiment has, in its built-in recording medium, multiple types of chewing sounds and chewing tactile information D (hereinafter simply referred to as “chewing sound information D”) . The intra-oral device 12 of the meal simulation system 1 according to the second embodiment further includes a bone conduction device 122.
制御装置10は、口内装着デバイス12の骨伝導デバイス122と通信可能とされる。第2の実施形態に係る制御装置10と骨伝導デバイス122とは、有線で接続される態様であってもよいし、無線通信を介して情報を送受信するものであってもよい。
咀嚼音情報Dは、種々の食べ物(ステーキ肉、から揚げ、サラダ、・・)ごとの咀嚼音が録音されてなる音声データである。この音声データは、食べ物ごとに事前に用意され、音声データとして制御装置10内蔵記録媒体に記録される。
The control device 10 is capable of communicating with the bone conduction device 122 of the intra-oral device 12. The control device 10 and the bone conduction device 122 according to the second embodiment may be connected by wire, or may transmit and receive information via wireless communication.
The chewing sound information D is audio data consisting of recorded chewing sounds for various foods (steak, fried chicken, salad, etc.) This audio data is prepared in advance for each food and recorded as audio data in a recording medium built into the control device 10.
骨伝導デバイス122は、音声伝達手段の一態様である。具体的には、制御装置10が音声データである咀嚼音情報Dを振動情報に変換して、骨伝導デバイス122に送信する。骨伝導デバイス122は、その振動情報を受信して振動を発生させる。利用者Aは、この振動を、骨を介して感知することで咀嚼音を感知する。つまり、骨伝導デバイス122は、(鼓膜を介してではなく)利用者Aの骨を介して音声を伝達する骨伝導スピーカとして機能する。これにより、利用者Aは、口内装着デバイス12の振動から、骨を介して直接的に食べ物の咀嚼音を感じ取ることとなる。 The bone conduction device 122 is one form of audio transmission means. Specifically, the control device 10 converts the chewing sound information D, which is audio data, into vibration information and transmits it to the bone conduction device 122. The bone conduction device 122 receives the vibration information and generates vibrations. User A senses the chewing sounds by sensing these vibrations through his or her bones. In other words, the bone conduction device 122 functions as a bone conduction speaker that transmits audio through user A's bones (rather than through the eardrum). As a result, user A senses the chewing sounds of food directly through his or her bones from the vibrations of the oral device 12.
第2の実施形態の食事シミュレーションシステム1による食事シミュレーションの流れについて説明する。 The flow of a meal simulation using the meal simulation system 1 of the second embodiment will be explained.
第2の実施形態に係る食事シミュレーションシステム1の制御装置10は、図5のステップS6の処理において、更に、骨伝導デバイス122を介して咀嚼音情報D(音声データ)を再生する。ここで、制御装置10は、ステップS2で得た識別情報(食べ物の種類を示す情報)を利用して、その識別情報に対応する咀嚼音情報Dを再生する。例えば、ステップS2で利用者Aが皿デバイス13の受け面で「から揚げ」を選択した場合、制御装置10は「から揚げ」を示す識別情報を取得する。そして、制御装置10は、ステップS6で利用者Aの咀嚼動作を感知した際に、「から揚げ」に対応する咀嚼音情報Dを、骨伝導デバイス122を介して再生する。 In the processing of step S6 in FIG. 5, the control device 10 of the meal simulation system 1 according to the second embodiment further plays back chewing sound information D (audio data) via the bone conduction device 122. Here, the control device 10 uses the identification information (information indicating the type of food) obtained in step S2 to play back chewing sound information D corresponding to that identification information. For example, if user A selects "fried chicken" on the receiving surface of the plate device 13 in step S2, the control device 10 acquires the identification information indicating "fried chicken." Then, when the control device 10 senses user A's chewing motion in step S6, it plays back chewing sound information D corresponding to "fried chicken" via the bone conduction device 122.
以上のように、第2の実施形態に係る食事シミュレーションシステム1によれば、利用者Aの咀嚼動作をトリガーとして、感覚形成素材の流出、および、咀嚼音の音声再生が実行される。また、咀嚼音の音声再生は、口内装着デバイス12(骨伝導デバイス122)を介した骨伝導で行われる。このようにすることで、利用者Aは、咀嚼音を聴覚で感知するばかりでなく、咀嚼音の発生元となる振動そのものを(口内の)触覚で感じ取ることとなる。そうすると、利用者Aは、音情報および振動情報の両方に基づき、食物を実際に咀嚼している感触を疑似体験することができる。したがって、本実施形態に係る食事シミュレーションシステム1によれば、利用者Aは、より実際の食事に近い感覚を得ることができる。 As described above, according to the meal simulation system 1 of the second embodiment, the chewing action of user A triggers the release of sensory-forming materials and the audio playback of chewing sounds. Furthermore, the audio playback of chewing sounds is performed by bone conduction via the intraoral device 12 (bone conduction device 122). In this way, user A not only perceives the chewing sounds with their ears, but also senses the vibrations that are the source of the chewing sounds with their sense of touch (inside their mouth). This allows user A to virtually experience the sensation of actually chewing food based on both the sound information and the vibration information. Therefore, according to the meal simulation system 1 of this embodiment, user A can obtain a sensation that is closer to that of actually eating.
<第2の実施形態の変形例>
上述の第2の実施形態は、利用者Aの咀嚼動作をトリガーとして、咀嚼音の音声再生が実行されるものとして説明したが、他の実施形態においてはこのような対応に限定されない。
<Modification of the second embodiment>
In the second embodiment described above, the mastication action of the user A is used as a trigger to execute audio playback of mastication sounds, but other embodiments are not limited to this.
例えば、第2の実施形態の変形例に食事シミュレーションシステム1は、介助者の制御装置10への操作(再生開始)に応じて、ある人物が食べ物を咀嚼する様子を映した動画データを再生する。この動画データの映像情報は、ゴーグルデバイスによって伝達され、動画データの音声情報(咀嚼音)は、口内装着デバイス12(骨伝導デバイス122)を介して伝達されるものとする。 For example, in a modified example of the second embodiment, the meal simulation system 1 plays video data showing a person chewing food in response to an operation (start of playback) made by a caregiver on the control device 10. The video information of this video data is transmitted by the goggle device, and the audio information of the video data (chewing sounds) is transmitted via the intra-oral device 12 (bone conduction device 122).
介助者は、利用者Aに対し、動画の動き(食べ物を咀嚼する映像及び音声)に併せて咀嚼動作を行うことを促す。利用者Aが、動画の動きに併せて咀嚼動作を行うと、食事シミュレーションシステム1は、その咀嚼動作をトリガーとして、口内装着デバイス12から感覚形成素材を流出させる。 The caregiver encourages user A to perform chewing movements in sync with the video (video and audio of chewing food). When user A performs chewing movements in sync with the video, the eating simulation system 1 triggers the chewing movement to cause sensory-generating material to flow from the intraoral device 12.
このようにすることで、例えば、認知症患者や、嚥下機能が著しく低下した患者(食物を飲み込むことが困難な患者)への食事訓練を一層効果的に行うことができる。 By doing this, it becomes possible to more effectively provide meal training to patients, for example, those with dementia or those with significantly impaired swallowing function (those who have difficulty swallowing food).
第2の実施形態およびその変形例に係る食事シミュレーションシステム1の特徴をまとめると以下の通りである。
即ち、第2の実施形態およびその変形例に係る食事シミュレーションシステム1における口内装着デバイス12は、音声および触覚情報の伝達手段を更に備える。この音声および触覚情報の伝達手段の一態様としては、骨伝導デバイス122である。
第2の実施形態およびその変形例に係る食事シミュレーションシステム1における制御装置10は、音声伝達手段(骨伝導デバイス122)を介して、食べ物の咀嚼音およびその食物の咀嚼の感覚情報を振動情報として伝達する。
The features of the meal simulation system 1 according to the second embodiment and its modified example can be summarized as follows.
That is, the oral device 12 in the meal simulation system 1 according to the second embodiment and its modified example further includes a means for transmitting audio and tactile information. One aspect of this means for transmitting audio and tactile information is the bone conduction device 122.
The control device 10 in the meal simulation system 1 according to the second embodiment and its modification transmits the sound of chewing food and sensory information about the chewing of the food as vibration information via an audio transmission means (bone conduction device 122).
1 食事シミュレーションシステム
10 制御装置
11 ゴーグルデバイス
100 CPU
1000 表示処理部
1001 識別情報取得部
1002 送信部
101 メモリ
102 通信インタフェース
12 口内装着デバイス(マウスピース型デバイス)
120 マウスピース部
120A 咀嚼感知センサ
121 タンク部
121a 接触感知センサ
121b タンク
121c アクチュエータ
122 骨伝導デバイス(音声伝達手段)
13 皿デバイス
14 箸型デバイス
D 咀嚼音、咀嚼の触感情報
1 Meal simulation system 10 Control device 11 Goggle device 100 CPU
1000 Display processing unit 1001 Identification information acquisition unit 1002 Transmission unit 101 Memory 102 Communication interface 12 Orally worn device (mouthpiece type device)
120 Mouthpiece part 120A Chewing detection sensor 121 Tank part 121a Contact detection sensor 121b Tank 121c Actuator 122 Bone conduction device (audio transmission means)
13 Plate device 14 Chopsticks-type device D Chewing sound, tactile information of chewing
Claims (9)
利用者の口内に装着され、所定の識別情報を受信した場合に当該識別情報に対応する味又は香りを利用者の口内に放出可能な口内装着デバイスと、
制御装置と、
を備え、
前記制御装置は、
前記ゴーグルデバイスを通じて、利用者に向けて一つ又は複数種類の仮想食物を表示させる表示処理部と、
利用者が持つ食事用具が現実空間内における前記仮想食物の位置に運ばれた場合に、当該運ばれた位置に対応する前記仮想食物の種類を示す識別情報を取得する識別情報取得部と、
利用者の口元に前記食事用具が運ばれた場合に、当該利用者の口内に装着された前記口内装着デバイスに向けて、前記取得された識別情報を送信する送信部と、
を備える食事シミュレーションシステム。 a goggle device that is worn on the user's head and is capable of displaying an image of a virtual body according to the user's movements in real space;
an oral device that is attached to the user's mouth and that, when receiving predetermined identification information, is capable of releasing a taste or fragrance corresponding to the identification information into the user's mouth;
a control device;
Equipped with
The control device
a display processing unit that displays one or more types of virtual food to a user through the goggle device;
an identification information acquisition unit that, when the eating utensils held by the user are carried to the position of the virtual food in real space, acquires identification information indicating the type of the virtual food corresponding to the carried position;
a transmitter that transmits the acquired identification information to the intra-oral device worn in the user's mouth when the eating utensil is brought to the user's mouth;
A meal simulation system comprising:
請求項1に記載の食事シミュレーションシステム。 When the intra-oral device receives the identification information and detects a chewing action of the user following the reception of the identification information, the intra-oral device releases a taste or aroma corresponding to the identification information into the user's mouth.
The meal simulation system according to claim 1 .
請求項1または請求項2に記載の食事シミュレーションシステム。 The goggle device further includes a plate device having a receiving surface on which the virtual food is superimposed and having a built-in sensor capable of detecting the position on the receiving surface to which the eating utensil approaches.
3. The meal simulation system according to claim 1 or 2.
請求項1または請求項2に記載の食事シミュレーションシステム。 When the eating utensil is brought to a position of the virtual food in real space, the display processing unit superimposes and displays an image showing at least a part of the virtual food in accordance with the movement of the eating utensil.
3. The meal simulation system according to claim 1 or 2.
請求項1または請求項2に記載の食事シミュレーションシステム。 The oral device further comprises an audio transmission means.
3. The meal simulation system according to claim 1 or 2.
請求項5に記載の食事シミュレーションシステム。 The audio transmission means is a bone conduction device.
The meal simulation system according to claim 5 .
請求項5に記載の食事シミュレーションシステム。 The control device reproduces the sound of chewing food via the audio transmission means.
The meal simulation system according to claim 5 .
前記制御装置が、前記ゴーグルデバイスを通じて、利用者に向けて一つ又は複数の仮想食物を表示させるステップと、
前記制御装置が、利用者が持つ食事用具が現実空間内における前記仮想食物の位置に運ばれた場合に、当該運ばれた位置に対応する前記仮想食物の識別情報を取得するステップと、
前記制御装置が、利用者の口元に前記食事用具が運ばれた場合に、当該利用者の口内に装着された前記口内装着デバイスに向けて、前記取得された識別情報を送信するステップと、
を有する食事シミュレーション方法。 A meal simulation method using a meal simulation system having a goggle device that is worn on a user's head and is capable of displaying an image of a virtual body according to the user's movements in real space, an oral device that is worn in the user's mouth and is capable of releasing a taste or aroma corresponding to predetermined identification information into the user's mouth when the device receives the identification information, and a control device ,
causing the control device to display one or more virtual foods to the user through the goggle device;
When the eating utensil held by the user is carried to the position of the virtual food in real space, the control device acquires identification information of the virtual food corresponding to the carried position;
a step in which the control device transmits the acquired identification information to the intra-oral device worn in the user's mouth when the eating utensil is brought to the user's mouth;
A meal simulation method comprising:
前記ゴーグルデバイスを通じて、利用者に向けて一つ又は複数の仮想食物を表示させるステップと、
利用者が持つ食事用具が現実空間内における前記仮想食物の位置に運ばれた場合に、当該運ばれた位置に対応する前記仮想食物の識別情報を取得するステップと、
利用者の口元に前記食事用具が運ばれた場合に、当該利用者の口内に装着された前記口内装着デバイスに向けて、前記取得された識別情報を送信するステップと、
を実行させるプログラム。 A computer of a meal simulation system having a goggle device that is worn on a user's head and is capable of displaying an image of a virtual body according to the user's movements in real space, and an oral device that is worn in the user's mouth and is capable of releasing a taste or aroma corresponding to predetermined identification information into the user's mouth when the device receives the identification information,
displaying one or more virtual foods to a user through the goggle device;
When the eating utensil held by the user is carried to the position of the virtual food in real space, acquiring identification information of the virtual food corresponding to the carried position;
When the eating utensil is brought to the mouth of a user, transmitting the acquired identification information to the oral device worn in the mouth of the user;
A program that executes the following.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2026009563A JP2026063351A (en) | 2021-09-09 | 2026-01-23 | Oral device and meal simulation system |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021146773 | 2021-09-09 | ||
| JP2021146773 | 2021-09-09 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2026009563A Division JP2026063351A (en) | 2021-09-09 | 2026-01-23 | Oral device and meal simulation system |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2023039946A JP2023039946A (en) | 2023-03-22 |
| JP2023039946A5 JP2023039946A5 (en) | 2024-02-01 |
| JP7823885B2 true JP7823885B2 (en) | 2026-03-04 |
Family
ID=85613940
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022143928A Active JP7823885B2 (en) | 2021-09-09 | 2022-09-09 | Meal simulation system, meal simulation method, and program |
| JP2026009563A Pending JP2026063351A (en) | 2021-09-09 | 2026-01-23 | Oral device and meal simulation system |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2026009563A Pending JP2026063351A (en) | 2021-09-09 | 2026-01-23 | Oral device and meal simulation system |
Country Status (1)
| Country | Link |
|---|---|
| JP (2) | JP7823885B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102628586B1 (en) * | 2023-09-20 | 2024-01-25 | 그리다텍 주식회사 | Virtual reality simulation method for medical consumables drop training |
| JP7774922B1 (en) * | 2025-03-31 | 2025-11-25 | 株式会社ゼクサバース | Information processing device, method, and program |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2016093476A (en) | 2014-11-10 | 2016-05-26 | 国立研究開発法人産業技術総合研究所 | Chewing sensation feedback device |
| US20200233484A1 (en) | 2017-09-25 | 2020-07-23 | Hewlett-Packard Development Company, L.P. | Enhanced reality system with haptic retargeting |
| JP2020123070A (en) | 2019-01-29 | 2020-08-13 | 新東工業株式会社 | controller |
| WO2021059642A1 (en) | 2019-09-25 | 2021-04-01 | ソニー株式会社 | Information processing device, control method, and program |
-
2022
- 2022-09-09 JP JP2022143928A patent/JP7823885B2/en active Active
-
2026
- 2026-01-23 JP JP2026009563A patent/JP2026063351A/en active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2016093476A (en) | 2014-11-10 | 2016-05-26 | 国立研究開発法人産業技術総合研究所 | Chewing sensation feedback device |
| US20200233484A1 (en) | 2017-09-25 | 2020-07-23 | Hewlett-Packard Development Company, L.P. | Enhanced reality system with haptic retargeting |
| JP2020123070A (en) | 2019-01-29 | 2020-08-13 | 新東工業株式会社 | controller |
| WO2021059642A1 (en) | 2019-09-25 | 2021-04-01 | ソニー株式会社 | Information processing device, control method, and program |
Non-Patent Citations (1)
| Title |
|---|
| 鳴海拓志,メタクッキ-:感覚間相互作用を用いた味覚ディスプレイの検討,日本バーチャルリアリティ学会論文誌,2010年12月31日,Vol.15,No.4 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023039946A (en) | 2023-03-22 |
| JP2026063351A (en) | 2026-04-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10130277B2 (en) | Willpower glasses (TM)—a wearable food consumption monitor | |
| US9042596B2 (en) | Willpower watch (TM)—a wearable food consumption monitor | |
| JP2026063351A (en) | Oral device and meal simulation system | |
| Bhavadharini et al. | Virtual, augmented, and mixed reality as a versatile tool in food consumer behavior evaluation: Recent advances in aroma, taste, and texture incorporation | |
| US20160143582A1 (en) | Wearable Food Consumption Monitor | |
| Ernsperger et al. | Just take a bite: Easy, effective answers to food aversions and eating challenges! | |
| Gayler et al. | Exploring the design space for human-food-technology interaction: An approach from the lens of eating experiences | |
| US20140350353A1 (en) | Wearable Imaging Device for Monitoring Food Consumption using Gesture Recognition | |
| US20150379238A1 (en) | Wearable Imaging Device for Monitoring Food Consumption Using Gesture Recognition | |
| US10772559B2 (en) | Wearable food consumption monitor | |
| Wang et al. | The singing carrot: Designing playful experiences with food sounds | |
| WO2005016137A1 (en) | Image display system, image display device, image display method | |
| Bruijnes et al. | Tasty tech: human-food interaction and multimodal interfaces | |
| CN109756834B (en) | Audio bone conduction processing method, device and system | |
| Arza et al. | Feed the food monsters! Helping co-diners chew their food better with augmented reality | |
| CN119580992A (en) | An AI and VR nursing method, device, medium and program product integrating multiple senses | |
| US12171365B2 (en) | Cooking robot, cooking robot control device, and control method | |
| US12514398B2 (en) | Data processing device and data processing method | |
| JP2023039946A5 (en) | Meal simulation system, meal simulation method, oral device and program | |
| US20240071600A1 (en) | Electrical condition data management apparatus, program, and method | |
| Cartwright et al. | Profound and multiple learning difficulties | |
| Rabin et al. | Your Baby Can Self-Feed, Too: Adapted Baby-Led Weaning for Children with Developmental Delays or Other Feeding Challenges | |
| JP2021189720A (en) | Content server system, computer system, and program | |
| JP2008515584A (en) | Computer-implemented method and system for providing feedback during sex play | |
| JP7766553B2 (en) | Information processing system, information processing device, and information processing method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240124 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20250317 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20251126 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20251216 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20260123 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20260203 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20260212 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7823885 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |