JP7637922B2 - 口腔機能評価装置、口腔機能評価システム、及び、口腔機能評価方法 - Google Patents
口腔機能評価装置、口腔機能評価システム、及び、口腔機能評価方法 Download PDFInfo
- Publication number
- JP7637922B2 JP7637922B2 JP2024516143A JP2024516143A JP7637922B2 JP 7637922 B2 JP7637922 B2 JP 7637922B2 JP 2024516143 A JP2024516143 A JP 2024516143A JP 2024516143 A JP2024516143 A JP 2024516143A JP 7637922 B2 JP7637922 B2 JP 7637922B2
- Authority
- JP
- Japan
- Prior art keywords
- oral function
- subject
- oral
- sound
- evaluated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/66—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for extracting parameters related to health condition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B10/00—Instruments for taking body samples for diagnostic purposes; Other methods or instruments for diagnosis, e.g. for vaccination diagnosis, sex determination or ovulation-period determination; Throat striking implements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/21—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Medical Informatics (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Physiology (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Primary Health Care (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Description
本発明は、被評価者の口腔機能を評価することができる、口腔機能評価装置、口腔機能評価システム及び口腔機能評価方法に関する。
被評価者の首に摂食嚥下機能を評価するための器具を装着させ、摂食嚥下機能評価指標(マーカー)として、咽頭運動特徴量を取得し、被評価者の摂食嚥下機能を評価する方法が開示されている(例えば、特許文献1参照)。
しかしながら、上記特許文献1に開示された方法では、摂食嚥下機能等の口腔機能を評価するために、被評価者に器具を装着する必要があり、被評価者に不快感を与え、被評価者に負担が生じる場合がある。また、歯科医師、歯科衛生士、言語聴覚士又は内科医師等の専門家による視診、問診又は触診等によっても口腔機能を評価することはできるが、高齢者は、加齢による影響で、ずっとむせていたり、食べこぼしをしたりしているにもかかわらず、高齢だから当然の症状であるとして口腔機能の低下が見過ごされることがある。口腔機能の低下が見過ごされることで、例えば食事量の低下からくる低栄養を招き、低栄養が免疫力の低下を招く。加えて、誤嚥もしやすく、誤嚥と免疫力低下が結果として誤嚥性肺炎に至らしめるおそれにつながる悪循環を招く。
ところで、このような方法を利用せずとも被評価者が発話した音声から被評価者の口腔機能を評価することができるが、音声が適切に集音できないことで、その評価の正確性に課題があった。
そこで、本発明は、被評価者の音声を利用しつつ、より正確に口腔機能を評価することが可能な口腔機能評価装置等の提供を目的とする。
本発明の一態様に係る口腔機能評価装置は、被評価者が発話した音声から、前記被評価者の口腔機能の低下状態を評価する口腔機能評価装置であって、前記被評価者が発話した音声を集音することで得られる音声データを取得する取得部と、取得された前記音声データから特徴量を抽出する抽出部と、取得した前記音声データにおいて前記被評価者が音声を発していない期間に集音された音の第1平均強度と、前記被評価者が音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、前記第1平均強度に対する、前記第2平均強度の比であるS/N比を算出するS/N比算出部と、前記被評価者の口腔機能の評価に用いられる推定式を決定する決定部と、決定された前記推定式と、抽出された前記特徴量とに基づいて、前記被評価者の口腔機能の推定値を算出する算出部と、算出された前記推定値を、口腔機能評価指標を用いて判定することで、前記被評価者の口腔機能の低下状態を評価する評価部と、を備え、前記決定部は、算出した前記S/N比が第1閾値よりも大きい場合には、前記音声データから抽出される前記特徴量のうち音圧に関する特徴量を含む第1推定式を前記推定式として決定し、算出した前記S/N比が前記第1閾値以下の場合には、前記音圧に関する特徴量を含まない第2推定式を前記推定式として決定する。
また、本発明の一態様に係る口腔機能評価システムは、被評価者が発話した音声から、前記被評価者の口腔機能の低下状態を評価する口腔機能評価システムであって、端末と、前記端末に接続された口腔機能評価装置と、を備え、前記端末は、前記被評価者が発話した音声の集音に用いられる集音装置と、評価された前記被評価者の口腔機能の低下状態を提示するための提示装置と、を有し、前記口腔機能評価装置は、前記被評価者が発話した音声を集音することで得られる音声データを取得する取得部と、取得された前記音声データから特徴量を抽出する抽出部と、取得した前記音声データにおいて前記被評価者が音声を発していない期間に集音された音の第1の平均強度と、前記被評価者が音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、前記第1の平均強度に対する、前記第2平均強度の比であるS/N比を算出するS/N比算出部と、前記被評価者の口腔機能の評価に用いられる推定式を決定する決定部と、決定された前記推定式と、抽出された前記特徴量とに基づいて、前記被評価者の口腔機能の推定値を算出する算出部と、算出された前記推定値を、口腔機能評価指標を用いて判定することで、前記被評価者の口腔機能の低下状態を評価する評価部と、を有し、前記決定部は、算出した前記S/N比が第1閾値よりも大きい場合には、前記音声データから抽出される前記特徴量のうち音圧に関する特徴量を含む第1推定式を前記推定式として決定し、算出した前記S/N比が前記第1閾値以下の場合には、前記音圧に関する特徴量を含まない第2推定式を前記推定式として決定する。
また、本発明の一態様に係る口腔機能評価方法は、端末と、口腔機能評価装置とによって実行され、被評価者が発話した音声から、前記被評価者の口腔機能の低下状態を評価する口腔機能評価方法であって、前記端末が、前記被評価者が発話した音声を集音することで音声データを得、前記口腔機能評価装置が、前記音声データを取得し、取得した前記音声データから特徴量を抽出し、取得した前記音声データにおいて前記被評価者が音声を発していない期間に集音された音の第1の平均強度と、前記被評価者が音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、前記第1の平均強度に対する、前記第2平均強度の比であるS/N比を算出し、前記被評価者の口腔機能の評価に用いられる推定式を決定し、決定した前記推定式と、抽出した前記特徴量とに基づいて、前記被評価者の口腔機能の推定値を算出し、算出した前記推定値を、口腔機能評価指標を用いて判定することで、前記被評価者の口腔機能の低下状態を評価し、前記端末が、評価された前記被評価者の口腔機能の低下状態を提示することを含み、前記推定式の決定では、算出した前記S/N比が第1閾値よりも大きい場合には、前記音声データから抽出される前記特徴量のうち音圧に関する特徴量を含む第1推定式を前記推定式として決定し、算出した前記S/N比が前記第1閾値以下の場合には、前記音圧に関する特徴量を含まない第2推定式を前記推定式として決定する。
本発明の口腔機能評価方法等によれば、被評価者の音声を利用しつつ、より正確に口腔機能を評価することが可能となる。
以下、実施の形態について、図面を参照しながら説明する。なお、以下で説明する実施の形態は、いずれも包括的又は具体的な例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序等は、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
なお、各図は模式図であり、必ずしも厳密に図示されたものではない。また、各図において、実質的に同一の構成に対しては同一の符号を付しており、重複する説明は省略又は簡略化される場合がある。
(実施の形態)
[口腔機能の要素]
本発明は、口腔機能の低下の評価方法等に関するものであり、口腔機能には様々な要素がある。
[口腔機能の要素]
本発明は、口腔機能の低下の評価方法等に関するものであり、口腔機能には様々な要素がある。
例えば、口腔機能の要素には、舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能及び咀嚼機能などがある。ここでは、舌苔、口腔乾燥、咬合力、舌圧及び咀嚼機能について簡単に説明する。
舌苔は、舌に細菌又は食べ物の沈着がどの程度あるか(すなわち口腔衛生)を示すものである。舌苔がないか、薄い場合には、機械的な擦過(食事摂取など)環境があること、唾液による洗浄作用があること、飲み込みの動き(舌の動き)が正常であることがわかる。一方で、舌苔が厚い場合には、舌の動きが悪く、食事を摂りにくいことから、栄養不足又は筋力不足を招くおそれがあることがわかる。口腔乾燥は、舌の乾燥度合いであり、乾燥していると話すための運動が阻害される。また、食べ物は口腔に取り込まれた後に粉砕されるが、そのままでは飲み込みにくいため、粉砕された食べ物を飲み込みやすくするために唾液が粉砕された食べ物をまとめる働きをする。しかし、口腔が乾燥していると食塊(粉砕された食べ物がまとまったもの)が形成されにくい。咬合力は、硬いものを噛む力であり、顎の筋力の強さである。舌圧は、舌が口蓋を押す力を表す指標である。舌圧が弱くなると飲み込みの動きが摂りにくくなる場合がある。また、舌圧が弱くなると舌を動かす速度が落ちることがあり話速度が落ちる場合がある。咀嚼機能は、口腔の総合的な機能である。
本発明では、被評価者が発した音声から被評価者の口腔機能の低下状態(例えば口腔機能の要素についての低下状態)を評価することができる。口腔機能が低下している被評価者が発話した音声には特定の特徴がみられ、これを韻律特徴量として抽出することで、被評価者の口腔機能を評価することができるためである。本発明は、口腔機能評価方法、当該方法をコンピュータ等に実行させるプログラム、当該コンピュータの一例である口腔機能評価装置、及び、口腔機能評価装置を備える口腔機能評価システムによって実現される。以下では、口腔機能評価システムを示しながら、口腔機能評価方法等について説明する。
[口腔機能評価システムの構成]
実施の形態に係る口腔機能評価システム200の構成に関して説明する。
実施の形態に係る口腔機能評価システム200の構成に関して説明する。
図1は、実施の形態に係る口腔機能評価システム200の構成を示す図である。
口腔機能評価システム200は、被評価者Uの音声を解析することで被評価者Uの口腔機能を評価するためのシステムであり、図1に示されるように、口腔機能評価装置100と、携帯端末300(端末の一例)とを備える。
口腔機能評価装置100は、携帯端末300によって、被評価者Uが発した音声を示す音声データを取得し、取得した音声データから被評価者Uの口腔機能を評価する装置である。
携帯端末300は、被評価者Uが第一フォルマント周波数の変化もしくは第二フォルマント周波数の変化を含む2モーラ以上からなる、又は、弾き音、破裂音、無声音、促音及び摩擦音の少なくとも1つを含む、文節又は定型文を発話した音声を非接触により集音する集音装置であり、集音した音声を示す音声データを口腔機能評価装置100へ出力する。例えば、携帯端末300は、マイクを有するスマートフォン又はタブレット等である。なお、携帯端末300は、集音機能を有する装置であれば、スマートフォン又はタブレット等に限らず、例えば、ノートPC等であってもよい。また、口腔機能評価システム200は、携帯端末300の代わりに、集音装置(マイク)を備えていてもよい。また、口腔機能評価システム200は、被評価者Uの個人情報を取得するための入力インターフェースを備えていてもよい。当該入力インターフェースは、例えば、キーボード、タッチパネル等の入力機能を有するものであれば特に限定されない。また、口腔機能評価システム200において、マイクの音量が設定されてもよい。
携帯端末300は、ディスプレイを有し、口腔機能評価装置100から出力される画像データに基づいた画像等を表示する表示装置であってもよい。つまり、携帯端末300は、画像として、口腔機能評価装置100から出力される情報を提示するための提示装置の一例である。なお、表示装置は携帯端末300でなくてもよく、液晶パネル又は有機ELパネルなどによって構成されるモニタ装置であってもよい。つまり、本実施の形態では、携帯端末300が集音装置でもあり表示装置でもあるが、集音装置(マイク)と入力インターフェースと表示装置とが別体に設けられていてもよい。
口腔機能評価装置100と携帯端末300とは、音声データ又は後述する評価結果を示す画像を表示するための画像データ等を送受信可能であればよく、有線で接続されていてもよいし、無線で接続されていてもよい。
口腔機能評価装置100は、携帯端末300によって集音された音声データに基づいて被評価者Uの音声を分析し、分析した結果から被評価者Uの口腔機能を評価し、評価結果を出力する。例えば、口腔機能評価装置100は、評価結果を示す画像を表示するための画像データ、もしくは、評価結果に基づいて生成された被評価者Uに対する口腔に関する提案をするためのデータを携帯端末300へ出力する。こうすることで、口腔機能評価装置100は、被評価者Uへ口腔機能の程度や口腔機能の低下の予防等するための提案を通知できるため、例えば、被評価者Uは口腔機能の低下の予防や改善を行うことができる。
なお、口腔機能評価装置100は、例えば、パーソナルコンピュータであるが、サーバ装置であってもよい。また、口腔機能評価装置100は、携帯端末300であってもよい。つまり、以下で説明する口腔機能評価装置100が有する機能を携帯端末300が有していてもよい。
図2は、実施の形態に係る口腔機能評価システム200の特徴的な機能構成を示すブロック図である。口腔機能評価装置100は、取得部110と、S/N比算出部115と、決定部116と、抽出部120と、算出部130と、評価部140と、出力部150と、提案部160と、記憶部170と、情報出力部180とを備える。
取得部110は、被評価者Uが発話した音声を携帯端末300が非接触により集音することで得られる音声データを取得する。当該音声は、被評価者Uが第一フォルマント周波数の変化もしくは第二フォルマント周波数の変化を含む2モーラ以上からなる文節又は定型文を発話した音声である。又は、当該音声は、弾き音、破裂音、無声音、促音及び摩擦音の少なくとも1つを含む文節又は定型文を発話した音声である。ただし、後述する一部の状況においては、音声は、任意の文を発話した音声である場合もある。また、取得部110は、さらに、被評価者Uの個人情報を取得してもよい。例えば、個人情報は携帯端末300に入力された情報であり、年齢、体重、身長、性別、BMI(Body Mass Index)、歯科情報(例えば、歯の数、入れ歯の有無、咬合支持の場所、機能歯数、残存歯数など)、血清アルブミン値又は喫食率等である。なお、個人情報は、EAT-10(イート・テン)と呼ばれる嚥下スクリーニングツール、聖隷式嚥下質問紙、問診、Barthel Index又は基本チェックリスト等により取得されてもよい。取得部110は、例えば、有線通信又は無線通信を行う通信インターフェースである。
S/N比算出部115は、取得した音声データにおけるS/N比を算出する処理部分である。音声データにおけるS/N比とは、取得した音声データにおいて被評価者Uが音声を発していない期間(暗騒音のみの期間)に集音された音の第1平均強度に対する、被評価者Uが音声を発している期間に集音された音の第2平均強度の比である。そのため、S/N比算出部115は、音声データから被評価者Uが音声を発していない期間分の音を抽出して第1平均強度を算出すること、及び、音声データから被評価者Uが音声を発している期間分の音を抽出して第2平均強度を算出することが可能なように構成されている。S/N比算出部115は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路によって実現される。
決定部116は、S/N比算出部115において算出されたS/N比に基づいて後述する算出部130で被評価者Uの口腔機能の推定値を算出する際に用いられる推定式を決定する処理部である。具体的には、決定部116は、あらかじめ設定されている少なくとも第1推定式及び第2推定式を含むいくつかの推定式の候補の中から、S/N比から想定される暗騒音の影響を考慮して、推定に用いるべき推定式を決定する。なお、推定式の候補は、複数の学習データに基づいてあらかじめ算出された状態で記憶部170などに記憶されている。そして、決定部116は、記憶部170に記憶された推定式の候補から、推定に用いる推定式を決定して、推定式データ171として、記憶部170に別に記憶させる。決定部116は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路によって実現される。
抽出部120は、取得部110で取得された被評価者Uの音声データを解析する処理部である。抽出部120は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路によって実現される。
抽出部120は、取得部110が取得した音声データから韻律特徴量を算出する。韻律特徴量とは、評価部140が被評価者Uの口腔機能を評価するために用いる音声データから抽出される被評価者Uの音声の特徴を示す数値である。韻律特徴量は、話速度、音圧較差、音圧較差の時間変化、第一フォルマント周波数、第二フォルマント周波数、第一フォルマント周波数の変化量、第二フォルマント周波数の変化量、第一フォルマント周波数の時間変化、第二フォルマント周波数の時間変化及び破裂音の時間の少なくとも1つを含んでいてもよい。
算出部130は、抽出部120で抽出された韻律特徴量と、決定された推定式とに基づいて、被評価者Uの口腔機能の推定値を算出する。算出部130は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路によって実現される。
評価部140は、算出部130で算出された推定値を、口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を評価する。口腔機能評価指標を示す指標データ172は、記憶部170に記憶されている。評価部140は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路によって実現される。
出力部150は、算出部130で算出された推定値を提案部160に出力する。また、出力部150は、評価部140で評価された被評価者Uの口腔機能の評価結果を携帯端末300等に出力してもよい。出力部150は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路、及び、有線通信又は無線通信を行う通信インターフェースによって実現される。
提案部160は、算出部130で算出された推定値を、予め定められたデータに照合することで、被評価者Uの口腔機能に関する提案を行う。予め定められたデータである提案データ173は、記憶部170に記憶されている。また、提案部160は、取得部110が取得した個人情報についても提案データ173と照合して、被評価者Uに対する口腔に関する提案を行ってもよい。提案部160は、当該提案を携帯端末300へ出力する。提案部160は、例えば、プロセッサ、マイクロコンピュータ又は専用回路、及び、有線通信又は無線通信を行う通信インターフェースによって実現される。
記憶部170は、複数の学習データに基づいて算出された口腔機能の推定式の候補のデータ(不図示)、決定部116によって決定された推定式を示す推定式データ171、被評価者Uの口腔機能の推定値を判定するための口腔機能評価指標を示す指標データ172、口腔機能の推定値と提案内容との関係を示す提案データ173、及び、被評価者Uの上記個人情報を示す個人情報データ174が記憶されている記憶装置である。推定式データ171は、被評価者Uの口腔機能の推定値の算出が行われるときに算出部130によって参照される。指標データ172は、被評価者Uの口腔機能の低下状態の評価が行われるときに評価部140によって参照される。提案データ173は、被評価者Uに対する口腔機能に関する提案が行われるときに提案部160によって参照される。個人情報データ174は、例えば、取得部110を介して取得されたデータである。なお、個人情報データ174は、予め記憶部170に記憶されていてもよい。記憶部170は、例えば、ROM(Read Only Memory)、RAM(Random Access Memory)、半導体メモリ、HDD(Hard Disk Drive)等によって実現される。
情報出力部180は、S/N比を増大させるための情報を出力する処理部である。情報出力部180は、算出されたS/N比が一定の基準を満たさない場合に、被評価者Uが発話した音声を集音する環境を改善させるような指示の情報を生成して出力する。情報出力部180は、具体的には、プロセッサ、マイクロコンピュータ、又は、専用回路によって実現される。
また、記憶部170には、S/N比算出部115、決定部116、抽出部120、算出部130、評価部140、出力部150、提案部160及び情報出力部180を実現するためにコンピュータに実行されるプログラム、被評価者Uの口腔機能の評価結果を出力する際に用いられる当該評価結果を示す画像データ、及び、提案内容を示す画像、動画、音声又はテキスト等のデータも記憶されていてもよい。また、記憶部170には、後述する指示用の画像が記憶されていてもよい。
図示していないが、口腔機能評価装置100は、第一フォルマント周波数の変化もしくは第二フォルマント周波数の変化を含む2モーラ以上からなる、又は、弾き音、破裂音、無声音、促音及び摩擦音の少なくとも1つを含む、文節又は定型文を発音することを被評価者Uに指示するための指示部を備えていてもよい。指示部は、具体的には、記憶部170に記憶された、上記文節又は定型文を発音することを指示するための指示用の画像の画像データ、又は、指示用の音声の音声データを取得し、当該画像データ又は当該音声データを携帯端末300に出力する。
[口腔機能評価方法の処理手順]
続いて、口腔機能評価装置100が実行する口腔機能評価方法における具体的な処理手順について説明する。
続いて、口腔機能評価装置100が実行する口腔機能評価方法における具体的な処理手順について説明する。
図3Aは、実施の形態に係る口腔機能評価方法による被評価者Uの口腔機能を評価する処理手順を示すフローチャートである。図4は、口腔機能評価方法による被評価者Uの音声の取得方法の概要を示す図である。
まず、指示部は、第一フォルマント周波数の変化もしくは第二フォルマント周波数の変化を含む2モーラ以上からなる、又は、弾き音、破裂音、無声音、促音及び摩擦音の少なくとも1つを含む、文節又は定型文を発音することを指示する(ステップS101)。例えば、ステップS101において、指示部は、記憶部170に記憶された、被評価者Uへの指示用の画像の画像データを取得し、当該画像データを、携帯端末300に出力する。そうすると、図4の(a)に示すように、携帯端末300には、被評価者Uへの指示用の画像が表示される。なお、図4の(a)では、「えをかくことにきめたよ」が定型文の一例として示されているが、「はなさかじいさんとさるかにかっせん」、「はなびのえをかく」、「ひまわりがさいた」等の定型文を発話することが指示されてもよい。また、「いっぱい」、「いったい」、「いっかい」、「ぱったん」、「かっぱ」、「しっぽ」、「きっかり」、「かってに」等の文節を発話することが指示されてもよい。また、「から」、「さら」、「ちゃら」、「じゃら」、「しゃら」、「きゃら」、「ぷら」等の文節を発話することが指示されてもよい。また、「あえい」、「いえあ」、「あい」、「いあ」、「かけき」、「きけか」、「なねに」、「ちてた」、「ぱぺぴ」、「ぴぺぱ」、「かてぴ」、「ちぺか」、「かき」、「たち」、「ぱぴ」、「みさ」、「らり」、「わに」、「にわ」、「えお」、「いお」、「いう」、「てこ」、「きろ」、「てる」、「ぺこ」、「めも」、「えも」等の文節を発話することが指示されてもよい。発音の指示は、このような文節を繰り返し発声させる指示であってもよい。
また、指示部は、記憶部170に記憶された、被評価者Uへの指示用の音声の音声データを取得し、当該音声データを、携帯端末300に出力することで、発音することを指示する指示用の画像を用いずに発音することを指示する指示用の音声を用いて上記指示を行ってもよい。さらに、発音することを指示する指示用の画像及び音声を用いずに、被評価者Uの口腔機能を評価したい評価者(家族、医師等)が自身の声で被評価者Uに上記指示を行ってもよい。
例えば、発話される文節又は定型文は、発話するために口の開閉又は舌の前後の動きを伴う、2つ以上の母音又は母音及び子音の組み合わせを含んでいてもよい。例えば、このような文節又は定型文として、日本語においては、「えをかくことにきめたよ」等がある。「えをかくことにきめたよ」の「えを」を発話するためには、舌の前後の動きを伴い、「えをかくことにきめたよ」の「きめた」を発話するためには、口の開閉を伴う。「えをかくことにきめたよ」の「えを」の部分には、母音「e」及び母音「o」の第二フォルマント周波数が含まれ、また、母音「e」及び母音「o」が隣り合っていることから、第二フォルマント周波数の変化量が含まれる。また、この部分には、第二フォルマント周波数の時間変化が含まれる。「えをかくことにきめたよ」の「きめた」の部分には、母音「i」、母音「e」及び母音「a」の第一フォルマント周波数が含まれ、また、母音「i」、母音「e」及び母音「a」が隣り合っていることから、第一フォルマント周波数の変化量が含まれる。また、この部分には、第一フォルマント周波数の時間変化が含まれる。「えをかくことにきめたよ」が発話されることで、音圧較差、第一フォルマント周波数、第二フォルマント周波数、第一フォルマント周波数の変化量、第二フォルマント周波数の変化量、第一フォルマント周波数の時間変化、第二フォルマント周波数の時間変化、話速度等の韻律特徴量を抽出することができる。
例えば、発話される定型文には、弾き音と当該弾き音とは異なる子音からなる文節の繰り返しを含んでいてもよい。例えば、このような定型文として、日本語においては、「からからから・・・」等がある。「からからから・・・」と繰り返し発話されることで、音圧較差、音圧較差の時間変化、音圧の時間変化、繰り返しの回数等の韻律特徴量を抽出することができる。
例えば、発話される文節又は定型文は、母音及び破裂音の組み合わせを少なくとも1つ含んでいてもよい。例えば、このような文節として、日本語においては、「いったい」等がある。「いったい」と発話されることで、音圧較差、破裂音の時間(母音間の時間)等の韻律特徴量を抽出することができる。
ところで、音圧較差の韻律特徴量は、暗騒音の影響を受けやすいため、特に、S/N比が比較的小さい集音環境である場合は、音圧較差の韻律特徴量が、推定値の推定において正確性への悪影響を及ぼす可能性がある。そこで、本発明では、S/N比算出部115において算出されたS/N比に応じて、音圧較差の特徴量が推定値の算出に及ぼす影響を変化させるように、推定式を決定する。本発明では、このようにすることで、音圧較差の韻律特徴量が推定値の推定において正確性へ悪影響を及ぼす可能性を低減して、推定値を推定することを可能にしている。
このための具体的な処理などの動作について、図3B~図3Dを用いて説明する。図3Bは、実施の形態に係る口腔機能評価方法における推定式の決定についての処理手順を示すフローチャートである。図3Cは、実施の形態に係る口腔機能評価方法において出力される情報の一例を示す図である。図3Dは、実施の形態に係る口腔機能評価方法において推定式を決定することと正確性(推定精度)との関係を示すグラフである。
図3Bに示すように、S/N比算出部115は、S/N比を算出するために、暗騒音を測定し、暗騒音のみの第1平均強度(音圧)を算出する(ステップS201)。暗騒音の測定においては、被評価者Uが音声を発していない期間の音を抽出して用いればよく、例えば、上記したように、被評価者Uが指示された文節又は定型文を発話しているときに、文節又は定型文の前後の暗騒音のみの期間に音を抽出してもよいし、定型文の中に音が途切れる箇所があれば、その箇所を暗騒音のみの期間として、音を抽出してもよい。
続いて、S/N比算出部115は、S/N比を算出するために、被評価者Uの発話時の第2平均強度(音圧)を算出する(ステップS202)。このとき、指示された文節又は定型文を発話している際の音を利用してもよいし、音の集音のために、別に任意の文節又は定型文を発話させる指示を行ってもよい。あるいは、被評価者Uが、口腔機能の評価を行う直前に誰かと会話している状況であれば、その状況を利用して、第1平均強度及び第2平均強度を算出してもよい。
そして、S/N比算出部115は、第1平均強度に対する第2平均強度の比を算出することにより、S/N比を算出する(ステップS203)。ここで、算出したS/N比は、情報出力部180へと出力される。そして、情報出力部180は、S/N比が第2閾値よりも大きいか否かを判定する(ステップS204)。S/N比が第2閾値以下と判定された場合(S204でNo)、情報出力部180は、S/N比を増大させるための集音環境を改善させる情報を生成して出力する(ステップS205)。
例えば、図3Cには、このような情報が出力された場合の一例として、「マイクの接続状態を確認するか、発話時の声量を大きくしてください」ということを携帯端末300に表示させたときの状態が示されている。このように、情報を出力して、暗騒音を低減させる、すなわち、第2平均強度を低下させること、及び、発話時の声量を大きくさせる、すなわち、第1平均強度を増大させることの少なくとも一方を行わせることでS/N比を増大させる指示がされる。なお、被評価者が発話する際の環境音を低減させるように、「集音場所を移動してください」ということを携帯端末300に表示させてもよい。
図3Bに戻り、S/N比が第2閾値よりも大きいと判定された場合(S204でYes)、情報出力部180は特に何もせず、ステップS206へと進む。具体的には、算出したS/N比は、決定部116にも出力される。決定部116は、S/N比が第1閾値よりも大きいか否かを判定する(ステップS206)。S/N比が第1閾値以下と判定された場合(S206でNo)、決定部116は、音声データから抽出される韻律特徴量のうち音圧に関する特徴量を含まない第2推定式を推定に用いる推定式として決定し(ステップS208)、推定式データ171を記憶部170に記憶させる。一方、S/N比が第1閾値より大きいと判定された場合(S206でYes)、決定部116は、音声データから抽出される韻律特徴量のうち音圧に関する特徴量を含む第1推定式を推定に用いる推定式として決定し(ステップS207)、推定式データ171を記憶部170に記憶させる。
このようにして、S/N比に応じて、音圧に関する韻律特徴量を含むか、含まないかの観点で変化させた推定式が決定されて推定値の推定に用いられる。例えば、図3Dでは、(a)に、S/N比を考慮せずに一律に同じ推定式を用いた場合のS/N比と推定精度との関係が示されており、(b)に、S/N比に応じて、音圧に関する韻律特徴量を含むか、含まないかの観点で変化させた推定式が決定される場合のS/N比と推定精度との関係が示されている。
図3Dに示されるように、S/N比が第1閾値よりも大きければ(a)及び(b)いずれでも同じ推定精度を示している。しかしながら、S/N比が第1閾値以下かつ第2閾値より大きい範囲では、図3Dの(a)は、暗騒音の影響によって影響された音圧に関する韻律特徴量が推定精度を低下させることで、図3Dの(b)よりも推定精度が低下してしまう。また、図3Dの(b)に一点鎖線で示すように、S/N比が第2閾値以下となれば、S/N比を増大させる指示がされるので、推定値が推定される前に、S/N比が改善された環境に移行して再度音声データの取得から処理が行われるので、推定精度が低い状態で推定値が推定されにくくなっている。ただし、このS/N比が第2閾値以下の状態でも、図3Dの(a)に比べて推定精度が高いため、この状態で推定値を推定したとしても有用であるといえる。 図3Aの説明に戻り、音声データは、文節又は定型文を被評価者Uが異なる話速度で少なくとも2回発話した音声を集音することで得られてもよい。例えば、被評価者Uは、「えをかくことにきめたよ」を普段通りの速さとそれよりも速い速さでそれぞれ発話するように指示される。「えをかくことにきめたよ」を普段通りの速さとそれよりも速い速さでそれぞれ発話されることで、口腔機能の状態の保持の程度を推定できる。
次に、図3Aに示されるように、取得部110は、ステップS101において指示を受けた被評価者Uの音声データを、携帯端末300を介して取得する(ステップS102)。図4の(b)に示すように、ステップS102において、例えば、被評価者Uは、「えをかくことにきめたよ」等の文節又は定型文を携帯端末300に向けて発する。取得部110は、被評価者Uが発した文節又は定型文を、音声データとして取得する。
次に、抽出部120は、取得部110が取得した音声データから韻律特徴量を抽出する(ステップS103)。
例えば、取得部110が取得した音声データが、「えをかくことにきめたよ」を発話した音声から得られる音声データの場合、抽出部120は、音圧較差、第一フォルマント周波数、第二フォルマント周波数、第一フォルマント周波数の変化量、第二フォルマント周波数の変化量、第一フォルマント周波数の時間変化、第二フォルマント周波数の時間変化及び話速度を韻律特徴量として抽出する。これについて、図5A及び図5Bを用いて説明する。
図5Aは、被評価者Uが「えをかくことにきめたよ」と発話した音声を示す音声データの一例を示す図である。図5Aに示すグラフの横軸は時間であり、縦軸はパワー(音圧)である。なお、図5Aのグラフの縦軸に示すパワーの単位は、デシベル(dB)である。
図5Aに示すグラフには、「え」、「を」、「か」、「く」、「こ」、「と」、「に」、「き」、「め」、「た」、「よ」に対応する音圧の変化が確認される。取得部110は、図3Aに示すステップS102において、被評価者Uから図5Aに示す音声データを取得する。抽出部120は、例えば、図3Aに示すステップS103において、既知の方法により、図5Aに示す音声データに含まれる「か(ka)」における「k」及び「a」の各音圧、「こ(ko)」における「k」及び「o」の各音圧、「と(to)」における「t」及び「o」の各音圧、「た(ta)」における「t」及び「a」の各音圧を抽出する。抽出部120は、抽出した「k」及び「a」の各音圧から、「k」及び「a」の音圧較差Diff_P(ka)を韻律特徴量として抽出する。同じように、抽出部120は、「k」及び「o」の音圧較差Diff_P(ko)、「t」及び「o」の音圧較差Diff_P(to)、「t」及び「a」の音圧較差Diff_P(ta)を韻律特徴量として抽出する。例えば、音圧較差によって、飲み込みの力(舌が口蓋に接触する圧力)又は食べ物をまとめる力に関する口腔機能を評価することができる。また、「k」を含む音圧較差によって、喉への飲食物の流入防止能力に関する口腔機能も評価することができる。
図5Bは、被評価者Uが「えをかくことにきめたよ」と発話した音声のフォルマント周波数の変化の一例を示す図である。具体的には、図5Bは、第一フォルマント周波数及び第二フォルマント周波数の変化の一例を説明するためのグラフである。
第一フォルマント周波数は、人の音声の低周波数側から数えて1番目に見られる振幅のピーク周波数であり、口の開閉に関する特徴が反映されやすいことが知られている。第二フォルマント周波数は、人の音声の低周波数側から数えて2番目に見られる振幅のピーク周波数であり、舌の前後の動きに関する影響が反映されやすいことが知られている。
抽出部120は、被評価者Uが発話した音声を示す音声データから、複数の母音それぞれの第一フォルマント周波数及び第二フォルマント周波数を韻律特徴量として抽出する。例えば、抽出部120は、「えを」における、母音「e」に対応する第二フォルマント周波数F2e及び母音「o」に対応する第二フォルマント周波数F2oを韻律特徴量として抽出する。また、例えば、抽出部120は、「きめた」における、母音「i」に対応する第一フォルマント周波数F1i、母音「e」に対応する第一フォルマント周波数F1e及び母音「a」に対応する第一フォルマント周波数F1aを韻律特徴量として抽出する。
さらに、抽出部120は、母音が連続した文字列の第一フォルマント周波数の変化量と第二フォルマント周波数の変化量を韻律特徴量として抽出する。例えば、抽出部120は、第二フォルマント周波数F2e及び第二フォルマント周波数F2oの変化量(F2e-F2o)、ならびに、第一フォルマント周波数F1i、第一フォルマント周波数F1e及び第一フォルマント周波数F1aの変化量(F1e-F1i、F1a-F1e、F1a-F1i)を韻律特徴量として抽出する。
さらに、抽出部120は、母音が連続した文字列の第一フォルマント周波数の時間変化と第二フォルマント周波数の時間変化を韻律特徴量として抽出する。例えば、抽出部120は、第二フォルマント周波数F2e及び第二フォルマント周波数F2oの時間変化、ならびに、第一フォルマント周波数F1i、第一フォルマント周波数F1e及び第一フォルマント周波数F1aの時間変化を韻律特徴量として抽出する。図5Bには、第一フォルマント周波数F1i、第一フォルマント周波数F1e及び第一フォルマント周波数F1aの時間変化の一例を示しており、当該時間変化は、ΔF1/ΔTimeである。このΔF1は、F1a-F1iである。
例えば、第二フォルマント周波数、第二フォルマント周波数の変化量又は第二フォルマント周波数の時間変化によって、食べ物をまとめる動き(舌の前後左右の動き)に関する口腔機能を評価することができる。また、例えば、第一フォルマント周波数、第一フォルマント周波数の変化量又は第一フォルマント周波数の時間変化によって、食べ物を粉砕する能力に関する口腔機能を評価することができる。また、第一フォルマント周波数の時間変化によって、早く口を動かす能力に関する口腔機能を評価することができる。
また、図5Aに示すように、抽出部120は、話速度を韻律特徴量として抽出してもよい。例えば、抽出部120は、被評価者Uが「えをかくことにきめたよ」を発話し始めてから発話し終わるまでの時間を韻律特徴量として抽出してもよい。また、例えば、抽出部120は、「えをかくことにきめたよ」の全てを発話し終わるまでの時間に限らず、「えをかくことにきめたよ」の特定の部分を発話し始めてから発話し終わるまでの時間を韻律特徴量として抽出してもよい。また、例えば、抽出部120は、「えをかくことにきめたよ」の全て又は特定の部分の1語又は複数語を発話するのにかかる平均時間を韻律特徴量として抽出してもよい。例えば、話速度によって、飲み込みの動き、食べ物をまとめる動き又は舌の巧緻性に関する口腔機能を評価することができる。
例えば、取得部110が取得した音声データが、「からからから・・・」と繰り返し発話した音声から得られる音声データの場合、抽出部120は、音圧較差の時間変化を韻律特徴量として抽出する。これについて、図6を用いて説明する。
図6は、被評価者Uが「からからから・・・」と繰り返し発話した音声を示す音声データの一例を示す図である。図6に示すグラフの横軸は時間であり、縦軸はパワー(音圧)である。なお、図6のグラフの縦軸に示すパワーの単位は、デシベル(dB)である。
図6に示すグラフには、「か」、「ら」に対応する音圧の変化が確認される。取得部110は、図3Aに示すステップS102において、被評価者Uから図6に示す音声データを取得する。抽出部120は、例えば、図3Aに示すステップS103において、既知の方法により、図6に示す音声データに含まれる「か(ka)」における「k」及び「a」の各音圧、「ら(ra)」における「r」及び「a」の各音圧を抽出する。抽出部120は、抽出した「k」及び「a」の各音圧から、「k」及び「a」の音圧較差Diff_P(ka)を韻律特徴量として抽出する。同じように、抽出部120は、「r」及び「a」の音圧較差Diff_P(ra)を韻律特徴量として抽出する。例えば、抽出部120は、繰り返し発話される「から」のそれぞれについて、音圧較差Diff_P(ka)及び音圧較差Diff_P(ra)を韻律特徴量として抽出する。そして、抽出部120は、抽出した音圧較差Diff_P(ka)のそれぞれから、音圧較差Diff_P(ka)の時間変化を韻律特徴量として抽出し、抽出した音圧較差Diff_P(ra)のそれぞれから、音圧較差Diff_P(ra)の時間変化を韻律特徴量として抽出する。例えば、音圧較差の時間変化によって、飲み込みの動き、食べ物をまとめる動き又は食べ物を粉砕する能力に関する口腔機能を評価することができる。
なお、抽出部120は、音圧の時間変化を韻律特徴量として抽出してもよい。例えば、「からからから・・・」と繰り返し発話される際の各「から」における最小の音圧(「k」の音圧)の時間変化が抽出されてもよいし、各「から」における最大の音圧(「a」の音圧)の時間変化が抽出されてもよいし、各「から」における「か」と「ら」の間の音圧(「r」の音圧)の時間変化が抽出されてもよい。例えば、音圧の時間変化によって、飲み込みの動き、食べ物をまとめる動き又は食べ物を粉砕する能力に関する口腔機能を評価することができる。
また、図6に示すように、抽出部120は、所定の時間あたりに「から」を発声できた回数である繰り返し回数を特徴量として抽出してもよい。所定の時間は特に限定されないが、5秒等である。例えば、所定の時間あたりの繰り返し回数によって、飲み込みの動き又は食べ物をまとめる動きに関する口腔機能を評価することができる。
例えば、取得部110が取得した音声データが、「いったい」を発話した音声から得られる音声データの場合、抽出部120は、音圧較差及び破裂音の時間を韻律特徴量として抽出する。これについて、図7を用いて説明する。
図7は、被評価者Uが「いったい」と発話した音声を示す音声データの一例を示す図である。ここでは、「いったいいったい・・・」と繰り返し発話した音声を示す音声データの一例を示している。図7に示すグラフの横軸は時間であり、縦軸はパワー(音圧)である。なお、図7のグラフの縦軸に示すパワーの単位は、デシベル(dB)である。
図7に示すグラフには、「い」、「っ」、「た」、「い」に対応する音圧の変化が確認される。取得部110は、図3Aに示すステップS102において、被評価者Uから図7に示す音声データを取得する。抽出部120は、例えば、図3Aに示すステップS103において、既知の方法により、図7に示す音声データに含まれる「た(ta)」における「t」及び「a」の各音圧を抽出する。抽出部120は、抽出した「t」及び「a」の各音圧から、「t」及び「a」の音圧較差Diff_P(ta)を韻律特徴量として抽出する。例えば、音圧較差によって、飲み込みの力又は食べ物をまとめる力に関する口腔機能を評価することができる。また、抽出部120は、破裂音の時間Time(i-ta)(「i」と「ta」の間の破裂音の時間)を韻律特徴量として抽出する。例えば、破裂音の時間によって、飲み込みの動き、食べ物をまとめる動き又は舌の安定した動きに関する口腔機能を評価することができる。
なお、発話される文節又は定型文として日本語での文節又は定型文を例にあげて説明したが、日本語に限らずどのような言語であってもよい。
図8は、日本語の文節又は定型文と、発音の際の舌の動き又は口の開閉の程度が類似する中国語の文節又は定型文の一例を示す図である。
世界には様々な言語が存在するが、発音の際の舌の動き又は口の開閉の程度が類似するものが存在する。例えば、中国語の
(以下、gao dao wu da ka ji ke da yi wu zheと記載する)を発音する際の発音の際の舌の動き又は口の開閉の程度は、日本語の「えをかくことにきめたよ」を発音する際の発音の際の舌の動き又は口の開閉の程度と類似しているため、日本語の「えをかくことにきめたよ」と類似する韻律特徴量を抽出することができる。なお、本明細書では声調符号の記載を省略している。図8には、日本語及び中国語について、発音の際の舌の動き又は口の開閉の程度が類似する文節又は定型文の例が参考までにいくつか示されている。
(以下、gao dao wu da ka ji ke da yi wu zheと記載する)を発音する際の発音の際の舌の動き又は口の開閉の程度は、日本語の「えをかくことにきめたよ」を発音する際の発音の際の舌の動き又は口の開閉の程度と類似しているため、日本語の「えをかくことにきめたよ」と類似する韻律特徴量を抽出することができる。なお、本明細書では声調符号の記載を省略している。図8には、日本語及び中国語について、発音の際の舌の動き又は口の開閉の程度が類似する文節又は定型文の例が参考までにいくつか示されている。
また、世界に存在する様々な言語に、発音の際の舌の動き又は口の開閉の程度が類似するものが存在することについて、図9A及び図9Bを用いて簡単に説明する。
図9Aは、母音の国際音声記号を示す図である。
図9Bは、子音の国際音声記号を示す図である。
図9Aに示す母音の国際音声記号の位置関係は、横方向は舌の前後の動きを示しており、近いほど舌の前後の動きが類似し、縦方向は口の開閉の程度を示しており、近いほど口の開閉の程度が類似する。図9Bに示す子音の国際音声記号の表は、横方向は、唇から喉までの、発音の際に使用する部位を示しており、表の同じマス目にある国際音声記号によって同じ音を同じ部位を使用して発音することができる。このため、世界に存在する様々な言語について、本発明を適用することができる。
例えば、口の開閉を大きくしたい場合には、図9Aに示す縦方向に離れた国際音声記号(例えば「i」と「a」)が連続したものが文節又は定型文に含むようにする。これにより、韻律特徴量として第一フォルマント周波数の変化量を大きくすることができる。また、例えば、舌の前後の位置を大きくしたい場合には、図9Aに示す横方向に離れた国際音声記号(例えば「i」と「u」)が連続したものが文節又は定型文に含むようにする。これにより、韻律特徴量として第二フォルマント周波数の変化量を大きくすることができる。
例えば、取得部110が取得した音声データが、「gao dao wu da ka ji ke da yi wu zhe」を発話した音声から得られる音声データの場合、抽出部120は、音圧較差、第一フォルマント周波数、第二フォルマント周波数、第一フォルマント周波数の変化量、第二フォルマント周波数の変化量、第一フォルマント周波数の時間変化、第二フォルマント周波数の時間変化及び話速度を韻律特徴量として抽出する。これについて、図10A及び図10Bを用いて説明する。
図10Aは、被評価者Uが「gao dao wu da ka ji ke da yi wu zhe」と発話した音声を示す音声データの一例を示す図である。図10Aに示すグラフの横軸は時間であり、縦軸はパワー(音圧)である。なお、図10Aのグラフの縦軸に示すパワーの単位は、デシベル(dB)である。
図10Aに示すグラフには、「gao」、「dao」、「wu」、「da」、「ka」、「ji」、「ke」、「da」、「yi」、「wu」、「zhe」に対応する音圧の変化が確認される。取得部110は、図3Aに示すステップS102において、被評価者Uから図10Aに示す音声データを取得する。抽出部120は、例えば、図3Aに示すステップS103において、既知の方法により、図10Aに示す音声データに含まれる「dao」における「d」及び「a」の各音圧、「ka」における「k」及び「a」の各音圧、「ke」における「k」及び「e」の各音圧、「zhe」における「zh」及び「e」の各音圧を抽出する。抽出部120は、抽出した「d」及び「a」の各音圧から、「d」及び「a」の音圧較差Diff_P(da)を韻律特徴量として抽出する。同じように、抽出部120は、「k」及び「a」の音圧較差Diff_P(ka)、「k」及び「e」の音圧較差Diff_P(ke)、「zh」及び「e」の音圧較差Diff_P(zhe)を韻律特徴量として抽出する。例えば、音圧較差によって、飲み込みの力又は食べ物をまとめる力に関する口腔機能を評価することができる。また、「k」を含む音圧較差によって、喉への飲食物の流入防止能力に関する口腔機能も評価することができる。
図10Bは、被評価者Uが「gao dao wu da ka ji ke da yi wu zhe」と発話した音声のフォルマント周波数の変化の一例を示す図である。具体的には、図10Bは、第一フォルマント周波数及び第二フォルマント周波数の変化の一例を説明するためのグラフである。
抽出部120は、被評価者Uが発話した音声を示す音声データから、複数の母音それぞれの第一フォルマント周波数及び第二フォルマント周波数を韻律特徴量として抽出する。例えば、抽出部120は、「ji」における母音「i」に対応する第一フォルマント周波数F1i、「ke」における母音「e」に対応する第一フォルマント周波数F1e及び「da」における母音「a」に対応する第一フォルマント周波数F1aを韻律特徴量として抽出する。また、例えば、抽出部120は、「yi」における母音「i」に対応する第二フォルマント周波数F2i及び「wu」における母音「u」に対応する第二フォルマント周波数F2uを韻律特徴量として抽出する。
さらに、抽出部120は、母音が連続した文字列の第一フォルマント周波数の変化量と第二フォルマント周波数の変化量を韻律特徴量として抽出する。例えば、抽出部120は、第一フォルマント周波数F1i、第一フォルマント周波数F1e及び第一フォルマント周波数F1aの変化量(F1e-F1i、F1a-F1e、F1a-F1i)、ならびに、第二フォルマント周波数F2i及び第二フォルマント周波数F2uの変化量(F2i-F2u)を韻律特徴量として抽出する。
さらに、抽出部120は、母音が連続した文字列の第一フォルマント周波数の時間変化と第二フォルマント周波数の時間変化を韻律特徴量として抽出する。例えば、抽出部120は、第一フォルマント周波数F1i、第一フォルマント周波数F1e及び第一フォルマント周波数F1aの時間変化、ならびに、第二フォルマント周波数F2i及び第二フォルマント周波数F2uの時間変化を韻律特徴量として抽出する。
例えば、第二フォルマント周波数、第二フォルマント周波数の変化量又は第二フォルマント周波数の時間変化によって、食べ物をまとめる動きに関する口腔機能を評価することができる。また、例えば、第一フォルマント周波数、第一フォルマント周波数の変化量又は第一フォルマント周波数の時間変化によって、食べ物を粉砕する能力に関する口腔機能を評価することができる。また、第一フォルマント周波数の時間変化によって、早く口を動かす能力に関する口腔機能を評価することができる。
また、図10Aに示すように、抽出部120は、話速度を韻律特徴量として抽出してもよい。例えば、抽出部120は、被評価者Uが「gao dao wu da ka ji ke da yi wu zhe」を発話し始めてから発話し終わるまでの時間を韻律特徴量として抽出してもよい。また、例えば、抽出部120は、「gao dao wu da ka ji ke da yi wu zhe」の全てを発話し終わるまでの時間に限らず、「gao dao wu da ka ji ke da yi wu zhe」の特定の部分を発話し始めてから発話し終わるまでの時間を韻律特徴量として抽出してもよい。また、例えば、抽出部120は、「gao dao wu da ka ji ke da yi wu zhe」の全て又は特定の部分の1語又は複数語を発話するのにかかる平均時間を韻律特徴量として抽出してもよい。例えば、話速度によって、飲み込みの動き、食べ物をまとめる動き又は舌の巧緻性に関する口腔機能を評価することができる。
図3Aでの説明に戻り、算出部130は、抽出された韻律特徴量と、複数の学習データに基づいて算出された口腔機能の推定式とに基づいて、被評価者Uの口腔機能の推定値を算出する(ステップS104)。
口腔機能の推定式は、上記したように決定部116によってS/N比に基づいて複数の候補の中から択一的に決定されている。推定式の複数の候補のそれぞれは、予め、複数の被験者に対して行った評価結果を元に設定されている。被験者が発話した音声特徴量を収集し、また、被験者の口腔機能を実際に診断し、音声特徴量と診断結果との間の相関を重回帰式などを利用して統計的解析により設定する。代表値として用いる音声特徴量の選び方によって、推定式は異なる種類を生成できる。このようにして、予め、推定式の候補を生成できる。また、口腔機能の要素のそれぞれについて通常適した推定式は異なるため、口腔機能の要素のそれぞれに対して、推定式の複数の候補が設定されている。特に、本発明では、口腔機能の要素のそれぞれに対して、第1推定式及び第2推定式のそれぞれが設定されている。
また、音声特徴量と診断結果との間の相関関係を表すために、機械学習を利用して設定しても構わない。機械学習の手法として、ロジスティクス回帰、SVM (Support Vector Machine)、ランダムフォレストなどがある。
例えば、推定式の候補は、口腔機能の要素に対応する係数、及び、抽出された韻律特徴量が代入され、上記係数が掛けられる変数を含むように構成することができる。以下の式1から式5は、第1推定式の一例である。
口腔衛生の推定値=(A1×F2e)+(B1×F2o)+(C1×F1i)+(D1×F1e)+(E1×F1a)+(F1×Diff_P(ka))+(G1×Diff_P(ko))+(H1×Diff_P(to))+(J1×Diff_P(ta))+(K1×Diff_P(ka))+(L1×Diff_P(ra))+(M1×Num(kara))+(N1×Diff_P(ta))+(P1×Time(i-ta))+Q1
(式1)
(式1)
口腔乾燥の推定値=(A2×F2e)+(B2×F2o)+(C2×F1i)+(D2×F1e)+(E2×F1a)+(F2×Diff_P(ka))+(G2×Diff_P(ko))+(H2×Diff_P(to))+(J2×Diff_P(ta))+(K2×Diff_P(ka))+(L2×Diff_P(ra))+(M2×Num(kara))+(N2×Diff_P(ta))+(P2×Time(i-ta))+Q2
(式2)
(式2)
咬合力の推定値=(A3×F2e)+(B3×F2o)+(C3×F1i)+(D3×F1e)+(E3×F1a)+(F3×Diff_P(ka))+(G3×Diff_P(ko))+(H3×Diff_P(to))+(J3×Diff_P(ta))+(K3×Diff_P(ka))+(L3×Diff_P(ra))+(M3×Num(kara))+(N3×Diff_P(ta))+(P3×Time(i-ta))+Q3
(式3)
(式3)
舌圧の推定値=(A4×F2e)+(B4×F2o)+(C4×F1i)+(D4×F1e)+(E4×F1a)+(F4×Diff_P(ka))+(G4×Diff_P(ko))+(H4×Diff_P(to))+(J4×Diff_P(ta))+(K4×Diff_P(ka))+(L4×Diff_P(ra))+(M4×Num(kara))+(N4×Diff_P(ta))+(P4×Time(i-ta))+Q4 (式4)
咀嚼機能の推定値=(A5×F2e)+(B5×F2o)+(C5×F1i)+(D5×F1e)+(E5×F1a)+(F5×Diff_P(ka))+(G5×Diff_P(ko))+(H5×Diff_P(to))+(J5×Diff_P(ta))+(K5×Diff_P(ka))+(L5×Diff_P(ra))+(M5×Num(kara))+(N5×Diff_P(ta))+(P5×Time(i-ta))+Q5
(式5)
(式5)
A1、B1、C1、・・・、P1、A2、B2、C2、・・・、P2、A3、B3、C3、・・・、P3、A4、B4、C4、・・・、P4、A5、B5、C5、・・・、P5、は、係数であり、具体的には、口腔機能の要素に対応する係数である。例えば、A1、B1、C1、・・・、P1は、口腔機能の要素の1つである口腔衛生に対応する係数であり、A2、B2、C2、・・・、P2は、口腔機能の要素の1つである口腔乾燥に対応する係数であり、A3、B3、C3、・・・、P3は、口腔機能の要素の1つである咬合力に対応する係数であり、A4、B4、C4、・・・、P4は、口腔機能の要素の1つである舌圧に対応する係数であり、A5、B5、C5、・・・、P5は、口腔機能の要素の1つである咀嚼機能に対応する係数である。
Q1は口腔衛生に対応する定数であり、Q2は口腔乾燥に対応する定数であり、Q3は咬合力に対応する定数であり、Q4は舌圧に対応する定数であり、Q5は咀嚼機能に対応する定数である。
A1、A2、A3、A4、A5が掛けられるF2eと、B1、B2、B3、B4、B5が掛けられるF2oとは、被評価者Uが「えをかくことにきめたよ」と発話したときの発話データから抽出された韻律特徴量である第二フォルマント周波数が代入される変数である。C1、C2、C3、C4、C5が掛けられるF1iと、D1、D2、D3、D4、D5が掛けられるF1eと、E1、E2、E3、E4、E5が掛けられるF1aとは、被評価者Uが「えをかくことにきめたよ」と発話したときの発話データから抽出された韻律特徴量である第一フォルマント周波数が代入される変数である。F1、F2、F3、F4、F5が掛けられるDiff_P(ka)と、G1、G2、G3、G4、G5が掛けられるDiff_P(ko)と、H1、H2、H3、H4、H5が掛けられるDiff_P(to)と、J1、J2、J3、J4、J5が掛けられるDiff_P(ta)とは、被評価者Uが「えをかくことにきめたよ」と発話したときの発話データから抽出された韻律特徴量である音圧較差が代入される変数である。K1、K2、K3、K4、K5が掛けられるDiff_P(ka)と、L1、L2、L3、L4、L5が掛けられるDiff_P(ra)とは、被評価者Uが「から」と発話したときの発話データから抽出された韻律特徴量である音圧較差が代入される変数である。M1、M2、M3、M4、M5が掛けられるNum(kara)とは、被評価者Uが一定期間内に「から」と繰り返し発話したときの発話データから抽出された韻律特徴量である繰り返し回数が代入される変数である。N1、N2、N3、N4、N5が掛けられるDiff_P(ta)は、被評価者Uが「いったい」と発話したときの発話データから抽出された韻律特徴量である音圧較差が代入される変数である。P1、P2、P3、P4、P5が掛けられるTime(i-ta)は、被評価者Uが「いったい」と発話したときの発話データから抽出された韻律特徴量である破裂音の時間が代入される変数である。
上記式1から式5に示されるように、例えば、算出部130は、被評価者Uの口腔機能の要素(例えば、舌苔、口腔乾燥、咬合力、舌圧及び咀嚼機能)毎に推定値を算出する。なお、これらの口腔機能の要素は一例であり、口腔機能の要素には、被評価者Uの舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能及び咀嚼機能の少なくとも1つが含まれていればよい。
また、例えば、抽出部120は、複数種類の文節又は定型文(例えば、上記式1から式5では、「えをかくことにきめたよ」、「から」及び「いったい」)を被評価者Uが発話した音声を集音することで取得された音声データから複数の韻律特徴量を抽出し、算出部130は、抽出された複数の韻律特徴量と推定式とに基づいて、口腔機能の推定値を算出する。算出部130は、複数種類の文節又は定型文の音声データから抽出された複数の韻律特徴量を1つの推定式に代入することで、口腔機能の推定値を精度よく算出することができる。
以下の式6から式10は、第2推定式の一例である。
口腔衛生の推定値=(A1×F2e)+(B1×F2o)+(C1×F1i)+(D1×F1e)+(E1×F1a)+(M1×Num(kara))+(P1×Time(i-ta))+Q1 (式6)
口腔乾燥の推定値=(A2×F2e)+(B2×F2o)+(C2×F1i)+(D2×F1e)+(E2×F1a)+(M2×Num(kara))+(P2×Time(i-ta))+Q2 (式7)
咬合力の推定値=(A3×F2e)+(B3×F2o)+(C3×F1i)+(D3×F1e)+(E3×F1a)+(M3×Num(kara))+(P3×Time(i-ta))+Q3 (式8)
舌圧の推定値=(A4×F2e)+(B4×F2o)+(C4×F1i)+(D4×F1e)+(E4×F1a)+(M4×Num(kara))+(P4×Time(i-ta))+Q4 (式9)
咀嚼機能の推定値=(A5×F2e)+(B5×F2o)+(C5×F1i)+(D5×F1e)+(E5×F1a)+(M5×Num(kara))+(P5×Time(i-ta))+Q5 (式10)
このように、第1推定式に比べて、第2推定式では、音圧較差など、音圧に関する韻律特徴量の項が省略される形となっており、小さいS/N比の集音環境でも推定精度が比較的高い適切な推定値を推定することが可能となっている。
なお、推定式として一次式が示されているが、推定式は二次式等の多次式であってもよい。
次に、評価部140は、算出部130により算出された推定値を、口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を評価する(ステップS105)。例えば、評価部140は、算出された口腔機能の要素毎の推定値を、口腔機能の要素毎に定められた口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を口腔機能の要素毎に評価する。口腔機能評価指標は、口腔機能を評価するための指標であり、例えば、口腔機能が低下していると判定する条件である。口腔機能評価指数について、図11を用いて説明する。
図11は、口腔機能評価指標の一例を示す図である。
口腔機能評価指標は、口腔機能の要素毎に定められる。例えば、口腔衛生に対して50%以上という指標が定められ、口腔乾燥に対して27以下という指標が定められ、咬合力に対して200N未満という指標が定められ(株式会社ジーシーのデンタルプレスケールIIを利用した場合)、舌圧に対して30kPa未満という指標が定められ、咀嚼機能に対して100mg/dL未満という指標が定められる(指標については、日本歯科医学会の「口腔機能低下症に関する基本的な考え方(https://www.jads.jp/basic/pdf/document_02.pdf)」を参照)。評価部140は、算出された口腔機能の要素毎の推定値と、口腔機能の要素毎に定められた口腔機能評価指標とを比較することで、被評価者Uの口腔機能の低下状態を口腔機能の要素毎に評価する。例えば、算出された口腔衛生の推定値が50%以上である場合、口腔機能の要素として口腔衛生が低下状態となっていると評価される。同じように、算出された口腔乾燥の推定値が27以下である場合、口腔機能の要素として口腔乾燥が低下状態となっていると評価され、算出された咬合力の推定値が200N未満である場合、口腔機能の要素として咬合力が低下状態となっていると評価され、算出された舌圧の推定値が30kPa未満である場合、口腔機能の要素として咬合力が低下状態となっていると評価され、算出された咀嚼機能の推定値が100mg/dL未満である場合、口腔機能の要素として咀嚼機能が低下状態となっていると評価される。なお、口腔衛生、口腔乾燥、咬合力、舌圧及び咀嚼機能に対して定められる口腔機能評価指標として、図11に示されるものは一例であり、これに限らない。例えば、咀嚼機能に対して残歯の指標が定められてもよい。また、口腔機能の要素として口腔衛生、口腔乾燥、咬合力、舌圧及び咀嚼機能を示しているが、これらは一例である。例えば、舌口唇運動機能低下に対しては、舌の動き、唇の動き、唇の強さなどの口腔機能の要素がある。
図3Aでの説明に戻り、出力部150は、評価部140が評価した被評価者Uの口腔機能の評価結果を出力する(ステップS106)。例えば、出力部150は、評価結果を携帯端末300へ出力する。この場合、出力部150は、例えば、有線通信又は無線通信を行う通信インターフェースを含んでいてもよく、評価結果に対応する画像の画像データを記憶部170から取得して、携帯端末300へ取得した画像データを送信する。当該画像データ(評価結果)の一例を図12及び図13に示す。
図12及び図13は、口腔機能の要素毎の評価結果の一例を示す図である。図12に示すように、評価結果は、OK又はNGの2段階の評価結果であってもよい。OKは正常を意味し、NGは異常を意味する。なお、口腔機能の要素毎に正常、異常が示されなくてもよく、例えば、低下の疑いのある要素の評価結果だけが示されてもよい。また、評価結果は、2段階の評価結果に限らず、評価の程度が3段階以上に分かれた細かい評価結果であってもよい。この場合、記憶部170に記憶された指標データ172には、1つの要素に対して複数の指標が含まれていてもよい。また、図13に示すように、評価結果は、レーダーチャートで表現されてもよい。図12及び図13には、口腔機能の要素として、口の清潔さ、食べ物をまとめる力、硬いものを噛む力、舌の力及びあごの動きが示されている。口の清潔さは口腔衛生、食べ物をまとめる力は口腔乾燥、硬いものを噛む力は咬合力、舌の力は舌圧、あごの動きは咀嚼機能の推定値を基にして、それぞれ評価結果が提示されている。なお、図12及び図13は、一例であり、評価項目の文言、口腔機能の項目、また、これらの対応する組み合わせは図12及び図13に示されるものに限らない。
図3Aでの説明に戻り、提案部160は、算出部130により算出された推定値を、予め定められたデータ(提案データ173)に照合することで、被評価者Uの口腔機能に関する提案を行う(ステップS107)。ここで、予め定められたデータについて、図14を用いて説明する。
図14は、口腔機能に関する提案を行う際に用いられる予め定められたデータ(提案データ173)の一例である。
図14に示すように、提案データ173は、口腔機能の要素毎に評価結果と提案内容とが対応付けられたデータである。例えば、提案部160は、算出された口の清潔さの推定値が50%以上である場合には、指標を満たしているので、OKと判断し、口の清潔さに対応付けられた提案内容による提案を行う。なお、具体的な提案内容については記載を省略しているが、例えば、記憶部170は、提案内容を示すデータ(例えば、画像、動画、音声、テキスト等)を含み、提案部160は、このようなデータを用いて被評価者Uへ口腔機能に関する提案を行う。
[効果等]
以上説明したように、本実施の形態に係る口腔機能評価方法は、端末(携帯端末300)と、口腔機能評価装置100とによって実行され、被評価者Uが発話した音声から、被評価者Uの口腔機能の低下状態を評価する口腔機能評価方法であって、端末が、被評価者Uが発話した音声を集音することで音声データを得、口腔機能評価装置100が、音声データを取得し、取得した音声データから特徴量を抽出し、取得した音声データにおいて被評価者Uが音声を発していない期間に集音された音の第1の平均強度と、被評価者Uが音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、第1の平均強度に対する、第2平均強度の比であるS/N比を算出し、被評価者Uの口腔機能の評価に用いられる推定式を決定し、決定した推定式と、抽出した特徴量とに基づいて、被評価者Uの口腔機能の推定値を算出し、算出した推定値を、口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を評価し、端末が、評価された被評価者Uの口腔機能の低下状態を提示することを含み、推定式の決定では、算出したS/N比が第1閾値よりも大きい場合には、音声データから抽出される特徴量のうち音圧に関する特徴量を含む第1推定式を推定式として決定し、算出したS/N比が第1閾値以下の場合には、音圧に関する特徴量を含まない第2推定式を推定式として決定する。
以上説明したように、本実施の形態に係る口腔機能評価方法は、端末(携帯端末300)と、口腔機能評価装置100とによって実行され、被評価者Uが発話した音声から、被評価者Uの口腔機能の低下状態を評価する口腔機能評価方法であって、端末が、被評価者Uが発話した音声を集音することで音声データを得、口腔機能評価装置100が、音声データを取得し、取得した音声データから特徴量を抽出し、取得した音声データにおいて被評価者Uが音声を発していない期間に集音された音の第1の平均強度と、被評価者Uが音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、第1の平均強度に対する、第2平均強度の比であるS/N比を算出し、被評価者Uの口腔機能の評価に用いられる推定式を決定し、決定した推定式と、抽出した特徴量とに基づいて、被評価者Uの口腔機能の推定値を算出し、算出した推定値を、口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を評価し、端末が、評価された被評価者Uの口腔機能の低下状態を提示することを含み、推定式の決定では、算出したS/N比が第1閾値よりも大きい場合には、音声データから抽出される特徴量のうち音圧に関する特徴量を含む第1推定式を推定式として決定し、算出したS/N比が第1閾値以下の場合には、音圧に関する特徴量を含まない第2推定式を推定式として決定する。
これによれば、後述する、口腔機能評価装置と同様の効果を奏することができる。
また、例えば、図3Aに示されるように、第一フォルマント周波数の変化もしくは第二フォルマント周波数の変化を含む2モーラ以上からなる、又は、弾き音、破裂音、無声音、促音及び摩擦音の少なくとも1つを含む、文節又は定型文を被評価者Uが発話した音声を集音することで得られる音声データを取得する取得ステップ(ステップS102)と、取得された音声データから韻律特徴量を抽出する抽出ステップ(ステップS103)と、複数の学習データに基づいて算出された口腔機能の推定式と、抽出された韻律特徴量とに基づいて、被評価者Uの口腔機能の推定値を算出する算出ステップ(ステップS104)と、算出された推定値を、口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を評価する評価ステップ(ステップS105)と、を含んでもよい。
これによれば、口腔機能の評価に適した音声データを取得することで、簡便に被評価者Uの口腔機能の評価が可能となる。つまり、被評価者Uが携帯端末300等の集音装置に向けて上記文節又は定型文を発話するだけで、被評価者Uの口腔機能の評価が可能となる。特に、複数の学習データに基づいて算出された推定式を用いて口腔機能の推定値が算出されるため、口腔機能の低下状態を定量的に評価できる。また、韻律特徴量を直接閾値と比較することで口腔機能を評価するのではなく、韻律特徴量及び推定式から推定値が算出され、当該推定値が閾値(口腔機能評価指標)と比較されるため、口腔機能の低下状態を精度良く評価することができる。
例えば、推定式は、口腔機能の要素に対応する係数、及び、抽出された韻律特徴量が代入され、上記係数が掛けられる変数を含んでいてもよい。
これによれば、抽出された韻律特徴量を推定式に代入するだけで、容易に口腔機能の推定値を算出することができる。
例えば、算出ステップでは、被評価者Uの口腔機能の要素毎に推定値を算出し、評価ステップでは、算出された口腔機能の要素毎の推定値を、口腔機能の要素毎に定められた口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を口腔機能の要素毎に評価してもよい。
これによれば、口腔機能の低下状態を要素毎に評価することができる。例えば、口腔機能の要素に応じて係数が異なる推定式を口腔機能の要素毎に準備することで、口腔機能の低下状態を要素毎に容易に評価することができる。
例えば、口腔機能の要素には、被評価者Uの舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能及び咀嚼機能の少なくとも1つが含まれていてもよい。
これによれば、被評価者Uの舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能及び咀嚼機能の少なくとも1つの口腔機能の要素についての低下状態を評価することができる。
例えば、韻律特徴量は、話速度、音圧較差、音圧較差の時間変化、第一フォルマント周波数、第二フォルマント周波数、第一フォルマント周波数の変化量、第二フォルマント周波数の変化量、第一フォルマント周波数の時間変化、第二フォルマント周波数の時間変化及び破裂音の時間の少なくとも1つを含んでいてもよい。
口腔機能が低下することで、発音に変化が現れることから、これらの韻律特徴量から口腔機能の低下状態を評価することができる。
例えば、抽出ステップでは、複数種類の文節又は定型文を被評価者Uが発話した音声を集音することで取得された音声データから複数の韻律特徴量を抽出し、算出ステップでは、抽出された複数の韻律特徴量と推定式とに基づいて、推定値を算出してもよい。
これによれば、1つの推定式に対して複数種類の文節又は定型文に基づいて抽出される複数の韻律特徴量を用いることで、口腔機能の推定値の算出の精度を高めることができる。
例えば、文節又は定型文は、発話するために口の開閉又は舌の前後の動きを伴う、2つ以上の母音又は母音及び子音の組み合わせを含んでいてもよい。
これによれば、被評価者Uがこのような文節又は定型文を発話した音声から、第一フォルマント周波数の変化量、第一フォルマント周波数の時間変化、第二フォルマント周波数の変化量又は第二フォルマント周波数の時間変化を含む韻律特徴量を抽出することができる。
例えば、音声データは、文節又は定型文を被評価者Uが異なる話速度で少なくとも2回発話した音声を集音することで得られてもよい。
これによれば、被評価者Uがこのような文節又は定型文を発話した音声から、口腔機能の状態の保持の程度を推定できる。
例えば、定型文は、弾き音と当該弾き音とは異なる子音からなる文節の繰り返しを含んでいてもよい。
これによれば、被評価者Uがこのような文節又は定型文を発話した音声から、音圧較差の時間変化、音圧の時間変化及び繰り返し回数を含む韻律特徴量を抽出することができる。
例えば、文節又は定型文は、母音及び破裂音の組み合わせを少なくとも1つ含んでいてもよい。
これによれば、被評価者Uがこのような文節又は定型文を発話した音声から、音圧較差及び破裂音の時間を含む韻律特徴量を抽出することができる。
例えば、口腔機能評価方法は、さらに、算出された推定値を、予め定められたデータに照合することで、被評価者Uの口腔機能に関する提案を行う提案ステップを含んでいてもよい。
これによれば、被評価者Uは、口腔機能が低下したときにどのような対策をすればよいかの提案を受けることができる。
本実施の形態に係る口腔機能評価装置100は、被評価者Uが発話した音声から、被評価者Uの口腔機能の低下状態を評価する口腔機能評価装置100であって、被評価者Uが発話した音声を集音することで得られる音声データを取得する取得部110と、取得された音声データから特徴量を抽出する抽出部120と、取得した音声データにおいて被評価者Uが音声を発していない期間に集音された音の第1平均強度と、被評価者Uが音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、第1平均強度に対する、第2平均強度の比であるS/N比を算出するS/N比算出部115と、被評価者Uの口腔機能の評価に用いられる推定式を決定する決定部116と、決定された推定式と、抽出された特徴量とに基づいて、被評価者Uの口腔機能の推定値を算出する算出部130と、算出された推定値を、口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を評価する評価部140と、を備え、決定部116は、算出したS/N比が第1閾値よりも大きい場合には、音声データから抽出される特徴量のうち音圧に関する特徴量を含む第1推定式を推定式として決定し、算出したS/N比が第1閾値以下の場合には、音圧に関する特徴量を含まない第2推定式を推定式として決定する。
これによれば、S/N比から音圧に関する特徴量を使用するのに適した条件であるか否かを判定し、その判定に従って、音圧に関する特徴量を含む第1推定式を用いるのか、又は、音圧に関する特徴量を含まない第2推定式を用いるのかを決定することができる。これにより、音圧に関する特徴量を含むか含まないかの観点で、適切な推定式によって被評価者Uの口腔機能の低下状態を評価することが可能となる。つまり、音圧に関する特徴量を適切に用いることで、より正確に被評価者Uの口腔機能を評価することが可能となる。
例えば、被評価者Uの口腔機能は、被評価者Uの舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能、及び、咀嚼機能の少なくとも1つであってもよい。
これによれば、被評価者Uの舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能、及び、咀嚼機能の少なくとも1つの低下状態を評価することができる。
例えば、被評価者Uの舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能、及び、咀嚼機能のそれぞれに対して、第1推定式及び第2推定式のそれぞれが設定されていてもよい。
これによれば、被評価者Uの舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能、及び、咀嚼機能のそれぞれについて、第1推定式を用いるのが適しているのか、又は、第2推定式を用いるのが適しているのかを決定したうえで低下状態の評価を行うことができる。
例えば、算出したS/N比が第1閾値よりも小さい第2閾値以下の場合に、S/N比を増大させるための情報を出力する情報出力部180をさらに備えてもよい。
これによれば、S/N比がさらに小さいような不適な環境で口腔機能の低下状態の評価をしようとしている場合に、その環境を改善させるための働きかけを行うことができるため、このような不適な環境で口腔機能の低下状態の評価が行われることが抑制される。
例えば、情報は、被評価者Uが発話した音声の集音に用いられる集音装置(マイク)の接続状態を確認させること、被評価者Uが発話する際の声量を増大させること、及び、被評価者Uが発話する際の環境音を低減させることの少なくとも1つを推奨する情報であってもよい。
これによれば、環境を改善させるための働きかけとして、被評価者Uが発話した音声の集音に用いられる集音装置(マイク)の接続状態を確認させること、被評価者Uが発話する際の声量を増大させること、及び、被評価者Uが発話する際の環境音を低減させることの少なくとも1つを推奨することができる。
例えば、取得部110は、被評価者Uの口腔機能の評価には用いられない音声データとして、第1音声データを取得し、S/N比算出部は、取得した第1音声データにおいてS/N比を算出してもよい。
これによれば、被評価者Uの口腔機能の評価には用いられない第1音声データを用いて、S/N比を算出することができる。
例えば、取得部110は、被評価者Uの口腔機能の評価に用いられる音声データとして、第2音声データを取得し、S/N比算出部は、取得した第2音声データにおいてS/N比を算出してもよい。
これによれば、被評価者Uの口腔機能の評価に用いられる第2音声データを用いて、S/N比を算出することができる。
例えば、算出された推定値を、予め定められたデータに照合することで、被評価者Uの口腔機能に関する提案を行う提案部160をさらに備えてもよい。
これによれば、被評価者Uは、口腔機能が低下したときにどのような対策をすればよいかの提案を受けることができる。
例えば、被評価者Uが発話した音声の集音に用いられる集音装置(マイク)と、評価された被評価者Uの口腔機能の低下状態を提示するための提示装置(携帯端末300)と、をさらに備えてもよい。
また、例えば、第一フォルマント周波数の変化もしくは第二フォルマント周波数の変化を含む2モーラ以上からなる、又は、弾き音、破裂音、無声音、促音及び摩擦音の少なくとも1つを含む、文節又は定型文を被評価者Uが発話した音声を集音することで得られる音声データを取得する取得部110と、取得された音声データから韻律特徴量を抽出する抽出部120と、複数の学習データに基づいて算出された口腔機能の推定式と、抽出された韻律特徴量とに基づいて、被評価者Uの口腔機能の推定値を算出する算出部130と、算出された推定値を、口腔機能評価指標を用いて判定することで、被評価者Uの口腔機能の低下状態を評価する評価部140と、を備えてもよい。
これによれば、簡便に被評価者Uの口腔機能の評価が可能な口腔機能評価装置100を提供できる。
本実施の形態に係る口腔機能評価システム200は、被評価者Uが発話した音声から、被評価者Uの口腔機能の低下状態を評価する口腔機能評価システム200であって、端末(携帯端末300)と、端末に接続された口腔機能評価装置100と、を備え、端末は、被評価者Uが発話した音声の集音に用いられる集音装置(マイク)と、評価された被評価者Uの口腔機能の低下状態を提示するための提示装置(携帯端末300の一部)と、を有し、口腔機能評価装置100は、被評価者Uが発話した音声を集音することで得られる音声データを取得する取得部110と、取得された音声データから特徴量を抽出する抽出部120と、取得した音声データにおいて被評価者Uが音声を発していない期間に集音された音の第1の平均強度と、被評価者Uが音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、第1の平均強度に対する、第2平均強度の比であるS/N比を算出するS/N比算出部115と、被評価者Uの口腔機能の評価に用いられる推定式を決定する決定部116と、決定された推定式と、抽出された特徴量とに基づいて、被評価者Uの口腔機能の推定値を算出する算出部130と、算出された推定値を、口腔機能評価指標を用いて判定することで、被評価者の口腔機能の低下状態を評価する評価部140と、を有し、決定部116は、算出したS/N比が第1閾値よりも大きい場合には、音声データから抽出される特徴量のうち音圧に関する特徴量を含む第1推定式を推定式として決定し、算出したS/N比が第1閾値以下の場合には、音圧に関する特徴量を含まない第2推定式を推定式として決定する。
これによれば、より正確に口腔機能を評価することが可能な口腔機能評価システム200を提供できる。
また、例えば、口腔機能評価装置100と、文節又は定型文を被評価者Uが発話した音声を非接触により集音する集音装置(携帯端末300)と、を備えてもよい。
これによれば、簡便に被評価者Uの口腔機能の評価が可能な口腔機能評価システム200を提供できる。
(その他の実施の形態)
以上、実施の形態に係る口腔機能評価方法等について説明したが、本発明は、上記実施の形態に限定されるものではない。
以上、実施の形態に係る口腔機能評価方法等について説明したが、本発明は、上記実施の形態に限定されるものではない。
例えば、推定式の候補は、専門家が被評価者Uの口腔機能を実際に診断した際に得られた評価結果に基づいて、更新されてもよい。これにより、口腔機能の評価精度を高めることができる。口腔機能の評価精度を高めるために機械学習が用いられてもよい。
また、例えば、提案データ173は、被評価者Uが提案内容を評価して、その評価結果に基づいて更新されてもよい。例えば、被評価者Uにとって問題ない口腔機能についての提案がされた場合には、被評価者Uは、この提案内容に対して間違っていると評価する。そして、この評価結果に基づいて提案データ173が更新されることで、上記のような誤った提案がされないようになる。このように、被評価者Uに対する口腔機能に関する提案内容をより効果的なものとすることができる。なお、口腔機能に関する提案内容をより効果的なものとするのに機械学習が用いられてもよい。
また、例えば、口腔機能の評価結果は、個人情報と共にビッグデータとして蓄積されて、機械学習に用いられてもよい。また、口腔機能に関する提案内容は、個人情報と共にビッグデータとして蓄積されて、機械学習に用いられてもよい。
また、例えば、上記実施の形態では、口腔機能評価方法は、口腔機能に関する提案を行う提案ステップ(ステップS107)を含んでいたが、含んでいなくてもよい。言い換えると、口腔機能評価装置100は、提案部160を備えていなくてもよい。
また、例えば、上記実施の形態では、取得ステップ(ステップS102)では、被評価者Uの個人情報を取得したが、取得しなくてもよい。言い換えると、取得部110は、被評価者Uの個人情報を取得しなくてもよい。
また、例えば、口腔機能評価方法におけるステップは、コンピュータ(コンピュータシステム)によって実行されてもよい。そして、本発明は、それらの方法に含まれるステップを、コンピュータに実行させるためのプログラムとして実現できる。さらに、本発明は、そのプログラムを記録したCD-ROM等である非一時的なコンピュータ読み取り可能な記録媒体として実現できる。
例えば、本発明が、プログラム(ソフトウェア)で実現される場合には、コンピュータのCPU、メモリ及び入出力回路等のハードウェア資源を利用してプログラムが実行されることによって、各ステップが実行される。つまり、CPUがデータをメモリ又は入出力回路等から取得して演算したり、演算結果をメモリ又は入出力回路等に出力したりすることによって、各ステップが実行される。
また、上記実施の形態の口腔機能評価装置100及び口腔機能評価システム200に含まれる各構成要素は、専用又は汎用の回路として実現されてもよい。
また、上記実施の形態の口腔機能評価装置100及び口腔機能評価システム200に含まれる各構成要素は、集積回路(IC:Integrated Circuit)であるLSI(Large Scale Integration)として実現されてもよい。
また、集積回路はLSIに限られず、専用回路又は汎用プロセッサで実現されてもよい。プログラム可能なFPGA(Field Programmable Gate Array)、又は、LSI内部の回路セルの接続及び設定が再構成可能なリコンフィギュラブル・プロセッサが、利用されてもよい。
さらに、半導体技術の進歩又は派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて、口腔機能評価装置100及び口腔機能評価システム200に含まれる各構成要素の集積回路化が行われてもよい。
その他、実施の形態に対して当業者が思いつく各種変形を施して得られる形態や、本発明の趣旨を逸脱しない範囲で各実施の形態における構成要素及び機能を任意に組み合わせることで実現される形態も本発明に含まれる。
100 口腔機能評価装置
110 取得部
115 S/N比算出部
116 決定部
120 抽出部
130 算出部
140 評価部
150 出力部
160 提案部
180 情報出力部
200 口腔機能評価システム
300 携帯端末(端末、マイク、提示装置)
U 被評価者
110 取得部
115 S/N比算出部
116 決定部
120 抽出部
130 算出部
140 評価部
150 出力部
160 提案部
180 情報出力部
200 口腔機能評価システム
300 携帯端末(端末、マイク、提示装置)
U 被評価者
Claims (11)
- 被評価者が発話した音声から、前記被評価者の口腔機能の低下状態を評価する口腔機能評価装置であって、
前記被評価者が発話した音声を集音することで得られる音声データを取得する取得部と、
取得された前記音声データから特徴量を抽出する抽出部と、
取得した前記音声データにおいて前記被評価者が音声を発していない期間に集音された音の第1平均強度と、前記被評価者が音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、前記第1平均強度に対する、前記第2平均強度の比であるS/N比を算出するS/N比算出部と、
前記被評価者の口腔機能の評価に用いられる推定式を決定する決定部と、
決定された前記推定式と、抽出された前記特徴量とに基づいて、前記被評価者の口腔機能の推定値を算出する算出部と、
算出された前記推定値を、口腔機能評価指標を用いて判定することで、前記被評価者の口腔機能の低下状態を評価する評価部と、を備え、
前記決定部は、
算出した前記S/N比が第1閾値よりも大きい場合には、前記音声データから抽出される前記特徴量のうち音圧に関する特徴量を含む第1推定式を前記推定式として決定し、
算出した前記S/N比が前記第1閾値以下の場合には、前記音圧に関する特徴量を含まない第2推定式を前記推定式として決定する
口腔機能評価装置。 - 前記被評価者の口腔機能は、前記被評価者の舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能、及び、咀嚼機能の少なくとも1つである
請求項1に記載の口腔機能評価装置。 - 前記被評価者の舌苔、口腔乾燥、咬合力、舌圧、頬圧、残存歯数、嚥下機能、及び、咀嚼機能のそれぞれに対して、前記第1推定式及び前記第2推定式のそれぞれが設定されている
請求項1に記載の口腔機能評価装置。 - 算出した前記S/N比が前記第1閾値よりも小さい第2閾値以下の場合に、前記S/N比を増大させるための情報を出力する情報出力部をさらに備える
請求項1に記載の口腔機能評価装置。 - 前記情報は、前記被評価者が発話した音声の集音に用いられる集音装置の接続状態を確認させること、前記被評価者が発話する際の声量を増大させること、及び、前記被評価者が発話する際の環境音を低減させることの少なくとも1つを推奨する情報である
請求項4に記載の口腔機能評価装置。 - 前記取得部は、前記被評価者の口腔機能の評価には用いられない前記音声データとして、第1音声データを取得し、
前記S/N比算出部は、取得した前記第1音声データにおいて前記S/N比を算出する
請求項4に記載の口腔機能評価装置。 - 前記取得部は、前記被評価者の口腔機能の評価に用いられる前記音声データとして、第2音声データを取得し、
前記S/N比算出部は、取得した前記第2音声データにおいて前記S/N比を算出する
請求項4に記載の口腔機能評価装置。 - 算出された前記推定値を、予め定められたデータに照合することで、前記被評価者の口腔機能に関する提案を行う提案部をさらに備える
請求項1~6のいずれか1項に記載の口腔機能評価装置。 - 前記被評価者が発話した音声の集音に用いられる集音装置と、
評価された前記被評価者の口腔機能の低下状態を提示するための提示装置と、をさらに備える
請求項8に記載の口腔機能評価装置。 - 被評価者が発話した音声から、前記被評価者の口腔機能の低下状態を評価する口腔機能評価システムであって、
端末と、
前記端末に接続された口腔機能評価装置と、を備え、
前記端末は、
前記被評価者が発話した音声の集音に用いられる集音装置と、
評価された前記被評価者の口腔機能の低下状態を提示するための提示装置と、を有し、
前記口腔機能評価装置は、
前記被評価者が発話した音声を集音することで得られる音声データを取得する取得部と、
取得された前記音声データから特徴量を抽出する抽出部と、
取得した前記音声データにおいて前記被評価者が音声を発していない期間に集音された音の第1の平均強度と、前記被評価者が音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、前記第1の平均強度に対する、前記第2平均強度の比であるS/N比を算出するS/N比算出部と、
前記被評価者の口腔機能の評価に用いられる推定式を決定する決定部と、
決定された前記推定式と、抽出された前記特徴量とに基づいて、前記被評価者の口腔機能の推定値を算出する算出部と、
算出された前記推定値を、口腔機能評価指標を用いて判定することで、前記被評価者の口腔機能の低下状態を評価する評価部と、を有し、
前記決定部は、
算出した前記S/N比が第1閾値よりも大きい場合には、前記音声データから抽出される前記特徴量のうち音圧に関する特徴量を含む第1推定式を前記推定式として決定し、
算出した前記S/N比が前記第1閾値以下の場合には、前記音圧に関する特徴量を含まない第2推定式を前記推定式として決定する
口腔機能評価システム。 - 端末と、口腔機能評価装置とによって実行され、被評価者が発話した音声から、前記被評価者の口腔機能の低下状態を評価する口腔機能評価方法であって、
前記端末が、前記被評価者が発話した音声を集音することで音声データを得、
前記口腔機能評価装置が、
前記音声データを取得し、
取得した前記音声データから特徴量を抽出し、
取得した前記音声データにおいて前記被評価者が音声を発していない期間に集音された音の第1の平均強度と、前記被評価者が音声を発している期間に集音された音の第2平均強度とをそれぞれ算出し、前記第1の平均強度に対する、前記第2平均強度の比であるS/N比を算出し、
前記被評価者の口腔機能の評価に用いられる推定式を決定し、
決定した前記推定式と、抽出した前記特徴量とに基づいて、前記被評価者の口腔機能の推定値を算出し、
算出した前記推定値を、口腔機能評価指標を用いて判定することで、前記被評価者の口腔機能の低下状態を評価し、
前記端末が、評価された前記被評価者の口腔機能の低下状態を提示することを含み、
前記推定式の決定では、
算出した前記S/N比が第1閾値よりも大きい場合には、前記音声データから抽出される前記特徴量のうち音圧に関する特徴量を含む第1推定式を前記推定式として決定し、
算出した前記S/N比が前記第1閾値以下の場合には、前記音圧に関する特徴量を含まない第2推定式を前記推定式として決定する
口腔機能評価方法。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022068302 | 2022-04-18 | ||
| JP2022068302 | 2022-04-18 | ||
| PCT/JP2023/011742 WO2023203962A1 (ja) | 2022-04-18 | 2023-03-24 | 口腔機能評価装置、口腔機能評価システム、及び、口腔機能評価方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2023203962A1 JPWO2023203962A1 (ja) | 2023-10-26 |
| JP7637922B2 true JP7637922B2 (ja) | 2025-03-03 |
Family
ID=88419639
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024516143A Active JP7637922B2 (ja) | 2022-04-18 | 2023-03-24 | 口腔機能評価装置、口腔機能評価システム、及び、口腔機能評価方法 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US20250322842A1 (ja) |
| JP (1) | JP7637922B2 (ja) |
| CN (1) | CN119012956A (ja) |
| WO (1) | WO2023203962A1 (ja) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019225242A1 (ja) | 2018-05-23 | 2019-11-28 | パナソニックIpマネジメント株式会社 | 摂食嚥下機能評価方法、プログラム、摂食嚥下機能評価装置および摂食嚥下機能評価システム |
| WO2021177730A1 (ko) | 2020-03-05 | 2021-09-10 | 가톨릭대학교 산학협력단 | 음성 및 연하 장애를 유발하는 질환 진단 장치 및 그 진단 방법 |
| WO2023054632A1 (ja) | 2021-09-29 | 2023-04-06 | Pst株式会社 | 嚥下障害の判定装置および判定方法 |
-
2023
- 2023-03-24 US US18/855,873 patent/US20250322842A1/en active Pending
- 2023-03-24 WO PCT/JP2023/011742 patent/WO2023203962A1/ja not_active Ceased
- 2023-03-24 JP JP2024516143A patent/JP7637922B2/ja active Active
- 2023-03-24 CN CN202380033079.5A patent/CN119012956A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019225242A1 (ja) | 2018-05-23 | 2019-11-28 | パナソニックIpマネジメント株式会社 | 摂食嚥下機能評価方法、プログラム、摂食嚥下機能評価装置および摂食嚥下機能評価システム |
| WO2021177730A1 (ko) | 2020-03-05 | 2021-09-10 | 가톨릭대학교 산학협력단 | 음성 및 연하 장애를 유발하는 질환 진단 장치 및 그 진단 방법 |
| WO2023054632A1 (ja) | 2021-09-29 | 2023-04-06 | Pst株式会社 | 嚥下障害の判定装置および判定方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20250322842A1 (en) | 2025-10-16 |
| WO2023203962A1 (ja) | 2023-10-26 |
| JPWO2023203962A1 (ja) | 2023-10-26 |
| CN119012956A (zh) | 2024-11-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112135564B (zh) | 摄食吞咽功能评价方法、记录介质、评价装置以及评价系统 | |
| Icht et al. | Oral-diadochokinesis rates across languages: English and Hebrew norms | |
| Watts et al. | The effect of stretch-and-flow voice therapy on measures of vocal function and handicap | |
| Zharkova et al. | An ultrasound study of lingual coarticulation in/sV/syllables produced by adults and typically developing children | |
| Lee et al. | Acoustic and tongue kinematic vowel space in speakers with and without dysarthria | |
| Wang et al. | Automatic prediction of intelligible speaking rate for individuals with ALS from speech acoustic and articulatory samples | |
| Núñez-Batalla et al. | Validation of the spanish adaptation of the consensus auditory-perceptual evaluation of voice (CAPE-V) | |
| Lee et al. | Articulatory range of movement in individuals with dysarthria secondary to amyotrophic lateral sclerosis | |
| WO2019225241A1 (ja) | 摂食嚥下機能評価方法、プログラム、摂食嚥下機能評価装置および摂食嚥下機能評価システム | |
| JP7664559B2 (ja) | 口腔機能評価方法、プログラム、口腔機能評価装置および口腔機能評価システム | |
| KR20190041011A (ko) | 연하 진단 장치 및 프로그램 | |
| JP7637922B2 (ja) | 口腔機能評価装置、口腔機能評価システム、及び、口腔機能評価方法 | |
| Parrell et al. | Interaction between general prosodic factors and languagespecific articulatory patterns underlies divergent outcomes of coronal stop reduction | |
| JP7316596B2 (ja) | 口腔機能可視化システム、口腔機能可視化方法およびプログラム | |
| Kohn et al. | Longitudinal Sociophonetic Analysis: What to Expect When Working With Child and Adolescent Data 1 | |
| JP7745214B2 (ja) | 音声特徴量算出方法、音声特徴量算出装置、及び、口腔機能評価装置 | |
| JP7561358B2 (ja) | 推定方法、プログラムおよび推定装置 | |
| Rodriguez et al. | An evaluation of several methods for computing lingual coarticulatory resistance using ultrasound | |
| McMicken et al. | Cineradiographic examination of articulatory movement of pseudo-tongue, hyoid, and mandible in congenital aglossia | |
| JP7291896B2 (ja) | レシピ出力方法、レシピ出力システム | |
| JP7611492B2 (ja) | 推定装置、推定方法およびプログラム | |
| Khaledan | A Qualitative Analysis of a Novel Face-Tracking Application and a Proposed Research Design to Study Glossectomy Speech using this Method | |
| Friedlander | Health-related quality of life in individuals with Parkinson’s disease | |
| Zharkova et al. | Journal of the International Phonetic Association http://journals. cambridge. org/IPA Additional services for Journal of the International Phonetic Association | |
| Thompson et al. | This postprint (accepted version) was published in the Journal of Speech, Language, and Hearing Research on October 8, 2024. The article can be retrieved from |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240628 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250128 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250205 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7637922 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |