JP7208846B2 - 音響特徴量変換装置、音響特徴量変換方法、および音響特徴量変換プログラム - Google Patents
音響特徴量変換装置、音響特徴量変換方法、および音響特徴量変換プログラム Download PDFInfo
- Publication number
- JP7208846B2 JP7208846B2 JP2019061514A JP2019061514A JP7208846B2 JP 7208846 B2 JP7208846 B2 JP 7208846B2 JP 2019061514 A JP2019061514 A JP 2019061514A JP 2019061514 A JP2019061514 A JP 2019061514A JP 7208846 B2 JP7208846 B2 JP 7208846B2
- Authority
- JP
- Japan
- Prior art keywords
- acoustic
- acoustic feature
- feature quantity
- unit
- operating parameter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Circuit For Audible Band Transducer (AREA)
- Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)
Description
(2)生成した変換器を用いて、学習データを規格化後音響特徴量に変換する。
(3)変換した規格化後音響特徴量を用いて、音響モデルを学習する。
(4)学習した音響モデルを用いて、音響認識器を生成する。
(5)生成した変換器を用いて、入力音響信号を規格化後音響特徴量に変換し、音響認識器を用いて、入力音響信号の音響認識を行う。
図1は、実施例1の音響特徴量変換装置、音響モデル学習装置、および音響認識装置の機能構成図を例示する図である。図1では、音響モデル学習装置2および音響認識装置3が、音響特徴量変換装置1を共有する構成を図示している。しかし、図1は、あくまで説明の便宜のために過ぎず、音響モデル学習装置2および音響認識装置3は、それぞれ別の音響特徴量変換装置1を含む別装置であってもよい。あるいは、図1に示すように、音響モデル学習装置2および音響認識装置3は、音響特徴量変換装置1を共有する別装置もしくは一体装置であってもよい。
図2は、実施例1の音響特徴量変換処理フローを例示する図である。実施例1の音響特徴量変換処理は、音響特徴量変換装置1によって、音響特徴量変換の際に実行される。
図3は、実施例1の音響モデル学習処理フローを例示する図である。実施例1の音響モデル学習処理は、音響モデル学習装置2によって、音響モデル学習の際に実行される。図3におけるステップS10~S12は、図2と同様である。
図4は、実施例1の音響認識処理フローを例示する図である。実施例1の音響認識処理は、音響認識装置3によって、音響認識の際に実行される。図4におけるステップS10~S12は、図2および図3と同様である。
図5は、実施例2の音響特徴量変換装置、音響モデル学習装置、および音響認識装置の機能構成図を例示する図である。実施例2の音響特徴量変換装置1Bは、図5に示すように、音源分離部17、音響特徴量抽出部18、および音響特徴量規格化部14を含む。
図6は、実施例2の音響特徴量変換処理フローを例示する図である。実施例2の音響特徴量変換処理は、音響特徴量変換装置1Bによって、音響特徴量変換の際に実行される。図6におけるステップS10は、図2と同様である。
図7は、実施例2の音響モデル学習処理フローを例示する図である。実施例2の音響モデル学習処理は、音響モデル学習装置2Bによって、音響モデル学習の際に実行される。図7におけるステップS10、S17~S18は、図6と同様である。
図8は、実施例2の音響認識処理フローを例示する図である。実施例2の音響認識処理は、音響認識装置3Bによって、音響認識の際に実行される。図8におけるステップS10、S17~S18は、図6および図7と同様である。
図9は、実施例3の音響特徴量変換装置、音響モデル学習装置、および音響認識装置の機能構成図を例示する図である。実施例3の音響特徴量変換装置1Cは、図9に示すように、音源分離部17、音響特徴量抽出部18、および音響特徴量拡張部19を含む。
図10は、実施例3の音響特徴量変換処理フローを例示する図である。実施例3の音響特徴量変換処理は、音響特徴量変換装置1Cによって、音響特徴量変換の際に実行される。図10におけるステップS10、S17~S18は、図6と同様である。
図11は、実施例3の音響モデル学習処理フローを例示する図である。実施例3の音響モデル学習処理は、音響モデル学習装置2Cによって、音響モデル学習の際に実行される。図11におけるステップS10、S17~S18は、図10と同様である。
図12は、実施例3の音響認識処理フローを例示する図である。実施例3の音響認識処理は、音響認識装置3Cによって、音響認識の際に実行される。図12におけるステップS10、S17~S18は、図10および図11と同様である。
図13は、実施例4の音響特徴量変換装置、音響モデル学習装置、および音響認識装置の機能構成図を例示する図である。実施例4の音響特徴量変換装置1Dは、図13に示すように、音源分離部12、音響特徴量抽出部13、音響特徴量規格化部112、音源データ記憶部24、音源モデル学習部113、および音源モデル記憶部25を含む。
図14は、実施例4の音響特徴量変換処理フローを例示する図である。実施例4の音響特徴量変換処理は、音響特徴量変換装置1Dによって、音響特徴量規格化の際に実行される。図14におけるステップS10は、図2と概ね同様であり、稼動パラメータの取得元が複数である点が異なる。
図15は、実施例4の音響モデル学習処理フローを例示する図である。図15におけるステップS10、S24~S25は、図14と同様である。
図16は、実施例4の音響認識処理フローを例示する図である。図16におけるステップS10、S24~S25は、図14および図15と同様である。
図17は、音響特徴量変換装置、音響モデル学習装置、および音響認識装置を実現するコンピュータを例示する図である。実施例1~4の音響特徴量変換装置1~1D、音響モデル学習装置2~2D、および音響認識装置3~3Dは、例えば、中央演算装置(CPU:Central Processing Unit)5300、主記憶装置(RAM:Random Access Memory)5400などを有する汎用または専用のコンピュータ5000に、音響特徴量変換処理、音響モデル学習処理、音響認識処理の各プログラムが読み込まれて構成された装置である。
Claims (8)
- 音響信号取得部によって取得された音響信号から、対象の機器を音源とする音響信号を分離する音源分離部と、
前記音源分離部によって分離された音響信号から音響特徴量を抽出する音響特徴量抽出部と、
音響特徴量規格化部または音響特徴量拡張部と、を有し、
前記音響特徴量規格化部は、
前記機器を音源とする音響信号と前記機器の稼動パラメータとの相関に基づく音響特徴量規格化モデルを用いて、稼動パラメータ取得部によって取得された前記機器の稼動パラメータをもとに、前記音響特徴量抽出部によって抽出された音響特徴量から、前記機器の特定の稼動パラメータのときの音響特徴量である規格化音響特徴量を生成し、
前記音響特徴量拡張部は、
前記機器を音源とする音響信号と前記機器の稼動パラメータとの相関に基づく音響特徴量拡張モデルを用いて、稼動パラメータ取得部によって取得された前記機器の特定の稼動パラメータをもとに、前記音響特徴量抽出部によって抽出された音響特徴量から、前記機器の任意の稼動パラメータのときの音響特徴量である拡張後音響特徴量を生成する
ことを特徴とする音響特徴量変換装置。 - 前記音源分離部は、前記稼動パラメータをもとに、前記機器を音源とする音響信号を分離することを特徴とする請求項1に記載の音響特徴量変換装置。
- 前記音響特徴量抽出部は、前記稼動パラメータをもとに音響特徴量を抽出することを特徴とする請求項1に記載の音響特徴量変換装置。
- 前記稼動パラメータは、前記機器の稼動状態を示す物理量、または、前記機器の稼動状態を制御する制御信号であることを特徴とする請求項1に記載の音響特徴量変換装置。
- 前記機器の稼動パラメータは、前記稼動パラメータ取得部によって取得された前記機器の複数種類の稼動パラメータを含むことを特徴とする請求項1に記載の音響特徴量変換装置。
- 前記音源分離部、前記音響特徴量抽出部、前記音響特徴量規格化部、および前記音響特徴量拡張部のいずれか少なくとも1つは、前記機器を音源とする音響信号と前記機器の稼動パラメータとの相関に基づいて構成されたニューラルネットワークを用いることを特徴とする請求項1に記載の音響特徴量変換装置。
- 音響特徴量変換装置が実行する音響特徴量変換方法であって、
音響信号取得部によって取得された音響信号から、対象の機器を音源とする音響信号を分離する音源分離工程と、
前記音源分離工程によって分離された音響信号から音響特徴量を抽出する音響特徴量抽出工程と、
音響特徴量規格化工程および音響特徴量拡張工程のいずれか一方と、を有し、
前記音響特徴量規格化工程は、
前記機器を音源とする音響信号と前記機器の稼動パラメータとの相関に基づく音響特徴量規格化モデルを用いて、稼動パラメータ取得部によって取得された前記機器の稼動パラメータをもとに、前記音響特徴量抽出工程によって抽出された音響特徴量から、前記機器の特定の稼動パラメータのときの音響特徴量である規格化音響特徴量を生成し、
前記音響特徴量拡張工程は、
前記機器を音源とする音響信号と前記機器の稼動パラメータとの相関に基づく音響特徴量拡張モデルを用いて、稼動パラメータ取得部によって取得された前記機器の特定の稼動パラメータをもとに、前記音響特徴量抽出工程によって抽出された音響特徴量から、前記機器の任意の稼動パラメータのときの音響特徴量である拡張後音響特徴量を生成する
ことを特徴とする音響特徴量変換方法。 - 請求項1~6のいずれか1項に記載の音響特徴量変換装置としてコンピュータを機能させるための音響特徴量変換プログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019061514A JP7208846B2 (ja) | 2019-03-27 | 2019-03-27 | 音響特徴量変換装置、音響特徴量変換方法、および音響特徴量変換プログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019061514A JP7208846B2 (ja) | 2019-03-27 | 2019-03-27 | 音響特徴量変換装置、音響特徴量変換方法、および音響特徴量変換プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020160344A JP2020160344A (ja) | 2020-10-01 |
| JP7208846B2 true JP7208846B2 (ja) | 2023-01-19 |
Family
ID=72643199
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019061514A Active JP7208846B2 (ja) | 2019-03-27 | 2019-03-27 | 音響特徴量変換装置、音響特徴量変換方法、および音響特徴量変換プログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7208846B2 (ja) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104992714A (zh) | 2015-05-22 | 2015-10-21 | 株洲联诚集团有限责任公司 | 一种电机异音的检测方法 |
| JP2016136229A (ja) | 2015-01-14 | 2016-07-28 | 本田技研工業株式会社 | 音声処理装置、音声処理方法、及び音声処理システム |
| JP6452061B1 (ja) | 2018-08-10 | 2019-01-16 | クリスタルメソッド株式会社 | 学習データ生成方法、学習方法、及び評価装置 |
| JP2019028515A (ja) | 2017-07-25 | 2019-02-21 | ファナック株式会社 | 情報処理装置 |
-
2019
- 2019-03-27 JP JP2019061514A patent/JP7208846B2/ja active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2016136229A (ja) | 2015-01-14 | 2016-07-28 | 本田技研工業株式会社 | 音声処理装置、音声処理方法、及び音声処理システム |
| CN104992714A (zh) | 2015-05-22 | 2015-10-21 | 株洲联诚集团有限责任公司 | 一种电机异音的检测方法 |
| JP2019028515A (ja) | 2017-07-25 | 2019-02-21 | ファナック株式会社 | 情報処理装置 |
| JP6452061B1 (ja) | 2018-08-10 | 2019-01-16 | クリスタルメソッド株式会社 | 学習データ生成方法、学習方法、及び評価装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020160344A (ja) | 2020-10-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102235568B1 (ko) | 합성곱 신경망 기반 환경음 인식 방법 및 시스템 | |
| CN113436643B (zh) | 语音增强模型的训练及应用方法、装置、设备及存储介质 | |
| JP3949150B2 (ja) | 信号分離方法、信号分離装置、信号分離プログラム及び記録媒体 | |
| JP3584458B2 (ja) | パターン認識装置およびパターン認識方法 | |
| CN112927707A (zh) | 语音增强模型的训练方法和装置及语音增强方法和装置 | |
| US10262678B2 (en) | Signal processing system, signal processing method and storage medium | |
| CN111028833B (zh) | 一种交互、车辆的交互方法、装置 | |
| CN113823301A (zh) | 语音增强模型的训练方法和装置及语音增强方法和装置 | |
| US12087280B2 (en) | System and method for robust wakeword detection in presence of noise in new unseen environments without additional data | |
| JP6195548B2 (ja) | 信号解析装置、方法、及びプログラム | |
| Ismail et al. | Mfcc-vq approach for qalqalahtajweed rule checking | |
| CN111341319A (zh) | 一种基于局部纹理特征的音频场景识别方法及系统 | |
| KR20200107707A (ko) | 화자 인식을 위한 등록 방법 및 장치 | |
| KR20210102860A (ko) | 불균형 데이터 처리 장치 및 방법 | |
| JP2017134321A (ja) | 信号処理方法、信号処理装置及び信号処理プログラム | |
| WO2005098820A1 (ja) | 音声認識装置及び音声認識方法 | |
| JP3699912B2 (ja) | 音声特徴量抽出方法と装置及びプログラム | |
| JP7208846B2 (ja) | 音響特徴量変換装置、音響特徴量変換方法、および音響特徴量変換プログラム | |
| Al-Dulaimi et al. | Speaker Identification System Employing Multi-resolution Analysis in Conjunction with CNN. | |
| JP2021124887A (ja) | 音響診断方法、音響診断システム、及び音響診断プログラム | |
| KR102878799B1 (ko) | 소음환경을 고려한 임베디드 음성 키워드 검출 시스템 및 방법 | |
| García et al. | The Power Cepstrum Calculation with Convolutional Neural Networks | |
| CN115064182A (zh) | 自适应梅尔滤波器在强噪声环境下风机故障特征识别方法 | |
| CN120236607A (zh) | 一种基于深度学习的电缆故障声纹监测方法及系统 | |
| CN119580749A (zh) | 语音信号的重构方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210625 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220323 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220405 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220510 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220816 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220928 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221220 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230106 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7208846 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |