JP6957362B2 - Privacy protection system - Google Patents
Privacy protection system Download PDFInfo
- Publication number
- JP6957362B2 JP6957362B2 JP2018001197A JP2018001197A JP6957362B2 JP 6957362 B2 JP6957362 B2 JP 6957362B2 JP 2018001197 A JP2018001197 A JP 2018001197A JP 2018001197 A JP2018001197 A JP 2018001197A JP 6957362 B2 JP6957362 B2 JP 6957362B2
- Authority
- JP
- Japan
- Prior art keywords
- sound
- vehicle
- signal
- reproduced
- protection system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
Description
本発明は、プライバシー保護システムに関する。 The present invention relates to a privacy protection system.
従来、自動車等の移動体において、移動体の乗員が手で電話機を持たずに通話できるハンズフリー通話が実用化されている。移動体におけるハンズフリー通話の場合、通話相手からの受話音がスピーカーから比較的大きな音量で再生されると、この再生音が外部に漏れ出るおそれがある。ヘッドフォンやイヤホン或いは携帯電話機のスピーカーからの音漏れ対策として、例えば、音漏れ有りと判断した場合に再生音の音量を低減する技術が提案されている(特許文献1、2)。
Conventionally, in a moving body such as an automobile, hands-free calling has been put into practical use so that the occupant of the moving body can make a call without holding a telephone by hand. In the case of a hands-free call in a mobile body, if the received sound from the other party is reproduced at a relatively loud volume from the speaker, this reproduced sound may leak to the outside. As a countermeasure against sound leakage from headphones, earphones, or speakers of mobile phones, for example, a technique for reducing the volume of reproduced sound when it is determined that there is sound leakage has been proposed (
しかしながら、特許文献1、2に開示される技術は、移動体におけるハンズフリー通話時の音漏れ対策としては不十分であり、ハンズフリー通話の再生音が外部に漏れ出ると、外部の人に再生音の内容を聞かれるおそれがあるので、プライバシー保護の観点から問題がある。
本発明は、上述した事情に鑑みてなされたものであり、移動体の乗員に対して出力される再生音が外部に漏れ出る場合にプライバシーの保護を図ることが可能なプライバシー保護システムを提供することを目的とする。
However, the techniques disclosed in
The present invention has been made in view of the above circumstances, and provides a privacy protection system capable of protecting privacy when the reproduced sound output to a moving occupant leaks to the outside. The purpose is.
上記目的を達成するために、本発明のプライバシー保護システムは、移動体に搭載され、前記移動体の乗員に対して再生音が前記乗員の周囲の所定の空間に出力されるプライバシー保護システムであって、前記所定の空間の外部の音を集音する集音部と、前記集音部により集音された音のレベルが所定レベル以上の場合、前記再生音を前記所定の空間の外部において聞き取り難くする聴取困難化処理を実行する処理部と、を備えることを特徴とする。 In order to achieve the above object, the privacy protection system of the present invention is a privacy protection system mounted on a moving body and outputting a reproduced sound to a occupant of the moving body in a predetermined space around the occupant. When the sound collecting unit that collects the sound outside the predetermined space and the level of the sound collected by the sound collecting unit are equal to or higher than the predetermined level, the reproduced sound is heard outside the predetermined space. It is characterized by including a processing unit that executes a difficult-to-listen process.
また、前記処理部は、前記集音部により集音された音のレベルが前記所定レベル以上の場合、前記再生音と前記集音部により集音された音との比較結果に基づいて、前記聴取困難化処理を実行する構成としてもよい。 Further, when the level of the sound collected by the sound collecting unit is equal to or higher than the predetermined level, the processing unit described the reproduced sound and the sound collected by the sound collecting unit based on the comparison result. It may be configured to execute the listening difficulty process.
また、前記処理部は、前記再生音及び前記集音部により集音された音をそれぞれ周波数変換し、前記再生音の周波数成分と前記集音部により集音された音の周波数成分とを比較する構成としてもよい。 Further, the processing unit converts the frequency of the reproduced sound and the sound collected by the sound collecting unit, respectively, and compares the frequency component of the reproduced sound with the frequency component of the sound collected by the sound collecting unit. It may be configured to be used.
また、前記処理部は、前記再生音及び前記集音部により集音された音をそれぞれ音声認識し、前記再生音の音声認識結果と前記集音部により集音された音の音声認識結果とを比較する構成としてもよい。 Further, the processing unit recognizes the reproduced sound and the sound collected by the sound collecting unit, respectively, and obtains the voice recognition result of the reproduced sound and the voice recognition result of the sound collected by the sound collecting unit. May be configured to compare.
また、前記所定の空間の外部に向けて音を出力する音出力部を備え、前記聴取困難化処理は、前記音出力部により前記再生音をマスキングするマスキング音を出力する構成としてもよい。 Further, a sound output unit that outputs sound toward the outside of the predetermined space may be provided, and the listening difficulty processing may be configured to output a masking sound that masks the reproduced sound by the sound output unit.
また、前記聴取困難化処理は、前記再生音の音量を低減する構成としてもよい。 Further, the listening difficulty processing may be configured to reduce the volume of the reproduced sound.
また、前記移動体の速度を取得する速度取得部を備え、前記処理部は、前記速度取得部により取得された速度が所定速度未満の場合に前記聴取困難化処理を実行する構成としてもよい。 Further, a speed acquisition unit for acquiring the speed of the moving body may be provided, and the processing unit may be configured to execute the listening difficulty processing when the speed acquired by the speed acquisition unit is less than a predetermined speed.
また、前記移動体の現在位置を取得する現在位置取得部を備え、前記処理部は、前記現在位置取得部により取得された前記移動体の現在位置が所定の場所である場合に前記聴取困難化処理を実行する構成としてもよい。 Further, the current position acquisition unit for acquiring the current position of the moving body is provided, and the processing unit makes it difficult to hear when the current position of the moving body acquired by the current position acquisition unit is a predetermined position. It may be configured to execute the process.
また、前記再生音は、ハンズフリー通話の受話音である構成としてもよい。 Further, the reproduced sound may be configured to be a received sound of a hands-free call.
本発明によれば、移動体の乗員の周囲の所定の空間の外部の音を集音し、集音した音が大きい場合には再生音を所定の空間の外部において聞き取り難くするので、移動体の乗員に対して出力される再生音が外部に漏れ出る場合にプライバシーの保護を図ることができる。 According to the present invention, the sound outside the predetermined space around the occupant of the moving body is collected, and when the collected sound is loud, the reproduced sound is hard to hear outside the predetermined space. It is possible to protect privacy when the reproduced sound output to the occupant of the vehicle leaks to the outside.
以下、図面を参照して本発明の実施形態について説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
(第1実施形態)
図1は、第1実施形態のプライバシー保護システム10の構成図である。図2は、プライバシー保護システム10が搭載される車両1の模式図である。
第1実施形態のプライバシー保護システム10は、ハンズフリー通話装置20を備える車両1(本発明の移動体に相当する)に搭載される。プライバシー保護システム10は、ハンズフリー通話中に通話相手の受話音が再生された再生音が車両1の外部に漏れていると判定した場合、車両1の外部の人に再生音の内容を聞き取り難くする聴取困難化処理を行う機能を有する。プライバシー保護システム10は、専用の装置として構成されてもよいし、車両1に搭載される車載装置(例えば、ECU(Electronic Control Unit))の一部として構成されてもよいし、或いは車載装置の機能の一部を利用して構成されてもよい。
(First Embodiment)
FIG. 1 is a configuration diagram of the
The
ハンズフリー通話装置20は、車両1の走行中に乗員(特に、運転操作中の運転者)が電話機(例えば、携帯電話機、スマートフォン)を持たずに通話を可能とする装置である。ハンズフリー通話装置20は、車両1内に設けられたマイクロフォン(図示略)により乗員が発した音声を集音し、集音した音声を通話相手に伝達する。また、ハンズフリー通話装置20は、車両1内に設けられた車内用スピーカー30により通話相手からの音声を再生する。ハンズフリー通話装置20は、例えば、携帯電話機等との間で、Bluetooth(登録商標)を利用した近距離無線通信を行い、音声信号を送受信する。なお、ハンズフリー通話装置20は、車両1に予め搭載される自動車電話機を利用してハンズフリー通話を行う構成であってもよい。
The hands-
プライバシー保護システム10は、制御ユニット40によって制御される。制御ユニット40は、CPU(Central Processing Unit)50、メモリ60、各種インターフェース回路(図示略)等により構成された電子回路ユニットである。CPU50は、メモリ60に保存されたプライバシー保護システム10の制御用プログラム61を読み込んで実行することにより、音漏れ判定部51(レベル判定部51aを含む)、マスキング制御部52、ボリューム制御部53、アラーム制御部54として機能する。第1実施形態では、CPU50が本発明の処理部に相当する。
The
制御ユニット40には、ハンズフリー通話装置20が接続される。ハンズフリー通話装置20は、ハンズフリー通話中に、携帯電話機等から通話相手の通話音を取得し、この通話音を再生するための再生音信号を制御ユニット40に送信する。制御ユニット40は、再生音信号を受信した場合、再生音信号と音量情報をアンプ31に送信する。音量情報は、デフォルトの音量、乗員による音量操作部(図示略)に対する音量調整操作に応じて設定された音量、又は後述する制御ユニット40のボリューム制御により設定された音量の情報である。デフォルトの音量は、車両1の走行中に車室内に伝わるロードノイズ等がある場合でも乗員に十分に聞こえる程度の音量が予め設定される。
A hands-
プライバシー保護システム10には、車速センサ21(本発明の速度取得部に相当する)、ナビゲーション装置22(本発明の現在位置取得部に相当する)が接続される。
A vehicle speed sensor 21 (corresponding to the speed acquisition unit of the present invention) and a navigation device 22 (corresponding to the current position acquisition unit of the present invention) are connected to the
車速センサ21は、車両1の車速を検出し、車速信号を制御ユニット40に送信する。
The
ナビゲーション装置22は、車両1の現在位置や進行方向等を検出する機能を有する。ナビゲーション装置22は、車両1の現在位置を示す現在位置信号を制御ユニット40に送信する。ナビゲーション装置22は、地図の各種情報を格納した地図データベース22aを備える。ナビゲーション装置22は、地図データベース22aから車両1の現在位置周辺の地図情報(例えば、市街地(繁華街等も含む)、郊外、山間部)を取得し、地図情報信号を制御ユニット40に送信する。
The
制御ユニット40には、ノイズキャンセラ23を介して、マイクロフォン24(本発明の集音部に相当する)が接続される。マイクロフォン24は、車両1の外部の音を集音し、集音した音を電気信号に変換して集音信号としてノイズキャンセラ23に送信する。マイクロフォン24は、例えば、ハンズフリー通話装置20による通話中に、車内用スピーカー30から出力される再生音が車室外に漏れた音を含む車両1の外部の音を集音する。マイクロフォン24は、車両1の走行中の風切り音等の影響を抑えるために、例えば、図2に示すように左側のドアミラー1aの後部或いは左側のドアミラー1a近傍の後方に取り付けられる。図2における符号1bは、車両1のステアリングを示す。マイクロフォン24を車両1の左側に配置させるのは、車両が左側通行の場合には車道の左側に歩道が配置され、車両1の左側に人が存在する可能性が高いので、車両1の周辺の人に聞かれる可能性の高い側で集音するためである。また、マイクロフォン24は、車内用スピーカー30の近傍に配置されると好ましい。ノイズキャンセラ23は、マイクロフォン24から集音信号を受信すると、集音信号から周辺のノイズ(例えば、人の音声の周波数帯域以外の周波数帯域のノイズ)を除去し、ノイズを除去した後の集音信号を制御ユニット40に送信する。ノイズキャンセラ23は、ON/OFF可能であり、OFF時にはマイクロフォン24からの集音信号をそのまま制御ユニット40に送信する。
A microphone 24 (corresponding to the sound collecting unit of the present invention) is connected to the
制御ユニット40には、アンプ31を介して、車内用スピーカー30が接続される。アンプ31は、制御ユニット40から再生音信号と音量情報を受信すると、再生音信号に対応するアナログ音声信号を音量情報に従って増幅して、車内用スピーカー30に送信する。車内用スピーカー30は、このアナログ音声信号を受信すると、アナログ音声信号を音声(再生音)に変換して出力する。車内用スピーカー30は、車両1の車室内に少なくとも1つ設けられ、例えば、図2に示すように、車両1の車室内の左右の側部(例えば、ドア)に1つずつ設けられる。本実施形態では、車両1の車室内が本発明の乗員の周囲の所定の空間に相当する。
An in-
制御ユニット40には、アンプ33を介して、車外用スピーカー32(本発明の音出力部に相当する)が接続される。アンプ33は、後述する制御ユニット40からのマスキング音信号を受信すると、マスキング音信号に対応するアナログ音声信号を制御ユニット40で調整された音量に従って増幅して、車外用スピーカー32に送信する。車外用スピーカー32は、このアナログ音声信号を受信すると、アナログ音声信号を音声(マスキング音)に変換して出力する。車外用スピーカー32は、車両1に少なくとも1つ設けられ、例えば、図2に示すように、車両1の左側の側部(例えば、ドア)に1つ設けられる。車外用スピーカー32を車両1の左側に配置させるのは、車両が左側通行の場合には車両1の左側に人が存在する可能性が高いので、車外用スピーカー32から出力されるマスキング音によって車両1の周辺の人にハンズフリー通話の再生音の内容を聞き取り難くするためのである。また、車外用スピーカー32は、例えば、図2に示すように、車両1における車内用スピーカー30よりも後方に設けられる。また、車外用スピーカー32は、例えば、車両1の下部に設けられる。車外用スピーカー32は、車両1の外部に向けて音が出力されるように、配置される。
An external speaker 32 (corresponding to the sound output unit of the present invention) is connected to the
制御ユニット40には、ディスプレイ34が接続される。ディスプレイ34は、例えばナビゲーション装置22等と共用されるタッチパネルの液晶ディスプレイである。ディスプレイ34は、後述する制御ユニット40からのアラーム表示信号を受信すると、アラーム表示信号に基づいてアラーム情報を表示する。
A
制御ユニット40は、上述した車速信号、現在位置信号、地図情報信号、再生音信号、及び集音信号を受信する。制御ユニット40は、所定時間分の集音信号を集音データ62としてメモリ60に保存する。所定時間は、予め設定される。
The
音漏れ判定部51は、レベル判定部51aを有している。レベル判定部51aは、集音データ62(集音信号の時系列データ)を用いて再生音が車両1の外部に漏れているか否かを判定する。
The sound
マスキング制御部52は、音漏れ判定部51により再生音が車両1の外部に漏れている可能性があると判定された場合、聴取困難化処理として、外部に漏れた再生音をマスキングするマスキング音を車外用スピーカー32から出力する制御を行う。また、音漏れ判定部51は、車速信号、現在位置信号及び地図情報信号に基づいて、聴取困難化処理の要否を決定している。
When the sound
ボリューム制御部53は、音漏れ判定部51のレベル判定部51aにより再生音が車両1の外部に漏れていると判定された場合、聴取困難化処理として、再生音の音量を低減する制御を行う。
When the
アラーム制御部54は、音漏れ判定部51により再生音が車両1の外部に漏れていると判定された場合、ディスプレイ34に音漏れに関するアラーム情報を表示させる制御を行う。
When the sound
図3を参照して、プライバシー保護システム10の一連の動作について説明する。図3は、プライバシー保護システム10の動作を示すフローチャートである。この一連の動作は、車両1の乗員がハンズフリー通話装置20を用いてハンズフリー通話を実施しているときに、繰り返し実施される。
A series of operations of the
制御ユニット40は、ナビゲーション装置22から現在位置信号及び地図情報信号を受信し、車両1の現在位置及び現在位置周辺の地図情報を取得する(ステップS1)。制御ユニット40において、音漏れ判定部51は、車両1の現在位置が市街地内(本発明の所定の場所内に相当)か否かを判定する(ステップS2)。市街地は、郊外や山間部等に比べて人口密度が高く、これらの場所に比べて車両1から漏れたハンズフリー通話の再生音が聞かれるおそれが高い場所である。特に、交差点等で車両1が停止した場合、車両1から漏れた再生音が聞かれるおそれが高い。
The
現在位置が市街地内と判定した場合(ステップS2:YES)、制御ユニット40は、車速センサ21から車速信号を受信し、車両1の車速を取得する(ステップS3)。制御ユニット40において、音漏れ判定部51は、車速が所定速度未満か否かを判定する(ステップS4)。所定速度は、車両1が低速で走行していることを判定するための閾値である。所定速度は、例えば、徐行・渋滞中の車速程度、あるいは人の歩行程度の速度である。所定速度は、予め設定され、メモリ60等に保存される。車両1が停止或いは低速で走行中の場合、ハンズフリー通話の再生音が車両1の外部に漏れた場合、車両1の近傍の人に再生音の内容を聞かれるおそれがある。車両1が高速中の場合、ロードノイズやエンジン音が大きく、かつ、車両1も短時間で通過するので、車両1の近傍の人に再生音の内容を聞かれるおそれが殆どない。
When it is determined that the current position is in the city area (step S2: YES), the
現在位置が市街地内と判定した場合(ステップS2:YES)かつ車速が所定速度未満と判定した場合(ステップS4:YES)、音漏れ判定部51はハンズフリー通話の再生音が車両1の外部に漏れている場合に近傍の人に通話を聞かれる可能性が高いため、聴取困難化処理が必要であると判定し、アラーム制御部54はアラーム情報を示すアラーム表示信号をディスプレイ34に送信する(ステップS5)。ディスプレイ34は、アラーム表示信号を受信すると、アラーム情報を表示する。このアラーム情報は、例えば、ハンズフリー通話の再生音が車両1の外部に聞かれている可能性があることを示す情報、及び車両1の窓が開いている場合には窓を閉めることを促す情報である。このアラーム情報に応じて、車両1の乗員が窓を閉めると、再生音の外部への漏れが抑制される。
なお、車両1の窓が開いている場合、制御ユニット40により窓を自動的に閉める制御を行ってもよい。
When it is determined that the current position is in the city area (step S2: YES) and the vehicle speed is determined to be less than the predetermined speed (step S4: YES), the sound
When the window of the
マスキング制御部52は、マスキング音を出力するためのマスキング音信号を生成し、このマスキング音信号をアンプ33に送信する(ステップS6)。アンプ33では、所定の音量になるようにマスキング音信号を増幅してアナログ音声信号に変換し、このアナログ音声信号を車外用スピーカー32に送信する。車外用スピーカー32は、このアナログ音声信号を受信すると、マスキング音を所定の音量で出力する。所定の音量は、例えば、予め設定された音量である。車両1の外部に向けてマスキング音を出力することにより、車両1の外部に漏れている可能性のあるハンズフリー通話の再生音の内容を周辺の人に聞き取られ難くする。
The masking
マスキング音は、車両1の車室内でのハンズフリー通話の再生音の音量を確保しつつ、外部に漏れた再生音を周辺の人に聞き取られ難くするための音である。マスキング音は、例えば、エンジン音やロードノイズ等の車両1のノイズ音源或いはホワイトノイズに類似した音である。マスキング音は、例えば、乗員によって設定された音楽、或いは「ただいま電話中です。」等の音声メッセージでもよい。マスキング音は、再生音の内容が聞き取られ難くするために、人の音声帯域の音のレベルを強めた音とすると好ましい。この帯域を強めたマスキング音とすることにより、マスキング音の音量を抑えることができる。マスキング音の音量は、レベル判定部51aで用いる所定レベルの以下の音量とする。
The masking sound is a sound for ensuring the volume of the reproduced sound of the hands-free call in the vehicle interior of the
図4は、車両1の外部に漏れ出た音の周波数スペクトルの一例を示す。図5は、車両1の外部に漏れ出た音にマスキング音が重なった周波数スペクトルの一例を示す。図6は、車両1の外部に漏れ出た音にマスキング音が重なった周波数スペクトルの他の例を示す。図4、5、6では、横軸が時間であり、縦軸が周波数である。
FIG. 4 shows an example of the frequency spectrum of the sound leaked to the outside of the
図5に示す周波数スペクトルFS1は、図4に示す周波数スペクトルFS0の音にマスキング音が重なった場合の周波数スペクトルである。この図4に示す周波数スペクトルFS0と図5に示す周波数スペクトルFS1とを比較すると、図5における矢印T1、T2、T3、T4で示す時間帯にマスキング音が入っており、図4に示す元の音の周波数スペクトル成分の一部が失われ、図4に示す周波数スペクトルFS0の音の内容が聞き取られ難くなる。
また、図6に示す周波数スペクトルFS2は、図4に示す周波数スペクトルFS0の音にエンジン音等の車両の走行ノイズに類似したマスキング音が重なった場合の周波数スペクトルである。この図4に示す周波数スペクトルFS0と図6に示す周波数スペクトルFS2とを比較すると、図6における矢印F1で示す低周波数帯にマスキング音が入っており、図4に示す周波数スペクトルFS0の音の内容が全体的に聞き取られ難くなる。
The frequency spectrum FS1 shown in FIG. 5 is a frequency spectrum when a masking sound is superimposed on the sound of the frequency spectrum FS0 shown in FIG. Comparing the frequency spectrum FS0 shown in FIG. 4 with the frequency spectrum FS1 shown in FIG. 5, masking sounds are included in the time zones indicated by the arrows T1, T2, T3, and T4 in FIG. A part of the frequency spectrum component of the sound is lost, and the content of the sound of the frequency spectrum FS0 shown in FIG. 4 becomes difficult to hear.
Further, the frequency spectrum FS2 shown in FIG. 6 is a frequency spectrum when a masking sound similar to the running noise of a vehicle such as an engine sound is superimposed on the sound of the frequency spectrum FS0 shown in FIG. Comparing the frequency spectrum FS0 shown in FIG. 4 with the frequency spectrum FS2 shown in FIG. 6, the masking sound is included in the low frequency band indicated by the arrow F1 in FIG. Is hard to hear as a whole.
図3に戻って、制御ユニット40は、ノイズキャンセラ23からの集音信号を取得し、集音信号を集音データ62としてメモリ60に保存する(ステップS7)。音漏れ判定部51のレベル判定部51aは、集音信号のレベルが所定レベル以上か否かを判定する(ステップS8)。所定レベルは、車両1の外部に漏れ出した音が大きいか否かを判定するための閾値である。所定レベルは、車両1の周辺の人に迷惑をかける程度の音のレベルである。所定レベルは、予め設定され、例えば、メモリ60に保存される。
Returning to FIG. 3, the
図7は、マイクロフォン24により集音された集音信号Cのレベルの時間変化の一例を示す。図7では、横軸が時間であり、縦軸が音信号のレベルである。図7には、所定レベルSHを示す。図7に示す例の場合、集音信号Cは、符号T5、T6で示す時間帯に所定レベルSHを超える。この時間帯T5、T6では、車両1から外部に大きな音が漏れている。
FIG. 7 shows an example of the time change of the level of the sound collection signal C collected by the
図3に戻って、集音信号のレベルが所定レベル以上と判定した場合(ステップS8:YES)、音漏れ判定部51は音が車両1の外部に漏れていると判定し、ボリューム制御部53は再生音信号の音量を下げる指令をアンプ31に出力する(ステップS9)。音量を自動的に下げる場合、予め設定された下限の音量まで、段階的に所定量ずつ音量を下げる。この指令に応じて、アンプ31は、音量が前回よりも1段階下がるように再生音信号を増幅したアナログ音声信号を生成し、このアナログ音声信号を車内用スピーカー30に送信する。車内用スピーカー30は、前回よりも1段階音量を下げた再生音を出力する。これにより、ハンズフリー通話の再生音の音量が徐々に小さくなり、車両1の外部に漏れる音も小さくなる。この際、制御ユニット40は、音量制御中フラグをONにする(ステップS10)。
Returning to FIG. 3, when it is determined that the level of the sound collecting signal is equal to or higher than the predetermined level (step S8: YES), the sound
特に、制御ユニット40による制御により再生音の音量を下限の音量まで下げた場合、アラーム制御部54は、アラーム情報を示すアラーム表示信号をディスプレイ34に送信する(ステップS11)。ディスプレイ34は、アラーム表示信号を受信すると、アラーム情報を表示する。このアラーム情報は、例えば、ハンズフリー通話の再生音が車両1の外部に漏れていることを示す情報、及び乗員に対して音量操作部により再生音の音量を下げることを促す情報である。これにより、乗員によって、ハンズフリー通話の再生音の音量が更に下げられる場合がある。
In particular, when the volume of the reproduced sound is lowered to the lower limit volume by the control by the
集音信号のレベルが所定レベル未満と判定した場合(ステップS8:NO)、ボリューム制御部53は、再生音信号の音量を上げる指令をアンプ31に出力する(ステップS12)。音量を自動的に上げる場合、デフォルトの音量まで、段階的に所定量ずつ音量を上げる。この指令に応じて、アンプ31は、音量を前回よりも1段階上げるように再生音信号を増幅したアナログ音声信号を生成し、このアナログ音声信号を車内用スピーカー30に送信する。車内用スピーカー30は、前回よりも1段階音量を上げた再生音を出力する。これにより、車両1の外部に大きな音が漏れていない場合、ハンズフリー通話の再生音がデフォルトの音量まで徐々に戻る。この際、制御ユニット40は、音量制御中フラグをOFFにする(ステップS13)。
When it is determined that the level of the sound collecting signal is less than a predetermined level (step S8: NO), the
上述したステップS2で車両1の現在位置が市街地内でないと判定した場合(ステップS2:NO)又はステップS4で車両1の車速が所定速度以上と判定した場合(ステップS4:NO)、制御ユニット40は、音声制御中フラグがONか否かを判定する(ステップS14)。音声制御中フラグがONと判定した場合、制御ユニット40は、上述したステップS12及びステップS13の処理を実行する。つまり、車両1が郊外や山間部等を走行中の場合或いは車両1が高速で走行中の場合、ハンズフリー通話の再生音の音量をデフォルトの音量まで戻す。
When it is determined in step S2 described above that the current position of the
第1実施形態のプライバシー保護システム10によれば、車両1の外部の音を集音し、集音した音が所定レベル以上の場合には再生音を車両1の外部において聞き取り難くするので、車両1の乗員に対して出力される再生音が外部に漏れ出る場合にプライバシーの保護を図ることができる。特に、車両1がアイドリングストップ機能を有する車両の場合、車両1が停止したときにエンジン(図示略)が停止されるので、車両1の外部に漏れ出た再生音が聞き取られ易くなるので、プライバシー保護システム10が車両1に搭載されることでプライバシーの保護性を高めることができる。
According to the
プライバシー保護システム10によれば、聴取困難化処理として車外用スピーカー32により再生音をマスキングするマスキング音を出力することにより、車両1の外部に漏れ出た再生音の内容を車両1の外部の人に聞き取られ難くできる。このように、プライバシー保護システム10によれば、マスキング音によって車両1の外部の人に聞き取られ難くすることで、車両1内でのハンズフリー通話の再生音の音量を極力下げずに、再生音の音量を十分に確保できる。
According to the
プライバシー保護システム10によれば、聴取困難化処理としてハンズフリー通話の再生音の音量を低減することにより、車両1の外部に漏れる音の音量を下げ、車両1の外部に漏れ出た再生音の内容を車両1の外部の人に聞き取られ難くできると共に、大きな音量による車両1の外部の人に対する迷惑度を低減できる。
According to the
プライバシー保護システム10によれば、マイクロフォン24により集音した集音信号のレベルが所定レベル以上か否かを判定することにより、車両1の外部に大きな音が漏れているか否かを精度良く判定できる。
According to the
プライバシー保護システム10によれば、車両1の車速を取得し、車速が所定速度未満か否かを判定することにより、車速が低速の場合には車速が高速の場合よりも車両1の外部に再生音が漏れる可能性が高いと判定でき、聴取困難化処理の要否を判断できる。プライバシー保護システム10によれば、車両1の現在位置を取得し、現在位置が市街地内か否かを判定することにより、現在位置が市街地内の場合には市街地外の場合よりも車両1の外部に漏れた再生音が外部の人に聞き取られる可能性が高いと判定でき、聴取困難化処理の要否を判断できる。特に、プライバシー保護システム10によれば、車両1が低速かつ車両1の現在位置が市街地内の場合、聴取困難化処理としてマスキング音を出力することにより、再生音が外部に漏れ出た場合でも車両1の外部の人に再生音の内容を聞き取り難くできる。また、プライバシー保護システム10によれば、車両1が高速の場合又は車両1の現在位置が市街地外の場合、ハンズフリー通話の再生音の会話の内容を車両1の外部の人に聞かれる可能性が低いので、マスキング音を出力せずかつ再生音の音量も下げずに、プライバシー性を確保できる。
According to the
プライバシー保護システム10によれば、マイクロフォン24をドアミラー1a又はドアミラー1aの近傍に設けることにより、風切り音の影響を抑えることができ、音漏れ判定の判定精度を向上させることができる。
According to the
(第2実施形態)
図8は、第2実施形態のプライバシー保護システム70の構成図である。図8に示す構成では、図1に示す構成要素と同一構成要素には同一符号を付して、説明を省略する。
第2実施形態のプライバシー保護システム70は、ハンズフリー通話装置20及びオーディオ装置25を備える車両2(本発明の移動体に相当する)に搭載される。プライバシー保護システム70は、第1実施形態のプライバシー保護システム10と比較すると、オーディオ装置25により音楽等の再生中にハンズフリー通話が可能であり、この音楽等の再生中でもハンズフリー通話中に通話相手の受話音が再生された再生音が車両2の外部に漏れ出ていると判定する機能を有する点が異なる。
(Second Embodiment)
FIG. 8 is a configuration diagram of the
The
オーディオ装置25は、乗員の操作に従って音楽等を再生する装置である。オーディオ装置25は、車内用スピーカー30により音楽等を再生する。車内用スピーカー30は、例えば、このオーディオ装置25による音楽だけを再生する場合と、ハンズフリー通話装置20の再生音とオーディオ装置25による音楽とを同時に再生する場合とがある。
The
プライバシー保護システム70は、制御ユニット80によって制御される。制御ユニット80は、CPU90、メモリ100、各種インターフェース回路(図示略)等により構成された電子回路ユニットである。CPU90は、メモリ100に保存されたプライバシー保護システム70の制御用プログラム101を読み込んで実行することにより、音漏れ判定部91(レベル判定部91a、比較部91bを含む)、マスキング制御部92、ボリューム制御部93、アラーム制御部94として機能する。第2実施形態では、CPU90が本発明の処理部に相当する。
The
制御ユニット80には、ハンズフリー通話装置20、及びオーディオ装置25が接続される。ハンズフリー通話装置20は、ハンズフリー通話中に、携帯電話機等から通話相手の再生音信号を取得し、再生音信号を制御ユニット80に送信する。オーディオ装置25は、音楽等の再生中、ハードディスクやCD(Compact Disk)等から音楽信号を取得し、音楽信号を制御ユニット80に送信する。制御ユニット80は、通話音信号のみを受信した場合、再生音信号と音量情報をアンプ31に送信する。制御ユニット80は、音楽信号のみを受信した場合、音楽信号と乗員によって調整された音量情報をアンプ31に送信する。制御ユニット80は、再生音信号と音楽信号を受信した場合、再生音信号と音楽信号に基づき共用音信号を生成し、共用音信号と音量情報をアンプ31に送信する。この共用音信号の音量情報は、音楽信号の音量が再生音信号の音量よりも下げられている。
A hands-
制御ユニット80は、車速信号、現在位置信号、地図情報信号、再生音信号、音楽信号及び集音信号を受信する。制御ユニット80は、所定時間分の集音信号を集音データ102としてメモリ100に保存する。制御ユニット80は、所定時間分の再生音信号を再生音データ103としてメモリ100に保存する。所定時間は、予め設定される。
The
音漏れ判定部91は、ハンズフリー通話装置20によるハンズフリー通話中の場合、車速信号、現在位置信号及び地図情報信号に基づいて、車内用スピーカー30から出力される音が車両2の外部に漏れている可能性があるか否かを判定する。音漏れ判定部91は、レベル判定部91aを有している。レベル判定部91aは、オーディオ装置25による音楽等の再生中の場合、集音データ102(集音信号の時系列データ)に基づいて、車内用スピーカー30から出力される音楽等の音が車両2の外部に漏れているか否かを判定する。また、レベル判定部91aは、ハンズフリー通話装置20によるハンズフリー通話中の場合、集音データ102を用いて音が外部に漏れているか否かを判定する。
During a hands-free call by the hands-
音漏れ判定部91は、比較部91bを有している。比較部91bは、ハンズフリー通話装置20によるハンズフリー通話中の場合、レベル判定部91aにより音が外部に漏れていると判定した場合、再生音データ103(ハンズフリー通話の再生音信号の時系列データ)と集音データ102(集音信号の時系列データ)とを比較し、この比較結果に基づいてハンズフリー通話の再生音が車両2の外部に漏れているか否かを判定する。比較部91bにおける比較方法としては、例えば、周波数成分を比較する方法と、音声認識結果を比較する方法とがある。
The sound
マスキング制御部92は、音漏れ判定部91で音が車両2の外部に漏れている可能性があると判定された場合、聴取困難化処理として、マスキング音を車外用スピーカー32から出力する制御を行う。
When the sound
ボリューム制御部93は、音漏れ判定部91の比較部91bにより車両2の外部に再生音が漏れていると判定された場合、聴取困難化処理として、再生音の音量を低減する制御を行う。
When the
アラーム制御部94は、音漏れ判定部51で音が車両2の外部に漏れていると判定された場合、ディスプレイ34に音漏れに関するアラーム情報を表示させる制御を行う。
When the sound
図9〜図11を参照して、プライバシー保護システム70の一連の動作について説明する。図9は、プライバシー保護システム70の一連の動作の前半部分を示すフローチャートである。図10は、プライバシー保護システム70の一連の動作の後半部分を示すフローチャートであり、比較部91bでの比較方法が周波数成分を比較する方法の場合である。図11は、プライバシー保護システム70の一連の動作の後半部分を示すフローチャートであり、比較部91bでの比較方法が音声認識結果を比較する方法の場合である。この一連の動作は、繰り返し実施される。なお、図9〜図11を用いた動作説明は、第1実施形態の図3と同じ処理に対しては同じステップ番号を付して、説明を省略する。
A series of operations of the
制御ユニット80は、ハンズフリー通話装置20から再生音信号を受信しているか否かにより、ハンズフリー通話中か否かを判定する(ステップS20)。ハンズフリー通話中と判定した場合(ステップS20:YES)、ステップS1の処理に移行する。この場合、車内用スピーカー30から出力される音は、ハンズフリー通話装置20によるハンズフリー通話の再生音のみの場合、或いはハンズフリー通話装置20によるハンズフリー通話の再生音及びオーディオ装置25による音楽等の音の場合がある。
The
ハンズフリー通話中でないと判定した場合(ステップS20:NO)、制御ユニット80は、ノイズキャンセラ23から集音信号を取得し、集音信号を集音データ102としてメモリ100に保存する(ステップS21)。音漏れ判定部91のレベル判定部91aは、集音信号のレベルが所定レベル以上か否かを判定する(ステップS22)。この場合、車内用スピーカー30から出力される音は、オーディオ装置25による音楽等の音のみの場合である。所定レベルは、例えば、第1実施形態の図3のステップS8のレベル判定に用いた所定レベルと同じレベルである。
When it is determined that the hands-free call is not in progress (step S20: NO), the
集音信号のレベルが所定レベル以上と判定した場合(ステップS21:YES)、音漏れ判定部51は音楽等の音漏れが大きいと判定し、アラーム制御部54はアラーム情報を示すアラーム表示信号をディスプレイ34に送信する(ステップS23)。ディスプレイ34は、アラーム表示信号を受信すると、アラーム情報を表示する。このアラーム情報は、例えば、音楽等の音が車両2の外部に漏れていることを示す情報、及び乗員に対して車両2の窓が開いている場合には窓を閉めたり、音量操作部により再生音の音量を下げるたりすることを促す情報である。この場合、音楽等の音が車両2の外部に漏れているので、プライバシー的な要素が少ないが、車両2の外部の人に迷惑をかけるおそれがあるので、乗員に対して窓閉めや音量低減を促す。
When it is determined that the level of the sound collecting signal is equal to or higher than a predetermined level (step S21: YES), the sound
ステップS23でアラーム情報を表示後又はステップS22で集音信号のレベルが所定レベル未満と判定した場合(ステップS21:NO)、ステップS14に移行する。 After displaying the alarm information in step S23 or when it is determined in step S22 that the level of the sound collecting signal is less than a predetermined level (step S21: NO), the process proceeds to step S14.
図10のフローチャートを参照して、比較部91bでの比較方法が周波数成分を比較する方法の場合の動作について説明する。
With reference to the flowchart of FIG. 10, the operation when the comparison method in the
制御ユニット80は、ノイズキャンセラ23から集音信号を取得し、集音信号を集音データ102としてメモリ100に保存する(ステップS30)。また、制御ユニット80は、ハンズフリー通話装置20から再生音信号を取得し、再生音信号を再生音データ103としてメモリ100に保存する(ステップS31)。集音信号は、車両2の外部の音を集音して得られた信号であるので、車両2の外部のノイズの成分を含む。車両2が高速で走行している場合には集音信号は車両2の走行ノイズや周囲のノイズが大きいが、車両2が低速又は停止している場合には集音信号はノイズの影響が高速の場合よりも小さい。一方、再生音信号は、車両2内のハンズフリー通話装置20からの信号であるので、ノイズの影響はない。
The
音漏れ判定部91のレベル判定部91aは、集音信号のレベルが所定レベル以上か否かを判定する(ステップS32)。所定レベルは、例えば、第1実施形態の図3のステップS8のレベル判定に用いた所定レベルと同じレベルである。集音信号のレベルが所定レベル未満と判定した場合(ステップS32:NO)、音漏れ判定部91は音が車両2の外部に漏れていないと判定し、ステップS12の処理に移行する。
The
集音信号のレベルが所定レベル以上と判定した場合(ステップS32:YES)、音漏れ判定部91は音が車両2の外部に漏れていると判定し、音漏れ判定部91の比較部91bは集音データ102の集音信号の時系列データに対してFFT(Fast Fourier Transform)処理し、所定時間分の集音信号を周波数成分に分解する(ステップS33)。また。比較部91bは、再生音データ103の再生音信号の時系列データに対してFFT処理し、所定時間分の再生音信号を周波数成分に分解する(ステップS34)。
When it is determined that the level of the sound collecting signal is equal to or higher than a predetermined level (step S32: YES), the sound
比較部91bは、各周波数毎に集音信号の周波数成分(例えば、スペクトル強度)と再生音信号の周波数成分の差分をそれぞれ算出し、各周波数の差分値を積算する(ステップS35)。ステップS35の積算は、取得した集音信号と再生音信号の全ての周波数領域において所定の周波数(例えば、100Hz)毎に行ってよいし、或いは、処理負荷を軽減するために、集音信号と再生音信号の全ての周波数領域のうちの一部の周波数帯(例えば、電話音声帯域の300〜3400Hz)において所定の周波数毎に行ってよい。
The
図12には、再生音信号と集音信号の周波数スペクトルの一例を示す。図12では、横軸が時間であり、縦軸が周波数である。図12(A)は、車両2の内部の再生音信号の周波数スペクトルFS3の一例であり、ノイズの影響がない。図12(B)は、車両2の外部の集音信号の周波数スペクトルFS4であり、ノイズの影響がある。
図13は、図12に示す再生音信号と集音信号との周波数成分の比較例を示す。図13では、横軸が周波数であり、縦軸がスペクトル強度である。図13では、符号F1で示すグラフが再生音信号の周波数成分であり、符号F2で示すグラフが集音信号の周波数成分である。ステップS35では、例えば、この2つのグラフF1、F2間の各周波数毎の差分の積算値が求められる。
FIG. 12 shows an example of the frequency spectra of the reproduced sound signal and the sound collecting signal. In FIG. 12, the horizontal axis is time and the vertical axis is frequency. FIG. 12A is an example of the frequency spectrum FS3 of the reproduced sound signal inside the vehicle 2, and is not affected by noise. FIG. 12B is a frequency spectrum FS4 of a sound collecting signal outside the vehicle 2, which is affected by noise.
FIG. 13 shows a comparative example of the frequency components of the reproduced sound signal and the sound collecting signal shown in FIG. In FIG. 13, the horizontal axis is the frequency and the vertical axis is the spectral intensity. In FIG. 13, the graph indicated by the reference numeral F1 is the frequency component of the reproduced sound signal, and the graph indicated by the reference numeral F2 is the frequency component of the sound collection signal. In step S35, for example, the integrated value of the difference between the two graphs F1 and F2 for each frequency is obtained.
図14は、再生音信号のレベルと集音信号のレベルの時間変化の一例である。図14では、横軸が時間であり、縦軸が音信号のレベルである。図14(A)には車両2の外部の集音信号C1を示し、図14(B)には車両2の内部の再生音信号P1を示す。この再生音信号P1の音量は、中間レベルである。
図15は、図14に示す再生音信号P1と集音信号C1との周波数成分の比較例を示す。図15では、横軸が周波数であり、縦軸がスペクトル強度である。図15では、符号F3で示すグラフが再生音信号P1の周波数成分であり、符号F4で示すグラフが集音信号C1の周波数成分である。ステップS35では、例えば、この2つのグラフF3、F4間の各周波数毎の差分の積算値が求められる。
FIG. 14 is an example of time-dependent changes in the level of the reproduced sound signal and the level of the sound collecting signal. In FIG. 14, the horizontal axis is time and the vertical axis is the sound signal level. FIG. 14A shows a sound collecting signal C1 outside the vehicle 2, and FIG. 14B shows a reproduced sound signal P1 inside the vehicle 2. The volume of the reproduced sound signal P1 is at an intermediate level.
FIG. 15 shows a comparative example of the frequency components of the reproduced sound signal P1 and the sound collecting signal C1 shown in FIG. In FIG. 15, the horizontal axis is frequency and the vertical axis is spectral intensity. In FIG. 15, the graph indicated by the reference numeral F3 is the frequency component of the reproduced sound signal P1, and the graph indicated by the reference numeral F4 is the frequency component of the sound collecting signal C1. In step S35, for example, the integrated value of the difference for each frequency between the two graphs F3 and F4 is obtained.
図16は、再生音信号のレベルと集音信号のレベルの時間変化の他の例である。図16では、横軸が時間であり、縦軸が音信号のレベルである。図16(A)には車両2の外部の集音信号C2を示し、図16(B)には車両2の内部の再生音信号P2を示す。この再生音信号P2の音量は、図14に示す再生音信号P1の音量より大きいレベルである。また、図16(A)に示す集音信号C2のレベルと図14(A)に示す集音信号C1のレベルとを比較すると、図16(A)に示す集音信号C2のほうが大きい。このように、再生音の音量が大きいと、車両2の外部に漏れる音の音量も大きくなる。 FIG. 16 is another example of the time variation of the level of the reproduced sound signal and the level of the sound collecting signal. In FIG. 16, the horizontal axis is time and the vertical axis is the sound signal level. FIG. 16A shows a sound collecting signal C2 outside the vehicle 2, and FIG. 16B shows a reproduced sound signal P2 inside the vehicle 2. The volume of the reproduced sound signal P2 is higher than the volume of the reproduced sound signal P1 shown in FIG. Comparing the level of the sound collecting signal C2 shown in FIG. 16A with the level of the sound collecting signal C1 shown in FIG. 14A, the sound collecting signal C2 shown in FIG. 16A is larger. As described above, when the volume of the reproduced sound is high, the volume of the sound leaking to the outside of the vehicle 2 is also high.
図17は、図15に示す再生音信号P2と集音信号C2との周波数成分の比較例を示す。図17では、横軸が周波数であり、縦軸がスペクトル強度である。図17では、符号F5で示すグラフが再生音信号P2の周波数成分であり、符号F6で示すグラフが集音信号C2の周波数成分である。ステップS35では、例えば、この2つのグラフF5、F6間の各周波数毎の差分の積算値が求められる。 FIG. 17 shows a comparative example of the frequency components of the reproduced sound signal P2 and the sound collecting signal C2 shown in FIG. In FIG. 17, the horizontal axis is the frequency and the vertical axis is the spectral intensity. In FIG. 17, the graph indicated by the reference numeral F5 is the frequency component of the reproduced sound signal P2, and the graph indicated by the reference numeral F6 is the frequency component of the sound collecting signal C2. In step S35, for example, the integrated value of the difference for each frequency between the two graphs F5 and F6 is obtained.
図15に示す2つのグラフF3、F4間と図17に示す2つのグラフF5、F6間とを比較すると図17に示す2つのグラフF5、F6間の差分のほうが小さく、各周波数毎の差分は図17に示す再生音の音量が大きい場合のほうが小さくなっている。つまり、車両2の内部の再生音の音量が大きいと車両2の外部に漏れる音の音量が大きくなり、この外部に漏れる音の音量が大きいほど、再生音信号の周波数成分と集音信号の周波数成分との差分が小さくなり、一致度合が高くなる。したがって、再生音が車両2の外部に漏れているほど、ステップS35で算出される各周波数毎の差分の積算値が小さくなる。 Comparing the two graphs F3 and F4 shown in FIG. 15 with the two graphs F5 and F6 shown in FIG. 17, the difference between the two graphs F5 and F6 shown in FIG. 17 is smaller, and the difference for each frequency is smaller. The volume of the reproduced sound shown in FIG. 17 is lower when the volume is higher. That is, when the volume of the reproduced sound inside the vehicle 2 is high, the volume of the sound leaking to the outside of the vehicle 2 is large, and the louder the volume of the sound leaking to the outside is, the frequency component of the reproduced sound signal and the frequency of the sound collection signal. The difference from the components becomes smaller, and the degree of matching becomes higher. Therefore, the more the reproduced sound leaks to the outside of the vehicle 2, the smaller the integrated value of the difference for each frequency calculated in step S35.
図10のフローチャートにおいてステップS35で差分の積算値を算出すると、比較部91bは、その積算値が所定値以下か否かを判定する(ステップS36)。所定値は、車両2の外部に再生音が漏れているか否か(特に、集音信号と再生音信号とが似通っているか否か)を判定する閾値である。この所定値は、予め設定され、例えば、メモリ100に保存される。この所定値は、乗員が変えられるようにしてもよい。
When the integrated value of the difference is calculated in step S35 in the flowchart of FIG. 10, the
積算値が所定値以下と判定した場合(ステップS36:YES)、比較部91bは、車両2の外部に再生音が漏れていると判定し、ステップS9の処理に移行する。一方、積算値が所定値よりも大きいと判定した場合(ステップS36:NO)、比較部91bは、車両2の外部に再生音が漏れていないと判定し、ステップS12の処理に移行する。
When it is determined that the integrated value is equal to or less than the predetermined value (step S36: YES), the
次に、図11のフローチャートを参照して、比較部91bでの比較方法が音声認識結果を比較する方法の場合の動作について説明する。なお、図11を用いた動作説明では、図10と同じ処理に対しては同じステップ番号を付して、説明を省略する。
Next, with reference to the flowchart of FIG. 11, the operation when the comparison method in the
ステップS32の判定において集音信号のレベルが所定レベル以上と判定すると(ステップS32:YES)、比較部91bは、集音データ102の集音信号の時系列データに対して音声認識処理を行い、集音信号に含まれる言葉を取得し、この言葉をテキスト化する(ステップS40)。また、比較部91bは、再生音データ103の再生音信号の時系列データに対して音声認識処理を行い、再生音信号に含まれる言葉を取得し、この言葉をテキスト化する(ステップS41)。
When it is determined in the determination in step S32 that the level of the sound collection signal is equal to or higher than a predetermined level (step S32: YES), the
図18は、再生音信号と集音信号との音声認識結果の比較例を示す。図18では、横軸が時間であり、縦軸が周波数である。図18(A)は、車両2の内部の再生音信号の周波数スペクトルFS5の一例である。図18(B)は、車両2の外部の集音信号の周波数スペクトルFS6の一例である。図18(A)に示す再生音信号の周波数スペクトルFS5からは音声認識処理により、時間T10で言葉の「あ」が認識され、時間T11で言葉の「い」が認識され、時間T12で言葉の「う」が認識され、時間T13で言葉の「え」が認識され、時間T14で言葉の「お」が認識された。一方、図18(B)に示す集音信号の周波数スペクトルFS6からは音声認識処理により、時間T10で「あ」が認識され、時間T11で言葉が認識されず、時間T12で言葉が認識されず、時間T13で言葉の「え」が認識され、時間T14で言葉の「お」が認識された。この図18に示す例の場合、再生音信号と集音信号との言葉の一致度は、60%である。例えば、言葉の一致度が60%程度なら、ハンドフリー通話の会話の内容が分からないレベルと判断される。 FIG. 18 shows a comparative example of the voice recognition result of the reproduced sound signal and the sound collecting signal. In FIG. 18, the horizontal axis is time and the vertical axis is frequency. FIG. 18A is an example of the frequency spectrum FS5 of the reproduced sound signal inside the vehicle 2. FIG. 18B is an example of the frequency spectrum FS6 of the sound collecting signal outside the vehicle 2. From the frequency spectrum FS5 of the reproduced sound signal shown in FIG. 18 (A), the word "a" is recognized at time T10, the word "i" is recognized at time T11, and the word "i" is recognized at time T12 by voice recognition processing. "U" was recognized, the word "e" was recognized at time T13, and the word "o" was recognized at time T14. On the other hand, from the frequency spectrum FS6 of the sound collection signal shown in FIG. 18B, "A" is recognized at time T10, the word is not recognized at time T11, and the word is not recognized at time T12 by the voice recognition process. , The word "e" was recognized at time T13, and the word "o" was recognized at time T14. In the case of the example shown in FIG. 18, the degree of agreement between the words of the reproduced sound signal and the sound collecting signal is 60%. For example, if the degree of word matching is about 60%, it is judged that the content of the hand-free call conversation is unknown.
図11に戻って、比較部91bは、集音信号から取得した音声認識結果(テキストデータ)と集音信号から取得した音声認識結果(テキストデータ)との一致度合を算出する(ステップS42)。比較部91bは、その一致度合が所定度合以上か否かを判定する(ステップS43)。所定度合は、車両2の外部に再生音が漏れているか否か(特に、ハンズフリー通話の再生音の会話内容が聞き取り可能か否か)を判定する閾値である。この所定度合は、予め設定され、例えば、メモリ100に保存される。この所定度合は、乗員が変えられるようにしてもよい。
Returning to FIG. 11, the
一致度合が所定度合以上と判定した場合(ステップS43:YES)、比較部91bは、車両2の外部に再生音が漏れていると判定し、ステップS9の処理に移行する。一方、一致度合が所定度合未満と判定した場合(ステップS43:NO)、比較部91bは、車両2の外部に再生音が漏れていないと判定し、ステップS12の処理に移行する。
When it is determined that the degree of coincidence is equal to or higher than the predetermined degree (step S43: YES), the
比較部91bは、上述した図10のフローチャートで示す処理と図11のフローチャートで示す処理のいずれか一方の比較方法の処理により、ハンズフリー通話の再生音が車両2の外部に漏れているかを判定する。なお、比較部91bは、上述した図10のフローチャートで示す処理と図11のフローチャートで示す処理の両方の比較方法の各処理を行い、2つの比較方法で得られた結果を総合的に判断して、ハンズフリー通話の再生音が車両2の外部に漏れているかを判定する構成としてもよい。
The
第2実施形態のプライバシー保護システム70は、第1実施形態のプライバシー保護システム10と同様の効果を有すると共に、以下の効果も有する。プライバシー保護システム70によれば、比較部91bを設け、集音信号のレベルが所定レベル以上の場合、再生音信号と集音信号とを比較することにより、再生音信号と集音信号との相関性に基づきハンズフリー通話の再生音が車両2の外部に漏れているか否か精度良く判定でき、再生音が外部に漏れていると判定した場合には聴取困難化処理を実行できる。特に、プライバシー保護システム70によれば、ハンズフリー通話の再生音による会話内容が車両2の外部に人に聞き取られる可能性があるか否かを精度良く判定できる。また、プライバシー保護システム70によれば、ハンズフリー通話中の再生音信号を用いて比較しているので、ハンズフリー通話中にオーディオ装置25から音楽等の音も出力されている場合でも、ハンズフリー通話の再生音が車両2の外部に漏れているか否か精度良く判定できる。
The
プライバシー保護システム70によれば、再生音信号及び集音信号をそれぞれ周波数変換し、再生音信号の周波数成分と集音信号の周波数成分とを比較することにより、再生音信号と集音信号との相関性を判定でき、ハンズフリー通話の再生音が車両2の外部に漏れているか否かの判定精度を向上できる。
According to the
プライバシー保護システム70によれば、再生音信号及び集音信号をそれぞれ音声認識し、再生音信号の音声認識結果と集音信号の音声認識結果とを比較することにより、再生音信号と集音信号との言葉らしさを判定でき、ハンズフリー通話の再生音が車両2の外部に漏れているか否かの判定精度を向上できる。
According to the
プライバシー保護システム70によれば、車速や現在位置の条件に基づきマスキング処理を行うことで、比較部91bで再生音が車両2の外部に漏れていない(再生音の会話内容が車両2の外部の人に聞き取られる可能性が低い)と判定した場合には再生音の音量を下げないことにより、車両2内のハンズフリー通話の音量を極力下げずに、プライバシー性を確保することができる。
According to the
プライバシー保護システム70によれば、車内用スピーカー30からオーディオ装置25の音楽等の音だけが出力されている場合、プライバシー性よりも大きな音量が問題となるので、音量が大きい場合にはアラーム表示によって音量を下げること等を乗員に促すことにより、車両2の外部の人への迷惑度を抑制できる。
According to the
なお、上記実施形態は本発明を適用した一具体例を示すものであり、本発明はこれに限定されるものではない。 The above embodiment shows a specific example to which the present invention is applied, and the present invention is not limited thereto.
例えば、上記実施形態では移動体として自動車に適用したが、他の移動体にも適用できる。例えば、自動二輪車に適用可能であり、自動二輪車の場合、自動二輪車の運転者が被るヘルメット内にスピーカーが設けられ、このスピーカーからハンズフリー通話の再生音が出力される。本発明のプライバシー保護システムは、ハンズフリー通話中にヘルメットのスピーカーによって再生された再生音が外部に漏れ出ていると判定した場合、自動二輪車の周辺に存在する人に再生音が聞き取られ難くする機能を有する。 For example, in the above embodiment, it is applied to an automobile as a moving body, but it can also be applied to other moving bodies. For example, it can be applied to a motorcycle, and in the case of a motorcycle, a speaker is provided in a helmet worn by the driver of the motorcycle, and the reproduced sound of a hands-free call is output from this speaker. When it is determined that the reproduced sound reproduced by the speaker of the helmet is leaking to the outside during a hands-free call, the privacy protection system of the present invention makes it difficult for a person existing around the motorcycle to hear the reproduced sound. Has a function.
また、例えば、飛行機に適用可能であり、飛行機のファーストクラス等において各搭乗者にプライベート空間がそれぞれ確保され、搭乗者が座るシートにスピーカーが設けられ、このスピーカーからハンズフリー通話の再生音が出力される。本発明のプライバシー保護システムは、ハンズフリー通話中にシートのスピーカーによって再生された再生音がプライベート空間の外部(他の搭乗者のプライベート空間内)に漏れ出ていると判定した場合、周辺の他のプライベート空間内の他の搭乗者に再生音が聞き取られ難くする機能を有する。 Also, for example, it can be applied to airplanes, private space is secured for each passenger in the first class of airplanes, a speaker is provided on the seat on which the passenger sits, and the playback sound of hands-free call is output from this speaker. Will be done. When the privacy protection system of the present invention determines that the reproduced sound reproduced by the speaker of the seat during a hands-free call leaks to the outside of the private space (inside the private space of another passenger), the surrounding other It has a function to make it difficult for other passengers in the private space to hear the reproduced sound.
また、上記実施形態では聴取困難化処理としてマスキング音の出力処理と再生音の音量の低減処理を行う構成としたが、聴取困難化処理としてマスキング音の出力処理と再生音の音量の低減処理のうちのいずれか一方の処理を行う構成としてもよい。 Further, in the above embodiment, the masking sound output process and the reproduced sound volume reduction process are performed as the listening difficulty process, but the masking sound output process and the reproduced sound volume reduction process are performed as the listening difficulty process. It may be configured to perform processing of either one of them.
上記実施形態ではハンズフリー通話の再生音が車両1、2の外部に漏れている情報や手動操作で音量を下げることを促す等のアラーム情報をディスプレイ34に表示させる構成としたが、他の方法でアラーム情報を報知してもよく、例えば、車内用スピーカー30による音声出力によってアラーム情報を報知してもよい。
In the above embodiment, the
また、上記実施形態では集音信号を用いた判定に加えて、車両1、2の車速や現在位置を用いた判定を行い、ハンズフリー通話の再生音が車両1、2の外部に漏れている可能性があるか否かを判定したが、このような車速や現在位置を用いた判定を行うことなく、集音信号を用いた判定によって再生音が車両1、2の外部に漏れているか否かを判定してもよい。
Further, in the above embodiment, in addition to the determination using the sound collecting signal, the determination using the vehicle speed and the current position of the
また、上記第1実施形態では車両1において集音信号のレベル判定のみで再生音の音量を下げるか否かを判断したが、第1実施形態の車両1においても第2実施形態のように集音信号のレベル判定に加えて、集音信号と再生音信号との比較(周波数成分の比較、音声認識結果の比較)も行い、再生音の音量を下げるか否かを判断する構成としてもよい。
Further, in the first embodiment, the
また、図1、8は、本願発明を理解容易にするために、プライバシー保護システム10、70の機能構成を主な処理内容に応じて分類して示した概略図であり、プライバシー保護システム10、70の構成は、処理内容に応じて、さらに多くの要請要素に分類することもできる。また、1つの構成要素がさらに多くの処理を実行するように分類することもできる。また、各構成要素の処理は、1つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。また、各構成要素の処理は、1つのプログラムで実現されてもよいし、複数のプログラムで実現されてもよい。
Further, FIGS. 1 and 8 are schematic views showing the functional configurations of the
また、図1、8のプライバシー保護システム10、70の制御ユニット40、80において、CPU50、90で実行される制御用プログラム61、101は、例えば、通信ネットワークを介して外部サーバー等からダウンロードされ、それからRAM等のメモリ60、100上にロードされてCPU50、90により実行されるようにしてもよい。また、通信ネットワークを介して、外部サーバーからRAM等のメモリ60、100に直接ロードされ、CPU50、90により実行されるようにしてもよい。或いは、プライバシー保護システム10、70に接続された記憶媒体から、RAM等のメモリ60、100上にロードされるようにしてもよい。
Further, in the
また、図3、9、10、11のフローチャートの処理単位は、プライバシー保護システム10、70による処理の理解を容易にするために、主な処理内容に応じて分割したものである。処理単位の分割の仕方や名称によって、本願発明が制限されることはない。プライバシー保護システム10、70の処理は、処理内容に応じて、さらに多くの処理単位に分割することもできる。また、1つの処理単位がさらに多くの処理を含むように分割することもできる。また、同様の処理結果が得られるものであれば、図3、9、10、11のフローチャートの処理順序も、図示した例に限られるものではない。
Further, the processing units of the flowcharts of FIGS. 3, 9, 10 and 11 are divided according to the main processing contents in order to facilitate understanding of the processing by the
1、2 車両(移動体)
10、70 プライバシー保護システム
20 ハンズフリー通話装置
21 車速センサ(速度取得部)
22 ナビゲーション装置(現在位置取得部)
22a 地図データベース
23 ノイズキャンセラ
24 マイクロフォン(集音部)
25 オーディオ装置
30 車内用スピーカー
31、33 アンプ
32 車外用スピーカー(音出力部)
34 ディスプレイ
40、80 制御ユニット
50、90 CPU(処理部)
51、91 音漏れ判定部
51a、91a レベル判定部
91b 比較部
52、92 マスキング制御部
53、93 ボリューム制御部
54、94 アラーム制御部
60、100 メモリ
61、101 制御用プログラム
62、102 集音データ
103 再生音データ
1 and 2 vehicles (moving bodies)
10, 70
22 Navigation device (current position acquisition unit)
25
34
51, 91 Sound
Claims (9)
前記所定の空間の外部の音を集音する集音部と、
前記集音部により集音された音のレベルが所定レベル以上の場合、前記再生音を前記所定の空間の外部において聞き取り難くする聴取困難化処理を実行する処理部と、
を備えることを特徴とするプライバシー保護システム。 A privacy protection system that is mounted on a moving body and outputs a reproduced sound to a occupant of the moving body in a predetermined space around the occupant.
A sound collecting unit that collects sounds outside the predetermined space, and
When the level of the sound collected by the sound collecting unit is equal to or higher than a predetermined level, a processing unit that executes a listening difficulty process that makes it difficult to hear the reproduced sound outside the predetermined space, and a processing unit.
A privacy protection system characterized by being equipped with.
前記聴取困難化処理は、前記音出力部により前記所定の空間の外部に漏れる前記再生音をマスキングするマスキング音を出力することを特徴とする請求項1から4のいずれか1項に記載のプライバシー保護システム。 A sound output unit that outputs sound to the outside of the predetermined space is provided.
The privacy according to any one of claims 1 to 4, wherein the listening difficulty processing outputs a masking sound that masks the reproduced sound leaking to the outside of the predetermined space by the sound output unit. Protection system.
前記処理部は、前記速度取得部により取得された速度が所定速度未満の場合に前記聴取困難化処理を実行することを特徴とする請求項1から6のいずれか1項に記載のプライバシー保護システム。 A speed acquisition unit for acquiring the speed of the moving body is provided.
The privacy protection system according to any one of claims 1 to 6, wherein the processing unit executes the listening difficulty processing when the speed acquired by the speed acquisition unit is less than a predetermined speed. ..
前記処理部は、前記現在位置取得部により取得された前記移動体の現在位置が所定の場所である場合に前記聴取困難化処理を実行することを特徴とする請求項1から7のいずれか1項に記載のプライバシー保護システム。 A current position acquisition unit for acquiring the current position of the moving body is provided.
Any one of claims 1 to 7, wherein the processing unit executes the listening difficulty processing when the current position of the moving body acquired by the current position acquisition unit is a predetermined position. The privacy protection system described in the section.
The privacy protection system according to any one of claims 1 to 8, wherein the reproduced sound is a received sound of a hands-free call.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018001197A JP6957362B2 (en) | 2018-01-09 | 2018-01-09 | Privacy protection system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018001197A JP6957362B2 (en) | 2018-01-09 | 2018-01-09 | Privacy protection system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019120828A JP2019120828A (en) | 2019-07-22 |
| JP6957362B2 true JP6957362B2 (en) | 2021-11-02 |
Family
ID=67306183
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018001197A Expired - Fee Related JP6957362B2 (en) | 2018-01-09 | 2018-01-09 | Privacy protection system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6957362B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024193957A1 (en) * | 2023-03-20 | 2024-09-26 | Mercedes-Benz Group AG | Method for controlling a communication relay between a hands-free device in a motor vehicle and a user, and hands-free device |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020209270A1 (en) | 2019-04-12 | 2020-10-15 | Agc株式会社 | Glass plate and manufacturing method thereof |
| JP7065140B2 (en) * | 2020-03-31 | 2022-05-11 | 本田技研工業株式会社 | vehicle |
| JP7480862B2 (en) * | 2020-12-09 | 2024-05-10 | 日本電信電話株式会社 | MOBILE BODY, INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND PROGRAM |
| CN112967729B (en) * | 2021-02-24 | 2024-07-02 | 辽宁省视讯技术研究有限公司 | Vehicle-mounted local audio fuzzy processing method and device |
| JP7716720B2 (en) * | 2021-04-26 | 2025-08-01 | パナソニックIpマネジメント株式会社 | Voice control system, voice control method, and program |
| KR102917322B1 (en) * | 2021-12-08 | 2026-01-22 | 현대자동차주식회사 | Method and Device for Customized Sound Masking in Vehicle |
| JP2024114182A (en) * | 2023-02-13 | 2024-08-23 | Toa株式会社 | Conversation leakage evaluation device |
| CN118314863B (en) * | 2024-06-11 | 2024-08-06 | 长城汽车股份有限公司 | Signal control method and device, vehicle and storage medium |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007043231A (en) * | 2005-07-29 | 2007-02-15 | Victor Co Of Japan Ltd | Automatic sound volume controller |
| JP2008022061A (en) * | 2006-07-10 | 2008-01-31 | Toyota Motor Corp | Hands-free wireless communication device and audio output control method |
| EP3040984B1 (en) * | 2015-01-02 | 2022-07-13 | Harman Becker Automotive Systems GmbH | Sound zone arrangment with zonewise speech suppresion |
-
2018
- 2018-01-09 JP JP2018001197A patent/JP6957362B2/en not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024193957A1 (en) * | 2023-03-20 | 2024-09-26 | Mercedes-Benz Group AG | Method for controlling a communication relay between a hands-free device in a motor vehicle and a user, and hands-free device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2019120828A (en) | 2019-07-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6957362B2 (en) | Privacy protection system | |
| CN109147815B (en) | System and method for selective volume adjustment in a vehicle | |
| US9763003B2 (en) | Automotive constant signal-to-noise ratio system for enhanced situation awareness | |
| US11580950B2 (en) | Apparatus and method for privacy enhancement | |
| KR102812510B1 (en) | Vehicle and method for controlling thereof | |
| JP2012025270A (en) | Apparatus for controlling sound volume for vehicle, and program for the same | |
| CN110588307B (en) | Control method and device for automobile window and skylight and storage medium | |
| US9571057B2 (en) | Altering audio signals | |
| JP2015071320A (en) | Conversation support device, conversation support method, and conversation support program | |
| CN116325715A (en) | Information output apparatus and information output method | |
| KR20220054504A (en) | Vehicle and control method for the same | |
| EP4256547B1 (en) | In-cabin audio filtering | |
| CN119459513A (en) | Vehicle driving warning sound generation method, device, equipment and storage medium | |
| JP2009231928A (en) | Sound improving device and sound improving method | |
| JP2023118560A (en) | Vehicle communication device and vehicle communication method | |
| KR20170082173A (en) | In-vehicle noise reduction method and apparatus | |
| KR102865728B1 (en) | Method for controlling communication relay between a hands-free device in a vehicle and a user, and hands-free device | |
| CN120513476A (en) | Voice masking method, device and system and vehicle | |
| EP1744450A1 (en) | Electronic device | |
| JP6799615B2 (en) | Information processing device, external sound reproduction method, and program | |
| JP4867624B2 (en) | Audio output control device and vehicle navigation device | |
| JP2020024740A (en) | Vehicle imaging recording device, vehicle imaging control method, and program | |
| EP4472232A1 (en) | Earphone control method, earphone, apparatus and storage medium | |
| US20220262389A1 (en) | Method and apparatus for improving speech intelligibility in a room | |
| GB2565518A (en) | Apparatus and method for privacy enhancement |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201106 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210910 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210921 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211006 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6957362 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |