JP7768849B2 - On-vehicle device - Google Patents
On-vehicle deviceInfo
- Publication number
- JP7768849B2 JP7768849B2 JP2022103959A JP2022103959A JP7768849B2 JP 7768849 B2 JP7768849 B2 JP 7768849B2 JP 2022103959 A JP2022103959 A JP 2022103959A JP 2022103959 A JP2022103959 A JP 2022103959A JP 7768849 B2 JP7768849 B2 JP 7768849B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- voice
- user
- controller
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Time Recorders, Dirve Recorders, Access Control (AREA)
Description
開示の実施形態は、車載機、音声加工方法、および音声加工システムに関する。 The disclosed embodiments relate to an in-vehicle device, a voice processing method, and a voice processing system.
車両周辺の映像と車室内の音声とを記録するドライブレコーダなどの車載機がある。また、映像記録する際に、録音機能のオンとオフとを切替可能な車載機がある(例えば、特許文献1参照)。 There are in-vehicle devices such as drive recorders that record video of the vehicle's surroundings and audio from within the vehicle cabin. Some in-vehicle devices also allow the audio recording function to be switched on and off when recording video (see, for example, Patent Document 1).
しかしながら、車載機は、録音機能がオフされた場合、ユーザのプライバシを保護できるが、例えば、事故原因の解明に重要な車室内の音声情報を記録できない。 However, while the in-vehicle device can protect the user's privacy when the recording function is turned off, it cannot record audio information inside the vehicle, which is important for determining the cause of an accident, for example.
実施形態の一態様は、上記に鑑みてなされたものであって、ユーザのプライバシを保護しつつ、重要な車室内の音声を記録できる車載機、音声加工方法、および音声加工システムを提供することを目的とする。 One aspect of the embodiment has been made in consideration of the above, and aims to provide an in-vehicle device, audio processing method, and audio processing system that can record important in-vehicle audio while protecting the user's privacy.
実施形態の一態様に係る車載機は、コントローラを備える。前記コントローラは、車内音声と、車外が撮影された車外映像とを取得する。前記コントローラは、前記車内音声から、予め登録されたユーザの音声を検出する。前記コントローラは、前記車内音声のうち、検出した前記ユーザの音声を加工処理する。前記コントローラは、前記ユーザの音声が加工された車内加工音声と、前記車外映像とをストレージに記録する。 An in-vehicle device according to one aspect of the embodiment includes a controller. The controller acquires in-vehicle audio and an outside-vehicle video captured outside the vehicle. The controller detects a pre-registered user's voice from the in-vehicle audio . The controller processes the detected user's voice from the in-vehicle audio. The controller records the processed in-vehicle audio, which is the processed user's voice, and the outside-vehicle video in a storage device.
実施形態の一態様に係る車載機は、ユーザのプライバシを保護しつつ、重要な車室内の音声を記録できるという効果を奏する。 The vehicle-mounted device according to one aspect of the embodiment has an effect of being able to record important sounds inside the vehicle cabin while protecting the privacy of the user.
以下、添付図面を参照して、車載機、音声加工方法、および音声加工システムの実施形態を詳細に説明する。なお、以下に示す実施形態によりこの発明が限定されるものではない。実施形態に係る車載機は、車両に搭載され、車両周辺の映像(以下、「車外映像」と記載する)を撮像して記録し、車室内の音声(以下、「車内音声」と記載する)を集音して記録するドライブレコーダである。 Embodiments of an in-vehicle device, audio processing method, and audio processing system will be described in detail below with reference to the accompanying drawings. Note that the present invention is not limited to the embodiments described below. The in-vehicle device according to the embodiments is a drive recorder that is mounted on a vehicle and captures and records images of the area around the vehicle (hereinafter referred to as "exterior vehicle images") and collects and records audio from within the vehicle cabin (hereinafter referred to as "in-vehicle audio").
[1.車載機の構成例]
まず、図1を参照して、実施形態に係る車載機1の構成例について説明する。図1は、実施形態に係る車載機1の構成例を示す説明図である。
[1. Configuration example of in-vehicle device]
First, a configuration example of an in-vehicle device 1 according to an embodiment will be described with reference to Fig. 1. Fig. 1 is an explanatory diagram showing a configuration example of an in-vehicle device 1 according to an embodiment.
図1に示すように、車載機1は、カメラ20,21と、センサ22と、マイク23と、コントローラ3と、ストレージ4とを含む。カメラ20は、車室内の映像(以下、「車内映像50」と記載する)を撮像する撮像装置である。カメラ21は、車外映像51を撮像する撮像装置である。センサ22は、車載機1が搭載される車両に加わる衝撃を検知する検知装置である。マイク23は、車内音声52を集音する集音装置である。 As shown in FIG. 1, the vehicle-mounted device 1 includes cameras 20 and 21, a sensor 22, a microphone 23, a controller 3, and a storage 4. The camera 20 is an imaging device that captures video of the interior of the vehicle (hereinafter referred to as "in-vehicle video 50"). The camera 21 is an imaging device that captures video of the exterior of the vehicle 51. The sensor 22 is a detection device that detects an impact applied to the vehicle in which the vehicle-mounted device 1 is installed. The microphone 23 is a sound collection device that collects in-vehicle audio 52.
コントローラ3は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)などを有するマイクロコンピュータや各種の回路を含む。コントローラ3は、CPUがROMに記憶されたプログラムを、RAMを作業領域として使用して実行することにより車載機1全体の動作を制御する。 The controller 3 includes a microcomputer with a CPU (Central Processing Unit), ROM (Read Only Memory), RAM (Random Access Memory), and various other circuits. The controller 3 controls the overall operation of the vehicle-mounted device 1 by having the CPU execute programs stored in the ROM using the RAM as a working area.
なお、コントローラ3は、一部または全部がASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等のハードウェアで構成されてもよい。 The controller 3 may be partially or entirely configured using hardware such as an ASIC (Application Specific Integrated Circuit) or FPGA (Field Programmable Gate Array).
ストレージ4は、例えば、データフラッシュ等の情報記憶デバイスであり、車内映像50と、車外映像51と、車内音声52と、ユーザ情報53とを記憶する。ユーザ情報53は、音声情報54と、顔画像55とを含む。音声情報54は、予め登録される車載機1のユーザ10の声の情報である。音声情報54は、例えば、ユーザ10の声紋情報および声の周波数情報などを含む。顔画像55は、ユーザ10の顔の画像である。 Storage 4 is an information storage device such as a data flash, and stores in-vehicle video 50, outside-vehicle video 51, in-vehicle audio 52, and user information 53. User information 53 includes voice information 54 and a facial image 55. Voice information 54 is pre-registered voice information of user 10 of in-vehicle device 1. Voice information 54 includes, for example, voiceprint information and voice frequency information of user 10. Facial image 55 is an image of the face of user 10.
ユーザ10は、例えば、スマートフォンなどの端末装置(以下、「ユーザ端末11」と記載する)にインストールされた所定のアプリケーションプログラム(以下、「アプリ」と記載する)を利用して、自身の声を録音し、自身の顔画像55を撮像して、ユーザ端末11から車載機1へ送信できる。コントローラ3は、ユーザ端末11から受信するユーザ情報53をストレージ4に記憶して登録する。 Using a specific application program (hereinafter referred to as "app") installed on a terminal device such as a smartphone (hereinafter referred to as "user terminal 11"), the user 10 can record their own voice and capture an image 55 of their face, which can then be sent from the user terminal 11 to the in-vehicle device 1. The controller 3 stores and registers the user information 53 received from the user terminal 11 in the storage 4.
コントローラ3は、車載機1が起動されると、カメラ20から入力される車内映像50、カメラ21から入力される車外映像51、およびマイク23から入力される車内音声52をストレージ4に記録する。コントローラ3は、所定時間(例えば、2時間)おきに、車外映像51および車内音声52をストレージ4に上書き保存して記録する。 When the vehicle-mounted device 1 is started, the controller 3 records the in-vehicle image 50 input from the camera 20, the outside-vehicle image 51 input from the camera 21, and the in-vehicle audio 52 input from the microphone 23 in the storage 4. The controller 3 overwrites and records the outside-vehicle image 51 and the in-vehicle audio 52 in the storage 4 every predetermined time (for example, every two hours).
コントローラ3は、音声出力トリガが発動された場合に、車外映像51および車内音声52を出力する。車載機1は、例えば、ユーザ端末11のアプリから記録音声の出力要求を受信した場合に、音声出力トリガを発動する。車載機1は、例えば、図示しない操作部に対して所定の出力操作が行われた場合に、音声出力トリガを発動するように構成されてもよい。 When an audio output trigger is activated, the controller 3 outputs an outside-vehicle image 51 and an inside-vehicle audio 52. The in-vehicle device 1 activates the audio output trigger, for example, when it receives a request to output recorded audio from an app on the user terminal 11. The in-vehicle device 1 may also be configured to activate the audio output trigger, for example, when a predetermined output operation is performed on an operation unit (not shown).
このように、車載機1は、車外映像51および車内音声52を記録して出力することによって、例えば、車両事故が発生した場合に、記録した車外映像51および車内音声52を出力することによって、事故原因の解明に寄与することができる。 In this way, by recording and outputting the outside-vehicle video 51 and the inside-vehicle audio 52, the in-vehicle device 1 can contribute to clarifying the cause of a vehicle accident, for example, by outputting the recorded outside-vehicle video 51 and inside-vehicle audio 52 in the event of a vehicle accident.
ただし、車載機のユーザ10によっては、プライバシ保護の観点から車内音声52が第3者に聞かれることを望まない場合がある。このため、録音機能をオフすることができる車載機がある。しかしながら、車載機は、録音機能がオフされると、事故原因の解明に重要な車室内の会話以外の音声情報54を記録できない。 However, some in-vehicle device users 10 may not want in-vehicle audio 52 to be heard by third parties for privacy reasons. For this reason, some in-vehicle devices allow the recording function to be turned off. However, when the recording function is turned off, the in-vehicle device cannot record audio information 54 other than conversations within the vehicle cabin, which is important for determining the cause of the accident.
そこで、実施形態に係る車載機1は、ユーザ10のプライバシを保護しつつ、重要な車内音声52を記録できる構成を備える。具体的には、車載機1のコントローラ3は、車内音声52を記録し、記録した車内音声52から予め登録されるユーザ10の音声情報54に対応するユーザ10の音声を検出する。そして、コントローラ3は、検出したユーザ10の音声を加工する。 The in-vehicle device 1 according to the embodiment is therefore configured to record important in-vehicle audio 52 while protecting the privacy of the user 10. Specifically, the controller 3 of the in-vehicle device 1 records the in-vehicle audio 52 and detects the voice of the user 10 from the recorded in-vehicle audio 52 that corresponds to the voice information 54 of the user 10 that has been registered in advance. The controller 3 then processes the detected voice of the user 10.
車載機1によれば、コントローラ3は、記録したユーザ10の音声を加工し、音声からユーザ10を特定できなくすることによって、ユーザ10のプライバシを保護しつつ、重要な車内音声52を記録できる。 With the vehicle-mounted device 1, the controller 3 processes the recorded voice of the user 10 to make it impossible to identify the user 10 from the voice, thereby protecting the privacy of the user 10 while recording important in-vehicle voice 52.
このとき、コントローラ3は、検出したユーザ10の音声が消去されるように、ユーザ10の音声を加工する。例えば、コントローラ3は、車内音声52と、ユーザ10の発話音声の逆位相音とを合成することによって、車内音声52からユーザ10の音声を消去する。これにより、車載機1は、ユーザ10の音声以外の車内音声52を記録できるので、ユーザ10のプライバシを確実に保護しつつ、重要な車内音声52を記録できる。 At this time, the controller 3 processes the user's 10 voice so that the detected user's 10 voice is erased. For example, the controller 3 erases the user's 10 voice from the in-vehicle voice 52 by synthesizing the in-vehicle voice 52 with an antiphase sound of the user's 10 speech. This allows the vehicle-mounted device 1 to record in-vehicle voice 52 other than the user's 10 voice, thereby enabling important in-vehicle voice 52 to be recorded while reliably protecting the user's 10 privacy.
また、コントローラ3は、検出したユーザ10の音声の発話者が特定されない音声に変換されるように、ボイスチェンジ処理を行うことによって、ユーザ10の音声を加工する。これにより、車載機1は、例えば、事故発生時のユーザ10の発話内容に、事故原因解明につながる内容が含まれる場合、ユーザ10を特定させることなく、ユーザ10の発話内容を含んだ車内音声52を記録できる。したがって、車載機1によれば、ユーザ10のプライバシを確実に保護しつつ、重要な車内音声52を記録できる。 The controller 3 also processes the user's 10 voice by performing a voice change process to convert the detected user's 10 voice into a voice that does not identify the speaker. As a result, if, for example, the content of the user's 10 speech at the time of an accident includes content that can lead to the elucidation of the cause of the accident, the vehicle-mounted device 1 can record the in-vehicle voice 52 including the content of the user's 10 speech without identifying the user 10. Therefore, the vehicle-mounted device 1 can record important in-vehicle voice 52 while reliably protecting the user's 10 privacy.
また、コントローラ3は、予め登録されるユーザ10の音声情報54を記憶し、車内音声52とユーザ10の音声情報54とを照合して、車内音声52からユーザ10の音声を検出する。これにより、車載機1は、車内音声52から正確にユーザ10の音声を検出できる。 The controller 3 also stores pre-registered voice information 54 of the user 10, compares the in-vehicle voice 52 with the user 10's voice information 54, and detects the user 10's voice from the in-vehicle voice 52. This allows the vehicle-mounted device 1 to accurately detect the user 10's voice from the in-vehicle voice 52.
また、コントローラ3は、予め登録されるユーザ10の顔画像55とユーザ10の音声情報54とを対応付けてストレージ4に記憶する。そして、コントローラ3は、車内映像50とユーザ10の顔画像55とを照合(例えば、顔認証処理)し、車内映像50からユーザ10を検出した場合に、車内音声52からユーザ10の音声を検出する。これにより、車載機1は、例えば、声質が類似した乗員がいる場合であっても、車内音声52から、より確実にユーザ10の音声を検出できる。 The controller 3 also stores in the storage 4 a pre-registered facial image 55 of the user 10 in association with the user's 10 voice information 54. The controller 3 then compares the in-vehicle video 50 with the user's 10 facial image 55 (e.g., through facial recognition processing), and when the controller 3 detects the user 10 from the in-vehicle video 50, it detects the user's voice from the in-vehicle audio 52. This allows the in-vehicle device 1 to more reliably detect the user's voice from the in-vehicle audio 52, even if, for example, there is another occupant with a similar voice quality.
また、コントローラ3は、音声出力トリガが発動された場合に、ユーザ10の音声を加工した車内音声52を出力するように構成されてもよい。この場合、コントローラ3は、音声出力トリガが発動された場合に、ユーザ10の音声の加工を開始する。これにより、車載機1は、音声出力トリガが発動されなければ、ユーザ10の音声を加工しなくて済むため、コントローラ3の処理を負荷、および、音声の加工に要する消費電力を低減できる。 The controller 3 may also be configured to output in-vehicle audio 52 that is a processed version of the user's 10 voice when an audio output trigger is activated. In this case, the controller 3 starts processing the user's 10 voice when the audio output trigger is activated. This means that the vehicle-mounted device 1 does not need to process the user's 10 voice unless the audio output trigger is activated, thereby reducing the processing load on the controller 3 and the power consumption required for voice processing.
また、コントローラ3は、車載機1が起動された場合に、ユーザ10の音声の加工を開始するように構成されてもよい。これにより、車載機1は、記録した全ての車内音声52において、ユーザ10の音声の発話者を第3者に特定できないように加工できるので、ユーザ10のプライバシを確実に保護できる。 The controller 3 may also be configured to start processing the user's 10 voice when the in-vehicle device 1 is started. This allows the in-vehicle device 1 to process all recorded in-vehicle voice 52 so that the speaker of the user's 10 voice cannot be identified by a third party, thereby reliably protecting the privacy of the user 10.
また、コントローラ3は、車載機1の起動から音声記録トリガが発動されるまでの間、ユーザ10の音声が消去されるように、ユーザ10の音声を加工して車内音声52を記録するように構成されてもよい。車載機1は、例えば、車両に衝撃が加えられたことを示すセンサ22の検知結果がコントローラ3に入力された場合に、音声記録トリガを発動する。 The controller 3 may also be configured to process the user's 10 voice and record the in-vehicle voice 52 so that the user's 10 voice is erased from the time the vehicle-mounted device 1 is started until the voice recording trigger is activated. The vehicle-mounted device 1 activates the voice recording trigger, for example, when the controller 3 receives a detection result from the sensor 22 indicating that the vehicle has been impacted.
この場合、コントローラは、音声記録トリガが発動された場合に、ユーザ10の音声の発話者が特定されない音声に変換されるように、ユーザ10の音声を加工して車内音声52を記録する。 In this case, when the voice recording trigger is activated, the controller processes the voice of the user 10 and records the in-vehicle voice 52 so that the voice of the user 10 is converted into voice that does not identify the speaker.
これにより、車載機1は、例えば、車両事故の発生により音声記録トリガが発動される前であり、車内音声52の出力が要求される可能性の低い期間は、車内音声52からユーザ10の音声を消去することにより、ストレージ4の容量の使用量を低減できる。 As a result, the in-vehicle device 1 can reduce the amount of storage 4 capacity used by erasing the user's 10 voice from the in-vehicle voice 52 during a period when there is little likelihood of the in-vehicle voice 52 being requested, for example, before an audio recording trigger is activated due to the occurrence of a vehicle accident.
また、車載機1は、車両事故の発生により音声記録トリガが発動され、車内音声52の出力が要求される可能性の高い期間は、ユーザ10の音声の発話者を第3者に特定できないように加工するので、事故原因の解明に重要な会話内容については出力できる。 In addition, during the period when a voice recording trigger is activated due to a vehicle accident and output of in-vehicle voice 52 is likely to be requested, the in-vehicle device 1 processes the user's 10 voice so that the speaker cannot be identified to a third party, so that conversation content important to determining the cause of the accident can be output.
このように、車載機1によれば、事故が発生した際、衝突音や周囲の音声情報54も重要な情報として記録しつつ、車内の会話等については記録されないため、プライベート情報を記録したくないニーズを満足しつつ重要な情報については残すことが可能になる。また、車載機1によれば、車内音声52が必要な際には個人を特定しないように車内音声52を記録することができる。 In this way, when an accident occurs, the in-vehicle device 1 records collision sounds and surrounding audio information 54 as important information, but does not record conversations inside the vehicle, thereby satisfying the need to not record private information while preserving important information. Furthermore, the in-vehicle device 1 can record in-vehicle audio 52 when necessary without identifying individuals.
[2.車載機のコントローラが実行する処理]
次に、図2を参照して、実施形態に係る車載機1のコントローラ3が実行する処理について説明する。図2は、実施形態に係る車載機1のコントローラ3が実行する処理の一例を示すフローチャートである。
[2. Processing Executed by the In-Vehicle Controller]
Next, a process executed by the controller 3 of the vehicle-mounted device 1 according to the embodiment will be described with reference to Fig. 2. Fig. 2 is a flowchart showing an example of a process executed by the controller 3 of the vehicle-mounted device 1 according to the embodiment.
コントローラ3は、起動されている間、図2に示す処理を繰り返し実行する。具体的には、図2に示すように、コントローラ3は、車載機1が起動されると、まず、ユーザ情報53の入力があるか否かを判定する(ステップS101)。 While the controller 3 is running, it repeatedly executes the process shown in Figure 2. Specifically, as shown in Figure 2, when the vehicle-mounted device 1 is started, the controller 3 first determines whether user information 53 has been input (step S101).
このとき、コントローラ3は、マイク23またはユーザ端末11のアプリから、ユーザ10の音声情報54の入力があるか否かを判定する。また、コントローラ3は、車室内を撮像するカメラ20またはユーザ端末11のアプリから、ユーザ10の顔画像55の入力があるか否かを判定する。コントローラ3は、ユーザ情報53の入力がないと判定した場合(ステップS101,No)、処理をステップS103に移す。 At this time, the controller 3 determines whether or not voice information 54 of the user 10 has been input from the microphone 23 or an app on the user terminal 11. The controller 3 also determines whether or not a facial image 55 of the user 10 has been input from the camera 20 capturing images of the interior of the vehicle or an app on the user terminal 11. If the controller 3 determines that user information 53 has not been input (step S101, No), it proceeds to step S103.
コントローラ3は、ユーザ情報53の入力があると判定した場合(ステップS101,Yes)、ストレージ4にユーザ情報53を登録する(ステップS102)。例えば、コントローラ3は、ユーザ10の音声情報54および顔画像55をストレージ4に記憶することによって、ユーザ情報53を登録する。 If the controller 3 determines that user information 53 has been input (step S101, Yes), it registers the user information 53 in the storage 4 (step S102). For example, the controller 3 registers the user information 53 by storing the user's 10 voice information 54 and facial image 55 in the storage 4.
その後、コントローラ3は、カメラ21によって撮像される車外映像51およびマイク23によって集音される車内音声52をストレージ4に記録する(ステップS103)。続いて、コントローラ3は、ストレージ4に登録済みのユーザ情報53があるか否かを判定する(ステップS104)。コントローラ3は、登録済みのユーザ情報53がないと判定した場合(ステップS104,No)、今回の処理を終了する。 Then, the controller 3 records the vehicle exterior image 51 captured by the camera 21 and the vehicle interior sound 52 collected by the microphone 23 in the storage 4 (step S103). Next, the controller 3 determines whether or not there is registered user information 53 in the storage 4 (step S104). If the controller 3 determines that there is no registered user information 53 (step S104, No), it ends the current processing.
コントローラ3は、登録済みのユーザ情報53があると判定した場合(ステップS104,Yes)、記録した車内音声52から予め登録されるユーザ10の音声情報54に対応するユーザ10の音声を検出する(ステップS105)。 If the controller 3 determines that registered user information 53 exists (step S104, Yes), it detects the voice of the user 10 from the recorded in-vehicle voice 52 that corresponds to the pre-registered voice information 54 of the user 10 (step S105).
このとき、コントローラ3は、例えば、車内音声52とユーザ10の音声情報54とを照合して、車内音声52からユーザ10の音声を検出する。また、コントローラ3は、車室内を撮像するカメラ20によって撮像される車内映像50とユーザ10の顔画像55とを照合し、車内映像50からユーザ10を検出した場合に、車内音声52からユーザ10の音声を検出するように構成されてもよい。 At this time, the controller 3 may, for example, compare the in-vehicle audio 52 with the user's 10 audio information 54 and detect the user's 10 audio from the in-vehicle audio 52. The controller 3 may also be configured to compare the in-vehicle video 50 captured by the camera 20 capturing the interior of the vehicle with the user's 10 facial image 55, and, if the controller 3 detects the user 10 from the in-vehicle video 50, detect the user's 10 audio from the in-vehicle audio 52.
続いて、コントローラ3は、検出したユーザ10の音声を加工する(ステップS106)。このように、コントローラ3は、車載機1が起動された場合に、ユーザ10の音声の加工を開始する。 The controller 3 then processes the detected voice of the user 10 (step S106). In this way, the controller 3 begins processing the voice of the user 10 when the vehicle-mounted device 1 is started.
このとき、コントローラ3は、ユーザ10の音声が消去されるように、ユーザ10の音声を加工する。または、コントローラ3は、ユーザ10の音声の発話者が特定されない音声に変換されるように、ユーザ10の音声を加工する。 At this time, the controller 3 processes the user's 10 voice so that the user's 10 voice is erased. Alternatively, the controller 3 processes the user's 10 voice so that the user's 10 voice is converted into voice that does not identify the speaker of the user's 10 voice.
その後、コントローラ3は、ユーザ10の音声を加工した車内音声52をストレージ4に記録し(ステップS107)、音声出力トリガが発動されたか否かを判定する(ステップS108)。 The controller 3 then records the in-vehicle voice 52, which is the processed voice of the user 10, in the storage 4 (step S107) and determines whether the voice output trigger has been activated (step S108).
車載機1は、例えば、ユーザ端末11のアプリから記録音声の出力要求を受信した場合に、音声出力トリガを発動する。車載機1は、例えば、図示しない操作部に対して所定の出力操作が行われた場合に、音声出力トリガを発動するように構成されてもよい。 The in-vehicle device 1 activates an audio output trigger, for example, when it receives a request to output recorded audio from an app on the user terminal 11. The in-vehicle device 1 may also be configured to activate an audio output trigger, for example, when a predetermined output operation is performed on an operation unit (not shown).
コントローラ3は、音声出力トリガが発動されていないと判定した場合(ステップS108,No)、今回の処理を終了する。コントローラ3は、音声出力トリガが発動されたと判定した場合(ステップS108,Yes)、ユーザ10の音声を加工した車内音声52を出力し(ステップS109)、今回の処理を終了する。 If the controller 3 determines that the audio output trigger has not been activated (step S108, No), it ends the current processing. If the controller 3 determines that the audio output trigger has been activated (step S108, Yes), it outputs in-vehicle audio 52, which is a processed version of the user's 10 voice (step S109), and ends the current processing.
このとき、コントローラ3は、車内音声52と合わせて、車外映像51を出力する。コントローラ3は、例えば、情報収集センタに設けられるセンタ装置12へ無線通信によって車外映像51および車内音声52を出力する。コントローラ3は、例えば、外付けの情報記憶媒体に車外映像51および車内音声52を出力するように構成されてもよい。 At this time, the controller 3 outputs the outside-vehicle image 51 along with the inside-vehicle audio 52. The controller 3 outputs the outside-vehicle image 51 and the inside-vehicle audio 52 via wireless communication to a center device 12 provided at an information collection center, for example. The controller 3 may also be configured to output the outside-vehicle image 51 and the inside-vehicle audio 52 to an external information storage medium, for example.
[3.車載機のコントローラが実行する処理の変形例]
次に、図3を参照して、実施形態に係る車載機1のコントローラ3が実行する処理の変形例について説明する。図3は、実施形態に係る車載機1のコントローラ3が実行する処理の変形例を示すフローチャートである。
3. Modification of the process executed by the controller of the vehicle-mounted device
Next, a modified example of the process executed by the controller 3 of the vehicle-mounted device 1 according to the embodiment will be described with reference to Fig. 3. Fig. 3 is a flowchart showing a modified example of the process executed by the controller 3 of the vehicle-mounted device 1 according to the embodiment.
コントローラ3は、図2に示す処理に代えて、図3に示す処理を実行するように構成されてもよい。この場合、コントローラ3は、起動されている間、図3示す処理を繰り返し実行する。図3に示すように、コントローラ3は、車載機1が起動されると、まず、ユーザ情報53の入力があるか否かを判定する(ステップS201)。 The controller 3 may be configured to execute the process shown in FIG. 3 instead of the process shown in FIG. 2. In this case, the controller 3 repeatedly executes the process shown in FIG. 3 while it is running. As shown in FIG. 3, when the vehicle-mounted device 1 is started, the controller 3 first determines whether user information 53 has been input (step S201).
このとき、コントローラ3は、マイク23またはユーザ端末11のアプリから、ユーザ10の音声情報54の入力があるか否かを判定する。また、コントローラ3は、車室内を撮像するカメラ20またはユーザ端末11のアプリから、ユーザ10の顔画像55の入力があるか否かを判定する。コントローラ3は、ユーザ情報53の入力がないと判定した場合(ステップS201,No)、処理をステップS203に移す。 At this time, the controller 3 determines whether or not voice information 54 of the user 10 has been input from the microphone 23 or an application on the user terminal 11. The controller 3 also determines whether or not a facial image 55 of the user 10 has been input from the camera 20 capturing images of the interior of the vehicle or an application on the user terminal 11. If the controller 3 determines that user information 53 has not been input (step S201, No), it proceeds to step S203.
コントローラ3は、ユーザ情報53の入力があると判定した場合(ステップS201,Yes)、ストレージ4にユーザ情報53を登録する(ステップS202)。例えば、コントローラ3は、ユーザ10の音声情報54および顔画像55をストレージ4に記憶することによって、ユーザ情報53を登録する。 If the controller 3 determines that user information 53 has been input (Yes in step S201), it registers the user information 53 in the storage 4 (step S202). For example, the controller 3 registers the user information 53 by storing the voice information 54 and facial image 55 of the user 10 in the storage 4.
その後、コントローラ3は、カメラ21によって撮像される車外映像51およびマイク23によって集音される車内音声52をストレージ4に記録する(ステップS203)。続いて、コントローラ3は、ストレージ4に登録済みのユーザ情報53があるか否かを判定する(ステップS204)。コントローラ3は、登録済みのユーザ情報53がないと判定した場合(ステップS204,No)、今回の処理を終了する。 Then, the controller 3 records the vehicle exterior image 51 captured by the camera 21 and the vehicle interior sound 52 collected by the microphone 23 in the storage 4 (step S203). Next, the controller 3 determines whether or not there is registered user information 53 in the storage 4 (step S204). If the controller 3 determines that there is no registered user information 53 (step S204, No), it ends the current processing.
コントローラ3は、登録済みのユーザ情報53があると判定した場合(ステップS204,Yes)、記録した車内音声52から予め登録されるユーザ10の音声情報54に対応するユーザ10の音声を検出する(ステップS205)。 If the controller 3 determines that registered user information 53 exists (step S204, Yes), it detects the voice of the user 10 from the recorded in-vehicle voice 52 that corresponds to the pre-registered voice information 54 of the user 10 (step S205).
このとき、コントローラ3は、例えば、車内音声52とユーザ10の音声情報54とを照合して、車内音声52からユーザ10の音声を検出する。また、コントローラ3は、車室内を撮像するカメラ20によって撮像される車内映像50とユーザ10の顔画像55とを照合し、車内映像50からユーザ10を検出した場合に、車内音声52からユーザ10の音声を検出するように構成されてもよい。 At this time, the controller 3 may, for example, compare the in-vehicle audio 52 with the user's 10 audio information 54 and detect the user's 10 audio from the in-vehicle audio 52. The controller 3 may also be configured to compare the in-vehicle video 50 captured by the camera 20 capturing the interior of the vehicle with the user's 10 facial image 55, and, if the controller 3 detects the user 10 from the in-vehicle video 50, detect the user's 10 audio from the in-vehicle audio 52.
続いて、コントローラ3は、ユーザ10の音声が消去されるように、ユーザ10の音声を加工する。そして、コントローラ3は、ユーザ10の音声が消去された車内音声52をストレージ4に記録する(ステップS206)。 Next, the controller 3 processes the user's 10 voice so that the user's 10 voice is erased. The controller 3 then records the in-vehicle voice 52 from which the user's 10 voice has been erased in the storage 4 (step S206).
その後、コントローラ3は、音声記録トリガが発動されたか否かを判定する(ステップS207)。車載機1は、例えば、車両に衝撃が加えられたことを示すセンサ22の検知結果がコントローラ3に入力された場合に、音声記録トリガを発動する。 The controller 3 then determines whether the voice recording trigger has been activated (step S207). The vehicle-mounted device 1 activates the voice recording trigger, for example, when the controller 3 receives a detection result from the sensor 22 indicating that an impact has been applied to the vehicle.
コントローラ3は、音声記録トリガが発動されていないと判定した場合(ステップS207,No)、処理をステップS203へ移す。このように、コントローラ3は、車載機1の起動から音声記録トリガが発動されるまでの間、ユーザ10の音声が消去されるように、ユーザ10の音声を加工して車内音声52を記録する。 If the controller 3 determines that the voice recording trigger has not been activated (step S207, No), it proceeds to step S203. In this way, the controller 3 processes the voice of the user 10 and records the in-vehicle voice 52 so that the voice of the user 10 is erased from the time the in-vehicle device 1 is started until the voice recording trigger is activated.
また、コントローラ3は、音声記録トリガが発動されたと判定した場合(ステップS207,Yes)、ユーザ10の音声の発話者が特定されない音声に変換されるように、ユーザ10の音声を加工する。そして、コントローラ3は、ユーザ10の音声が変換された車内音声52をストレージ4に記録する(ステップS208)。このように、コントローラ3は、音声記録トリガが発動された場合に、ユーザ10の音声の加工を開始する。 Furthermore, when the controller 3 determines that the voice recording trigger has been activated (step S207, Yes), it processes the voice of the user 10 so that the voice of the user 10 is converted into voice that does not identify the speaker of the voice of the user 10. Then, the controller 3 records the in-vehicle voice 52 into which the voice of the user 10 has been converted in the storage 4 (step S208). In this way, the controller 3 starts processing the voice of the user 10 when the voice recording trigger is activated.
その後、コントローラ3は、音声出力トリガが発動されたか否かを判定する(ステップS209)。車載機1は、例えば、ユーザ端末11のアプリから記録音声の出力要求を受信した場合に、音声出力トリガを発動する。車載機1は、例えば、図示しない操作部に対して所定の出力操作が行われた場合に、音声出力トリガを発動するように構成されてもよい。 The controller 3 then determines whether an audio output trigger has been activated (step S209). The vehicle-mounted device 1 activates the audio output trigger, for example, when it receives a request to output recorded audio from an app on the user terminal 11. The vehicle-mounted device 1 may also be configured to activate the audio output trigger, for example, when a predetermined output operation is performed on an operation unit (not shown).
コントローラ3は、音声出力トリガが発動されていないと判定した場合(ステップS209,No)、今回の処理を終了する。コントローラ3は、音声出力トリガが発動されたと判定した場合(ステップS209,Yes)、ユーザ10の音声を加工した車内音声52を出力し(ステップS210)、今回の処理を終了する。 If the controller 3 determines that the audio output trigger has not been activated (step S209, No), it ends the current processing. If the controller 3 determines that the audio output trigger has been activated (step S209, Yes), it outputs in-vehicle audio 52, which is a processed version of the user's 10 voice (step S210), and ends the current processing.
このとき、コントローラ3は、車内音声52と合わせて、車外映像51を出力する。コントローラ3は、例えば、情報収集センタに設けられるセンタ装置12へ無線通信によって車外映像51および車内音声52を出力する。コントローラ3は、例えば、外付けの情報記憶媒体に車外映像51および車内音声52を出力するように構成されてもよい。 At this time, the controller 3 outputs the outside-vehicle image 51 along with the inside-vehicle audio 52. The controller 3 outputs the outside-vehicle image 51 and the inside-vehicle audio 52 via wireless communication to a center device 12 provided at an information collection center, for example. The controller 3 may also be configured to output the outside-vehicle image 51 and the inside-vehicle audio 52 to an external information storage medium, for example.
[4.音声加工システムの構成例]
次に、図4を参照して、実施形態に係る音声加工システム100の構成例について説明する。図4は、実施形態に係る音声加工システム100の構成例を示す説明図である。
[4. Example of voice processing system configuration]
Next, a configuration example of the voice processing system 100 according to the embodiment will be described with reference to Fig. 4. Fig. 4 is an explanatory diagram showing a configuration example of the voice processing system 100 according to the embodiment.
図4に示すように、音声加工システム100は、車載機1に加えて、情報収集センタに設けられるセンタ装置12を含む。センタ装置12は、CPU、ROM、RAMなどを有するマイクロコンピュータや各種の回路を含む。センタ装置12は、車載機1との無線通信が可能である。また、センタ装置12は、ユーザ端末11との無線通信が可能である。 As shown in FIG. 4, the voice processing system 100 includes, in addition to the vehicle-mounted device 1, a center device 12 installed in an information collection center. The center device 12 includes a microcomputer having a CPU, ROM, RAM, etc., and various circuits. The center device 12 is capable of wireless communication with the vehicle-mounted device 1. The center device 12 is also capable of wireless communication with the user terminal 11.
センタ装置12は、ストレージ13を備える。センタ装置12は、予め登録されるユーザ10のユーザ情報53をストレージ13に記憶する。ユーザ10は、ユーザ端末11にインストールされた所定のアプリを利用して、自身の声を録音し、自身の顔画像55を撮像して、ユーザ端末11からセンタ装置12へ送信できる。 The center device 12 includes a storage 13. The center device 12 stores user information 53 of pre-registered users 10 in the storage 13. Using a specific application installed on the user terminal 11, the user 10 can record their own voice and capture an image 55 of their face, which can then be sent from the user terminal 11 to the center device 12.
また、ユーザ10は、アプリを利用して、使用する車両の車両情報56をユーザ端末11からセンタ装置12へ送信できる。車両情報56は、車両のナンバープレート番号、車体番号、および車両の予め設定されるIDなどである。 In addition, the user 10 can use the app to send vehicle information 56 of the vehicle they are using from the user terminal 11 to the center device 12. The vehicle information 56 includes the vehicle's license plate number, chassis number, and the vehicle's preset ID.
センタ装置12は、ユーザ端末11から受信するユーザ10の音声情報54、顔画像55、および車両情報56をストレージ13に記憶して登録する。センタ装置12は、ストレージ13に登録したユーザ10の音声情報54、顔画像55を含むユーザ情報53を車載機1に送信する。 The center device 12 stores and registers the voice information 54, facial image 55, and vehicle information 56 of the user 10 received from the user terminal 11 in the storage 13. The center device 12 transmits the user information 53, including the voice information 54 and facial image 55 of the user 10 registered in the storage 13, to the vehicle-mounted device 1.
車載機1は、車内音声52を記録し、記録した車内音声52から、センタ装置12から受信するユーザ10の音声情報54に対応するユーザ10の音声を検出する。そして、車載機1は、図1に示す車載機1と同様に、検出したユーザ10の音声を加工する。 The vehicle-mounted device 1 records in-vehicle voice 52 and detects, from the recorded in-vehicle voice 52, the voice of the user 10 that corresponds to the voice information 54 of the user 10 received from the center device 12. The vehicle-mounted device 1 then processes the detected voice of the user 10, similar to the vehicle-mounted device 1 shown in Figure 1.
音声加工システム100によれば、車載機1は、記録したユーザ10の音声を加工し、音声からユーザ10を特定できなくすることによって、ユーザ10のプライバシを保護しつつ、重要な車内音声52を記録できる。 With the voice processing system 100, the vehicle-mounted device 1 processes the recorded voice of the user 10 to make it impossible to identify the user 10 from the voice, thereby protecting the privacy of the user 10 while recording important in-vehicle voice 52.
また、センタ装置12は、車載機1から乗員情報を受信した場合に、乗員情報に対応するユーザ10の音声情報54を車載機1に送信する。音声情報54を受信した車載機1は、図1に示す車載機1と同様に、記録する車内音声52から検出したユーザ10の音声を加工する。 Furthermore, when the center device 12 receives occupant information from the vehicle-mounted device 1, it transmits voice information 54 of the user 10 corresponding to the occupant information to the vehicle-mounted device 1. The vehicle-mounted device 1 that receives the voice information 54 processes the voice of the user 10 detected from the recorded in-vehicle voice 52, similar to the vehicle-mounted device 1 shown in Figure 1.
これにより、ユーザ10は、例えば、レンタカーやカーシェアリングの車両など、初めて利用する車両であっても、センタ装置12から利用する車両の車載機1に自身の音声情報54を送信してもらうことにより、車載機1に記憶される自身の音声の発話者を特定できなくすることができる。 As a result, even if the user 10 is using a vehicle for the first time, such as a rental car or car sharing vehicle, the center device 12 can send the user's own voice information 54 to the vehicle-mounted device 1 of the vehicle they are using, making it impossible to identify the speaker of the user's own voice stored in the vehicle-mounted device 1.
[5.センタ装置のコントローラが実行する処理]
次に、図5を参照して、実施形態に係るセンタ装置12が実行する処理について説明する。図5は、実施形態に係るセンタ装置12が実行する処理の一例を示すフローチャートである。
5. Processing Executed by the Controller of the Center Device
Next, a process executed by the center device 12 according to the embodiment will be described with reference to Fig. 5. Fig. 5 is a flowchart showing an example of a process executed by the center device 12 according to the embodiment.
センタ装置12は、電源がオンの期間に、図5に示す処理を繰り返し実行する。具体的には、センタ装置12は、電源がオンにされると、まず、ユーザ情報53の入力があるか否かを判定する(ステップS301)。 The center device 12 repeatedly executes the process shown in Figure 5 while the power is on. Specifically, when the center device 12 is turned on, it first determines whether user information 53 has been input (step S301).
このとき、センタ装置12は、車載機1またはユーザ端末11のアプリから、ユーザ10の音声情報54の入力があるか否かを判定する。また、コントローラ3は、車載機1またはユーザ端末11のアプリから、ユーザ10の顔画像55の入力があるか否かを判定する。 At this time, the center device 12 determines whether voice information 54 of the user 10 has been input from the in-vehicle device 1 or the app on the user terminal 11. The controller 3 also determines whether a facial image 55 of the user 10 has been input from the in-vehicle device 1 or the app on the user terminal 11.
さらに、センタ装置12は、車載機1またはユーザ端末11のアプリから、車載機1が搭載された車両情報56が入力されたか否かを判定する。車両情報56は、車両のナンバープレート番号、車体番号、および車両の予め設定されるIDなどである。 Furthermore, the center device 12 determines whether vehicle information 56 on which the onboard device 1 is installed has been input from the onboard device 1 or an app on the user terminal 11. The vehicle information 56 includes the vehicle's license plate number, chassis number, and the vehicle's preset ID, etc.
センタ装置12は、ユーザ情報53の入力がないと判定した場合(ステップS301,No)、処理をステップS305へ移す。また、センタ装置12は、ユーザ情報53の入力があると判定した場合(ステップS301,Yes)、入力されたユーザ情報53をストレージ13に記憶して登録する(ステップS302)。 If the center device 12 determines that user information 53 has not been input (step S301, No), it proceeds to step S305. If the center device 12 determines that user information 53 has been input (step S301, Yes), it stores and registers the input user information 53 in the storage 13 (step S302).
その後、センタ装置12は、ユーザ端末11のアプリからのユーザ情報53の入力か否かを判定する(ステップS303)。センタ装置12は、アプリからのユーザ情報53の入力でないと判定した場合(ステップS303,No)、処理をステップS305へ移す。 Then, the center device 12 determines whether the user information 53 has been input from an app on the user terminal 11 (step S303). If the center device 12 determines that the user information 53 has not been input from an app (step S303, No), the center device 12 proceeds to step S305.
また、センタ装置12は、アプリからのユーザ情報53の入力であると判定した場合(ステップS303,Yes)、ユーザ10の車載機1へユーザ10の音声情報54を送信し(ステップS304)、今回の処理を終了する。 Furthermore, if the center device 12 determines that the user information 53 has been input from an app (step S303, Yes), it transmits the user's 10 voice information 54 to the user's 10 vehicle-mounted device 1 (step S304) and terminates this processing.
また、ステップS305において、センタ装置12は、車載機1から乗員情報を受信したか否かを判定する。乗員情報は、例えば、車載機1が搭載された車両の使用者の音声情報54、使用者の顔画像55、または車両情報56である。 Furthermore, in step S305, the center device 12 determines whether occupant information has been received from the vehicle-mounted device 1. The occupant information may be, for example, voice information 54 of the user of the vehicle in which the vehicle-mounted device 1 is installed, a facial image 55 of the user, or vehicle information 56.
センタ装置12は、車両情報56を受信していないと判定した場合(ステップS305,No)、今回の処理を終了する。また、センタ装置12は、車両情報56を受信したと判定した場合(ステップS305,Yes)、乗員情報に対応するユーザ10の音声情報54を車載機1へ装置し(ステップS306)、今回の処理を終了する。 If the center device 12 determines that it has not received the vehicle information 56 (step S305, No), it terminates this processing. If the center device 12 determines that it has received the vehicle information 56 (step S305, Yes), it transmits the user 10's voice information 54 corresponding to the occupant information to the vehicle-mounted device 1 (step S306), and terminates this processing.
なお、音声加工システム100における車載機1のコントローラ3は、図2または図3に示した処理と同様の処理を実行する。ただし、この場合、車載機1のコントローラ3は、図2に示すステップS101、図3に示すステップS201において、マイク23、ユーザ端末11のアプリ、またはセンタ装置12から、ユーザ10の音声情報54の入力があるか否かを判定する。車載機1のコントローラ3は、車室内を撮像するカメラ20、ユーザ端末11のアプリ、またはセンタ装置12から、ユーザ10の顔画像55の入力があるか否かを判定する。 The controller 3 of the vehicle-mounted device 1 in the voice processing system 100 executes the same processing as that shown in FIG. 2 or FIG. 3. However, in this case, in step S101 shown in FIG. 2 and step S201 shown in FIG. 3, the controller 3 of the vehicle-mounted device 1 determines whether voice information 54 of the user 10 has been input from the microphone 23, an app on the user terminal 11, or the center device 12. The controller 3 of the vehicle-mounted device 1 determines whether a facial image 55 of the user 10 has been input from the camera 20 capturing images of the interior of the vehicle, an app on the user terminal 11, or the center device 12.
[6.付記]
付記として、本発明の特徴を以下の通り示す。
(1)
車室内の音声から予め登録されるユーザの音声情報に対応する前記ユーザの音声を検出し、
検出した前記ユーザの音声を加工するコントローラ
を備える車載機。
(2)
前記コントローラは、
検出した前記ユーザの音声が消去されるように、前記ユーザの音声を加工する
前記(1)に記載の車載機。
(3)
前記コントローラは、
検出した前記ユーザの音声の発話者が特定されない音声に変換されるように、前記ユーザの音声を加工する
前記(1)に記載の車載機。
(4)
前記コントローラは、
前記予め登録されるユーザの音声情報を記憶し、
前記車室内の音声と前記ユーザの音声情報とを照合して、前記車室内の音声から前記ユーザの音声を検出する
前記(1)~(3)のいずれか一つに記載の車載機。
(5)
前記コントローラは、
前記予め登録されるユーザの顔画像と前記ユーザの音声情報とを対応付けて記憶し、
車室内を撮像するカメラによって撮像される車室内の映像と前記ユーザの顔画像とを照合し、前記車室内の映像から前記ユーザを検出した場合に、前記車室内の音声から前記ユーザの音声を検出する
前記(4)に記載の車載機。
(6)
前記コントローラは、
音声出力トリガが発動された場合に、前記ユーザの音声を加工した前記車室内の音声を出力する
前記(1)~(5)のいずれか一つに記載の車載機。
(7)
前記コントローラは、
前記音声出力トリガが発動された場合に、前記ユーザの音声の加工を開始する
前記(6)に記載の車載機。
(8)
前記コントローラは、
起動された場合に、前記ユーザの音声の加工を開始する
前記(6)に記載の車載機。
(9)
前記コントローラは、
起動から音声記録トリガが発動されるまでの間、前記ユーザの音声が消去されるように、前記ユーザの音声を加工して前記車室内の音声を記録し、
前記音声記録トリガが発動された場合に、前記ユーザの音声の発話者が特定されない音声に変換されるように、前記ユーザの音声を加工して前記車室内の音声を記録する
前記(1)~(6)のいずれか一つに記載の車載機。
(10)
車載機のコントローラが実行する音声加工方法であって、
車室内の音声から予め登録されるユーザの音声情報に対応する前記ユーザの音声を検出し、
検出した前記ユーザの音声を加工する
ことを含む音声加工方法。
(11)
車載機と、前記車載機と通信可能なセンタ装置とを含み、
前記センタ装置は、
予め登録されるユーザの音声情報を記憶し、
前記ユーザの音声情報を前記車載機に送信し、
前記車載機は、
車室内の音声から、前記センタ装置から受信する前記ユーザの音声情報に対応する前記ユーザの音声を検出し、
検出した前記ユーザの音声を加工する
音声加工システム。
[6. Notes]
As an appendix, the features of the present invention are as follows.
(1)
detecting a user's voice corresponding to pre-registered user voice information from voices within the vehicle;
An in-vehicle device comprising a controller that processes the detected user's voice.
(2)
The controller
The vehicle-mounted device according to (1), further comprising: processing the user's voice so that the detected user's voice is deleted.
(3)
The controller
The vehicle-mounted device according to (1), further comprising: processing the detected user's voice so that the detected user's voice is converted into voice from which a speaker cannot be identified.
(4)
The controller
storing the pre-registered user's voice information;
The vehicle-mounted device according to any one of (1) to (3), wherein the vehicle-mounted device detects the user's voice from the vehicle-mounted voice by comparing the voice in the vehicle with voice information of the user.
(5)
The controller
storing the pre-registered face image of the user and the voice information of the user in association with each other;
The vehicle-mounted device described in (4) above compares an image of the interior of the vehicle captured by a camera that captures images of the interior of the vehicle with an image of the user's face, and when the user is detected from the image of the interior of the vehicle, detects the user's voice from the audio within the vehicle.
(6)
The controller
The vehicle-mounted device according to any one of (1) to (5), wherein when a voice output trigger is activated, a voice in the vehicle cabin is output that is a processed version of the user's voice.
(7)
The controller
The vehicle-mounted device according to (6), wherein processing of the user's voice is started when the voice output trigger is activated.
(8)
The controller
The in-vehicle device according to (6), which starts processing the user's voice when activated.
(9)
The controller
recording the voice of the user in the vehicle cabin by processing the voice of the user so that the voice of the user is erased from the time of activation until a voice recording trigger is activated;
The vehicle-mounted device according to any one of (1) to (6), wherein when the voice recording trigger is activated, the user's voice is processed and recorded in the vehicle cabin so that the user's voice is converted into voice that does not identify the speaker of the user's voice.
(10)
A voice processing method executed by a controller of an in-vehicle device, comprising:
detecting a user's voice corresponding to pre-registered user voice information from voices within the vehicle;
and processing the detected user's voice.
(11)
a vehicle-mounted device; and a center device capable of communicating with the vehicle-mounted device;
The center device
storing voice information of a user that is registered in advance;
transmitting voice information of the user to the vehicle-mounted device;
The vehicle-mounted device is
detecting a voice of the user corresponding to the voice information of the user received from the center device from the voices in the vehicle;
A voice processing system that processes the detected voice of the user.
さらなる効果や変形例は、当業者によって容易に導き出すことができる。このため、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細および代表的な実施形態に限定されるものではない。したがって、添付の特許請求の範囲およびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。 Further advantages and modifications may readily occur to those skilled in the art. Therefore, the invention in its broader aspects is not limited to the specific details and representative embodiments shown and described above. Accordingly, various modifications may be made without departing from the spirit or scope of the general inventive concept as defined by the appended claims and their equivalents.
1 車載機
10 ユーザ
11 ユーザ端末
12 センタ装置
20,21 カメラ
22 センサ
23 マイク
3 コントローラ
4,13 ストレージ
51 車外映像
52 車内音声
53 ユーザ情報
54 音声情報
55 顔画像
56 車両情報
100 音声加工システム
REFERENCE SIGNS LIST 1 In-vehicle device 10 User 11 User terminal 12 Center device 20, 21 Camera 22 Sensor 23 Microphone 3 Controller 4, 13 Storage 51 Outside vehicle image 52 Inside vehicle voice 53 User information 54 Voice information 55 Facial image 56 Vehicle information 100 Voice processing system
Claims (4)
前記コントローラは、
音声記録トリガの発動がない期間においては、前記車内音声のうちユーザの音声を消音処理した音声とともに前記車外映像をストレージに記録し、
音声記録トリガの発動がある期間においては、前記車内音声のうちユーザの音声に発話者が特定されない音声に変換するためのボイスチェンジ処理した音声とともに前記車外映像をストレージに記録する、
車載機。 An in-vehicle device including a controller that records the acquired in-vehicle voice and outside-vehicle video in a storage device ,
The controller
During a period when no voice recording trigger is activated, the outside-of-vehicle video is recorded in a storage together with the inside-vehicle voice in which the user's voice has been muted, and
During a period when a voice recording trigger is activated, the outside-vehicle video is recorded in a storage together with the voice of the inside-vehicle voice that has been subjected to a voice change process to convert the inside-vehicle voice into a voice that does not identify the speaker of the user .
Onboard machine.
請求項1に記載の車載機。The vehicle-mounted device according to claim 1 .
請求項1に記載の車載機。The vehicle-mounted device according to claim 1 .
車室内の映像と、予め登録された前記ユーザの顔画像とを照合し、
前記ユーザが検出された場合に、前記ユーザの顔画像と予め対応付けて登録されている前記ユーザの音声情報を用いて、前記車内音声から前記ユーザの音声を検出する、
請求項1に記載の車載機。 The controller
The video of the vehicle interior is compared with a pre-registered facial image of the user,
When the user is detected, the voice of the user is detected from the in-vehicle voice using voice information of the user that is registered in advance in association with a face image of the user.
The vehicle-mounted device according to claim 1 .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022103959A JP7768849B2 (en) | 2022-06-28 | 2022-06-28 | On-vehicle device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022103959A JP7768849B2 (en) | 2022-06-28 | 2022-06-28 | On-vehicle device |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2024004340A JP2024004340A (en) | 2024-01-16 |
| JP2024004340A5 JP2024004340A5 (en) | 2024-11-21 |
| JP7768849B2 true JP7768849B2 (en) | 2025-11-12 |
Family
ID=89537988
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022103959A Active JP7768849B2 (en) | 2022-06-28 | 2022-06-28 | On-vehicle device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7768849B2 (en) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018082390A (en) | 2016-11-18 | 2018-05-24 | 株式会社Jvcケンウッド | Recording apparatus, recording method, and program |
| JP2020077237A (en) | 2018-11-08 | 2020-05-21 | 本田技研工業株式会社 | Operation data recording system, operation data recorder, terminal device, and operation data recording method |
| JP2022093836A (en) | 2020-12-14 | 2022-06-24 | パイオニア株式会社 | Information processing equipment |
-
2022
- 2022-06-28 JP JP2022103959A patent/JP7768849B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018082390A (en) | 2016-11-18 | 2018-05-24 | 株式会社Jvcケンウッド | Recording apparatus, recording method, and program |
| JP2020077237A (en) | 2018-11-08 | 2020-05-21 | 本田技研工業株式会社 | Operation data recording system, operation data recorder, terminal device, and operation data recording method |
| JP2022093836A (en) | 2020-12-14 | 2022-06-24 | パイオニア株式会社 | Information processing equipment |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2024004340A (en) | 2024-01-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2006199204A (en) | Drive recorder and control method therefor | |
| US11050980B2 (en) | Recording device, recording method, reproduction method, and program | |
| JP6910727B2 (en) | Drive recorder system and file generation method by drive recorder system | |
| JP2018148325A (en) | Recording device, transmission method, and program | |
| JP2019092077A (en) | Recording control device, recording control method, and program | |
| JP7768849B2 (en) | On-vehicle device | |
| JP7279512B2 (en) | Recording device, recording method, and program | |
| KR101176174B1 (en) | Black box for vehicle and method for recording traffic accident of the same | |
| US11995927B2 (en) | On-vehicle recording control apparatus, on-vehicle recording apparatus, on-vehicle recording control method, and non-transitory computer-readable recording medium | |
| JP2025020313A (en) | Information processing device | |
| JP2025072684A (en) | PRIVACY PROTECTION SYSTEM AND PRIVACY PROTECTION METHOD | |
| CN111684498B (en) | Vehicle imaging recording device, vehicle imaging control method, and recording medium | |
| JP6995254B2 (en) | Sound field control device and sound field control method | |
| JP7002954B2 (en) | Drive recorders, in-vehicle systems, and in-vehicle devices | |
| JP6536603B2 (en) | Recording apparatus, recording method, and program | |
| JP2023162844A (en) | Vehicle recording control device and recording control method | |
| JP2020024740A (en) | Vehicle imaging recording device, vehicle imaging control method, and program | |
| US20240339114A1 (en) | Voice command receiving device, voice command receiving method, and computer-readable storage medium | |
| JP2026074251A (en) | Information processing device | |
| JP2024030926A (en) | Voice command reception device and voice command reception method | |
| JP2024030925A (en) | Voice command reception device, voice command reception method and program | |
| JP2024030853A (en) | Voice command reception device and voice command reception method | |
| JP2025094518A (en) | Information processing device, information processing method, and information processing program | |
| JP2023073717A (en) | Communication control device and on-vehicle apparatus | |
| JP2026031582A (en) | Vehicle recording control device and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20241113 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20241113 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250711 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250722 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250904 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20251007 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20251030 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7768849 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |