Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6428748B2 - Driving support system - Google Patents
[go: Go Back, main page]

JP6428748B2 - Driving support system - Google Patents

Driving support system Download PDF

Info

Publication number
JP6428748B2
JP6428748B2 JP2016231121A JP2016231121A JP6428748B2 JP 6428748 B2 JP6428748 B2 JP 6428748B2 JP 2016231121 A JP2016231121 A JP 2016231121A JP 2016231121 A JP2016231121 A JP 2016231121A JP 6428748 B2 JP6428748 B2 JP 6428748B2
Authority
JP
Japan
Prior art keywords
sensory
emotion
statistic
evaluation
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016231121A
Other languages
Japanese (ja)
Other versions
JP2018086135A (en
Inventor
雅之 渡邊
雅之 渡邊
菜穂子 萬
菜穂子 萬
裕紀 中谷
裕紀 中谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mazda Motor Corp
Original Assignee
Mazda Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mazda Motor Corp filed Critical Mazda Motor Corp
Priority to JP2016231121A priority Critical patent/JP6428748B2/en
Publication of JP2018086135A publication Critical patent/JP2018086135A/en
Application granted granted Critical
Publication of JP6428748B2 publication Critical patent/JP6428748B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本発明は、運転支援システムに関するものである。   The present invention relates to a driving support system.

人間は、視覚上の刺激や聴覚上の刺激を受けてある感情(感性あるいは情動ともいえる)をいだくことになる。視覚上の感性を評価するものとして、特許文献1、特許文献2がある。特許文献1は、感性を表す感性用語を用いて、画像印象の評価結果を表示するものとなっている。特許文献2は、露光度等の撮影者の好みを反映させた画像評価を行うものとなっている。   Humans receive emotions (also called sensibilities or emotions) that have received visual and auditory stimuli. There are Patent Document 1 and Patent Document 2 for evaluating visual sensitivity. Patent Document 1 displays an evaluation result of an image impression using a sensitivity term representing sensitivity. Japanese Patent Application Laid-Open No. 2004-228561 performs image evaluation reflecting a photographer's preference such as exposure level.

特開平9−16797号公報JP-A-9-16797 特開2006−254107号公報JP 2006-254107 A

ところで、車両においては種々の運転支援が行われるようになっている。この運転支援として、運転者の感情を目標感情状態に向けて誘導することが考えられる。例えば、運転者が不快という感情を有しているときに、運転者の感情が快となる方向へ視覚上あるいは聴覚上の刺激を付与することが考えられる。この場合、目標感情状態とするのに適した感覚上の刺激としてどのようなものが好適かを適切に選択することが難しいものとなる。具体的には、ある感覚上の刺激付与を行った場合に、運転者の感情を例えば快状態という目標感情状態に近づけることができたとしても、逆に運転者が不活性になってしまう等の弊害を生じてしまうこともある。   By the way, various driving assistances are provided in vehicles. As this driving support, it is conceivable to guide the driver's emotion toward the target emotional state. For example, when the driver has an unpleasant feeling, it is conceivable to apply a visual or auditory stimulus in a direction in which the driver's feeling becomes pleasant. In this case, it is difficult to appropriately select what is suitable as a sensory stimulus suitable for achieving the target emotional state. Specifically, when a certain sensory stimulus is applied, even if the driver's emotion can be brought close to a target emotional state such as a pleasant state, the driver becomes inactive on the contrary. May cause adverse effects.

本発明は以上のような事情を勘案してなされたもので、その目的は、目標感情状態に向けて誘導する感覚上の刺激付与を適切に行えるようにした運転支援システムを提供することにある。   The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a driving support system capable of appropriately applying sensory stimulation to be directed toward a target emotional state. .

前記目的を達成するため、本発明にあっては次のような解決手法を採択してある。すなわち、請求項1に記載のように、
車両の運転者を目標感情状態に向けて誘導するようにした運転支援システムであって、
人間の感覚にかかわる評価対象に関する情報を取得する情報取得手段と、
人間脳内の階層的な感覚情報処理を模擬して構成され、前記情報取得手段で取得された情報について該階層毎に特徴データを算出する特徴算出手段と、
前記特徴算出手段で算出された特徴データについて感覚統計量を算出する感覚統計量算出手段と、
前記感覚統計量算出手段で算出された感覚統計量のうち、感情との関連が高い特定の感覚統計量を決定する感覚統計量決定手段と、
運転者の感情に関する感情情報を検出する感情情報検出手段と、
前記感情情報検出手段で検出された感情情報から、運転者が有する感情を判定する感情判定手段と、
前記特定の感覚統計量のうち、前記感情判定手段で判定された運転者の感情を前記目標感情状態に向けて誘導するのに適した感覚統計量を選択する感覚統計量選択手段と、
前記感覚統計量選択手段で選択された感覚統計量が変化するように感覚的な刺激を付与
して、運転者の感情を前記目標感情状態に向かわせる支援を行う支援手段と、
を備えているようにしてある。
In order to achieve the above object, the following solution is adopted in the present invention. That is, as described in claim 1,
A driving support system that guides a driver of a vehicle toward a target emotional state,
An information acquisition means for acquiring information about an evaluation object related to human senses;
A feature calculation unit configured to simulate hierarchical sensory information processing in the human brain, and to calculate feature data for each layer of the information acquired by the information acquisition unit;
Sensory statistic calculating means for calculating sensory statistic for the feature data calculated by the feature calculating means;
Sensory statistic determining means for determining a specific sensory statistic highly related to emotion among sensory statistics calculated by the sensory statistic calculating means;
Emotion information detection means for detecting emotion information related to the driver's emotion;
From the emotion information detected by the emotion information detection means, emotion determination means for determining the feeling of the driver,
Sensory statistic selection means for selecting a sensory statistic suitable for guiding the driver's emotion determined by the emotion determination means among the specific sensory statistic toward the target emotion state;
Providing a sensory stimulus so that the sensory statistic selected by the sensory statistic selecting unit is changed, and supporting means for supporting the driver's emotion toward the target emotion state;
It is supposed to be equipped with.

上記解決手法によれば、感覚統計量を利用して目標感情状態へ誘導するためのパラメータを適切に選択して、目標感情状態へと適切に誘導することができる。特に、感覚統計量は、人間脳内の階層的な感覚情報処理を模擬することにより取得された特徴データに基づくので、人間の感情を適切に反映したものとなり、この結果、目標感情状態へ誘導する支援が極めて適切なものとされて、目標感情状態へ誘導する際に不必要に(不用意に)運転者の感情を阻害してしまう事態を防止あるいは抑制する上で極めて好ましいものとなる。   According to the above solution method, it is possible to appropriately select a parameter for guiding to the target emotion state using the sensory statistic and appropriately guide to the target emotion state. In particular, sensory statistics are based on feature data obtained by simulating hierarchical sensory information processing in the human brain, and therefore appropriately reflect human emotions, which leads to the target emotional state. This is extremely suitable for preventing or suppressing a situation in which the driver's emotions are unnecessarily (inadvertently) inhibited when guiding to the target emotional state.

上記解決手法を前提とした好ましい態様は、請求項2以下に記載のとおりである。すなわち、
前記目標感情状態が、快・不快と活性・非活性との2軸をパラメータとする所定領域に設定されている、ようにしてある(請求項2対応)。この場合、運転者がいだく感情として一般的な快・不快と活性・非活性との2軸をパラメータとして、好ましい感情状態としての目標感情状態の領域を適切に設定することができる。
A preferred mode based on the above solution is as described in claim 2 and the following. That is,
The target emotional state is set in a predetermined area having two axes of pleasant / unpleasant and active / inactive as parameters (corresponding to claim 2). In this case, the region of the target emotional state as a preferable emotional state can be appropriately set by using two axes, which are general pleasant / unpleasant and active / inactive, as the driver's desired emotion.

前記評価対象に関する情報が、視覚に関する情報と聴覚に関する情報との少なくとも一方とされ、
前記支援手段による感覚的な刺激の付与が、視覚上の刺激と聴覚上の刺激との少なくとも一方とされている、
ようにしてある(請求項3対応)。この場合、人間の感情に大きな影響を与える視覚あるいは聴覚を利用して、目標感情状態へ効果的に誘導することができる。
The information about the evaluation target is at least one of information about vision and information about hearing,
Giving a sensory stimulus by the support means is at least one of a visual stimulus and an auditory stimulus,
(Corresponding to claim 3). In this case, it is possible to effectively guide to the target emotional state by using vision or hearing that has a great influence on human emotions.

感覚統計量をパラメータとして感情の評価値を決定する評価モデルが設定され、
前記感覚統計量選択手段は、前記目標感情状態に向けて誘導するための感情に対応した前記評価モデルに含まれる感覚統計量を、前記特定の感覚統計量として決定する、
ようにしてある(請求項4対応)。この場合、評価モデルを利用して、特定の感覚統計量を適切かつ容易に選択することができる。
An evaluation model is set that determines the evaluation value of emotion using sensory statistics as a parameter,
The sensory statistic selecting means determines, as the specific sensory statistic, a sensory statistic included in the evaluation model corresponding to an emotion for guiding toward the target emotional state.
(Corresponding to claim 4). In this case, a specific sensory statistic can be appropriately and easily selected using the evaluation model.

前記評価モデルを学習補正する学習補正手段をさらに備えている、ようにしてある(請求項5対応)。この場合、評価モデルをより最適化して、目標感情状態へより適切に誘導する上で好ましいものとなる。   A learning correction means for learning correction of the evaluation model is further provided (corresponding to claim 5). In this case, it is preferable to further optimize the evaluation model and more appropriately guide to the target emotion state.

前記感覚統計量は、前記特徴データの自己相関および相互相関とされている、ようにしてある(請求項6対応)。この場合、感覚統計量として具体的なものが提供される。特に、自己相関と相互相関とは、数多くの特徴データについての関連性を的確に示すことになるので、特徴データそのものよりも人間の感性をより的確かつ精緻に示すものとなり、この結果、感覚統計量を利用した目標感情状態へ誘導する支援を適切に行う上で極めて好ましいものとなる。   The sensory statistics are assumed to be autocorrelation and cross-correlation of the feature data (corresponding to claim 6). In this case, a specific sensory statistic is provided. In particular, auto-correlation and cross-correlation accurately indicate the relevance of a large number of feature data, and thus more accurately and precisely show human sensitivity than feature data itself. As a result, sensory statistics This is extremely preferable in appropriately supporting the guidance to the target emotional state using the quantity.

本発明によれば、目標感情状態に向けて誘導する感覚上の刺激付与を適切に行うことができる。   According to the present invention, it is possible to appropriately apply a sensory stimulus that is directed toward a target emotion state.

運転支援を行うための制御系統例を示す図。The figure which shows the example of a control system for performing driving assistance. 快・不快と活性・非活性との2軸をパラメータとする領域分けの設定例を示す図。The figure which shows the example of a setting of the area division which uses two axis | shafts of pleasant / unpleasant and active / inactive as a parameter. 評価モデルの設定を行う制御系統例を示すブロック図。The block diagram which shows the example of a control system which performs the setting of an evaluation model. 人間脳内の階層的な聴覚情報処理を模擬化して示すもので、各階層の特徴データと各特徴データの自己相関および相互相関の算出を示す図。The figure which simulates the hierarchical auditory information processing in a human brain, and shows the calculation of the autocorrelation and the cross correlation of the feature data of each hierarchy, and each feature data. 評価モデルを決定する手法を説明するための図。The figure for demonstrating the method of determining an evaluation model. 相互相関の決定例を示す説明図。Explanatory drawing which shows the example of determination of a cross correlation. 本発明の制御例を示すフローチャート。The flowchart which shows the example of control of this invention. 本発明の制御例を示すフローチャート。The flowchart which shows the example of control of this invention.

まず、図1を参照しつつ、運転支援の概要について説明する。図1中、S1は、生体センサであり、運転者の心電や心拍等を検出するものとなっている。この生体センサS1からの出力を受けるドライバ感情検出部S2によって、運転者(ドライバ)の感情が検出される。この後、ドライバ感情判定部S3によって、運転者の感情が判定される。上記ドライバ感情判定部S3による感情の判定は、運転者の感情が図2に示す感情マップにおいてどこに位置するかの判定となる。なお、運転者の感情を検出するために、生体センサS1に代えたあるいは加えて、運転者の顔を撮像するカメラを利用することもできる。   First, an overview of driving assistance will be described with reference to FIG. In FIG. 1, S1 is a biosensor that detects a driver's electrocardiogram, heartbeat, and the like. A driver's (driver) emotion is detected by the driver emotion detection unit S2 that receives the output from the biosensor S1. Thereafter, the driver emotion determination unit S3 determines the driver's emotion. The determination of the emotion by the driver emotion determination unit S3 is where the driver's emotion is located in the emotion map shown in FIG. In order to detect the driver's emotion, a camera that captures the driver's face can be used instead of or in addition to the biosensor S1.

図2の感情マップは、快・不快と活性・非活性との2軸をパラメータとして、縦横に9つの領域に区分けされている(各領域の強化は破線で示される)。具体的には、活性・非活性のパラメータについては、A2を中間値として、非活性方向にA1が設定され、活性方向にA3が設定されている。つまり、A1以下は非活性状態であり、A3以上は活性状態であり、A1とA3との間が中間の状態とされている。   The emotion map of FIG. 2 is divided into nine regions vertically and horizontally, with two axes of pleasant / unpleasant and active / inactive as parameters (the enhancement of each region is indicated by a broken line). Specifically, for the active / inactive parameters, A1 is set in the inactive direction and A3 is set in the active direction, with A2 being an intermediate value. That is, A1 and below are in an inactive state, A3 and above are in an active state, and an intermediate state is between A1 and A3.

また、快・不快のパラメータについては、B2を中間値として、不快方向にB1が設定され、快方向にB3が設定されている。つまり、B1以下は不快状態であり、B3以上は快状態であり、B1とB3との間が中間の状態とされている。そして、実施形態では、9つに区分された領域のうち、快・不快のレベルがB1よりも大きい範囲でかつ活性・非活性のレベルがA1とA3との間となる領域(領域2−2と領域3−2)が、目標感情状態として設定される好ましい感情状態とされる。   As for the comfort / discomfort parameters, B2 is set as an intermediate value, B1 is set in the discomfort direction, and B3 is set in the comfort direction. That is, B1 and below are in an uncomfortable state, B3 and above are in a comfortable state, and a state between B1 and B3 is an intermediate state. In the embodiment, among the nine regions, the region where the pleasant / unpleasant level is larger than B1 and the active / inactive level is between A1 and A3 (region 2-2). And the region 3-2) are set as a preferable emotion state set as the target emotion state.

図1中、S5は、感覚情報制御部であり、視覚上の刺激に関連した表示部S6や、聴覚上の刺激に関連したスピーカ部S7を制御する。特に、感覚情報制御部S5は、感覚情報制御パラメータ設定部S4によって設定された刺激付与に関連するパラメータを変化させるように、表示部S6やスピーカ部S7を制御する。そして、このパラメータは、後述する評価モデル選定部S8により選定された評価モデルを利用して選択される。なお、この感覚情報制御パラメータ設定部S4と評価モデル選定部S8による評価モデルの選定については、評価モデルの設定を含めて後述する。   In FIG. 1, S5 is a sensory information control unit, which controls a display unit S6 related to visual stimuli and a speaker unit S7 related to auditory stimuli. In particular, the sensory information control unit S5 controls the display unit S6 and the speaker unit S7 so as to change a parameter related to stimulus application set by the sensory information control parameter setting unit S4. And this parameter is selected using the evaluation model selected by evaluation model selection part S8 mentioned later. The selection of the evaluation model by the sensory information control parameter setting unit S4 and the evaluation model selection unit S8 will be described later including the setting of the evaluation model.

次に、図4を参照しつつ、人間脳内の聴覚情報処理を模擬化した処理に基づく各階層での特徴データの算出と、各特徴データについてのMomentおよび相互相関について説明する。すなわち、音データが蝸牛(基底膜)に入力されることを出発点として、最終的に脳幹視床での処理とが行われて、順次、第1階層の処理、第2階層の処理、第3階層の処理が行われるが、図2はこのような処理を模擬化して示すものである。なお、図2中の数字を○印で囲ったものを、○1、○2等でもって表示することとする(例えば○1は、数字の1を○印で囲ったものを意味する)。   Next, with reference to FIG. 4, calculation of feature data in each layer based on processing simulating auditory information processing in the human brain, and moment and cross-correlation for each feature data will be described. That is, starting from the input of sound data to the cochlea (basement membrane), the brainstem thalamic process is finally performed, and the first layer process, the second layer process, Hierarchical processing is performed, and FIG. 2 shows such processing in a simulated manner. It should be noted that the numbers in FIG. 2 surrounded by circles are displayed with circles 1, 2, etc. (for example, circle 1 means the number 1 surrounded by circles).

図4において、音データが、マイクにより構成された入力部1に入力される。入力された音データは、フーリエ変換部2によって、音データについて周波数でもって区分けされる(第1階層の処理)。図2では、簡単化のために高周波と低周波との2つに区分けした場合を示すが、実際には20〜30程度に区分けされる。なお、この第1階層での処理は、蝸牛基底膜での処理に対応する。   In FIG. 4, sound data is input to the input unit 1 configured by a microphone. The input sound data is classified by frequency with respect to the sound data by the Fourier transform unit 2 (first layer processing). Although FIG. 2 shows the case where it divides into two, high frequency and low frequency, for simplification, it is actually divided into about 20-30. The processing in the first layer corresponds to the processing in the cochlear basement membrane.

第2階層の処理においては、第1階層で得られた特徴データ(区分けされた周波数)について、非線形圧縮した包絡線の抽出処理(○1、○2で示す特徴データの抽出)と、この後の非線形圧縮処理(強い音は弱められ、弱い音は強められる処理に相当)により○3、○4で示す特徴データが取得される。この第2階層での処理は、蝸牛基底膜の振幅特性と脳幹視床に基づく処理に相当する。   In the processing of the second layer, the feature data (segmented frequencies) obtained in the first layer are subjected to non-linearly compressed envelope extraction processing (extraction of feature data indicated by ○ 1, ○ 2), and thereafter The characteristic data indicated by ◯ 3 and ◯ 4 are acquired by the non-linear compression processing (corresponding to processing in which strong sounds are weakened and weak sounds are strengthened). The processing in the second layer corresponds to processing based on the amplitude characteristics of the cochlear basement membrane and the brainstem thalamus.

第3階層の処理においては、フーリエ変換部3、4によって、第2階層での特徴データ○3、○4についてそれぞれ、さらに周波数によって区分けされる(第2階層における特徴データについての変調周波数に相当)。第3階層で算出された特徴データが、○5〜○8で示される。第3階層での処理は、脳幹視床での処理に相当する。   In the processing of the third layer, the Fourier transform units 3 and 4 further classify the feature data ○ 3 and ○ 4 in the second layer according to the frequency (corresponding to the modulation frequency for the feature data in the second layer). ). The feature data calculated in the third hierarchy is indicated by ○ 5 to ○ 8. The processing in the third hierarchy corresponds to the processing in the brainstem thalamus.

上述した各特徴データ○1〜○8について、Momentおよび相互相関が算出される。
Momentは、基本的統計量となる平均、分散、尖度、歪度のいずれかの値で定義され、階層によりMomentの2乗値を用いる場合は別途Powerの用語を用いるようにしてある。図4中、M2あるいはM3で示すものがMomentあるいはPowerであり、C0、C1、C2で示すのが相互相関である。より、具体的には、M2は、第2階層での特徴データとなる○3、○4についてMomentであり、M3は、第3階層での特徴データとなる○5〜○8についてのPowerである。
For each of the above-described feature data ○ 1 to ○ 8, the moment and the cross correlation are calculated.
“Moment” is defined by any one of average, variance, kurtosis, and skewness as basic statistics. When the square value of “Moment” is used depending on the hierarchy, the term “Power” is used separately. In FIG. 4, what is indicated by M2 or M3 is Moment or Power, and what is indicated by C0, C1, and C2 is cross-correlation. More specifically, M2 is a moment for ○ 3 and ○ 4 that are feature data in the second hierarchy, and M3 is a power for ○ 5 to ○ 8 that is feature data in the third hierarchy. is there.

また、C0は、第2階層の特徴データとなる○3と○4との間での相互相関である。C1は、○5と○7の間の相互相関と、○6と○8との相互相関を示し、第1階層の処理によって区分けされた異なる周波数間での相互相関となる。C2は、○5と○6の間の相互相関と、○7と○8との間の相互相関を示し、第1階層の処理によって区分けされたときに同一周波数となる間での相互相関となる。   C0 is a cross-correlation between ◯ 3 and ◯ 4, which are feature data of the second hierarchy. C1 indicates a cross-correlation between ○ 5 and ○ 7 and a cross-correlation between ○ 6 and ○ 8, and is a cross-correlation between different frequencies divided by the processing of the first layer. C2 indicates the cross-correlation between ○ 5 and ○ 6, and the cross-correlation between ○ 7 and ○ 8, and the cross-correlation between the same frequency when divided by the processing of the first layer. Become.

次に、図5を参照しつつ、評価モデルを設定する例について説明する。なお、以下の説明では適宜、評価する感性が「不快」とした場合を例にして行うこととする。すなわち、例えばエンジン音が聴く者に与える不快なレベル(快レベル)を複数段階で評価する場合を例にして説明する。   Next, an example of setting an evaluation model will be described with reference to FIG. In the following description, it is assumed that the sensitivity to be evaluated is “uncomfortable” as an example. That is, for example, a case where an unpleasant level (pleasure level) given to a listener by engine sound is evaluated in a plurality of stages will be described as an example.

まず、図5中、G1、G2・・・Gnとして示すのは、聴覚上の感性の評価対象となる異なる多数(例えば500〜1000)の音データを示す。この多数の音データについての聴覚上の感性評価値(例えば不快レベルについて複数段階での評価値)が紐づけられている。なお、不快レベル評価値は、評価を行う複数人の専門家による評価値を平均した平均値としてある。図3において、太い縦線は、図4に示す個々のMomentや相互相関を仕切る線である。そして、太い縦線で囲まれた範囲内での細い縦線は、Momentや相関レベルを示す個々のデータ(相関係数)を仕切るものである。   First, in FIG. 5, what is indicated as G1, G2,... Gn indicates a large number of different (for example, 500 to 1000) sound data to be evaluated for auditory sensitivity. Auditory sensitivity evaluation values (e.g., evaluation values at a plurality of stages with respect to the uncomfortable level) are associated with the large number of sound data. Note that the discomfort level evaluation value is an average value obtained by averaging evaluation values by a plurality of experts who perform evaluation. In FIG. 3, thick vertical lines are lines that partition individual moments and cross-correlations shown in FIG. And the thin vertical line within the range enclosed by the thick vertical line partitions each data (correlation coefficient) which shows Moment and a correlation level.

図5において、「2nd」として示すのは第2階層における特徴データであることを意味し、「3rd」として示すのは第3階層における特徴データであることを意味する。また、「Across」として示すのは、第1階層で区分けされた周波数のうち異なる周波数間での相互相関であることを意味し、「Within」として示すのは第1階層で区分けされた周波数のうち同一周波数間での相互相関であることを意味する。   In FIG. 5, “2nd” indicates that the feature data is in the second layer, and “3rd” indicates that the feature data is in the third layer. In addition, “Across” means cross-correlation between different frequencies among the frequencies classified in the first layer, and “Within” means frequencies of the frequencies classified in the first layer. This means cross-correlation between the same frequencies.

図3では、相関の種類として6種類が設定されている。すなわち、左側から右側へ順次、「2nd Moment」、「2nd Across」、「3rd Power、「3rd Across」、「3rd Within(Real)」、「3rd Within(Image)」である。なお、「3rd Within」については、ヒルベルト変換して、その実部が「3rd Within(Real)」とされ、虚部が「3rd Within(Image)」とされる。   In FIG. 3, six types of correlation are set. That is, in order from the left side to the right side, “2nd Moment”, “2nd Across”, “3rd Power,“ 3rd Across ”,“ 3rd Within (Real) ”, and“ 3rd Within (Image) ”. Note that “3rd Within” is subjected to Hilbert transform, and its real part is “3rd Within (Real)” and its imaginary part is “3rd Within (Image)”.

図4に示すMoment、相互相関のうち、特に、「2nd Across」(第2階層における特徴データについて、第1階層で区分けされた異なる周波数間での相互相関)は、振幅変動の一様性を示すパラメータとなる。また、「3rd Power」(第3階層における特徴データについてのMomentの2乗値)は、振幅変動量(パワーあるいはエネルギ)を示すパラメータとなる。さらに、「3rd Within」(第3階層における特徴データについて、第1階層で仕分けされた同一周波数間における相互相関)は、振幅変動パターン(つまり音が変化する様子)を示す。   Among the moments and cross-correlations shown in FIG. 4, in particular, “2nd Across” (cross-correlation between different frequencies divided in the first layer for the feature data in the second layer) indicates the uniformity of amplitude fluctuation. It becomes the parameter shown. Further, “3rd Power” (the square value of the moment for the feature data in the third hierarchy) is a parameter indicating the amount of amplitude fluctuation (power or energy). Furthermore, “3rd Within” (cross-correlation between the same frequencies sorted in the first layer for the feature data in the third layer) indicates an amplitude variation pattern (that is, how the sound changes).

ここで、図6を参照しつつ、例えば「2nd Across」の相関値を決定する手法を説明する。図6における縦軸、横軸は、それぞれ第1階層で分離された周波数を示す(周波数は、例えば52Hz〜8844Hz)。縦横に区切られた多数の単位領域において、相関値(相関係数)が取得される。図6では、二重丸が相関値が極めて高いことを示し、一重丸が二重丸よりも相関値が低いものの相関値が所定値以上であること示し、×印が相関値が零の場合を示し、白抜きがデータなしを示す。   Here, with reference to FIG. 6, for example, a method of determining the correlation value of “2nd Across” will be described. In FIG. 6, the vertical axis and the horizontal axis indicate frequencies separated in the first layer (frequency is, for example, 52 Hz to 8844 Hz). Correlation values (correlation coefficients) are acquired in a large number of unit areas divided vertically and horizontally. In FIG. 6, the double circle indicates that the correlation value is extremely high, the single circle indicates that the correlation value is lower than that of the double circle, but the correlation value is greater than or equal to a predetermined value, and the cross indicates that the correlation value is zero And white indicates no data.

図6において、所定値以上の相関値を有する単位領域が集合して群をなすエリアを選択して、このエリアをなす各単位領域での相関値の平均値が、最終的な相互相関値とされる。なお、他の相互相関においても、同様にして最終的な相関値が決定される。   In FIG. 6, an area in which unit areas having a correlation value equal to or greater than a predetermined value are assembled to form a group is selected. Is done. Note that the final correlation value is similarly determined for other cross-correlations.

再び図5において、各音データについて、Moment、相互相関が算出される。1つの音データについて、Momentおよび相互相関について、数多くの値を有するものである。各Momentおよび各相互相関について、主成分分析(例えば5次元)が行われて、図5中A列で示すようにデータ抽出(データの絞り込み)が行われる。また、図5中B列で示すように、A列の中から、主観評価値に対して一定以上の相関を有するもの(例えば不快レベルの評価に大きな影響を及ぼすパラメータ)が選択される。   In FIG. 5 again, the moment and the cross-correlation are calculated for each sound data. One sound data has many values for the moment and the cross-correlation. For each Moment and each cross-correlation, principal component analysis (for example, five dimensions) is performed, and data extraction (data narrowing down) is performed as shown by column A in FIG. Further, as shown by the B column in FIG. 5, those having a certain correlation or more with respect to the subjective evaluation value (for example, a parameter that greatly affects the evaluation of the discomfort level) are selected from the A column.

主成分分析によって取得された上記A列に示すパラメータに基づいて、評価モデルを示す(1)式が、数1のように決定される。   Based on the parameters shown in the column A acquired by the principal component analysis, the expression (1) indicating the evaluation model is determined as shown in Equation 1.

Figure 0006428748
Figure 0006428748

(1)式中、Y、各音データについての評価値であり、a0〜am、b1〜bm、c(cについてのサフィックスはここでは省略)は係数(定数)であり、X1〜Xmは、図3で示すA列でのMoment(あるいはPower)および相互相関値である。当初は、上記各係数は不知である。(1)式に対して、各音データG1〜Gnについての主観的な評価値YとMomentや相互相関値X1〜Xmをあてはめて、回帰手法によって各係数が決定される。回帰モデルとなる(1)式において、個々の係数は、多数のMomentや相互相関値のうち特定の1つが対応づけられている。   (1) In the formula, Y is an evaluation value for each sound data, a0 to am, b1 to bm, c (suffix is omitted here) is a coefficient (constant), and X1 to Xm are These are the moment (or power) and cross-correlation values in the column A shown in FIG. Initially, the above coefficients are unknown. By applying the subjective evaluation value Y and the moments and cross-correlation values X1 to Xm for the sound data G1 to Gn to the equation (1), each coefficient is determined by a regression method. In equation (1), which is a regression model, each coefficient is associated with a specific one of a number of moments and cross-correlation values.

(1)式は、抽出されたA列で示すMomentや相互相関値を含むように決定されたものとなる。この(1)式から、図3のB列で示すような例えば不快レベルの評価に大きな影響を与えるパラメータのみを残して(評価に影響がないパラメータを削除して)、不快レベル評価用の評価モデル式が下記の(2)式のように決定される。すなわち、(2)式では、(1)式でのサフィックスmよりも小さいサフィックスnを有するものとなる。   Equation (1) is determined so as to include the moment and the cross-correlation value indicated by the extracted column A. From this equation (1), leaving only the parameters that have a great influence on the evaluation of, for example, the discomfort level as shown in column B of FIG. 3 (by deleting parameters that do not affect the evaluation), The model formula is determined as the following formula (2). That is, in the equation (2), the suffix n is smaller than the suffix m in the equation (1).

Figure 0006428748
Figure 0006428748

ここで、上記(1)式では、全ての1次項に対して、2次の項および交互作用の項(初期値a0を除く右辺第3項)を含んでいる。実際には、評価モデルを極力シンプルにするという観点から、主観評価に所定以上の影響を有するある特定の1次の項に対してのみ、2次の項および交互作用の項を有するものとするのが好ましく、このような処理が行われた後の状態が、(2)式である。なお、(2)式は、(1)式から不要なパラメータについての係数分を削除した後に、各係数のサフィックスが連続するように書き直したものとなっている((1)式と(2)式とでは、同じサフィックスの係数が同じ内容を示すものとは限らない)。   Here, the above equation (1) includes a second-order term and an interaction term (the third term on the right side excluding the initial value a0) for all the first-order terms. Actually, from the viewpoint of simplifying the evaluation model as much as possible, only a specific first-order term that has a predetermined influence or more on the subjective evaluation has a second-order term and an interaction term. It is preferable that the state after such processing is performed is Equation (2). Equation (2) is rewritten so that the suffix of each coefficient is continuous after deleting the coefficients for the unnecessary parameters from Equation (1) (Equations (1) and (2)). In the formula, the same suffix coefficient does not always indicate the same content).

ある音データの不快レベル評価を行う場合、当該ある音データについて、図5に示すようにMoment(Power)や相互相関値を算出し、この算出結果を上記(2)式に当てはめることにより、上記ある音データについての評価値が数値でもって算出されることになる(定量化で可視化ともなる)。なお、(2)式での評価モデルの妥当性を、図5で示す音データG1〜Gn以外の複数の音データ(から算出されるMomentや相互相関値)とそれに対する主観的な評価値とを利用して、検証することもできる。   When an uncomfortable level evaluation of certain sound data is performed, the moment (Power) and the cross-correlation value are calculated for the certain sound data as shown in FIG. 5 and the calculation result is applied to the above equation (2). An evaluation value for a certain sound data is calculated with a numerical value (also visualized by quantification). It should be noted that the validity of the evaluation model in the equation (2) is expressed by a plurality of sound data other than the sound data G1 to Gn shown in FIG. 5 (Moments and cross-correlation values calculated from them) and a subjective evaluation value corresponding thereto. You can also verify using.

(2)式において、例えば車両のエンジン音を快・不快で評価する場合、n=3というように、用いる係数をa0、a1、a2、a3というように極めて少なくすることが可能である。基本値を示す係数a0以外において、係数a1は「2nd Across」用で、係数a2は「3rd Power」用で、係数a3は「3rd Wihin」用である。このような係数a0、a1、a2、a3で規定される(2)式に対応した評価モデルを用いて得られた評価値は、主観評価値との関係において、R2=0.97という極めて高い相関を示すということが確認された。 In the formula (2), for example, when the vehicle engine sound is evaluated as pleasant / uncomfortable, the coefficient to be used can be extremely reduced as a0, a1, a2, a3, such as n = 3. Other than the coefficient a0 indicating the basic value, the coefficient a1 is for "2nd Acros", the coefficient a2 is for "3rd Power", and the coefficient a3 is for "3rd Wihin". The evaluation value obtained by using the evaluation model corresponding to the expression (2) defined by the coefficients a0, a1, a2, and a3 is extremely R 2 = 0.97 in relation to the subjective evaluation value. It was confirmed to show a high correlation.

次に、図3を参照しつつ、感性評価を行うための評価モデルを設定するための全体的な制御系統例について説明する。図3において、11は、聴覚上の感性の評価対象となる音データの入力部であり、例えばマイクによって構成される。この入力された音データについて、前述したように、特徴データが音特徴算出部12によって算出されて、この特徴データに基づいて、聴覚統計量計算部13によって自己相関および相互相関が算出される。   Next, an overall control system example for setting an evaluation model for performing sensitivity evaluation will be described with reference to FIG. In FIG. 3, reference numeral 11 denotes an input unit for sound data to be evaluated for auditory sensibility, and is constituted by a microphone, for example. As described above, the feature data is calculated by the sound feature calculator 12 for the input sound data, and the autocorrelation and the cross-correlation are calculated by the auditory statistic calculator 13 based on the feature data.

一方、聴覚上の感性についての評価モデルが、複数設定されている。図3に示す評価モデルAは、例えばエンジン音評価用のうち快・不快のレベルを評価するものとされる。また、評価モデルBは、例えばエンジン音評価用のうち活性・非活性のレベルを評価するものとされる。この他、ロードノイズ評価用等々、評価モデルとしては数多く設定されている。   On the other hand, a plurality of evaluation models for auditory sensitivity are set. The evaluation model A shown in FIG. 3 evaluates the level of pleasantness / discomfort, for example, for engine sound evaluation. The evaluation model B is for evaluating the active / inactive level in the engine sound evaluation, for example. In addition, there are many evaluation models for road noise evaluation and the like.

各評価モデルは、評価パラメータ選択部Pでの選択によって、評価すべき音源の種類や感性の種類に応じたパラメータ(評価軸)が設定されている。例えば、エンジン音についての不快レベルの評価においては、音の不規則性や音の強弱差の度合いがパラメータとして選択される(モーメント、相互相関が、上記パラメータを検出するように行われる)。   In each evaluation model, parameters (evaluation axes) corresponding to the type of sound source to be evaluated and the type of sensitivity are set by selection in the evaluation parameter selection unit P. For example, in the evaluation of the discomfort level for the engine sound, the irregularity of the sound and the degree of difference in sound intensity are selected as parameters (moment and cross-correlation are performed so as to detect the parameters).

評価する感性の種類の相違に応じて、複数の評価モデルを設定することもできる。評価モデルとしては、上記以外に種々設定することができ、例えば車両の開閉部材(ドアやボンネット等)を閉じるときの音についての評価モデル、ブレーキ音についての評価モデル、建物周囲の環境音についての評価モデル等々、種々設定することができる。なお、音源の種類や評価する感性の種類等を総合した1つの評価モデルを設定することも可能であるが、音源の種類毎や評価する感性の種類毎に評価モデルを設定しておくのが、より適切に感性評価を行う上で好ましいものとなる。   A plurality of evaluation models can be set according to the difference in the types of sensibilities to be evaluated. Various models other than the above can be set as the evaluation model. For example, an evaluation model for a sound when closing a vehicle opening / closing member (door, bonnet, etc.), an evaluation model for a brake sound, and an environmental sound around a building. Various models such as an evaluation model can be set. Although it is possible to set one evaluation model that integrates the type of sound source and the type of sensitivity to be evaluated, it is possible to set an evaluation model for each type of sound source and for each type of sensitivity to be evaluated. Therefore, it is preferable for more appropriate sensitivity evaluation.

図5において、個人情報入力部21において個人情報(例えば性別、年齢、職業等)が入力され、入力された個人情報が、個人情報前処理部22で前処理(例えば年齢を複数段階に分類等)された後、個人情報記録部23に記録(記憶)される。   In FIG. 5, personal information (for example, sex, age, occupation, etc.) is input in the personal information input unit 21, and the input personal information is pre-processed in the personal information pre-processing unit 22 (for example, age is classified into a plurality of levels). Is recorded (stored) in the personal information recording unit 23.

生体センサ入力部24で入力された生体情報と主観評価部25で入力された主観的な感性評価値とが、感性実測値推定部26に入力されて感性実測値が推定され、この推定された感性実測値が感性実測値記録部27に記録(記憶)される。   The biological information input by the biological sensor input unit 24 and the subjective sensitivity evaluation value input by the subjective evaluation unit 25 are input to the actual measured sensitivity estimation unit 26 to estimate the actual measured sensitivity value. The actual measured sensitivity value is recorded (stored) in the actual measured sensitivity value recording unit 27.

音源情報入力部28で入力された音源のうち、評価対象特定部29でもって評価対象が特定される。そして、この評価対象特定部で特定された評価対象(の音データ)が、評価対象記録部30に記録(記憶)される。前述した聴覚統計量計算部13での計算結果が、聴覚統計量記録部31に記録(記憶)される。   Among the sound sources input by the sound source information input unit 28, the evaluation target is specified by the evaluation target specifying unit 29. Then, the evaluation target (sound data) specified by the evaluation target specifying unit is recorded (stored) in the evaluation target recording unit 30. The calculation result in the auditory statistic calculation unit 13 is recorded (stored) in the auditory statistic recording unit 31.

上述した各記録部23、27、30、31が、データベース部Dを構成する。このデータベース部Dでのデータに基づいて、評価モデルが設定される。具体的には、データベース部Dでのデータが、評価パラメータ選択部Pに入力されて、評価すべき感性の種類に応じて、適切なパラメータ(評価軸)が選択されて(図5のB列のパラメータ選択が対応)、選択されたパラメータに応じて評価モデルが設定される((2)式に示す評価モデルが設定される)。   Each of the recording units 23, 27, 30, and 31 described above constitutes the database unit D. An evaluation model is set based on the data in the database part D. Specifically, the data in the database unit D is input to the evaluation parameter selection unit P, and an appropriate parameter (evaluation axis) is selected according to the type of sensitivity to be evaluated (column B in FIG. 5). The evaluation model is set according to the selected parameter (the evaluation model shown in the equation (2) is set).

前記記録部30での記録内容が、図5に示す多数の音データG1〜Gnとして利用され、記録部27での記録内容が、各音データG1〜Gnに対する主観的な評価値として利用される。なお、個人情報入力部21は、個人情報(例えば性別や年齢層)に応じて評価値を補正するためであり、無くてもよいものである。また、記録部31は、新たに感性評価したときにこれを評価モデルを学習補正するためであり、学習補正を行わない場合は無くてもよいものである。   The recorded content in the recording unit 30 is used as a large number of sound data G1 to Gn shown in FIG. 5, and the recorded content in the recording unit 27 is used as a subjective evaluation value for each sound data G1 to Gn. . The personal information input unit 21 is for correcting the evaluation value according to personal information (for example, gender or age group), and may be omitted. The recording unit 31 is for learning correction of the evaluation model when a new sensibility evaluation is performed, and may be omitted when the learning correction is not performed.

評価モデルをより適切化するため、評価対象音源取得部11で取得された音データについて、主観評価値と評価モデルによる評価値とが相違する場合は、上記取得された音データを図5の音データに含めると共に評価の専門家による主観評価値を含めるようにして、評価モデル(これに対応した(2)式)を学習補正することができる。   In order to make the evaluation model more appropriate, when the subjective evaluation value differs from the evaluation value based on the evaluation model for the sound data acquired by the evaluation target sound source acquisition unit 11, the acquired sound data is converted to the sound data shown in FIG. The evaluation model (equation (2) corresponding to this) can be learned and corrected by including in the data and the subjective evaluation value by the evaluation specialist.

図3〜図6の説明では、聴覚上の感性に着目して説明したが、視覚上の感性についても同様に評価モデルを設定することができる。すなわち、人間の視覚情報処理を模擬したときは、第1階層では周波数(つまり解像度)による区分け、第2階層では方位選択処理、第3階層では方位信号強度の処理が行われて、第1階層から第3階層の各特徴データについての自己相関(を示す相関値で、モーメントに基づく値を使用することもできる)、相互相関(を示す相関値)を利用して、図5で説明したのと同様な手法により、視覚上の感性についての評価モデルが設定される。   In the description of FIGS. 3 to 6, the description has been given focusing on auditory sensibility, but an evaluation model can be similarly set for visual sensibility. That is, when simulating human visual information processing, classification by frequency (that is, resolution) is performed in the first layer, direction selection processing is performed in the second layer, and direction signal strength processing is performed in the third layer. From FIG. 5 using the autocorrelation (correlation value indicating the value based on the moment) and cross-correlation (correlation value indicating) for each feature data of the third layer An evaluation model for visual sensibility is set by the same method as described above.

再び図1において、評価モデル選定部S8は、車両の運転者の感情を、図2に示す目標感情状態(領域2−2または3−2)に向けて誘導するために適切な評価モデルを図3に示す複数の評価モデルの中から選定する。例えば、運転者の現在の感情状態が例えば図2の領域2−1であると判定されているときは、感情を非活性方向へ誘導するのに好適な評価モデルが選定されることになる(活性・非活性を評価する評価モデルの選定)。   Referring again to FIG. 1, the evaluation model selection unit S8 displays an evaluation model suitable for guiding the emotion of the driver of the vehicle toward the target emotion state (region 2-2 or 3-2) shown in FIG. Select from the multiple evaluation models shown in 3. For example, when it is determined that the current emotional state of the driver is, for example, the region 2-1 in FIG. 2, an evaluation model suitable for guiding the emotion in the inactive direction is selected ( Selection of evaluation model to evaluate activity / inactivity).

感覚情報制御パラメータ設定部S4は、上記のように選定された評価モデル中における自己相関あるいは相互相関を示すパラメータ((2)式におけるX1、X2等)を選択する。すなわち、選定された評価モデル中の自己相関あるいは相互相関を示すパラメータは、運転者の感情に対して活性・非活性方向に大きな影響を与えるものとなる一方、快・不快方向には大きな影響を与えにくいものとなる。   The sensory information control parameter setting unit S4 selects parameters (X1, X2, etc. in the equation (2)) indicating autocorrelation or cross-correlation in the evaluation model selected as described above. In other words, the autocorrelation or cross-correlation parameter in the selected evaluation model has a great influence on the driver's feelings in the active / inactive direction, but has a great influence on the pleasant / unpleasant direction. It will be difficult to give.

感覚情報制御部S5は、上記のように選択されたパラメータを変化させるように表示部S6やスピーカ部S7を制御する。上記パラメータの変化方向や変化量が運転者の感情にどの程度の影響を与えるは、評価モデルから得られる評価値によって知ることができる。これにより、感覚情報制御部S5は、表示部S6やスピーカ部S7を適切な制御方向(例えば音量の増減方向)および適切な制御量(例えば音圧)でもって制御することができる。このことは、表示部S6やスピーカ部S7に対する制御のオーバシュートを防止する上でも好ましいものとなる(例えば領域2−1にある感情状態から、領域2−2を超えて領域2−3に移行してしまうような事態の防止)。   The sensory information control unit S5 controls the display unit S6 and the speaker unit S7 so as to change the parameter selected as described above. It can be known from the evaluation value obtained from the evaluation model how much the change direction and change amount of the parameter affect the driver's emotion. As a result, the sensory information control unit S5 can control the display unit S6 and the speaker unit S7 with an appropriate control direction (for example, an increasing / decreasing direction of sound volume) and an appropriate control amount (for example, sound pressure). This is also preferable in preventing control overshoot for the display unit S6 and the speaker unit S7 (for example, transition from the emotional state in the region 2-1 to the region 2-3 beyond the region 2-2). Prevention).

図7、図8は、運転者の感情を目標感情状態に向けて誘導するための制御例を示すフローチャートであり、以下このフローチャートについて説明する。なお、以下の説明でQはステップを示す。   FIG. 7 and FIG. 8 are flowcharts showing control examples for guiding the driver's emotion toward the target emotion state, which will be described below. In the following description, Q indicates a step.

まず、Q1においてデータ入力された後、Q2において、運転者の現在の感情状態、つまり快・不快度合い(レベル)と活性・非活性度合い(レベル)が判定される。この後、Q3において、活性度が所定値A3以上であるか否かが判別される。このQ3の判別でYESのときは、Q4において、快度がB1以下であるか否かが判別される。このQ4の判別でYESのときは、運転者の現在の感情が、図2における領域1−1にある状態となる。このときは、Q5において、快軸を優先して、不快を下げる支援(快を上げる支援)が実行される。なお、合わせて、活性を下げる(非活性を上げる)支援を行うようにしてもよい。   First, after data is input in Q1, the current emotional state of the driver, that is, the degree of pleasure / discomfort (level) and the degree of activity / inactivity (level) are determined in Q2. Thereafter, in Q3, it is determined whether or not the activity is equal to or greater than a predetermined value A3. If the determination in Q3 is YES, it is determined in Q4 whether the comfort level is B1 or less. When the determination of Q4 is YES, the driver's current emotion is in the area 1-1 in FIG. At this time, in Q5, priority is given to the pleasant axis, and support for lowering discomfort (support for increasing comfort) is executed. In addition, support for lowering activity (increasing inactivity) may be performed.

前記Q4の判別でNOのときは、運転者の現在の感情が、図2における領域2−1または3−1にある状態となる。このときは、Q6において、活性軸を優先して、活性度を下げる支援が実行される。   When the determination in Q4 is NO, the driver's current emotion is in the region 2-1 or 3-1 in FIG. At this time, in Q6, priority is given to the active axis, and support for lowering the activity is executed.

前記Q3の判別でNOのときは、Q7において、活性度がA1以下であるか否かが判別される。このQ7の判別でYESのときは、Q8において、快度がB1以下であるか否かが判別される。このQ8の判別でYESのときは、運転者の現在の感情状態が領域1−3にある状態となる。このときは、Q9において、快軸を優先して、不快を下げる支援(快を上げる支援)が実行される。なお、合わせて、活性を上げる(非活性を下げる)支援を行うようにしてもよい。   If the determination in Q3 is NO, it is determined in Q7 whether or not the activity is A1 or less. When the determination in Q7 is YES, it is determined in Q8 whether or not the comfort level is B1 or less. When the determination in Q8 is YES, the current emotional state of the driver is in the region 1-3. At this time, in Q9, priority is given to the pleasant axis, and support for lowering discomfort (support for increasing comfort) is executed. In addition, support for increasing the activity (decreasing the inactivity) may be performed.

前記Q8の判別でNOのときは、運転者の現在の感情状態が、領域2−3または領域3−3にある状態である。このときは、Q10において、活性軸を優先して、活性度を上げる(非活性度を下げる)支援が実行される。   When the determination in Q8 is NO, the current emotional state of the driver is in the region 2-3 or the region 3-3. At this time, in Q10, priority is given to the active axis, and support for increasing the activity (decreasing the inactivity) is executed.

前記Q7の判別でNOのときは、Q11において、快度がB1以下であるか否かが判別される。このQ11の判別でYESのときは、運転者の現在の感情状態が、領域1−2にある状態である。このときは、Q12において、快軸を優先して、不快を下げる(快を上げる)支援が実行される。   If the determination in Q7 is NO, it is determined in Q11 whether or not the comfort level is B1 or less. When the determination in Q11 is YES, the current emotional state of the driver is in the region 1-2. At this time, in Q12, priority is given to the pleasant axis, and support for reducing discomfort (increasing comfort) is executed.

前記Q11の判別でNOのときは、運転者の現在の感情状態が、領域2−2または領域3−2にある状態であって、目標感情状態と同一状態である。よって、このときは、Q13に移行して、運転に適切な感情状態であると判定されるのみで、感情移行のための支援は実行されないものとなる。   When the determination in Q11 is NO, the current emotional state of the driver is in the region 2-2 or the region 3-2 and is the same as the target emotional state. Therefore, at this time, the process shifts to Q13 and it is only determined that the emotional state is appropriate for driving, and support for emotional transition is not executed.

前述したQ5、Q6、Q9、Q10、Q12での感情移行のための制御実行においては、前述したように、それに適した評価モデルが選定されて、この評価モデルに含まれるパラメータが変化するように行われる。以下、この点について、図8のフローチャートを参照しつつ説明する。   In the control execution for emotion transition in Q5, Q6, Q9, Q10, and Q12 described above, as described above, an evaluation model suitable for that is selected, and the parameters included in this evaluation model change. Done. Hereinafter, this point will be described with reference to the flowchart of FIG.

まず、図8のQ21において、感性を移行させる方向に対応した評価モデルが選択される(図1におけるS8での選択)。次いで、Q22において、選択された評価モデル中のパラメータが抽出される。この後、Q23において、選択されたパラメータを変化させるような制御内容でもって、目標感情状態に誘導するための支援が実行される。   First, in Q21 in FIG. 8, an evaluation model corresponding to the direction in which the sensitivity is shifted is selected (selection in S8 in FIG. 1). Next, in Q22, parameters in the selected evaluation model are extracted. After that, in Q23, support for guiding to the target emotion state is executed with the control content that changes the selected parameter.

次に、目標感情状態に誘導するための聴覚上あるいは視覚上の支援の具体的例について説明する。聴覚上は、次のような支援を行うことができる。不快を下げる支援として、警報音の音量を下げたり、警報発生のためのしきい値を上げたり(警報しずらい方向への変更)、快の音を選択してバックグラウンドとしてスピーカ部S7から流すことができる。また、快を上げる支援としては、快の音を選択してバックグラウンドや、快となるように調整されたエンジン音をスピーカ部S7から流すことができる。   Next, a specific example of auditory or visual support for guiding to a target emotion state will be described. Auditory can provide the following support. As support for lowering unpleasantness, lowering the volume of the alarm sound, raising the threshold value for generating an alarm (changing in a direction that is difficult to alarm), selecting a pleasant sound as a background from the speaker unit S7 It can flow. Further, as support for improving pleasure, a pleasant sound can be selected and the background or engine sound adjusted to be pleasant can be played from the speaker unit S7.

また、聴覚上、活性度を下げる支援としては、沈静効果のある音楽をスピーカ部S7から流すことができる(同じ音楽でもリズムを落として沈静化もできる)。また、活性度を上げる支援としては、高揚効果のある音楽をスピーカ部S7から流すことができる(同じ音楽でもリズムを上げて高揚化もできる)。   In addition, as a support for lowering the degree of activity on hearing, music with a calming effect can be played from the speaker unit S7 (the same music can also be calmed down with a reduced rhythm). Further, as support for raising the activity level, music having an uplifting effect can be played from the speaker unit S7 (the same music can also be raised by raising the rhythm).

視覚上は、次のような支援を行うことができる。不快を下げる支援として、不快となる視野の視認性を低下させることができる。すなわち、可変窓枠構造を採択して視界を狭めたり、ウインドガラスの透過率を低下させたり、ヘッドライトの配向範囲を狭める等により、例えば路肩の煩雑な風景を見えがたくすることができる。また、不快な視覚特徴を弱めることもできる(例えばサイドミラーやバックミラーの反射率を低下させたり、車室内照明の照度を低下させる等)。快を上げる支援としては、例えばナビゲーション装置を利用して、好みの風景が見れる経路案内を行う等のことができる。   The following assistance can be provided visually. As support for reducing discomfort, the visibility of uncomfortable visual fields can be reduced. That is, by adopting a variable window frame structure to narrow the field of view, to reduce the transmittance of the window glass, to narrow the orientation range of the headlight, for example, it is possible to make it difficult to see a complicated landscape on the road shoulder. In addition, unpleasant visual features can be weakened (for example, the reflectance of side mirrors and rearview mirrors is reduced, or the illuminance of vehicle interior lighting is reduced). As support for improving pleasure, for example, a navigation device can be used to provide route guidance for viewing a desired landscape.

活性度を下げる支援としては、例えば沈静効果のある車室内照明に変更することができる(寒色系の照明にしたり、照度を下げる)。また、活性度を上げる支援としては、高揚効果のある車室内照明に変更することができる(暖色系の照明にしたり、照度を上げる)。
視覚上の刺激変更のために、プロジェクションマッピングを利用して、部分的に視界を制限したり、車室内の模様雰囲気や照度を部分的に変更したり、運転者の前方に映像を投映する等のこともできる。
As support for lowering the degree of activity, for example, it can be changed to vehicle interior lighting with a calming effect (it can be cold-colored lighting or lower illuminance). In addition, as support for increasing the activity level, it can be changed to vehicle interior lighting having an uplifting effect (warm-colored lighting or illuminance is increased).
To change the visual stimulus, use projection mapping to partially limit the field of view, partially change the pattern atmosphere and illuminance in the passenger compartment, project images in front of the driver, etc. You can also.

聴覚上、視覚上のみならず、車両制御やその他の制御によっても目標感情状態へ誘導することもできる。例えば、快を上げるために、好みの風景(環境)になると、運転モードを車両の挙動が敏感になる方向に変更することができる(例えばアクセル感度の向上や、ステアリングハンドルの感度向上)。同様に、風景を楽しませるようにするために、車速を低下させたり、後続車との車間距離に依存させて車速操作(極力ゆっくりとした走行を確保)したり、ポンピングブレーキを自動的に行ったりハザードランプを自動点灯させることにより風景を楽しむことを促すこともでき、さらにナビゲーション装置によって近くの駐車可能な場所を提案する等のこともできる。また、嗅覚を利用して、快度や活性度を上げる(下げる)こともできる(複数種の香りを用意して、状況に応じて選択された香りを車室内に供給等)。さらに又、触覚、例えばステアリングハンドルの硬さやシートの硬さを変更する等によって、目標感情状態へ誘導することもできる。勿論、前述した各種手法の任意の2種類以上を適宜組み合わせて、目標感情状態へ誘導することもできる。   The target emotional state can be induced not only by hearing and vision but also by vehicle control or other control. For example, in order to improve comfort, when a favorite landscape (environment) is obtained, the driving mode can be changed to a direction in which the behavior of the vehicle becomes sensitive (for example, improvement in accelerator sensitivity and sensitivity of the steering wheel). Similarly, in order to entertain the scenery, the vehicle speed is reduced, the vehicle speed is controlled (depending on the distance between the following vehicles) and the pumping brake is automatically applied. In addition, it is possible to urge the user to enjoy the scenery by automatically turning on the hazard lamps, and to propose a nearby parking place by the navigation device. In addition, the olfaction can be used to increase (decrease) the degree of pleasure and activity (preparing a plurality of types of scents and supplying the scent selected according to the situation into the passenger compartment). Furthermore, it is also possible to induce the target emotional state by tactile sense, for example, changing the hardness of the steering handle or the hardness of the seat. Of course, any two or more of the various methods described above can be appropriately combined to induce the target emotional state.

以上実施形態について説明したが、本発明は、実施形態に限定されるものではなく、特許請求の範囲の記載された範囲において適宜の変更が可能である。車両においては、その装備を極力簡単化するため、図1に示す制御系や図3の各部11〜13のみを車両に搭載して、それ以外の制御系(各部11〜13を除く図3や図4)に示す部分は、車両と通信を行う情報センタに構成することができる。また、情報センタで取得された評価モデルについては、適宜通信によって車両の記憶部(データベース)に記憶させておくこともできる。年齢、性別等で分けた複数の評価モデルを設定することもできる(若年女性層、男性高齢者層等に応じた評価モデルを個々に設定する)。評価モデルを、特徴データについてのモーメントと自己相関と相互相関とのうち、少なくとも任意の2種類のみで設定するようにしてもよい(例えば、聴覚についての評価モデルをモーメントと相互相関とにより設定する一方、視覚についての評価モデルを、自己相関と相互相関とにより設定するか、あるいはモーメントと相互相関とにより設定するか、あるいはモーメントと自己相関と相互相関とにより設定する)。特に、視覚については、輝度のばらつき、対称性、一様性等を自己相関によって取得することができる。等勿論、本発明の目的は、明記されたものに限らず、実質的に好ましいあるいは利点として表現されたものを提供することをも暗黙的に含むものである。   Although the embodiments have been described above, the present invention is not limited to the embodiments, and appropriate modifications can be made within the scope of the claims. In the vehicle, in order to simplify the equipment as much as possible, only the control system shown in FIG. 1 and each part 11 to 13 of FIG. 3 are mounted on the vehicle, and the other control system (FIG. The portion shown in FIG. 4) can be configured in an information center that communicates with the vehicle. In addition, the evaluation model acquired at the information center can be stored in the storage unit (database) of the vehicle by communication as appropriate. It is also possible to set a plurality of evaluation models divided by age, gender, etc. (Evaluation models corresponding to young females, male seniors, etc. are individually set). The evaluation model may be set with at least any two types of moment, autocorrelation, and cross-correlation for feature data (for example, an evaluation model for hearing is set based on moment and cross-correlation On the other hand, a visual evaluation model is set by autocorrelation and cross-correlation, or by moment and cross-correlation, or by moment, auto-correlation and cross-correlation). In particular, for vision, variations in brightness, symmetry, uniformity, and the like can be acquired by autocorrelation. Of course, the object of the invention is not limited to what is explicitly stated, but also implicitly includes providing what is substantially preferred or expressed as an advantage.

本発明は、車両の運転者を好ましい目標感情状態へ誘導する上で好ましいものとなる。   The present invention is preferable in guiding the vehicle driver to a desirable target emotional state.

S1:生体センサ
S2:ドライバー感情検出部
S3:ドライバー感情判定部
S4:感情上方制御パラメータ設定部
S5:感覚情報制御部
S6:表示部(視覚上の刺激付与)
S7:スピーカ部(聴覚上の刺激付与)
S1: Living body sensor S2: Driver emotion detection unit S3: Driver emotion determination unit S4: Emotion upper control parameter setting unit S5: Sensory information control unit S6: Display unit (giving visual stimulus)
S7: Speaker part (stimulation on hearing)

Claims (6)

車両の運転者を目標感情状態に向けて誘導するようにした運転支援システムであって、
人間の感覚にかかわる評価対象に関する情報を取得する情報取得手段と、
人間脳内の階層的な感覚情報処理を模擬して構成され、前記情報取得手段で取得された情報について該階層毎に特徴データを算出する特徴算出手段と、
前記特徴算出手段で算出された特徴データについて感覚統計量を算出する感覚統計量算出手段と、
前記感覚統計量算出手段で算出された感覚統計量のうち、感情との関連が高い特定の感覚統計量を決定する感覚統計量決定手段と、
運転者の感情に関する感情情報を検出する感情情報検出手段と、
前記感情情報検出手段で検出された感情情報から、運転者が有する感情を判定する感情判定手段と、
前記特定の感覚統計量のうち、前記感情判定手段で判定された運転者の感情を前記目標感情状態に向けて誘導するのに適した感覚統計量を選択する感覚統計量選択手段と、
前記感覚統計量選択手段で選択された感覚統計量が変化するように感覚的な刺激を付与
して、運転者の感情を前記目標感情状態に向かわせる支援を行う支援手段と、
を備えていることを特徴とする運転支援システム。
A driving support system that guides a driver of a vehicle toward a target emotional state,
An information acquisition means for acquiring information about an evaluation object related to human senses;
A feature calculation unit configured to simulate hierarchical sensory information processing in the human brain, and to calculate feature data for each layer of the information acquired by the information acquisition unit;
Sensory statistic calculating means for calculating sensory statistic for the feature data calculated by the feature calculating means;
Sensory statistic determining means for determining a specific sensory statistic highly related to emotion among sensory statistics calculated by the sensory statistic calculating means;
Emotion information detection means for detecting emotion information related to the driver's emotion;
From the emotion information detected by the emotion information detection means, emotion determination means for determining the feeling of the driver,
Sensory statistic selection means for selecting a sensory statistic suitable for guiding the driver's emotion determined by the emotion determination means among the specific sensory statistic toward the target emotion state;
Providing a sensory stimulus so that the sensory statistic selected by the sensory statistic selecting unit is changed, and supporting means for supporting the driver's emotion toward the target emotion state;
A driving support system characterized by comprising:
請求項1において、
前記目標感情状態が、快・不快と活性・非活性との2軸をパラメータとする所定領域に設定されている、ことを特徴とする運転支援システム。
In claim 1,
The driving support system, wherein the target emotional state is set in a predetermined region having two axes of pleasant / unpleasant and active / inactive as parameters.
請求項1または請求項2において、
前記評価対象に関する情報が、視覚に関する情報と聴覚に関する情報との少なくとも一方とされ、
前記支援手段による感覚的な刺激の付与が、視覚上の刺激と聴覚上の刺激との少なくとも一方とされている、
ことを特徴とする運転支援システム。
In claim 1 or claim 2 ,
The information about the evaluation target is at least one of information about vision and information about hearing,
Giving a sensory stimulus by the support means is at least one of a visual stimulus and an auditory stimulus,
A driving support system characterized by that.
請求項1ないし請求項3のいずれか1項において、
感覚統計量をパラメータとして感情の評価値を決定する評価モデルが設定され、
前記感覚統計量選択手段は、前記目標感情状態に向けて誘導するための感情に対応した前記評価モデルに含まれる感覚統計量を、前記特定の感覚統計量として決定する、
ことを特徴とする運転支援システム。
In any one of Claims 1 thru | or 3,
An evaluation model is set that determines the evaluation value of emotion using sensory statistics as a parameter,
The sensory statistic selecting means determines, as the specific sensory statistic, a sensory statistic included in the evaluation model corresponding to an emotion for guiding toward the target emotional state.
A driving support system characterized by that.
請求項4において、
前記評価モデルを学習補正する学習補正手段をさらに備えている、ことを特徴とする運転支援システム。
In claim 4,
A driving support system, further comprising learning correction means for learning correction of the evaluation model.
請求項1ないし請求項5のいずれか1項において、
前記感覚統計量は、前記特徴データの自己相関および相互相関とされている、ことを特徴とする運転支援システム。
In any one of Claims 1 thru | or 5,
The driving assistance system, wherein the sensory statistic is an autocorrelation and a cross-correlation of the feature data.
JP2016231121A 2016-11-29 2016-11-29 Driving support system Active JP6428748B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016231121A JP6428748B2 (en) 2016-11-29 2016-11-29 Driving support system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016231121A JP6428748B2 (en) 2016-11-29 2016-11-29 Driving support system

Publications (2)

Publication Number Publication Date
JP2018086135A JP2018086135A (en) 2018-06-07
JP6428748B2 true JP6428748B2 (en) 2018-11-28

Family

ID=62492842

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016231121A Active JP6428748B2 (en) 2016-11-29 2016-11-29 Driving support system

Country Status (1)

Country Link
JP (1) JP6428748B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021012409A (en) * 2019-07-03 2021-02-04 株式会社デンソー On-vehicle system
JP7587107B2 (en) * 2020-07-29 2024-11-20 テイ・エス テック株式会社 Vehicle interior environment setting device, vehicle, and vehicle interior environment setting method
JP7549804B2 (en) * 2021-03-02 2024-09-12 マツダ株式会社 Emotion estimation device

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4325271B2 (en) * 2003-05-12 2009-09-02 日産自動車株式会社 Status detection device and status detection system
JP2008013004A (en) * 2006-07-04 2008-01-24 Fuji Heavy Ind Ltd Driving support system with aroma generation
JP2008062852A (en) * 2006-09-08 2008-03-21 Fujitsu Ten Ltd Vehicle controller
JP5146271B2 (en) * 2008-11-07 2013-02-20 トヨタ自動車株式会社 Vehicle scent providing device and vehicle scent providing method
JP5987923B2 (en) * 2015-01-08 2016-09-07 マツダ株式会社 Driving assistance device based on driver emotion
JP6213489B2 (en) * 2015-01-29 2017-10-18 マツダ株式会社 Vehicle occupant emotion response control device

Also Published As

Publication number Publication date
JP2018086135A (en) 2018-06-07

Similar Documents

Publication Publication Date Title
CN112867528A (en) System and method for predicting and preventing motion sickness
JP5842857B2 (en) Arousal improvement device
Crane Direction specific biases in human visual and vestibular heading perception
JP6428748B2 (en) Driving support system
WO2017104793A1 (en) System for enhancing sensitivity of vehicle occupant
JP2018189720A (en) Information output control device, information output control method, information output system and program
KR101540561B1 (en) An Active Neuro-feedback Apparatus and Control method thereof
JP7200856B2 (en) Relaxation determination device, relaxation determination method, and relaxation induction device
Xiong et al. Visual and auditory spatial localization in younger and older adults
Hellier et al. The influence of auditory feedback on speed choice, violations and comfort in a driving simulation game
DE102022205867A1 (en) Device and method for controlling vehicle noise
US20260053405A1 (en) Method and assembly for determining a representation which indicates the activity of a locus coeruleus system of a user
JP6668999B2 (en) Driving support device
WO2018030018A1 (en) Driving assistance device
KR20200057810A (en) Vehicle and control method for the same
CN120348303A (en) Intelligent control method and system for automobile cabin based on image acquisition
JP7549804B2 (en) Emotion estimation device
CN117540161A (en) Dizziness grade assessment method, dizziness relieving device, equipment and medium
JP2019028732A (en) Device for controlling operation by analyzing mood from voice or the like
JP7064195B2 (en) Simulated driving device and simulated driving method
JP2017091255A (en) Communication support system and communication support method
JP7592471B2 (en) Information processing device, information processing method, and program
JP2017217226A (en) Image display device and computer program
KR20260040733A (en) Virtual environment content management apparatus and method
JP2018088132A (en) Kansei evaluation system

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180320

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180410

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181015

R150 Certificate of patent or registration of utility model

Ref document number: 6428748

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150