JP4244376B2 - Vehicle information providing device - Google Patents
Vehicle information providing device Download PDFInfo
- Publication number
- JP4244376B2 JP4244376B2 JP2003047239A JP2003047239A JP4244376B2 JP 4244376 B2 JP4244376 B2 JP 4244376B2 JP 2003047239 A JP2003047239 A JP 2003047239A JP 2003047239 A JP2003047239 A JP 2003047239A JP 4244376 B2 JP4244376 B2 JP 4244376B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- output
- auditory
- message
- visual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 230000000007 visual effect Effects 0.000 claims description 94
- 238000000034 method Methods 0.000 claims description 17
- 238000004904 shortening Methods 0.000 claims description 9
- 239000000446 fuel Substances 0.000 description 14
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000002347 injection Methods 0.000 description 2
- 239000007924 injection Substances 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 230000008014 freezing Effects 0.000 description 1
- 238000007710 freezing Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、視覚情報と聴覚情報を組み合わせて利用者に各種情報を提供する車両用情報提供装置に関し、特に視覚情報提供手段として画面内に各種視覚情報を切換表示するマルチディスプレイ手段、聴覚情報提供手段として音声合成手段を用い、その時々の状況に合った情報提供を行う車両用情報提供装置に関する。
【0002】
【従来の技術】
この種の車両用情報提供装置は、例えば下記特許文献1に記載されているものが知られている。当該特許文献1に記載の車両用情報提供装置は、ディスプレイ手段(視覚情報提供手段)と音声出力手段(聴覚情報出力手段)とを有し、ディスプレイ手段には視覚情報として走行距離値や電圧値、時刻といった通常情報と所定の警報情報を表示させ、音声出力手段には緊急を要する情報や視覚情報では誤解を招くおそれのある情報を聴覚情報として音声出力するよう構成され、ディスプレイ手段と音声出力手段の双方を通じて内容的に重複する特定の警報情報を提供する点も記載されている。
【0003】
【特許文献1】
特開平9−66783号公報
【0004】
【発明が解決しようとする課題】
しかしながら、前記公知例に記載されているように、単に視覚情報と聴覚情報を多重出力するだけでは、例えば利用者が出力情報を認識しづらかったり、あるいは煩わしさを感じることがある。従って、視覚情報と聴覚情報の双方にて利用者に情報提供を行うに場合には、その提供形態に工夫を加え、利用者とのヒューマン・マシン・インターフェース(HMI)を向上させる必要がある。
【0005】
本発明は、上記の点に鑑みてなされたものであり、その主な目的は、視覚情報と聴覚情報の特性を活かすことにより、利用者による提供情報の認識性を高め、ヒューマン・マシン・インターフェース(HMI)を向上させた車両用情報提供装置の提供することにある。
【0006】
【課題を解決するための手段】
本発明は、前記目的を達成するため、各種視覚情報を画面内に切換表示する視覚情報提供手段と、音声による聴覚メッセージ情報を出力する聴覚情報提供手段と、入力情報に応じて前記視覚情報提供手段と前記聴覚情報提供手段に前記視覚情報と前記聴覚メッセージ情報を出力させる制御手段とを備え、前記制御手段は前記入力情報に基づく所定の提供条件が成立すると、特定情報に係わる前記視覚情報と前記聴覚メッセージ情報のうち前記聴覚メッセージ情報より先に前記視覚情報の出力を行い、前記聴覚メッセージ情報の出力終了後に前記視覚情報の出力を継続する提供処理を行い、さらに前記聴覚メッセージ情報の出力終了後、前記視覚情報の出力を所定時間継続した後、その前記画面内における表示サイズを縮小して継続出力することを特徴とする。
【0007】
また本発明は、前記制御手段が前記視覚情報の表示サイズを縮小するとき、縮小前の内容に対し、縮小後の内容を短縮することを特徴とする。
【0008】
また本発明は、前記視覚情報が前記特定情報に相応する文字メッセージからなり、短縮後の前記視覚情報が短縮前の前記視覚情報を構成する特定の文字を含むことを特徴とする。
【0009】
また本発明は、前記制御手段が前記聴覚情報の出力終了後、前記視覚情報の出力を所定時間、または前記入力情報に基づく解除条件が成立するまで継続させることを特徴とする。
【0011】
また本発明は、前記視覚情報と前記聴覚メッセージ情報の双方が前記特定情報に相応する文字・聴覚メッセージからなり、前記制御手段は前記提供処理を行う際、前記聴覚メッセージ情報の聴覚メッセージの内容を前記視覚情報の文字メッセージの内容に対し、短縮して出力させることを特徴とする。
【0012】
また本発明は、前記聴覚メッセージが前記視覚情報を構成する前記文字メッセージ中、少なくとも特定の前記文字メッセージに合致するメッセージ情報を含むことを特徴とする。
【0013】
また本発明は、前記制御手段が前記聴覚メッセージ情報の出力終了後に前記視覚情報の出力を所定時間継続させた後に終了させ、前記視覚情報の出力終了から所定時間経過したとき、あるいは、前記入力情報として車両に装備されたキースイッチの動作情報を受信したとき、前記所定の提供条件が継続しているか否かを判定し、その提供条件が継続していれば、前記提供処理を繰り返すことを特徴とする。
【0014】
また本発明は、前記制御手段が前記聴覚メッセージ情報の出力終了後に前記視覚情報の出力を所定時間継続させた後に終了させ、前記視覚情報の出力終了から所定時間経過したとき、あるいは、前記入力情報として車両に装備されたキースイッチの操作情報を受信したとき、前記所定の提供条件が継続しているか否かを判定し、その提供条件が継続していたとき、前記視覚情報だけを出力させることを特徴とする。
【0015】
また本発明は、前記制御手段が前記所定の提供条件が複数種類成立したとき、予め定められた優先順序に従って、前記種類毎に前記特定情報に係わる前記提供処理を行うことを特徴とする。
【0016】
また本発明は、前記制御手段が前記聴覚情報を出力するとき、車両に装備されたオーディオ装置の音量をミユートさせることを特徴とする。
【0017】
【発明の実施の形態】
以下、本発明の実施の形態を添付図面に基づいて説明する。
図1は、車両用情報提供装置の外観を示す正面図である。ここで車両用情報提供装置1は、各種視覚情報を切換表示するマルチディスプレイ装置10と、指針式のアナログゲージ20とを有している。マルチディスプレイ装置10としては、例えばTFT型LCD素子、有機EL素子からなる画面を有するがディスプレイパネルが適用可能である。またアナログゲージ20はそれぞれ回転計21,燃料計22,温度計23を構成する。
【0018】
図2は、図1の車両用情報提供装置1のシステム構成を示すブロック図である。ここで車両用情報提供装置1は、入力端子101a〜101cと、出力端子101d,101eと、入力インターフェース102aと、出力インターフェース102bと、車両用情報提供装置1を制御する制御手段103と、記憶手段104と、制御手段103の出力側に各々接続される表示駆動手段105及び音/音声合成手段106及びゲージ駆動手段107と、これら表示駆動手段105及び音声合成手段106及びゲージ駆動手段107の出力側にそれぞれ接続されるマルチディスプレイ装置10及びアンプ108とアナログゲージ20とで構成されている。なお本実施形態では表示駆動手段105とマルチディスプレイ装置10とで視覚情報提供手段Vが構成され、また音声合成手段106とアンプ108とスピーカ140で聴覚情報出力手段Aが構成される。
【0019】
入力端子101aは、車両に装備されたキースイッチ(イグニツションキーまたは電源スイッチ)の作動情報(入力情報)を入力する端子、入力端子101bは、例えば車両状態を検出する状態検出手段(例えば回転センサ、燃料センサ、温度センサ、速度センサ、走行距離センサ、燃料噴射量センサ、ドアセンサ、外気温センサ、タイヤ空気圧センサ等のセンサ類)からの計測・検出情報(入力情報)を入力する端子(複数本)、入力端子101cは、車両に装備された音声認識装置120からの指示情報(入力情報)を入力する端子であり、これら入力端子101a〜101cは、入力インターフェース102aに接続されている。
【0020】
一方、出力端子101dは、車両に装備されたオーディオ装置130へのミユート情報(ミュート信号)を出力する端子、出力端子101eは、アンプ108の出力情報を出力する端子であり、これら出力端子101d,101eは、出力インターフェース102bを介してオーディオ装置130及びスピーカ140にそれぞれ接続されている。
【0021】
制御手段103は、マイクロコンピュータからなり、入力インターフェース102aを介して受信される各入力情報を処理し、その処理結果に基づいてマルチディスプレイ装置10,アナログゲージ20のそれぞれを表示駆動手段105,ゲージ駆動手段107を通じて動作させると共に、音声合成手段106,アンプ108,オーディオ装置130を通じてスピーカ140を動作させる。
【0022】
記憶手段104には、制御手段103によって実行される入力情報処理プログラムが格納される他、マルチディスプレイ装置10に表示する背景画像パターンや表示画像パターンが画像データとして格納されており、制御手段103は、入力情報処理プログラムに基づいて記憶手段104から表示すべき画像データを選択し、表示制御手段105を介してマルチディスプレイ10に視覚情報として表示させる。
【0023】
音/音声合成手段106は、例えば音声合成ICからなり、種々の聴覚情報が聴覚データとして記憶されており、制御手段103は、入力情報処理プログラムに基づいて音/音声合成手段106から出力すべき聴覚データ選択し、この選択された聴覚データをアンプ108にて増幅すると共に出力端子101eを介してスピーカ140に送信し聴覚情報として出力させる。
【0024】
なお本実施形態では、車両用情報提供装置1外に装備されたオーディオ装置130のスピーカ140を聴覚情報を提供する際に利用しているが、車両用情報提供装置1内に専用のスピーカを設けることもできる。
【0025】
図3〜図5は、視覚情報出力及び聴覚情報出力のタイミング図、図6〜図8は、視覚情報の表示例を示す正面図である。
【0026】
次に図2〜図11を用いて本発明の特徴について説明する。制御手段103は、入力端子101a〜101cを介して入力情報を入手し、これら入力情報に応じ、視覚情報出力手段Vによる視覚情報の出力(表示)と、聴覚情報出力手段Aによる聴覚情報の出力を行わせる。
【0027】
具体的には、まず、図3に沿って説明する。制御手段103は、入力端子101aを通じて入手したキースイッチからの動作情報に基づいてキースイッチの動作状態(オン・オフ)を判定し、時刻t1にてキースイッチがオン状態に切り替わったと判定すると、視覚情報出力手段V(マルチディスプレイ装置10)の画面に視覚情報として背景画像201を表示する(図6参照)。なお、このとき背景画像201中に例えば「おはようございます」、「こんにちは」、「こんばんは」、「WELCOME」等の挨拶情報を表示したり、聴覚情報出力手段Aを介してこれら挨拶情報を音声情報として出力してもよい。
【0028】
次に制御手段103は、入力端子101bを通じて入手したセンサ類(この場合、燃料センサや噴射量センサ、走行距離センサ)からの入力情報に基づいて走行可能距離の演算を行い、その演算結果が例えば所定の走行可能距離に満たない場合、燃料不足情報(特定情報)に係わる警報条件(所定の提供条件)が成立したと判断し(時刻t2)、燃料不足情報について以下の提供処理を行う。
【0029】
まず視覚情報出力手段V(マルチディスプレイ装置10)に表示されている背景画像201上に、燃料不足情報に係わる視覚情報として「走行可能距離50km給油してください」なる警報メッセージ情報(文字情報メッセージ)202を表示させる(図7)。
【0030】
この警報メッセージ情報202は、所定の背景領域202aを有し、その背景領域202aの色は単一色で大きさはマルチディスプレイ装置10の画面の最大面積よりも小さく設定されている(この状態の背景領域202aを含んだ警報メッセージ情報202の全体の大きさを通常表示サイズnsとする)。
【0031】
次に制御手段103は、警報メッセージ情報202の出力開始(時刻t2)から所定時間経過後の時刻t3をもって、聴覚情報出力手段Aに特定情報(燃料不足情報)に係わる聴覚情報を出力させる。
【0032】
この聴覚情報は、「ポーン」なるビープ音と「給油してください」なる音声とで構成される音/音声メッセージ情報(聴覚メッセージ)301からなり(図7参照)、最初に「ポーン」なるビープ音が出力され(時刻t3)、それが終了すると、「給油してください」なる音声に変化するもので(時刻t4)、「給油してください」なる音声メッセージ情報部分は、「走行可能距離50km給油してください」なる警報メッセージ情報202の内容に対して短縮した内容、すなわち、警報メッセージ情報202中、「走行可能距離50km」なる文字情報部分を省略し「給油してください」なる文字情報部分を音声にて読み上げる出力となり、この結果、警報メッセージ情報202中、特定の文字メッセージ(ここでは「給油してください」)に合致する(聴覚)メッセージ情報となる。
【0033】
一方、警報メッセージ情報202は、時刻t2から開始され、音/音声メッセージ情報301の出力が終了する時刻t5を経過した後の時刻t6まで通常表示サイズnsで継続され、時刻t6の経過後は、「燃料給油」なる縮小表示サイズdsに切り替わり(図8)、その内容も通常表示サイズnsの警報メッセージ情報202の内容に対して短縮される。この場合、短縮とはメッセージ情報を構成する文字情報の削減を意味し、通常表示サイズnsの警報メッセージ情報202の一部を構成する「給油」なる文字に新たに「燃料」なる文字を加えて「燃料給油」なるメッセージ情報を構成するもので、この縮小表示サイズdsでの警報メッセージ情報202は、時刻t6からキースイッチオフとなる時刻t7まで継続する。
【0034】
また制御手段103は、警報条件の成立(時刻t2)直後、音/音声メッセージ情報301の出力が開始される時刻t3より前にオーディオ装置120に対し、出力端子101dを介してミユート指示信号を出力し、オーディオ装置120の音量を消音または小さくする処理を行い、このミュート処理は、音/音声メッセージ情報301の出力が終了する時刻t5以後も所定時間継続し、時刻t6をもって終了するが、このミュート処理を行う時期は、少なくとも音/音声メッセージ情報301出力期間(時刻t3〜時刻t5)継続させることが望ましい。
【0035】
次に制御手段103は、時刻t7のキースイッチオフ後、時刻t8にて再びキースイッチのオンを判定すると、警報条件(所定の提供条件)の成立の有無を確認し、警報条件が成立していた場合、再び通常表示サイズnsの警報メッセージ情報202を表示させ(図7参照)、その後、時刻t9にて縮小表示サイズdsに切り換えて表示を継続するが(図8参照)、この場合、警報条件の再成立となるので、聴覚情報の出力は行わず、警報メッセージ情報202のみの出力となり、ミュート処理は行われない。
【0036】
次に図4に基づき、所定の提供条件以外の成立例として、キースイッチの抜き忘れに係わる警報条件が成立した場合を説明する。
【0037】
制御手段103は、キースイッチのオフ後(時刻t11)に、キースイッチの存在有無(キーシリンダへの挿入有無)に関する入力情報やドアセンサからのドア開閉に関する入力情報を入手し、キースイッチが存在しているにも係わらずドアが開放状態にあるとの警報条件が成立したと判断すると(時刻t12)、時刻t12から所定時間経過後の時刻t13にてキースイッチの抜き忘れに関する聴覚情報出力を開始する。この際、聴覚情報は、音/音声メッセージ情報301と同様、最初に「ポーン」なるビープ音が出力され(t13)、それが終了すると、時刻t14にて「キーを抜いてください」なる音声メッセージ情報に変化し、この音声メッセージ情報301の出力は時刻t15で一旦終了する。またこの音/音声メッセージ情報301は、時刻t13〜時刻t15に渡る出力を1サイクルとし、キースイッチをキーシリンダから抜く等の解除条件が成立するまで(時刻t16)の間、少なくとも2サイクル以上繰り返されるが、この場合は警報メッセージ情報202の出力は行われない。またミュート処理は、警報条件の成立となる時刻t12から解除条件の成立となる時刻t16までの期間中、継続されるが、音/音声メッセージ情報301の出力サイクル毎にミュート処理を実行してもよい。
【0038】
次に、図5、図9〜図11に基づき、所定の提供条件が重複して成立した場合を説明する。
【0039】
制御手段103は、キースイッチがオン状態にあり(時刻t17)、次に第1,第2の警報条件(第1の所定の提供条件,第2の所定の提供条件)のそれぞれについて警報条件が成立したか否かを判定する。
【0040】
このとき、制御手段103は、入力端子101aを通じて外気温センサから外気温情報を入手し、それが所定温度よりも低い(例えば氷点下)の場合、スリップ注意情報(第1の特定情報)に係わる第1の警報条件(第1の所定の提供条件)が成立したと判断し、視覚情報提供手段Vと聴覚情報提供手段Aにスリップ注意情報に係わる視覚情報と聴覚情報の双方を出力させる。また制御手段103は、入力端子101aを通じてタイヤ空気圧センサから空気圧情報を入手し、それが所定空気圧よりも小さい場合、タイヤ空気圧低下情報(第2の特定情報)に係わる第2の警報条件(第2の所定の提供条件)が成立したと判断し、視覚情報提供手段Vと聴覚情報提供手段Aにタイヤ空気圧低下情報に係わる視覚情報と聴覚情報の双方を出力させる。
【0041】
ここで、例えば時刻t18にて第1,第2の警報条件の双方が成立した場合、制御手段103は、所定の優先順序に従って各警報条件毎に以下の提供処理を実行する。
【0042】
まず、制御手段103は、第2の警報条件に対し第1の警報条件を優先させ、時刻t18にて視覚情報提供手段Vに、スリップ注意情報に係わる視覚情報として「外気温−2度C 路面の凍結が疑われます スリップに注意してください」なる警報メッセージ情報202(文字メッセージ)を表示させる(図9)。
【0043】
この警報メッセージ情報202の概要は、図7記載の燃料不足情報の場合と同様の背景領域202aを有し、ここでは通常表示サイズnsで表示される。
【0044】
次に制御手段103は、聴覚情報提供手段Aにスリップ注意情報に係わる聴覚情報を出力させる。この聴覚情報は「ポーン」なるビープ音と「スリップに注意してください」なる音声メッセージとで構成される音/音声メッセージ情報(聴覚メッセージ)301からなり(図9参照)、時刻t19をもって最初に「ポーン」なるビープ音が出力され、それが終了する時刻t20をもって、「スリップに注意してください」なる音声メッセージ情報情報を出力させる。なおこの音/音声メッセージ情報301の音声メッセージ部分も「外気温−2度C 路面の凍結が疑われます スリップに注意してください」なる警報メッセージ情報202の内容に対し短縮した内容に相当しており、警報メッセージ情報202中、「外気温−2度C」なる文字情報部分を省略し「スリップに注意してください」なる文字情報部分を音声情報として読み上げる出力となる。
【0045】
一方、警報メッセージ情報202は、音/音声メッセージ情報301の出力が終了する時刻t21を経過した後の時刻t22まで継続され、その間(時刻t18〜時刻t22)は通常表示サイズnsで出力される。
【0046】
次に制御手段103は、時刻t23をもって、視覚情報提供手段Vに、タイヤ空気圧低下情報に係わる視覚情報として「右前タイヤ 空気圧が不足しています」なる警報メッセージ情報(文字メッセージ)202を表示させる(図10)。
【0047】
この警報メッセージ情報202の概要は、図9記載のスリップ注意情報の場合と同様、背景領域202aを有し、ここでは通常表示サイズnsで表示される。
【0048】
次に制御手段103は、聴覚情報提供手段Aにタイヤ空気圧低下情報に係わる聴覚情報が出力される。この聴覚情報も「ポーン」なるビープ音と「右前タイヤ空気圧が不足しています」なる音声メッセージとで構成される音/音声メッセージ情報(聴覚メッセージ)301からなり(図10参照)、時刻t24をもって、最初に「ポーン」なるビープ音を出力させ、それが終了する時刻t25をもって、「右前タイヤ空気圧が不足しています」なる音声メッセージを出力させる。なおこの音声メッセージ情報301は、警報メッセージ情報202を省略(短縮)せずに読み上げる音声情報出力に相当する。
【0049】
一方、警報メッセージ情報202は、音/音声メッセージ情報301の出力が終了する時刻t26を経過した後の時刻t27まで継続され、その間(時刻t23〜時刻t27)は通常表示サイズnsで出力される。
【0050】
次に制御手段103は、時刻t27から所定時間経過後の時刻t28をもって、スリップ注意情報とタイヤ空気圧低下情報に係わる警報メッセージ情報202の表示サイズを通常表示サイズnsから縮小表示サイズdsに変化させて並列状態に表示させる(図11参照)。なお縮小表示サイズdsとなる各警報メッセージ情報202は、スリップ注意情報の場合が「スリップ注意」なるメッセージ情報、タイヤ空気圧低下情報の場合が「空気圧不足」なるメッセージ情報となり、双方とも通常表示サイズnsを構成する文字情報の一部を含むように縮小されると共に短縮されている。なお制御手段103によりミュート処理は、聴覚情報の出力に応じて実行するように設定されている。
【0051】
なお、視覚情報と聴覚情報の双方を出力する所定の提供条件が成立する例は、上記に限らず、例えば他の実施形態として図示しないが、キースイッチのオン時に「安全運転を心がけましょう」なる視覚情報を警報メッセージ情報202として出力すると共に、この視覚情報を構成する文字情報を読み上げる形でこれと同内容の音声メッセージ情報を聴覚情報として出力してもよく、この際、聴覚情報より先に視覚情報の出力が開始され、聴覚情報の出力終了後に視覚情報の出力が継続する提供処理を実行すればよい。
【0052】
さらに、所定情報は警報情報に限られるものではなく、例えば他の実施形態として図示しないが、キースイッチのオン・オフに基づいて、「Aさん おはようございます」や「Aさん お疲れさまです」等の挨拶情報であってもよい。
【0053】
また、図3に示した例では、視覚情報の出力を時刻t2〜時刻t7に渡って、自動的に継続させたが、例えば利用者が操作可能な操作スイッチや利用者の声に基づいて所定の処理を行う音声認識装置120を介した解除指示情報(入力情報)を入力端子101cを介して入手した時点(図示省略)で、視覚情報の出力自体を停止させてもよいし、通常表示サイズnsの出力時に解除指示情報を入手した場合は、縮小表示サイズdsに変更するようにしてもよい。
【0054】
以上のように本実施形態によれば、少なくとも背景画像201,警報メッセージ情報202からなる視覚情報を含む各種視覚情報を画面内に切換表示する視覚情報提供手段Vと、少なくとも音/音声メッセージ情報301を含む聴覚情報を出力する聴覚情報提供手段Aと、各種入力情報に応じて視覚情報提供手段Vと聴覚情報提供手段Aに視覚情報と聴覚情報を出力させる制御手段103とを備えており、制御手段103は入力情報に基づいて所定の提供条件が成立すると、特定情報に係わる警報メッセージ情報202と音/音声メッセージ情報301のうち、音/音声メッセージ情報301より先に警報メッセージ情報202の出力を行い、音/音声メッセージ情報301の出力終了後に警報メッセージ情報202の出力を所定時間、または入力情報に基づく解除条件が成立するまで継続する提供処理を行うことをにより、利用者による提供情報の認識性を高めることができる。
【0055】
すなわち、特定情報に係わる警報メッセージ情報202と音/音声メッセージ情報301の双方を平行して(同時に)出力するにあたり、警報メッセージ情報202の出力開始後に音/音声メッセージ情報301の出力を行うことによって、利用者の注意喚起性を音/音声メッセージ情報301にて補完することができる。これは、例えば利用者は音/音声メッセージ情報301が出力されると、反射的に視覚情報(警報メッセージ情報202)に注意を向ける傾向に着目したものである。また音/音声メッセージ情報301の出力が終了しても警報メッセージ情報202の出力を継続させることによって、警報メッセージ情報202に持続性を持たせ、提供情報を利用者に確実に認識させることができる。これは音/音声メッセージ情報301の出力終了と同時に警報メッセージ情報202の出力を停止させると、利用者が提供情報の内容を正確に認識できないことがあることを考慮したものである。
【0056】
従って、制御手段103を通じてこのような提供処理を実行させることにより、視覚情報と聴覚情報の特性を活かして利用者による提供情報の認識性を高め、ヒューマン・マシン・インターフェース(HMI)を向上させることができる。
【0057】
なお本実施形態では、特定情報の内容を表さない単なる警報音に過ぎないビープ音と、これに続いて出力され、特定情報の内容を表す音声メッセージとで聴覚情報301を構成したが、警報音に過ぎないビープ音の出力は任意である。またビープ音を出力する場合、例えば、ビープ音を最初に出力した後、視覚情報を出力を開始し、その後、音声メッセージを出力し、その音声メッセージの出力が終了した後、視覚情報の出力が継続するようにしてもよい。
【0058】
また本実施形態では、制御手段103が、音/音声メッセージ情報301の出力終了後、警報メッセージ情報202の出力を所定時間縦続する際に、画面内における表示サイズを通常表示サイズnsから縮小表示サイズdsに切り換えることにより、利用者は特定情報を認識した後、または特定情報を認識しながら、通常の画面表示を見ることが可能となり、画面表示を有効利用することができる。
【0059】
また本実施形態では、制御手段103が警告メッセージ情報202の表示サイズを通常表示サイズnsから縮小表示サイズdsに縮小する際、縮小前の内容に対し、縮小後の内容を短縮することにより、画面表示を有効利用することができる。
【0060】
また本実施形態では、警報メッセージ情報202が特定情報に相応する文字メッセージからなり、短縮後の警報メッセージ情報202が短縮前の警報メッセージ情報202を構成する特定の文字メッセージを含んで構成されることにより、コンパクトでありながら認識性の高い表示を行うことができる。なおこの場合、特定の文字メッセージは、認識性を考慮して選定すればよい。
【0061】
また本実施形態では、警報メッセージ情報202と音/音声メッセージ情報301の双方が特定情報に相応する文字・音声メッセージからなり、制御手段103は提供処理を行う際、音/音声メッセージ情報301中、音声メッセージ情報の内容を警報メッセージ情報202の内容に対し、短縮して出力させることにより、利用者は確実に提供情報を聞き取ることが可能であり(音声メッセージは長い程、利用者に的確に認識させることが困難になる)、かつ詳細は必要に応じ警報メッセージ情報202を読み取れば良いので、HMIの向上に寄与することができる。
【0062】
また本実施形態では、音/音声メッセージ情報301のうち音声メッセージ情報が少なくとも警報メッセージ情報202を構成する特定の文字メッセージに合致する音声(聴覚)メッセージを含むことにより、短いながらも認識性の高い聴覚出力を行うことができる。
【0063】
また本実施形態では、警告メッセージ情報202の出力終了から所定時間経過したとき、あるいは、入力情報として車両に装備されたキースイッチの動作情報を受信したとき、所定の提供条件が継続しているか否かを判定し、所定の提供条件が継続していれば、(警告メッセージ情報202と音/音声メッセージ情報301の)提供処理を繰り返すことにより、利用者は確実に警報を認識でき、HMIの向上が図られる。
【0064】
また本実施形態では、制御手段103が警告メッセージ情報202の出力終了から所定時間経過したとき、あるいは、入力情報として車両に装備されたキースイッチの動作情報を受信したとき、所定の提供条件が継続しているか否かを判定し、所定の提供条件が継続していたとき、警告メッセージ情報202だけを出力させることにより、再び所定の提供条件が継続していた場合、音/音声メッセージ情報301を抑止可能としたので、利用者の煩わしさを緩和することができる。
【0065】
また本実施形態では、制御手段103は、所定の提供条件が複数種類成立したとき、予め定められた優先順序に従って、種類毎に特定情報に係わる提供処理を行うことにより、利用者は確実に提供情報を認識することができる。
【0066】
また本実施形態では、制御手段103が音/音声情報を出力するとき、車両に装備されたオーディオ装置130の音量をミユートさせることにより、利用者は確実に聴覚情報を認識することができる。
【0067】
【発明の効果】
以上のように本発明は、初期の目的を達成でき、利用者による提供情報の認識性を高め、HMIを向上させることができる車両用情報提供装置を提供することができる。
【図面の簡単な説明】
【図1】本発明の実施形態による車両用情報提供装置の正面図。
【図2】同実施形態による車両用情報提供装置のシステム構成を示すブロック図。
【図3】同実施形態による視覚情報出力及び聴覚情報出力のタイミング図。
【図4】同実施形態による視覚情報出力及び聴覚情報出力のタイミング図。
【図5】同実施形態による視覚情報出力及び聴覚情報出力のタイミング図。
【図6】同実施形態による視覚情報の表示例を示す正面図。
【図7】同実施形態による視覚情報の表示例を示す正面図。
【図8】同実施形態による視覚情報の表示例を示す正面図。
【図9】同実施形態による視覚情報の表示例を示す正面図。
【図10】同実施形態による視覚情報の表示例を示す正面図。
【図11】同実施形態による視覚情報の表示例を示す正面図。
【符号の説明】
1 車両用情報提供装置
10 マルチディスプレイ装置
20 アナログゲージ
21 回転計
22 燃料計
23 温度計
101a〜101c 入力端子
101d、101e 出力端子
102a 入力インターフエース
102b 出力インターフエース
103 制御手段
104 記憶手段
105 表示駆動手段
106 音声合成手段
107 ゲージ駆動手段
108 アンプ
120 音声認識装置
130 オーディオ装置
140 スピーカ
t1〜t28 時刻
201 背景画像
202 警報メッセージ情報
202a 背景領域
301 音/音声メッセージ情報
A 聴覚情報提供手段
V 視覚情報提供手段
ds 縮小表示サイズ
ns 通常表示サイズ[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a vehicle information providing apparatus that provides various information to a user by combining visual information and auditory information, and in particular, as a visual information providing means, a multi-display means for switching and displaying various visual information on a screen, and providing auditory information The present invention relates to a vehicular information providing apparatus that uses speech synthesis means as means and provides information in accordance with the situation at that time.
[0002]
[Prior art]
As this type of vehicle information providing apparatus, for example, one described in
[0003]
[Patent Document 1]
JP-A-9-66783
[0004]
[Problems to be solved by the invention]
However, as described in the above-mentioned known example, if the visual information and the auditory information are simply output in a multiplexed manner, for example, the user may find it difficult to recognize the output information or may be bothersome. Therefore, when providing information to a user using both visual information and auditory information, it is necessary to improve the human machine interface (HMI) with the user by modifying the provision form.
[0005]
The present invention has been made in view of the above points, and its main object is to enhance the recognizability of information provided by a user by utilizing the characteristics of visual information and auditory information, and to provide a human-machine interface. The object is to provide a vehicle information providing apparatus with improved (HMI).
[0006]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides visual information providing means for switching and displaying various types of visual information in the screen, By voice Hearing message Auditory information providing means for outputting information, and the visual information and the auditory information are provided to the visual information providing means and the auditory information providing means according to input information. message Control means for outputting information, and when the predetermined provision condition based on the input information is established, the control means and the visual information related to the specific information and the auditory sense message Auditory out of information message The visual information is output prior to the information, and the auditory message Providing processing to continue the output of the visual information after the output of information Furthermore, after the output of the auditory message information is completed, the visual information is output for a predetermined time, and then the display size in the screen is reduced and continuously output. It is characterized by that.
[0007]
In the present invention, the control means When the display size of the visual information is reduced, the content after reduction is shortened with respect to the content before reduction. It is characterized by that.
[0008]
In the present invention, the visual information is It consists of a character message corresponding to the specific information, and the visual information after shortening includes specific characters constituting the visual information before shortening It is characterized by that.
[0009]
In the present invention, the control means After completion of the output of the auditory information, the output of the visual information is continued for a predetermined time or until a release condition based on the input information is satisfied. It is characterized by that.
[0011]
The present invention also provides the visual information and the auditory sense. message Both pieces of information are composed of text / auditory messages corresponding to the specific information, and the control means performs the provision processing when the auditory message is received. message The content of the auditory message of information is shortened with respect to the content of the text message of visual information, and is output.
[0012]
Further, the present invention is characterized in that the auditory message includes message information that matches at least the specific character message in the character message constituting the visual information.
[0013]
In the present invention, the control means After the output of the auditory message information is finished, the output of the visual information is continued for a predetermined time. When a predetermined time has passed since the end of the output of the visual information, or when receiving operation information of a key switch mounted on the vehicle as the input information, it is determined whether or not the predetermined provision condition is continued, If the providing condition continues, the providing process is repeated.
[0014]
In the present invention, the control means After the output of the auditory message information is finished, the output of the visual information is continued for a predetermined time. When a predetermined time has elapsed from the end of output of the visual information, or when receiving operation information of a key switch mounted on a vehicle as the input information, it is determined whether or not the predetermined provision condition is continued, When the provision condition continues, only the visual information is output.
[0015]
Further, the present invention is characterized in that, when a plurality of types of the predetermined provision conditions are established, the control means performs the provision processing related to the specific information for each type according to a predetermined priority order.
[0016]
Further, the present invention is characterized in that when the control means outputs the auditory information, the volume of an audio device installed in the vehicle is muted.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.
FIG. 1 is a front view showing an appearance of the vehicle information providing apparatus. Here, the vehicle
[0018]
FIG. 2 is a block diagram showing a system configuration of the vehicle
[0019]
The input terminal 101a is a terminal for inputting operation information (input information) of a key switch (ignition key or power switch) mounted on the vehicle, and the
[0020]
On the other hand, the
[0021]
The control means 103 consists of a microcomputer, processes each input information received via the
[0022]
In addition to storing an input information processing program executed by the control means 103, the storage means 104 stores background image patterns and display image patterns to be displayed on the
[0023]
The sound /
[0024]
In this embodiment, the
[0025]
3 to 5 are timing diagrams of visual information output and auditory information output, and FIGS. 6 to 8 are front views showing examples of visual information display.
[0026]
Next, features of the present invention will be described with reference to FIGS. The control means 103 obtains input information via the input terminals 101a to 101c, and outputs (displays) visual information by the visual information output means V and outputs auditory information by the auditory information output means A according to these input information. To do.
[0027]
Specifically, first, it demonstrates along FIG. When the control means 103 determines the operation state (ON / OFF) of the key switch based on the operation information from the key switch obtained through the input terminal 101a, and determines that the key switch has been turned ON at time t1, A
[0028]
Next, the
[0029]
First, on the
[0030]
The
[0031]
Next, the control means 103 causes the auditory information output means A to output auditory information related to the specific information (fuel shortage information) at a time t3 after a predetermined time has elapsed from the start of output of the alarm message information 202 (time t2).
[0032]
This auditory information is made up of sound / voice message information (auditory message) 301 composed of a beep sound “Pawn” and a voice “please refuel” (see FIG. 7). When a sound is output (time t3) and the sound ends, the voice message information changes to "please refuel" (time t4). The voice message information part "please refuel" is "travelable distance 50 km The content of the
[0033]
On the other hand, the
[0034]
Further, immediately after the alarm condition is established (time t2), the control means 103 outputs a mute instruction signal to the
[0035]
Next, after determining that the key switch is turned on again at time t8 after the key switch is turned off at time t7, the control means 103 confirms whether or not an alarm condition (predetermined provision condition) is satisfied, and the alarm condition is satisfied. In this case, the
[0036]
Next, based on FIG. 4, a case where an alarm condition related to forgetting to remove the key switch is satisfied as an example other than a predetermined provision condition will be described.
[0037]
After the key switch is turned off (time t11), the control means 103 obtains input information related to the presence / absence of the key switch (insertion / non-insertion into the key cylinder) and input information related to door opening / closing from the door sensor. However, when it is determined that the alarm condition that the door is in an open state is satisfied (time t12), an audio information output about forgetting to remove the key switch is started at time t13 after a predetermined time has elapsed from time t12. To do. At this time, as with the sound /
[0038]
Next, based on FIG. 5 and FIGS. 9 to 11, a case where predetermined provision conditions are established in an overlapping manner will be described.
[0039]
The control means 103 has the key switch in the ON state (time t17), and then the alarm condition is set for each of the first and second alarm conditions (first predetermined provision condition, second predetermined provision condition). It is determined whether or not it is established.
[0040]
At this time, the control means 103 obtains the outside air temperature information from the outside air temperature sensor through the input terminal 101a, and when it is lower than a predetermined temperature (for example, below freezing point), the control means 103 takes the first information relating to the slip caution information (first specific information). It is determined that one alarm condition (first predetermined provision condition) is satisfied, and the visual information providing unit V and the auditory information providing unit A are caused to output both visual information and auditory information related to slip attention information. Further, the control means 103 obtains the air pressure information from the tire air pressure sensor through the input terminal 101a, and if it is smaller than the predetermined air pressure, the second alarm condition (the second specific information) related to the tire air pressure drop information (second specific information). And the visual information providing means V and the auditory information providing means A are caused to output both visual information and auditory information related to the tire air pressure reduction information.
[0041]
For example, when both the first and second alarm conditions are satisfied at time t18, the
[0042]
First, the control means 103 gives priority to the first alarm condition over the second alarm condition, and at time t18, the visual information providing means V informs the visual information relating to slip caution information as “outside air temperature−2 degrees C road surface”. The warning message information 202 (character message) is displayed (FIG. 9).
[0043]
The outline of the
[0044]
Next, the control means 103 causes the auditory information providing means A to output auditory information related to slip attention information. This auditory information is composed of sound / voice message information (auditory message) 301 composed of a beep sound “Pawn” and a voice message “Beware of slip” (see FIG. 9). A beep sound “Pawn” is output, and at the time t20 when the beep sound ends, voice message information information “Please be careful about slip” is output. Note that the voice message portion of the sound /
[0045]
On the other hand, the
[0046]
Next, at time t23, the control means 103 causes the visual information providing means V to display alarm message information (character message) 202 “Right front tire air pressure is insufficient” as visual information related to the tire air pressure drop information ( FIG. 10).
[0047]
The outline of the
[0048]
Next, the control means 103 outputs the auditory information related to the tire pressure drop information to the auditory information providing means A. This auditory information is also composed of sound / voice message information (auditory message) 301 composed of a beep sound “Pawn” and a voice message “Right front tire pressure is insufficient” (see FIG. 10), and at time t24. First, a beep sound “Pawn” is output, and a voice message “Insufficient right front tire pressure” is output at the time t25 when the beep sound ends. The
[0049]
On the other hand, the
[0050]
Next, the control means 103 changes the display size of the
[0051]
Note that the example in which the predetermined provision condition for outputting both visual information and auditory information is satisfied is not limited to the above. For example, although not illustrated as another embodiment, when the key switch is turned on, “Let's keep safe driving” Is output as the
[0052]
Furthermore, the predetermined information is not limited to the alarm information. For example, although not shown as other embodiments, “Good morning,” “Good morning”, “Good morning”, etc. based on on / off of the key switch, etc. It may be greeting information.
[0053]
In the example shown in FIG. 3, the output of visual information is automatically continued from time t2 to time t7. For example, the output is predetermined based on an operation switch that can be operated by the user or the voice of the user. When the release instruction information (input information) via the
[0054]
As described above, according to the present embodiment, the visual information providing means V that switches and displays various visual information including visual information including at least the
[0055]
That is, when outputting both the
[0056]
Therefore, by executing such provision processing through the control means 103, the recognizability of the provision information by the user is enhanced by utilizing the characteristics of visual information and auditory information, and the human machine interface (HMI) is improved. Can do.
[0057]
In this embodiment, the
[0058]
In the present embodiment, when the
[0059]
In this embodiment, when the
[0060]
Further, in this embodiment, the
[0061]
Further, in the present embodiment, both the
[0062]
Further, in the present embodiment, the voice message information of the sound /
[0063]
Further, in the present embodiment, when a predetermined time has elapsed since the end of the output of the
[0064]
Further, in the present embodiment, when the control means 103 has passed a predetermined time since the end of the output of the
[0065]
In the present embodiment, the control means 103 provides the user with certainty by performing the provision processing related to the specific information for each type in accordance with a predetermined priority order when a plurality of types of predetermined provision conditions are established. Can recognize information.
[0066]
In this embodiment, when the
[0067]
【The invention's effect】
As described above, the present invention can provide an in-vehicle information providing apparatus that can achieve the initial object, enhance the recognizability of provided information by the user, and improve the HMI.
[Brief description of the drawings]
FIG. 1 is a front view of a vehicle information providing apparatus according to an embodiment of the present invention.
FIG. 2 is an exemplary block diagram showing a system configuration of the vehicle information providing apparatus according to the embodiment;
FIG. 3 is a timing chart of visual information output and auditory information output according to the embodiment.
FIG. 4 is a timing chart of visual information output and auditory information output according to the embodiment.
FIG. 5 is a timing chart of visual information output and auditory information output according to the embodiment.
FIG. 6 is an exemplary front view showing a display example of visual information according to the embodiment;
FIG. 7 is an exemplary front view showing a display example of visual information according to the embodiment;
FIG. 8 is an exemplary front view showing a display example of visual information according to the embodiment;
FIG. 9 is an exemplary front view showing a display example of visual information according to the embodiment;
FIG. 10 is an exemplary front view showing a display example of visual information according to the embodiment;
FIG. 11 is an exemplary front view showing a display example of visual information according to the embodiment;
[Explanation of symbols]
1 Vehicle information provision device
10 Multi-display device
20 Analog gauge
21 Tachometer
22 Fuel gauge
23 Thermometer
101a to 101c input terminals
101d, 101e Output terminal
102a Input interface
102b Output interface
103 Control means
104 Storage means
105 Display drive means
106 Speech synthesis means
107 gauge drive means
108 amplifiers
120 Voice recognition device
130 Audio equipment
140 Speaker
t1-t28 time
201 Background image
202 Alert message information
202a Background area
301 Sound / voice message information
A Auditory information provision means
V Visual information provision means
ds reduced display size
ns Normal display size
Claims (10)
音声による聴覚メッセージ情報を出力する聴覚情報提供手段と、
入力情報に応じて前記視覚情報提供手段と前記聴覚情報提供手段に前記視覚情報と前記聴覚メッセージ情報を出力させる制御手段とを備え、
前記制御手段は前記入力情報に基づく所定の提供条件が成立すると、特定情報に係わる前記視覚情報と前記聴覚メッセージ情報のうち前記聴覚メッセージ情報より先に前記視覚情報の出力を行い、前記聴覚メッセージ情報の出力終了後に前記視覚情報の出力を継続する提供処理を行い、さらに前記聴覚メッセージ情報の出力終了後、前記視覚情報の出力を所定時間継続した後、その前記画面内における表示サイズを縮小して継続出力することを特徴とする車両用情報提供装置。Visual information providing means for switching and displaying various visual information on the screen;
Auditory information providing means for outputting auditory message information by voice ;
Control means for causing the visual information providing means and the auditory information providing means to output the visual information and the auditory message information according to input information,
When the predetermined provision condition based on the input information is satisfied, the control means outputs the visual information before the auditory message information among the visual information related to the specific information and the auditory message information, and the auditory message information There line providing processing to continue the output of the visual information after completion of output, after a further output end of the aural message information, after the output of the visual information for the predetermined period, to reduce the display size in that the screen The vehicle information providing device is characterized in that the information is continuously output .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003047239A JP4244376B2 (en) | 2003-02-25 | 2003-02-25 | Vehicle information providing device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003047239A JP4244376B2 (en) | 2003-02-25 | 2003-02-25 | Vehicle information providing device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004255945A JP2004255945A (en) | 2004-09-16 |
| JP4244376B2 true JP4244376B2 (en) | 2009-03-25 |
Family
ID=33113538
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003047239A Expired - Lifetime JP4244376B2 (en) | 2003-02-25 | 2003-02-25 | Vehicle information providing device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4244376B2 (en) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5011827B2 (en) * | 2006-06-01 | 2012-08-29 | 株式会社デンソー | Notification control device and notification information transmission device |
| JP5223628B2 (en) * | 2008-11-28 | 2013-06-26 | 三菱自動車工業株式会社 | Display-linked guidance system |
| JP2010179783A (en) * | 2009-02-05 | 2010-08-19 | Toyota Motor Corp | Vehicle information reporting device |
| US10179510B2 (en) * | 2012-12-07 | 2019-01-15 | Volvo Truck Corporation | Vehicle arrangement, method and computer program for controlling the vehicle arrangement |
| JP6372239B2 (en) * | 2014-08-19 | 2018-08-15 | 日本精機株式会社 | Vehicle information providing device |
| JP6380464B2 (en) * | 2016-06-09 | 2018-08-29 | マツダ株式会社 | Driving assistance device |
| JP7264122B2 (en) * | 2020-07-01 | 2023-04-25 | トヨタ自動車株式会社 | Audio output control system |
-
2003
- 2003-02-25 JP JP2003047239A patent/JP4244376B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004255945A (en) | 2004-09-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6120057B2 (en) | Vehicle information providing device | |
| US20150293745A1 (en) | Text-reading device and text-reading method | |
| JP2009514734A (en) | Information device advantageously provided in a motor vehicle and method for notifying vehicle data, in particular a method for notifying information on vehicle functions and operation of the vehicle functions | |
| JP2004239963A (en) | In-vehicle control device | |
| EP1493632A4 (en) | SYSTEM TO SUPPORT THE PARKING PROCESS | |
| JP4244376B2 (en) | Vehicle information providing device | |
| JP2006284454A (en) | In-car agent system | |
| JPH0973588A (en) | Voice alarm system for automobiles | |
| US10207584B2 (en) | Information providing apparatus for vehicle | |
| CN104369690A (en) | Two-channel alarming device through which voices and buzzer can be switched | |
| JP6183494B2 (en) | Vehicle information providing device | |
| KR20060069839A (en) | Vehicle information provision device | |
| JP2011017802A (en) | Display device, program, and display method | |
| CN111216626A (en) | Driving assistance device and method, non-transitory recording medium storing program | |
| JP6692677B2 (en) | Electronics | |
| CN207106342U (en) | A kind of voice auxiliary parking system | |
| JPH1148886A (en) | Emergency vehicle notification system to be mounted on vehicle | |
| CN107393536A (en) | Vehicle condition notice devices and methods therefor | |
| JP6372239B2 (en) | Vehicle information providing device | |
| JP2003048449A (en) | Driver's mental state determination device | |
| CN220809278U (en) | Vehicle door closing warning system | |
| JP6409473B2 (en) | Vehicle notification device, vehicle control device, and vehicle notification program | |
| JP6460378B2 (en) | Vehicle information providing device | |
| CN116279564A (en) | Method and device for realizing hearing-impaired assisting function of vehicle | |
| JP2005289096A (en) | Information providing device for vehicle |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051207 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080909 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081010 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20081215 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081228 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4244376 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120116 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150116 Year of fee payment: 6 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |