Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP4820334B2 - 路側機及びこれを用いた交通情報提供システム - Google Patents
[go: Go Back, main page]

JP4820334B2 - 路側機及びこれを用いた交通情報提供システム - Google Patents

路側機及びこれを用いた交通情報提供システム Download PDF

Info

Publication number
JP4820334B2
JP4820334B2 JP2007170500A JP2007170500A JP4820334B2 JP 4820334 B2 JP4820334 B2 JP 4820334B2 JP 2007170500 A JP2007170500 A JP 2007170500A JP 2007170500 A JP2007170500 A JP 2007170500A JP 4820334 B2 JP4820334 B2 JP 4820334B2
Authority
JP
Japan
Prior art keywords
wire frame
frame image
vehicle
traffic information
driver
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007170500A
Other languages
English (en)
Other versions
JP2009009379A (ja
Inventor
正泰 藤井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2007170500A priority Critical patent/JP4820334B2/ja
Publication of JP2009009379A publication Critical patent/JP2009009379A/ja
Application granted granted Critical
Publication of JP4820334B2 publication Critical patent/JP4820334B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Mobile Radio Communication Systems (AREA)
  • Traffic Control Systems (AREA)

Description

この発明は、運転席から見やすい位置に緊急情報を表示することで、運転手に注意を促すための路側機及びこれを用いた交通情報提供システムに関するものである。
特許文献1は、従来の交通情報提供システムであり、この従来の交通情報提供システムにおいては、交差点にカメラを配置し、このカメラによって撮影された交差点の映像情報に撮影位置情報を付加して車両に送信し、車載ナビの地図上に映像表示することで、他方向道路の状況を運転手に知らしめている。
特開2006−23985号公報(第5〜12頁、図1)
以上のように構成された従来の交通情報提供システムは、どのカメラ位置で撮影したかは分かるものの、その撮影された映像が運転手の視野とは異なるため、運転手が地図と映像を見ながら考えて、交通状況を判断しなければならなかった。
この発明は、上述のような課題を解決するためになされたものであり、運転手の視野と同じ視野の映像を運転席から見やすい位置に表示し、運転手に注意を促すことができる路側機及びこれを用いた交通情報提供システムを得ることを目的にしている。
この発明に係わる路側機においては、路側機を通過する各種車両の運転席から見える風景に対応するワイヤフレーム像を予め保有する記憶部、路側機を通過する車両に搭載された車載器から車種及び車線を含む車両情報を無線通信により読取る車両情報読取手段、この車両情報読取手段によって読み取られた車両情報に基づき、車両の運転席から見える風景に対応するワイヤフレーム像を選択するワイヤフレーム像選択手段、このワイヤフレーム像選択手段によって選択されたワイヤフレーム像に合致する交通情報を別途形成された交通情報システムから取得し、この取得した交通情報のうちの緊急情報をアイコンとしてワイヤフレーム像に合成する交通情報合成手段、及びこの交通情報合成手段によって合成されたワイヤフレーム像を車載器に送信するワイヤフレーム像送信手段を備えたものである。
この発明は、以上説明したように、路側機を通過する各種車両の運転席から見える風景に対応するワイヤフレーム像を予め保有する記憶部、路側機を通過する車両に搭載された車載器から車種及び車線を含む車両情報を無線通信により読取る車両情報読取手段、この車両情報読取手段によって読み取られた車両情報に基づき、車両の運転席から見える風景に対応するワイヤフレーム像を選択するワイヤフレーム像選択手段、このワイヤフレーム像選択手段によって選択されたワイヤフレーム像に合致する交通情報を別途形成された交通情報システムから取得し、この取得した交通情報のうちの緊急情報をアイコンとしてワイヤフレーム像に合成する交通情報合成手段、及びこの交通情報合成手段によって合成されたワイヤフレーム像を車載器に送信するワイヤフレーム像送信手段を備えたので、車種及び車線に応じた運転手視野の風景に一致したワイヤフレーム像が送られるため、運転手は直感的に状況を判断することができる。
実施の形態1.
図1は、この発明の実施の形態1による交通情報提供システムを説明する説明図である。
図1において、車載器1は、DSRC(Dedicated Short Range Communication)無線にて路側機2と通信する。路側機2は、路側機ごとにその設置位置に対応して、運転手から見える風景が線状に表記されたワイヤフレーム像3を車種、車線ごとに保有している。このワイヤフレーム像3は、車載器1に送信されて、車載器1のカーナビなどの表示部に表示され、運転手から見える位置に緊急情報アイコン4が書き込まれている。緊急情報アイコン4は、別途交通情報センターから取得した交通情報のうち、渋滞情報、事故情報、工事情報などを示す。
また、ワイヤフレーム像3は、道路の白線や、風景の構造物のエッジをワイヤフレーム状(線状)にデフォルメしたものである。また、背景を黒色とすることで、昼夜において周囲との輝度さで幻惑が起きなくなるとともに、視点に応じて背景絵を加工しやすくなる。
図2は、この発明の実施の形態1による交通情報提供システムの構成を示すブロック図である。
図2において、1、2は図1におけるものと同一のものである。図2は、路側機2と車載器1の内部構成を示しており、車載器1は、車両IDを送信する車両ID送信手段11と、ワイヤフレーム像を路側機2から受信するワイヤフレーム像受信手段12と、このワイヤフレーム像受信手段12により受信したワイヤフレーム像を表示部に表示するワイヤフレーム像表示手段13とを備えている。
路側機2は、車載器1からその車載器1が搭載された車両の車両IDを受信し、車種及び車線(車種により運転手の座席位置も分かる)を読み取る車種車線読取手段21(車両情報読取手段)と、ワイヤフレーム像が予め登録された記憶部22aから、車種及び車線に合致するワイヤフレーム像を選択するワイヤフレーム像選択手段22と、このワイヤフレーム像選択手段22によって選択されたワイヤフレーム像に、別途交通情報センター5から取得した交通情報のうちの緊急情報をアイコンとして合成する交通情報合成手段23と、この合成ずみのワイヤフレーム像を車載器1に送信するワイヤフレーム像送信手段24とを備えている。
図3は、この発明の実施の形態1による交通情報提供システムの路側機の動作を示すフローチャートである。
図4は、この発明の実施の形態1による交通情報提供システムのワイヤフレーム像を記憶する記憶部のデータを示す図である。
図4において、車種と車線とに応じて分類された多数のワイヤフレーム像が格納されている。
次に、動作について説明する。
車載器1から路側機2に対し、車種、緯度経度の位置座標、走行車線、走行方向の情報を送信する。路側機2は、車種から運転手の視線位置を割り出し、運転席から見える風景にパターンマッチングする予め用意したワイヤフレーム像3を記憶部22aから選択し、これに緊急情報アイコン4を書き込み、車載器1に向けて送信する。
次に、図3を用いて、路側機2の動作について説明する。
まず、ステップS1で、路側機2は、近くを通過する車両の車載器1から、その車両の車種、緯度経度の位置座標、走行車線、走行方向の情報を取得する。次いで、ステップS2で、車種及び車線に対応したワイヤフレーム像を記憶部22aから選択する。次いで、ステップS3で、選択したワイヤフレーム像に合致する交通情報の有無について、交通情報センター5の情報を調べ、有れば、ステップS4で、交通情報センター5から、選択したワイヤフレーム像に合致する交通情報を取得し、ワイヤフレーム像に緊急情報アイコン4として合成する。ステップS5で、ワイヤフレーム像を車載器1に送信して処理を終了する。
実施の形態1によれば、車種、車線に応じた運転手視野の風景に一致したワイヤフレーム像が送られるため、運転手は直感的に状況を判断することができる。
また、構造物のエッジをワイヤフレーム状にデフォルメすることで、風景イメージが伝えやすくなる。
また、ワイヤフレーム像の背景を黒色とすることで、昼夜において周囲との輝度差で幻惑が起きなくなる。
さらにまた、視点に応じて、ワイヤフレーム像の背景絵を加工し易い効果がある。
実施の形態2.
図5は、この発明の実施の形態2による交通情報提供システムを説明する説明図である。
図5において、1〜4は、図1におけるものと同一のものである。図5では、ワイヤフレーム像3は、フロントガラスに投影されている。
実施の形態2では、車載器1のワイヤフレーム像表示手段13は、ワイヤフレーム像3をフロントガラスに投影する投影器を有している。フロントガラスに投影されたワイヤフレーム像3は、車種、車線に応じた風景に一致したものであるため、運転手は、緊急情報アイコン4を直感的に判断しやすい。
実施の形態2によれば、車種、車線に応じた風景に一致したワイヤフレーム像がフロントガラスに投影されるため、運転手は直感的に状況を判断することができる。
実施の形態3.
図6は、この発明の実施の形態3による交通情報提供システムを説明する説明図である。
図6において、2〜4は、図1におけるものと同一のものである。図6では、路側機2は、通過する車両の運転手を撮影し、画像処理して、運転手の視点を読み取るカメラ25(撮影手段)と、ワイヤフレーム像3を、車両のフロントガラスに投影する投影手段26とを有している。
図7は、この発明の実施の形態3による交通情報提供システムの路側機の構成を示すブロック図である。
図7において、2、5、22、22a、23は図2におけるものと、25、26は図6におけるものとそれぞれ同一のものである。図7では、カメラ25により読み取られた運転手の視点に基づき、ワイヤフレーム像選択手段22は、ワイヤフレーム像の選択を行うようにし、交通情報合成手段23の出力に基づき、投影手段26が車両のフロントガラスに投影するように構成している。
実施の形態3では、路側機2は、カメラ25にて運転手の視点を読み取り、投影手段26により、ワイヤフレーム像3を車両のフロントガラスに投影する。これにより、車載器を持たない車両に対してもワイヤフレーム像を表示することができる。
実施の形態3によれば、車種、車線に応じた風景に一致したワイヤフレーム像がフロントガラスに投影されるため、車載器を持たない車両の運転手も直感的に状況を判断することができる。
なお、上述では、投影手段26が車両のフロントガラスに投影するものとしたが、道路上など、車両の前方の投影可能なものの上に投影するものであってもよい。
実施の形態4.
図8は、この発明の実施の形態4による交通情報提供システムを説明する説明図である。
図8において、1〜3は、図1におけるものと同一のものである。図8には、撮影地点の先行車6aと、路側機2(第一の路側機)の近傍にいる先行車6bが示されている。先行車6aと先行車6bは同一の車両である。先行車6は、運転手の視線上に配置され、撮影手段及び記憶部を設けた車載器1を有している。
図9は、この発明の実施の形態4による交通情報提供システムの車載器の構成を示すブロック図である。
図9において、車載器1は、緊急回避操作などの特異な運転操作を検出する運転操作検知手段14と、この運転操作検知手段14により特異な運転操作が検知されたとき、車両の運転者の視点から前方の風景を撮影する撮影手段15(車載器側撮影手段)と、この撮影手段15によって撮影された映像から、ワイヤフレーム像を生成し、ワイヤフレーム像が撮影された撮影場所情報とともに記憶部16aに蓄積するワイヤフレーム像生成手段16と、このワイヤフレーム像生成手段16によって生成されたワイヤフレーム像と撮影場所情報を路側機2に送信するワイヤフレーム像送信手段17(車載器側ワイヤフレーム像送信手段)とを有している。
実施の形態4では、先行車6aの運転手の視線上に配置された車載器1は、ハンドルやブレーキもしくは加速度センサなどのセンサの出力から運転手が緊急回避操作をしたことを運転操作検知手段14により検知すると、撮影手段15により、車進行方向の映像を撮影し、撮影された映像から、ワイヤフレーム像生成手段16により、ワイヤフレーム像3を生成し、ワイヤフレーム像が撮影された撮影場所情報とともに自車載器1内の記憶部16aに蓄積する。
先行車6bが路側機2近辺を通過したとき、車載器1は、撮影された映像から生成したワイヤフレーム像3と撮影場所情報を路側機2に送信する。路側機2は、この送信されたワイヤフレーム像3と撮影場所情報を受信し、記憶部22aに蓄積する。
これにより、路側機2にて、先行車の運転手が緊急回避操作をしたときのワイヤフレーム像3と撮影場所情報を自動収集することができる。
実施の形態4によれば、先行車が生成したワイヤフレーム像を路側機に送信し、路側機で蓄積することができ、後続車にそのワイヤフレーム像を送信することができる。
実施の形態5.
図10は、この発明の実施の形態5による交通情報提供システムを説明する説明図である。
図10において、1〜3は図8におけるものと同一のものである。図10では、車両の進行方向に配置された二つの路側機2a(第一の路側機)、2b(第二の路側機)が示されている。また、先に通過する路側機2bからワイヤフレーム像3を受信する位置にいる後続車7cと、先行車6の撮影場所への接近により、ワイヤフレーム像3を表示する後続車7dが示されている。なお、後続車7c、7dは同一の車両である。
図11は、この発明の実施の形態5による交通情報提供システムの構成を示すブロック図である。
図11において、1、14〜17は図9におけるものと、2、12、13、24は図2におけるものとそれぞれ同一のものである。図11では、路側機2は、ワイヤフレーム像送信手段17によって送信されたワイヤフレーム像と撮影場所情報を受信し、記憶部22aに蓄積するワイヤフレーム像受信手段27(第一の路側機側ワイヤフレーム像受信手段)と、このワイヤフレーム像受信手段27によって受信されたワイヤフレーム像と撮影場所情報を、路側機2より手前で車両が通過する他の路側機に送信する路側機向けワイヤフレーム像送信手段28と、路側機2より先で車両が通過する他の路側機からワイヤフレーム像と撮影場所情報を受信する、路側機からのワイヤフレーム像受信手段29(第二の路側機側ワイヤフレーム像受信手段)と、この路側機からのワイヤフレーム像受信手段29によって受信されたワイヤフレーム像と撮影場所情報を車載器1に送信するワイヤフレーム像送信手段24(車載器向けワイヤフレーム像送信手段)とを備えている。
実施の形態5は、実施の形態4で路側機2に蓄積されたワイヤフレーム像を後続車7に送信し、後続車7が撮影場所を走行するときに表示するようにしたものである。
実施の形態5では、先行車6の運転手が緊急回避操作をしたときのワイヤフレーム像3と撮影場所情報を自動収集した路側機2aから、車両の進行方向において手前の路側機2bにワイヤフレーム像3と撮影場所情報を転送する。
路側機2b(第二の路側機)は、通過する後続車7cの車載器1(第二の車載器)に、ワイヤフレーム像3と撮影場所情報を転送する。後続車7dの車載器1は、撮影場所情報に基づき、撮影場所に近づくと、ワイヤフレーム像表示手段13によりワイヤフレーム像3を運転手に提示する。
これにより、前に走行した先行車6が遭遇した緊急事象を後続車7が事前に認識することができ、事故を回避することができる。
実施の形態5によれば、先行車が生成したワイヤフレーム像を後続車に表示することにより、先行車が遭遇した緊急事象を後続車が事前に認識することができ、事故を回避することができる。
この発明の実施の形態1による交通情報提供システムを説明する説明図である。 この発明の実施の形態1による交通情報提供システムの構成を示すブロック図である。 この発明の実施の形態1による交通情報提供システムの路側機の動作を示すフローチャートである。 この発明の実施の形態1による交通情報提供システムのワイヤフレーム像を記憶する記憶部のデータを示す図である。 この発明の実施の形態2による交通情報提供システムを説明する説明図である。 この発明の実施の形態3による交通情報提供システムを説明する説明図である。 この発明の実施の形態3による交通情報提供システムの路側機の構成を示すブロック図である。 この発明の実施の形態4による交通情報提供システムを説明する説明図である。 この発明の実施の形態4による交通情報提供システムの車載器の構成を示すブロック図である。 この発明の実施の形態5による交通情報提供システムを説明する説明図である。 この発明の実施の形態5による交通情報提供システムの構成を示すブロック図である。
符号の説明
1 車載器
2 路側機
3 ワイヤフレーム像
4 緊急情報アイコン
5 交通情報センター
6 先行車
7 後続車
11 車両ID送信手段
12 ワイヤフレーム像受信手段
13 ワイヤフレーム像表示手段
14 運転操作検知手段
15 撮影手段
16 ワイヤフレーム像生成手段
16a 記憶部
17 ワイヤフレーム像送信手段
21 車種車線読取手段
22 ワイヤフレーム像選択手段
22a 記憶部
23 交通情報合成手段
24 ワイヤフレーム像送信手段
25 カメラ
26 投影手段
27 ワイヤフレーム像受信手段
28 路側機向けワイヤフレーム像送信手段
29 路側機からのワイヤフレーム像受信手段

Claims (4)

  1. 路側機を通過する各種車両の運転席から見える風景に対応するワイヤフレーム像を予め保有する記憶部、
    上記路側機を通過する車両に搭載された車載器から車種及び車線を含む車両情報を無線通信により読取る車両情報読取手段、
    この車両情報読取手段によって読み取られた上記車両情報に基づき、上記車両の運転席から見える風景に対応するワイヤフレーム像を選択するワイヤフレーム像選択手段、
    このワイヤフレーム像選択手段によって選択されたワイヤフレーム像に合致する交通情報を別途形成された交通情報システムから取得し、この取得した交通情報のうちの緊急情報をアイコンとして上記ワイヤフレーム像に合成する交通情報合成手段、
    及びこの交通情報合成手段によって合成されたワイヤフレーム像を上記車載器に送信するワイヤフレーム像送信手段を備えたことを特徴とする路側機。
  2. 請求項1記載の路側機、及び上記車両に搭載され、上記車両が上記路側機を通過する際に上記路側機との間で無線通信を行う車載器を備え、
    上記車載器は、上記路側機の上記ワイヤフレーム像送信手段によって送信された上記ワイヤフレーム像を受信するワイヤフレーム像受信手段と、このワイヤフレーム像受信手段によって受信された上記ワイヤフレーム像を表示するワイヤフレーム像表示手段とを有することを特徴とする交通情報提供システム。
  3. 上記ワイヤフレーム像表示手段は、上記運転手の視野内に上記ワイヤフレーム像を投影することを特徴とする請求項2記載の交通情報提供システム。
  4. 路側機を通過する各種車両の運転席から見える風景に対応するワイヤフレーム像を予め保有する記憶部、
    上記路側機を通過する車両の運転手を撮影し、上記運転手の目の位置を取得する撮影手段、
    この撮影手段によって取得された上記運転手の目の位置に基づき、上記車両の運転席から見える風景に対応するワイヤフレーム像を選択するワイヤフレーム像選択手段、
    このワイヤフレーム像選択手段によって選択されたワイヤフレーム像に合致する交通情報を別途形成された交通情報システムから取得し、この取得した交通情報のうちの緊急情報をアイコンとして上記ワイヤフレーム像に合成する交通情報合成手段、
    及びこの交通情報合成手段によって合成されたワイヤフレーム像を上記運転手の視野内に投影する投影手段を備えたことを特徴とする路側機。
JP2007170500A 2007-06-28 2007-06-28 路側機及びこれを用いた交通情報提供システム Expired - Fee Related JP4820334B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007170500A JP4820334B2 (ja) 2007-06-28 2007-06-28 路側機及びこれを用いた交通情報提供システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007170500A JP4820334B2 (ja) 2007-06-28 2007-06-28 路側機及びこれを用いた交通情報提供システム

Publications (2)

Publication Number Publication Date
JP2009009379A JP2009009379A (ja) 2009-01-15
JP4820334B2 true JP4820334B2 (ja) 2011-11-24

Family

ID=40324392

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007170500A Expired - Fee Related JP4820334B2 (ja) 2007-06-28 2007-06-28 路側機及びこれを用いた交通情報提供システム

Country Status (1)

Country Link
JP (1) JP4820334B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5935759B2 (ja) * 2013-06-07 2016-06-15 株式会社デンソー ドライバ状態判定システム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3380992B2 (ja) * 1994-12-14 2003-02-24 ソニー株式会社 ナビゲーションシステム
JPH11211499A (ja) * 1998-01-26 1999-08-06 Nissan Motor Co Ltd 情報提供システム
JP2000113389A (ja) * 1998-10-05 2000-04-21 Nippon Columbia Co Ltd 移動体用経路案内装置
JP3606076B2 (ja) * 1998-12-14 2005-01-05 オムロン株式会社 車両撮像装置
JP2002063681A (ja) * 2000-08-23 2002-02-28 Matsushita Electric Ind Co Ltd 車載画像表示装置
JP2004061232A (ja) * 2002-07-26 2004-02-26 Denso Corp 道路画像表示装置
JP2004333155A (ja) * 2003-04-30 2004-11-25 Sony Corp 情報提示装置及び情報提示方法、並びにコンピュータ・プログラム
JP3988683B2 (ja) * 2003-06-12 2007-10-10 株式会社日立製作所 画像情報取得システム及び車載端末
JP4489447B2 (ja) * 2004-01-23 2010-06-23 アルパイン株式会社 車載用ナビゲーション装置及びその立体地図表示方法
JP4466438B2 (ja) * 2005-03-31 2010-05-26 株式会社デンソー 経路案内システム

Also Published As

Publication number Publication date
JP2009009379A (ja) 2009-01-15

Similar Documents

Publication Publication Date Title
JP4454681B2 (ja) 交通状況表示方法、交通状況表示システム、車載装置及びコンピュータプログラム
JP5070809B2 (ja) 運転支援装置、運転支援方法、及び、プログラム
JP6311646B2 (ja) 画像処理装置、電子ミラーシステム、及び画像処理方法
JP5262976B2 (ja) 車載表示装置
US20120133738A1 (en) Data Processing System and Method for Providing at Least One Driver Assistance Function
CN101542555A (zh) 在车辆之间进行无线通信的方法
JP2020147107A (ja) 広告表示装置、車両及び広告表示方法
CN110462699A (zh) 车辆用显示控制装置以及车辆用显示单元
JP7348724B2 (ja) 車載装置および表示方法
JP4848893B2 (ja) 交差点情報提供システム及び運転支援システム
JP2008293095A (ja) 運転支援システム
JP6566067B2 (ja) 画像処理装置
JP2016212501A (ja) 移動体用画像生成装置及びナビゲーション装置
JP6186905B2 (ja) 車載表示装置およびプログラム
JP2019109707A (ja) 表示制御装置、表示制御方法および車両
JP2014074627A (ja) 車両用ナビゲーションシステム
JP2009214831A (ja) 車両用表示装置
JP2009037457A (ja) 運転支援システム
CN110319848B (zh) 输出装置
JP2021026457A (ja) 画像配信装置及び方法並びに画像配信システム
JP2017040773A (ja) 頭部装着型表示装置
JP4820334B2 (ja) 路側機及びこれを用いた交通情報提供システム
JP2005029025A (ja) 車載表示装置、画像表示方法および画像表示プログラム
JP2023055204A (ja) 車両用記録装置
JP2020048013A (ja) 画像表示制御装置及び方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110127

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110225

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110809

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110902

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140909

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140909

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees