JP5693621B2 - 3次元動作計測システムにおける仮想点決定装置及び方法、並びに、3次元動作計測システムにおける仮想点決定に用いられるデバイス - Google Patents
3次元動作計測システムにおける仮想点決定装置及び方法、並びに、3次元動作計測システムにおける仮想点決定に用いられるデバイス Download PDFInfo
- Publication number
- JP5693621B2 JP5693621B2 JP2013001384A JP2013001384A JP5693621B2 JP 5693621 B2 JP5693621 B2 JP 5693621B2 JP 2013001384 A JP2013001384 A JP 2013001384A JP 2013001384 A JP2013001384 A JP 2013001384A JP 5693621 B2 JP5693621 B2 JP 5693621B2
- Authority
- JP
- Japan
- Prior art keywords
- marker
- virtual point
- markers
- state
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Length Measuring Devices By Optical Means (AREA)
Description
複数のカメラと、
少なくとも3つのマーカーと、仮想点を指し示す1つ以上の指示部と、を備え、前記仮想点の位置は当該デバイス上のマーカー位置によって特定可能である、デバイスと、
前記デバイスの各マーカー間の距離を特定可能な情報を記憶した手段と、
前記複数のカメラによって撮影された複数のカメラ画像と、前記デバイスの各マーカー間距離と、を用いて前記デバイスを検出するデバイス検出手段と、
デバイス上の各マーカーと前記仮想点との相対的位置を用いて、マーカー座標から前記仮想点の座標を取得する仮想点座標取得手段と、
を備えており、
前記デバイス検出手段は、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態から、前記少なくとも3つのマーカーがカメラによって認識された時に前記デバイスを検出し、
前記仮想点座標取得手段は、前記デバイスの検出を決定入力として、デバイス検出時のマーカー座標から前記仮想点の座標を取得する、
仮想点決定装置、である。
1つの態様では、前記指示部は、デバイスの端部である。
典型的には、仮想点はデバイス上に設定され、指示部(端部等)が仮想点の位置となるが、デバイス上に設定されるものには限定されない。例えば、仮想点を、デバイスが指し示す延長線上に設定してもよい。
1つの態様では、前記指示部は、デバイスの端部であり、また、前記端部の位置によって仮想点の位置が決定される。具体的には、
複数のカメラと、
少なくとも3つのマーカーと、仮想点を指し示す端部(指示部)と、を備え、前記端部の位置は当該デバイス上のマーカー位置によって特定可能である、デバイスと、
前記デバイスの各マーカー間の距離を特定可能な情報を記憶した手段と、
前記複数のカメラによって撮影された複数のカメラ画像と、前記デバイスの各マーカー間距離と、を用いて前記デバイスを検出するデバイス検出手段と、
デバイス上の各マーカーと前記端部との相対的位置を用いて、マーカー座標から前記端部の座標を取得する端部座標取得手段と、
を備えており、
前記デバイス検出手段は、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態から、前記少なくとも3つのマーカーがカメラによって認識された時に前記デバイスを検出し、
前記端部座標取得手段は、前記デバイスの検出を決定入力として、デバイス検出時のマーカー座標から前記端部の座標を仮想点座標として取得する、
仮想点決定装置、である。
前記デバイスは、当該デバイスによって所望の仮想点位置を指し示した時に、前記隠れマーカーを、前記第1の状態から前記第2の状態へ切り換える切り換え手段を備えている。
例えば、デバイスが3つのマーカーを備えている場合に、1つのマーカーのみが隠れマーカーの場合、2つのマーカーが隠れマーカーの場合、全3つのマーカーが隠れマーカーの場合があり得る。
前記スイッチは、当該デバイスを掴んで所望の仮想点を指し示した操作者によって手動操作可能であり、
仮想点座標の取得は、当該デバイス上のスイッチ操作による遠隔決定入力により実行される。
1つの態様では、前記スイッチは、前記端部に設けた押圧スイッチであり、操作者が当該デバイスを用いて対象物上ないし対象物内(対象物には被験者の身体、被験者が持つ物体、被験者の環境にある物体等が含まれる)の仮想点を指し示した時に、前記押圧スイッチが前記対象物に当って押し込まれて入力される。
なお、仮想点を指し示す部位(指示部)は、デバイス上に複数設けてもよく、例えば、デバイスは、端部に形成された第1の指示部と、デバイスの端部以外の部位に形成された第2の指示部と、を備えている。デバイス上には、第2の指示部を挟んで第1の側には、少なくとも1つのマーカーが設けてあり、第2の側には、残りのマーカーが設けてある。
例えば、隠れマーカーはLEDからなり、切り換え手段としてのデバイス上のスイッチを押すことで、LEDに電流が供給されて点灯する。
例えば、可動体は、切り換え手段としてのデバイス上のスイッチの押し動作に連動して第1位置から第2位置にスライド移動あるいは回動するようになっており、スイッチが復帰すると、スプリングによって第2位置から第1位置へ復帰するように構成される。
複数のカメラと、
少なくとも3つのマーカーと、仮想点を指し示す1つ以上の指示部と、を備え、前記仮想点の位置は当該デバイス上のマーカー位置によって特定可能である、デバイスと、
前記複数のカメラによって撮影された複数のカメラ画像と、既知の各マーカー間距離と、を用いて前記デバイスを検出するデバイス検出手段と、
デバイス上の各マーカーと前記仮想点との相対的位置を用いて、マーカー座標から前記仮想点の座標を取得する仮想点座標取得手段と、
を用い、
前記複数のカメラによって、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態にある前記デバイスを撮影するステップと、
前記デバイスの指示部によって所望の仮想点位置を指し示した時に、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態から、前記少なくとも3つのマーカーがカメラによって認識されるようにして、前記デバイスを検出するステップと、
前記デバイスの検出を決定入力として、デバイス検出時のマーカー座標から前記仮想点の座標を取得するステップと、
を備えた仮想点決定方法、である。
1つの態様では、前記指示部は、デバイスの端部である。
典型的には、仮想点はデバイス上に設定され、指示部(端部等)が仮想点の位置となるが、デバイス上に設定されるものには限定されない。例えば、仮想点を、デバイスが指し示す延長線上に設定してもよい。
1つの態様では、前記指示部は、デバイスの端部であり、また、前記端部の位置によって仮想点の位置が決定される。具体的には、
複数のカメラと、
少なくとも3つのマーカーと、仮想点を指し示す端部(指示部)と、を備え、前記端部の位置は当該デバイス上のマーカー位置によって特定可能である、デバイスと、
前記複数のカメラによって撮影された複数のカメラ画像と、既知の各マーカー間距離と、を用いて前記デバイスを検出するデバイス検出手段と、
デバイス上の各マーカーと前記端部との相対的位置を用いて、マーカー座標から前記端部の座標を取得する端部座標取得手段と、
を用い、
前記複数のカメラによって、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態にある前記デバイスを撮影するステップと、
前記デバイスの端部によって所望の仮想点位置を指し示した時に、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態から、前記少なくとも3つのマーカーがカメラによって認識されるようにして、前記デバイスを検出するステップと、
前記デバイスの検出を決定入力として、デバイス検出時のマーカー座標から前記端部の座標を仮想点座標として取得するステップと、
を備えた仮想点決定方法、である。
前記デバイスによって所望の仮想点位置を指し示した時に、前記隠れマーカーを、前記第1の状態から前記第2の状態へ切り換えることで、当該デバイスを検出する。
前記スイッチは、当該デバイスを掴んで所望の仮想点を指し示した操作者によって手動操作可能であり、
仮想点座標の取得は、当該デバイス上のスイッチ操作による遠隔決定入力により実行される。
1つの態様では、前記スイッチは、前記端部に設けた押圧スイッチであり、操作者が当該デバイスを用いて対象物上ないし対象物内(対象物には被験者の身体、被験者が持つ物体、被験者の環境にある物体等が含まれる)の仮想点を指し示した時に、前記押圧スイッチが前記対象物に当って押し込まれて入力される。
なお、仮想点を指し示す部位(指示部)は、デバイス上に複数設けてもよく、例えば、デバイスは、端部に形成された第1の指示部と、デバイスの端部以外の部位に形成された第2の指示部と、を備えている。デバイス上には、第2の指示部を挟んで第1の側には、少なくとも1つのマーカーが設けてあり、第2の側には、残りのマーカーが設けてある。
前記デバイスの検出を決定入力として前記仮想点座標が取得された時に、当該仮想点座標と、前記3つ以上の実マーカーの座標と、によって仮想マーカーが設定される。
少なくとも3つのマーカーと、仮想点を指し示す指示部(例えば、端部)と、を備え、仮想点決定に用いられるデバイスであって、
各マーカー間の距離が既知であり、前記仮想点の位置は当該デバイス上のマーカー位置によって特定可能であり、
前記少なくとも3つのマーカーのうちの1つのマーカーは、カメラによって認識されない第1の状態と、カメラによって認識される第2の状態とを有する隠れマーカーであり、
前記デバイスは、前記隠れマーカーを、前記第1の状態から前記第2の状態へ切り換える切り換え手段を備えている、デバイス、である。
1つの態様では、前記切り換え手段は、当該デバイス上に設けたスイッチを含んでいる。
1つの態様では、前記スイッチは、前記端部に設けた押圧スイッチであり、操作者が当該デバイスを用いて対象物上ないし対象物内(対象物には被験者の身体、被験者が持つ物体、被験者の環境にある物体等が含まれる)の仮想点を指し示した時に、前記押圧スイッチが前記対象物に当って押し込まれて入力される。
なお、仮想点を指し示す部位(指示部)は、デバイス上に複数設けてもよく、例えば、デバイスは、端部に形成された第1の指示部と、デバイスの端部以外の部位に形成された第2の指示部と、を備えている。デバイス上には、第2の指示部を挟んで第1の側には、少なくとも1つのマーカーが設けてあり、第2の側には、残りのマーカーが設けてある。
(1)PC上で剛体上に取り付けられたマーカー間の距離を事前に設定しておく。各距離は、コンピュータの記憶部に格納されている。
(2)マーカーの3次元座標値を計算する。
(3)任意の3つのマーカーを選択し、計算された3次元座標値の距離を計算する。
(4)(1)の設定と同じ長さであった場合には剛体上のマーカーとする。長さが異なる場合には(3)に戻る。
第二軸:3つの身体上のマーカーm1、m2、m3の作る平面の単位法線ベクトル(=v2 t)。
第三軸:第一軸と第二軸に直交する単位ベクトル(=v3 t)。
このとき時刻tでの世界座標系から体節座標系への変換行列は次のように書ける。
この仮想点を時刻tの世界座標系に変換すると時刻tにおける仮想点座標値は、
と表すことができる。この式を用いて仮想点座標値の計算を行っている。
図1に示すようなポインタ1を用いた仮想点入力作業では、操作者はポインタ1の先端部20による仮想点の指示→スイッチ4の押し操作、という2アクションが必要となり、操作者が先端部20で仮想点を指し示した状態でスイッチ4を押すと、スイッチ4を押す瞬間にポインタ1の先端部20がずれてしまうおそれがある。また、ボタンを押す作業は面倒である。
この問題を解決するためにポインタ1´の先端にボタンスイッチ4Aを取り付け、ボタンスイッチ4Aが押されるとLEDが点灯するような構造にした。
カメラが前方のみにある場合に踵の仮想点を決めようとすると、足部に取り付けた剛体上の3点(図示せず、図6に準ずる実マーカー)とポインタの3点が同時に見えるように足部の方向を調整する必要がある。障害を持った被験者の場合には体の方向を動かすことは労力が必要となってしまう。
この課題を解決するためにポインタ1´の第1の部分2´の長さ方向の中央付近を指示部としてボタンスイッチ4Bを取り付けることで、前方のみにカメラがある場合でも足の方向を変えずに踵の仮想点を決定することを可能とした。デバイスの先端を指示部として仮想点を指し示す場合には図8左図に示すように先端に近いマーカーの位置が足によって隠れてしまう。一方、デバイスの真ん中付近を仮想点を指し示す指示部とする場合には、図8右図に示すようにすべてのマーカーが前方から見えるようになる(ポインタ1´の第1の部分2´の長さ寸法は、足部の幅よりも大きく、足部を挟んで両側にマーカーが位置する)。なお、かかる課題は、踵や足部に仮想点を設定する場合に限られるものではなく、踵や足部に仮想点を設定する場合に限定されるものではない。
M1 第1マーカー
M2 第2マーカー
M3 第3マーカー(隠れマーカー)
4 スイッチ
4A ボタンスイッチ(指示部)
4B ボタンスイッチ(指示部)
20 仮想点を指し示す端部(指示部)
Claims (6)
- 少なくとも3つのマーカーと、仮想点を指し示す1つ以上の指示部と、前記指示部に設けた押圧スイッチと、を備え、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーは、カメラによって認識されない第1の状態と、カメラによって認識される第2の状態とを有する隠れマーカーであり、前記仮想点の位置は当該デバイス上のマーカー位置によって特定可能である、デバイスと、
前記デバイスの各マーカー間の距離を特定可能な情報を記憶した記憶手段と、
3次元動作計測システムの被験者上の3つ以上の実マーカーと、
前記デバイスと前記3つ以上の実マーカーを含むカメラ画像を取得する複数のカメラと、
前記複数のカメラによって撮影された複数のカメラ画像中で認識されたマーカー間の距離を計算し、計算されたマーカー間距離と、前記記憶手段に記憶されている情報により特定される前記デバイスの各マーカー間距離と、を比較判定してこれらが一致した場合には、前記デバイスが検出されたものとみなし、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態から、前記少なくとも3つのマーカーがカメラによって認識された時に、前記デバイスを検出するデバイス検出手段と、
前記デバイスの検出を決定入力として、デバイス上の各マーカーと前記仮想点との相対的位置を用いて、デバイス検出時のマーカー座標から前記仮想点の座標を取得する仮想点座標取得手段と、
を備えており、
前記押圧スイッチの入力で前記隠れマーカーが前記第1の状態から前記第2の状態へ切り換わると共に、前記指示部による仮想点指示と前記押圧スイッチの入力を1アクションで実行することで、仮想点指示と同時に前記隠れマーカーを前記第1の状態から前記第2の状態へ切り換えるようになっており、前記指示部による仮想点指示時に前記デバイスが検出され、仮想点の座標が取得され、
前記デバイスの検出を決定入力として前記仮想点座標が取得された時に、当該仮想点座標と、前記3つ以上の実マーカーの座標と、によって前記3つ以上の実マーカーによって規定される体節座標系に仮想マーカーが設定される、
3次元動作計測システムにおける仮想点決定装置。 - 前記1つ以上の指示部は、当該デバイスの端部に形成された指示部を含む、請求項1に記載の3次元動作計測システムにおける仮想点決定装置。
- 前記1つ以上の指示部は、当該デバイスの端部以外の部位に形成された指示部を含み、デバイス上において、当該指示部を挟んで第1の側には、少なくとも1つのマーカーが設けてあり、第2の側には、残りのマーカーが設けてある、請求項1、2いずれか1項に記載の3次元動作計測システムにおける仮想点決定装置。
- 少なくとも3つのマーカーと、仮想点を指し示す1つ以上の指示部と、前記指示部に設けた押圧スイッチと、を備え、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーは、カメラによって認識されない第1の状態と、カメラによって認識される第2の状態とを有する隠れマーカーであり、前記仮想点の位置は当該デバイス上のマーカー位置によって特定可能である、デバイスと、
前記デバイスの各マーカー間の距離を特定可能な情報を記憶した記憶手段と、
3次元動作計測システムの被験者上の3つ以上の実マーカーと、
前記デバイスと前記3つ以上の実マーカーを含むカメラ画像を取得する複数のカメラと、
前記複数のカメラによって撮影された複数のカメラ画像中で認識されたマーカー間の距離を計算し、計算されたマーカー間距離と、前記記憶手段に記憶されている情報により特定される前記デバイスの各マーカー間距離と、を比較判定してこれらが一致した場合には、前記デバイスが検出されたものとみなし、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態から、前記少なくとも3つのマーカーがカメラによって認識された時に、前記デバイスを検出するデバイス検出手段と、
前記デバイスの検出を決定入力として、デバイス上の各マーカーと前記仮想点との相対的位置を用いて、デバイス検出時のマーカー座標から前記仮想点の座標を取得する仮想点座標取得手段と、
を用い、
前記複数のカメラによって、前記少なくとも3つのマーカーのうちの少なくとも1つのマーカーがカメラによって認識されない状態にある前記デバイス及び前記3つ以上の実マーカーを撮影し、
前記デバイスの指示部によって対象物上ないし対象物内の仮想点を指し示した時に前記押圧スイッチが前記対象物に当って押し込まれて入力され、仮想点指示と前記押圧スイッチの入力を1アクションで実行することで、仮想点指示と同時に前記隠れマーカーを前記第1の状態から前記第2の状態へ切り換え、
前記デバイス検出手段によって、前記デバイスの前記指示部による仮想点指示と同時に前記デバイスを検出し、
前記仮想点座標取得手段によって、前記デバイスの前記指示部による仮想点指示と同時に仮想点の座標を取得し、
前記デバイスの検出を決定入力として前記仮想点座標が取得された時に、当該仮想点座標と、前記3つ以上の実マーカーの座標と、によって前記3つ以上の実マーカーによって規定される体節座標系に仮想マーカーが設定される、
3次元動作計測システムにおける仮想点決定方法。 - 少なくとも3つのマーカーと、仮想点を指し示す1つ以上の指示部と、前記指示部に設けた押圧スイッチと、を備え、3次元動作計測システムにおける仮想点決定に用いられるデバイスであって、
各マーカー間の距離が既知であり、前記仮想点の位置は当該デバイス上のマーカー位置によって特定可能であり、
前記少なくとも3つのマーカーのうちの1つのマーカーは、カメラによって認識されない第1の状態と、カメラによって認識される第2の状態とを有する隠れマーカーであり、
前記押圧スイッチは、前記隠れマーカーを前記第1の状態から前記第2の状態へ切り換える切り換え手段を構成していると共に、前記指示部による仮想点指示と前記押圧スイッチの入力が1アクションで実行されることで、仮想点指示と同時に前記隠れマーカーが前記第1の状態から前記第2の状態へ切り換わるようになっている、請求項4に記載の方法に用いられるデバイス。 - 前記1つ以上の指示部は、当該デバイスの端部に形成された第1指示部と、当該デバイスの端部以外の部位に形成された第2指示部を含み、デバイス上において、当該第2指示部を挟んで第1の側には、少なくとも1つのマーカーが設けてあり、第2の側には、残りのマーカーが設けてある、
請求項5に記載のデバイス。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013001384A JP5693621B2 (ja) | 2012-01-10 | 2013-01-08 | 3次元動作計測システムにおける仮想点決定装置及び方法、並びに、3次元動作計測システムにおける仮想点決定に用いられるデバイス |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012002628 | 2012-01-10 | ||
| JP2012002628 | 2012-01-10 | ||
| JP2013001384A JP5693621B2 (ja) | 2012-01-10 | 2013-01-08 | 3次元動作計測システムにおける仮想点決定装置及び方法、並びに、3次元動作計測システムにおける仮想点決定に用いられるデバイス |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013164413A JP2013164413A (ja) | 2013-08-22 |
| JP5693621B2 true JP5693621B2 (ja) | 2015-04-01 |
Family
ID=49175823
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013001384A Active JP5693621B2 (ja) | 2012-01-10 | 2013-01-08 | 3次元動作計測システムにおける仮想点決定装置及び方法、並びに、3次元動作計測システムにおける仮想点決定に用いられるデバイス |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5693621B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7829236B2 (ja) * | 2023-09-27 | 2026-03-13 | リーグソリューションズ株式会社 | 検知方法およびコンピュータ |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06147830A (ja) * | 1992-11-11 | 1994-05-27 | Mitsubishi Electric Corp | 3次元位置測定装置及び3次元位置測定結果補正方法 |
| JP3324809B2 (ja) * | 1993-01-12 | 2002-09-17 | 三洋機工株式会社 | 三次元測定用測定点指示具 |
| JPH07311015A (ja) * | 1994-05-18 | 1995-11-28 | Hitachi Plant Eng & Constr Co Ltd | 被測定対象物の寸法計測方法 |
| JPH08305473A (ja) * | 1995-05-11 | 1996-11-22 | Hitachi Ltd | 三次元データ入力システム |
| JP2010079458A (ja) * | 2008-09-24 | 2010-04-08 | Fuji Xerox Co Ltd | 筆跡表示システム |
-
2013
- 2013-01-08 JP JP2013001384A patent/JP5693621B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2013164413A (ja) | 2013-08-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11547498B2 (en) | Surgical instrument with real time navigation assistance | |
| US11534246B2 (en) | User input device for use in robotic surgery | |
| US12489960B2 (en) | Communication of detected grasping forces in a surgical robotic platform | |
| US12555337B2 (en) | Mixed reality systems and methods for indicating an extent of a field of view of an imaging device | |
| CN104274183B (zh) | 动作信息处理装置 | |
| JP2021194539A (ja) | 外科手術中のコンピュータ支援ナビゲーション用のカメラ追跡バー | |
| US20190090955A1 (en) | Systems and methods for position and orientation tracking of anatomy and surgical instruments | |
| JP6930995B2 (ja) | 立体画像生成システム、立体画像生成方法及び立体画像生成プログラム | |
| KR101118654B1 (ko) | 모션캡쳐 기반의 자세분석을 통한 재활 장치 및 이에 따른 재활 방법 | |
| US20140275760A1 (en) | Augmented reality image display system and surgical robot system comprising the same | |
| US11266294B2 (en) | Image processing device, endoscopic surgery system, and image processing method | |
| CN110650704A (zh) | 用于检测图像捕获装置的视野内的物体的系统和方法 | |
| CN104284637B (zh) | 手术辅助装置 | |
| US12283062B2 (en) | Method and system for providing surgical site measurement | |
| Coupier et al. | A novel method for in-vivo evaluation of finger kinematics including definition of healthy motion patterns | |
| KR20140115575A (ko) | 수술 로봇 시스템 및 그 제어 방법 | |
| EP2953569A1 (en) | Tracking apparatus for tracking an object with respect to a body | |
| JP2012223363A (ja) | 手術用撮像システム及び手術用ロボット | |
| EP3606408B1 (en) | Method and apparatus for providing guidance for placement of a wearable device | |
| CN110177518A (zh) | 用于在图像捕获装置的视场内检测物体的系统和方法 | |
| CN105105846B (zh) | 一种用来精确引导对一病患进行外科手术的系统 | |
| CN103619280B (zh) | 医疗用机械手系统 | |
| Nissler et al. | OMG: introducing optical myography as a new human machine interface for hand amputees | |
| CN111710207B (zh) | 超声演示装置及系统 | |
| JP5693621B2 (ja) | 3次元動作計測システムにおける仮想点決定装置及び方法、並びに、3次元動作計測システムにおける仮想点決定に用いられるデバイス |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131114 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140528 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140610 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140619 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140902 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140926 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150203 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150203 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5693621 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |