JP6024435B2 - Image protection system, photographing apparatus and reproducing apparatus - Google Patents
Image protection system, photographing apparatus and reproducing apparatus Download PDFInfo
- Publication number
- JP6024435B2 JP6024435B2 JP2012270842A JP2012270842A JP6024435B2 JP 6024435 B2 JP6024435 B2 JP 6024435B2 JP 2012270842 A JP2012270842 A JP 2012270842A JP 2012270842 A JP2012270842 A JP 2012270842A JP 6024435 B2 JP6024435 B2 JP 6024435B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- storage
- storage mode
- memory card
- encrypted
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Studio Devices (AREA)
Description
本発明は、デジタルカメラやスマートフォンなどの撮影装置で撮影された被写体画像の再生を保護するための発明である。 The present invention is an invention for protecting the reproduction of a subject image shot by a shooting device such as a digital camera or a smartphone.
デジタルカメラ、カメラ機能付きのスマートフォン・携帯電話などの撮影装置により、業務にかかる被写体画像を撮影する機会が増え、業務にかかる被写体画像の漏洩防止策が必要とされている。 Opportunities to shoot subject images related to work are increasing due to photographing devices such as digital cameras and smartphones / cell phones with camera functions, and measures to prevent leakage of subject images related to work are required.
メモリカードに記憶したコンテンツを保護する手法としては、コンテンツを暗号化してメモリカードに記憶する手法が広く用いられており、例えば、特許文献1では、メモリカードに暗号化して記憶したコンテンツ(ここでは、音楽等)を復号して再生する装置が開示されている。
As a method for protecting content stored in a memory card, a method of encrypting content and storing it in a memory card is widely used. For example, in
また、特許文献2では、機密データの利用を許可する場所の光景をカメラにて撮影し、光景の撮像データを用いて生成した場所固有コードにより機密データを暗号化することで、機密データを利用できる場所を制限する発明が開示されている。
In
しかしながら、撮影装置で撮影する被写体画像は、業務にかかる被写体画像ばかりではなく、業務にかかわらない通常の被写体画像も含まれるため、撮影装置で撮影した被写体画像を暗号化して保存するモードと、暗号化しないで保存するモードを簡単な操作で切り替えられることが望ましい。 However, since the subject image photographed by the photographing device includes not only a subject image related to work but also a normal subject image not related to work, a mode for encrypting and saving the subject image photographed by the photographing device and encryption It is desirable to be able to switch the mode for saving without conversion by a simple operation.
また、従来の技術では、撮影装置側で被写体画像を暗号化してメモリカードに記憶すると、暗号化または復号に用いる鍵を撮影装置や再生装置側に記憶させなければならず、暗号化または復号に用いる鍵の管理が面倒になってしまう問題もある。 Further, in the conventional technology, when the subject image is encrypted and stored in the memory card on the photographing device side, the key used for encryption or decryption must be stored on the photographing device or playback device side, and the encryption or decryption is performed. There is also a problem that the management of keys to be used becomes troublesome.
そこで、本発明は、撮影装置で撮影した被写体画像を暗号化してメモリカードに保存するモードと、暗号化しないでメモリカードに保存するモードを簡単な操作で切り替えることができ、更に、被写体画像を暗号化してメモリカードに記憶させても、暗号化または復号に用いる鍵の管理を必要としないシステムおよび装置を提供することを目的とする。 Therefore, the present invention can switch between a mode for encrypting a subject image taken by a photographing apparatus and storing it in a memory card, and a mode for storing it in a memory card without encryption, and further, the subject image can be switched. It is an object of the present invention to provide a system and apparatus that does not require management of keys used for encryption or decryption even when encrypted and stored in a memory card.
上述した課題を解決する第1の発明にかかる画像保護システムには、被写体画像を記憶するメモリカード側に暗号化または復号に用いる鍵を記憶させるために、データを暗号鍵により暗号化する暗号部ならびに本人認証データを照合する本人認証部を有するセキュアチップと、データを記憶するフラッシュメモリと、前記セキュアチップおよび前記フラッシュメモリと通信するインターフェースを有し、データの暗号化保存が外部装置から指示されると、外部装置から受信したデータを前記暗号部により暗号化しこのデータの暗号文を前記フラッシュメモリに書き込み、データの非暗号化保存が外部装置から指示されると、外部装置から受信したデータを暗号化せずに前記フラッシュメモリに書き込む処理を行うコントローラが実装されたセキュアメモリカードが含まれる。 In the image protection system according to the first invention for solving the above-described problem, an encryption unit that encrypts data with an encryption key in order to store a key used for encryption or decryption on the memory card side that stores the subject image And a secure chip having a personal authentication unit for collating personal authentication data, a flash memory for storing data, and an interface for communicating with the secure chip and the flash memory, and an encryption device for storing data is instructed from an external device. Then, the data received from the external device is encrypted by the encryption unit and the ciphertext of this data is written to the flash memory, and when the non-encrypted storage of data is instructed from the external device, the data received from the external device is A controller in which a controller that performs writing to the flash memory without encryption is installed. It includes Interview A memory card.
また、第1の発明にかかる画像保護システムには、業務にかかる被写体画像に対しては利用制限を設け、通常の被写体画像に対しては利用制限を設けないようにするために、被写体画像を撮影する撮影手段と、暗号化保存と非暗号化保存のいずれかの保存モードをユーザに設定させるための手段で、保存モードが非暗号化保存に設定されている状態で、ユーザが所持する非接触型携帯デバイスを検知すると、保存モードを暗号化保存に切り替える保存モード設定手段と、前記撮影手段が前記被写体画像を撮影すると、前記被写体画像とこの時点の保存モードを含む画像ファイルを生成した後、前記画像ファイルの前記被写体画像を前記セキュアメモリカードの前記フラッシュメモリに保存する際、この時の保存モードが暗号化保存の場合、前記セキュアメモリカードの前記コントローラに対して、前記被写体画像の暗号化保存を指示し、この時の保存モードが非暗号保存の場合、前記セキュアメモリカードの前記コントローラに対して、前記被写体画像の非暗号化保存を指示する撮影制御手段を備えた撮影装置が含まれる。なお、ユーザが所持する非接触型携帯デバイスとは、近距離無線通信に対応して個人識別に用いられるデバイスを意味する。 In the image protection system according to the first aspect of the present invention, in order to provide a usage restriction for a subject image for business, and to prevent a usage restriction for a normal subject image, Shooting means for photographing, and means for allowing the user to set one of the storage modes of encrypted storage and non-encrypted storage. The storage mode is set to non-encrypted storage and the user has When a contact type mobile device is detected, a storage mode setting unit that switches the storage mode to encrypted storage, and when the photographing unit captures the subject image, an image file including the subject image and the current storage mode is generated. When the subject image of the image file is stored in the flash memory of the secure memory card, if the storage mode at this time is encrypted storage, When the controller of the secure memory card is instructed to store the subject image in an encrypted manner, and the storage mode at this time is non-encrypted storage, the controller of the secure memory card is not encrypted of the subject image. An imaging apparatus including an imaging control means for instructing to save the image is included. Note that the non-contact portable device possessed by the user means a device used for personal identification corresponding to short-range wireless communication.
また、上述した課題を解決する第2の発明は、第1の発明に記載した画像保護システムにおいて、前記撮影装置の前記保存モード設定手段は、保存モードが暗号化保存に設定されている状態で前記非接触型携帯デバイスを検知すると、保存モードを非暗号化保存に設定することを特徴とする。 A second invention for solving the above-described problem is the image protection system according to the first invention, wherein the storage mode setting means of the photographing apparatus is in a state where the storage mode is set to encrypted storage. When the non-contact portable device is detected, the storage mode is set to non-encrypted storage.
また、上述した課題を解決する第3の発明は、第1の発明に記載した画像保護システムにおいて、前記撮影装置の前記保存モード設定手段は、保存モードが暗号化保存に設定されている状態で、保存モードを非暗号化保存に設定するボタンが操作されると、保存モードを非暗号化保存に設定することを特徴とする。 According to a third aspect of the present invention for solving the above-described problem, in the image protection system according to the first aspect, the storage mode setting means of the photographing apparatus is in a state where the storage mode is set to encrypted storage. When the button for setting the storage mode to unencrypted storage is operated, the storage mode is set to unencrypted storage.
また、上述した課題を解決する第4の発明は、第1の発明から第3の発明のいずれか一つに記載した画像保護システムにおいて、前記セキュアメモリカードに記憶されている前記被写体画像を再生できるように、前記画像ファイルの前記被写体画像を前記セキュアメモリカードから読み出す際、前記画像ファイルに含まれる保存モードが暗号保存の場合、前記セキュアメモリカードの前記コントローラに対して、ユーザから取得した本人認証データを前記本人認証部に照合させる指示を行った後、本人認証に成功すると、前記セキュアメモリカードの前記コントローラに対して、復号して前記被写体画像を読み出す指示を行い、前記画像ファイルに含まれる保存モードが非暗号保存の場合、前記セキュアメモリカードの前記コントローラに対して、復号せずに前記被写体画像を読み出す指示を行う再生制御手段を備えた再生装置が含まれる。 According to a fourth aspect of the present invention for solving the above-described problem, in the image protection system according to any one of the first to third aspects, the subject image stored in the secure memory card is reproduced. When reading out the subject image of the image file from the secure memory card, if the storage mode included in the image file is encryption storage, the person acquired from the user to the controller of the secure memory card After giving an instruction to verify the authentication data with the personal authentication unit, if the personal authentication is successful, the controller of the secure memory card is instructed to decode and read the subject image, and is included in the image file. If the storage mode to be stored is non-encrypted storage, the controller of the secure memory card Te includes reproducing apparatus having a regeneration control means for performing an instruction for reading the object image without decoding.
また、第4発明において、前記セキュアメモリカードの前記セキュアチップは、データを復号鍵により復号する復号部を有し、前記コントローラは、復号したデータを読み出す指示を外部装置から受けると、読み出し指示を受けたデータを前記フラッシュメモリから読み出し、前記復号部にて復号してから外部装置へ送信し、復号せずにデータを読み出す指示を外部装置から受けると、読み出し指示を受けたデータを前記フラッシュメモリから読み出し、復号することなくデータを外部装置へ送信する処理を行う。 In the fourth aspect of the invention, the secure chip of the secure memory card includes a decryption unit that decrypts data using a decryption key, and the controller receives a read instruction when receiving an instruction to read the decrypted data from an external device. The received data is read from the flash memory, decoded by the decoding unit and transmitted to the external device, and when an instruction to read the data without decoding is received from the external device, the data that has received the read instruction is read from the flash memory The data is read from the data and transmitted to the external device without being decoded.
更に、上述した課題を解決する第4の発明は、第3の発明に記載した画像保護システムにおいて、ユーザが所定のエリアに居さえすれば、業務モードで撮影された前記被写体画像を再生できるように、前記再生装置は、位置情報を計測する位置計測手段を備え、前記再生制御手段は、再生する前記画像ファイルに含まれる保存モードが暗号保存の場合、前記再生制御手段に登録されているエリア情報と前記位置計測手段が計測した位置情報を照合し、位置情報がエリア情報に含まれる場合、本人認証を実行せずに、前記セキュアメモリカードの前記コントローラに対して、前記復号部を用いて復号した前記被写体画像を読み出す指示を行うことを特徴とする。 Furthermore, a fourth invention for solving the above-described problem is that in the image protection system described in the third invention, the subject image photographed in the business mode can be reproduced as long as the user is in a predetermined area. In addition, the reproduction apparatus includes a position measurement unit that measures position information, and the reproduction control unit is an area registered in the reproduction control unit when the storage mode included in the image file to be reproduced is encryption storage. When the information and the position information measured by the position measuring unit are collated, and the position information is included in the area information, the personal authentication is not performed and the controller of the secure memory card is used for the controller. An instruction to read the decoded subject image is given.
このように、上述した本発明によれば、撮影装置で撮影した被写体画像を暗号化してメモリカードに保存するモードと、暗号化しないでメモリカードに保存するモードを簡単な操作で切り替えることができ、更に、被写体画像を暗号化してメモリカードに記憶させても、暗号化または復号に用いる鍵の管理を必要としないシステムおよび装置を提供できる。 As described above, according to the present invention described above, it is possible to switch between a mode for encrypting a subject image photographed by the photographing apparatus and storing it in the memory card, and a mode for storing it in the memory card without encryption. Furthermore, it is possible to provide a system and apparatus that do not require management of keys used for encryption or decryption even when subject images are encrypted and stored in a memory card.
ここから、本実施形態にかかる画像保護システムについて、図面を参照しながら詳細に説明する。 From here, the image protection system according to the present embodiment will be described in detail with reference to the drawings.
[第1実施形態]
図1は、第1実施形態にかかる画像保護システム1の構成を説明する図、図2は、セキュアメモリカード2のブロック図、図3は、第1実施形態にかかる画像保護システム1のブロック図である。
[First Embodiment]
FIG. 1 is a diagram illustrating a configuration of an
図1に図示したように、第1実施形態にかかる画像保護システム1は、被写体画像を含む画像ファイル220を保存するためのセキュアメモリカード2と、被写体画像を撮影する機能と画像ファイル220をセキュアメモリカード2に保存する機能を有する撮影装置3と、非接触型携帯デバイスとして機能するNFCカード6(NFC: Near Field Communication)と、セキュアメモリカード2に保存されている画像ファイル220を再生する再生装置4とから少なくとも構成される。
As shown in FIG. 1, the
本発明では、撮影機能を有する様々な装置を撮影装置3として利用でき、図1では、撮影装置3をスマートフォンとして図示しているが、携帯電話、デジタルカメラやタブレット型のコンピュータなども撮影装置3として利用できる。同様に、本発明では、画像ファイル220の再生機能を有する様々な装置を再生装置4として利用でき、図1では、再生装置4をタブレット型のコンピュータとして図示しているが、スマートフォン、携帯電話やフォトスタンドなども撮影装置3として利用できる。
In the present invention, various devices having a photographing function can be used as the photographing
また、図1では、非接触型携帯デバイスの形態をキャッシュサイズのNFCカード6としているが、非接触型携帯デバイスの他の形態としては、ミニカードやキーホルダ型のマイクロタグも想定できるし、NFCに準拠したモバイル用非接触チップを実装した携帯電話等も非接触型携帯デバイスとして利用できる。
Further, in FIG. 1, the form of the non-contact type portable device is the cache
まず、図2を参照しながら、セキュアメモリカード2について説明する。第1実施形態のセキュアメモリカード2は、ICカード用のオペレーティングシステムが搭載されたSDカードである。
First, the
図2に図示したように、セキュアメモリカード2は、CPU、RAM、ROM、EEPROM、暗号演算機能に特化したコプロセッサ等を有するICカード用のICチップであるセキュアチップ21と、撮影装置3によって画像ファイル220が記憶されるフラッシュメモリ22と、フラッシュメモリ22に対するデータの読み書き制御するコントローラ20と、外部装置と接続するためのメモリカードインターフェース23を備え、コントローラ20は、ICカード用のリーダライタの機能を果たすセキュアチップインターフェース200と、フラッシュメモリ22と通信するためのフラッシュメモリインターフェース201を有している。
As shown in FIG. 2, the
セキュアチップ21のROMには、ICカード用のプラットフォーム型オペレーティングシステムが実装され、様々なアプリケーションをセキュアチップ21のEEPOMに実装することができる。
A platform type operating system for an IC card is mounted on the ROM of the
図2に図示したように、第1実施形態では、セキュアチップ21に実装されるアプリケーションにより実現される機能として、セキュアチップ21は、コントローラ20から送信されたデータを暗号鍵210aにより暗号化する暗号部210と、コントローラ20から送信された暗号データを復号鍵211aにより復号する復号部211と、コントローラ20から送信された本人認証データと参照データ212aを照合する本人認証部212を備え、少なくとも、復号部211の作動には本人認証の成功が必要とされている。なお、後述するように、本実施形態では保存モードの設定にNFCカード6が用いられるため、本人認証に用いるデータとしては、NFCカード6に格納されているデータ(例えば、カード番号)を用いることが望ましい。
As shown in FIG. 2, in the first embodiment, as a function realized by an application mounted on the
セキュアメモリカード2のコントローラ20は、セキュアメモリカード2が装着された上位装置(ここでは、撮影装置3または再生装置4のいずれか)から受けた指示に従った処理を行う。
The
被写体画像の暗号化保存を撮影装置3から受けると、セキュアメモリカード2のコントローラ20は、セキュアチップ21の暗号部210に被写体画像を送信して被写体画像を暗号化し、被写体画像の暗号文をフラッシュメモリ22に書き込む処理を実行する。
When the subject image is encrypted and saved from the photographing
また、被写体画像の非暗号化保存を書き込む指示を撮影装置3から受けると、セキュアメモリカード2のコントローラ20は、セキュアチップ21を利用して被写体画像を暗号化することなく、被写体画像をフラッシュメモリ22に書き込む処理を実行する。
When receiving an instruction from the photographing
また、本人認証データをセキュアメモリカード2の本人認証部212に照合させる指示を再生装置4から受けると、セキュアメモリカード2のコントローラ20は、再生装置4から送信され本人認証データ(例えば、カード番号)を、セキュアチップ21の本人認証部212に送信し、本人認証結果を再生装置4へ返信する処理を実行する。
When receiving an instruction from the
また、被写体画像の暗号文を復号化して読み出す指示を再生装置4から受けると、セキュアメモリカード2のコントローラ20は、再生装置4から指定された被写体画像の暗号文をフラッシュメモリ22から読み出した後、セキュアチップ21の復号部211を利用して、被写体画像の暗号文を復号し、復号した被写体画像を再生装置4へ返信する処理を実行する。
When receiving an instruction from the
また、被写体画像を単に読み出す指示を再生装置4から受けると、セキュアメモリカード2のコントローラ20は、再生装置4から指定された被写体画像をフラッシュメモリ22から読み出した後、被写体画像の暗号文を復号することなく、被写体画像を再生装置4へ返信する処理を実行する。
When receiving an instruction from the
画像保護システム1の撮影装置3について説明する。図3に図示したように、画像保護システム1の撮影装置3は、本発明を実施するための機能として、データを表示する表示手段31と、被写体画像を撮影する撮影手段33と、暗号化して保存する暗号化保存と暗号化せずに保存する非暗号化保存のいずれかをユーザに設定させるための手段で、暗号化せずに保存する非暗号化保存に保存モードが設定されている状態で、ユーザが所持する非接触型携帯デバイスを検知すると、暗号化して保存する暗号化保存に保存モードを切り替える保存モード設定手段34と、撮影手段33が撮影した被写体画像とこの時点の保存モードを含む画像ファイル220をセキュアメモリカード2のフラッシュメモリ22に保存する際、この時の保存モードが暗号化保存の場合、画像ファイル220に含まれる被写体画像の暗号化保存をセキュアメモリカード2のコントローラ20に指示し、この時の保存モードが非暗号化保存の場合、画像ファイル220に含まれる被写体画像の非暗号化保存をセキュアメモリカード2のコントローラ20に指示する撮影制御手段30と、セキュアメモリカード2と通信するためのメモリカードスロット32と、ユーザが所持するNFCカード6と近距離無線通信を行うチップであるCLF35(ContactLess Front-end)を備え、被写体画像を撮影する際、セキュアメモリカード2が撮影装置3に装着される。
The photographing
撮影装置3の撮影手段33は、CCDセンサやCOMSセンサなどの撮影素子、光学レンズ、画像処理エンジンなどにて構成される手段で、撮影装置3の表示手段31は、液晶や有機ELなどのディスプレイで、ここでは、撮影装置3の表示手段31をタッチパネルとしている。
The photographing means 33 of the photographing
図4は、撮影装置3の撮影制御手段30が生成する画像ファイル220を説明する図である。撮影装置3の撮影制御手段30が生成する画像ファイル220は、画像ファイル220のファイルヘッダー、被写体画像の撮影日時や被写体画像の撮影条件などを含む被写体画像のメタデータ、サムネイル画像のメタデータ、被写体画像のサムネイル画像、被写体画像(一般的には、被写体画像の圧縮データになる)から構成される。
FIG. 4 is a diagram illustrating the
画像ファイル220をExif形式のファイルとした際、画像ファイル220に保存する被写体画像はPrimary画像に該当し、被写体画像のメタデータはAPP1に含まれる0th_IFDに該当する。また、サムネイル画像はAPP1に含まれる1st_IFDの画像(Thumbnail画像)に該当し、サムネイル画像のメタデータはAPP1に含まれる1st_IFDに該当する。
When the
本実施形態において、撮影装置3の撮影制御手段30は、画像ファイル220をセキュアメモリカード2のフラッシュメモリ22に保存する前に、この時の保存モードを確認し、この時の保存モードが暗号化保存の場合、画像ファイル220の被写体画像をセキュアメモリカード2に保存する際、セキュアメモリカード2のコントローラ20に対して、被写体画像の暗号化保存を指示し、この時の保存モードが非暗号化保存の場合、セキュアメモリカード2のコントローラ20に対して、被写体画像の非暗号化保存を指示する。
In the present embodiment, the image capturing
撮影装置3の保存モード設定手段34は、画像ファイル220をセキュアメモリカード2に保存する際の保存モードをユーザが簡単な操作で設定できるように設けられる手段で、本実施形態では、非暗号化保存に保存モードが設定されている状態で、ユーザが所持する非接触型携帯デバイスを検知すると、暗号化して保存する暗号化保存に保存モードを切り替える処理を実行する。
The storage
図5は、撮影装置3の撮影制御手段30と保存モード設定手段34の動作を説明する図である。撮影装置3の撮影制御手段30は、撮影装置3に実装されるアプリケーションによって実現される手段で、撮影装置3の撮影制御手段30は、図5で図示した処理を行う。
FIG. 5 is a diagram for explaining the operation of the photographing control means 30 and the storage mode setting means 34 of the photographing
メニューの中から「撮影」が選択されるなどすると、撮影装置3の撮影制御手段30が起動し、撮影装置3の撮影制御手段30は、図1に図示しているように、撮影手段33が撮影している被写体画像を含む撮影画面3aを表示手段31に表示させる(S1)。
When “shooting” is selected from the menu, the shooting control means 30 of the
撮影装置3の撮影手段33が撮影画面3aを表示手段31に表示させている間、撮影装置3の保存モード設定手段34が作動し、保存モード設定手段34は、ユーザが保存モードを設定する保存モード設定処理(S2)を実行する。なお、保存モード設定処理(S2)の詳細については後述する。
While the photographing
本実施形態において、ユーザは、保存モードとして暗号化保存と非暗号化保存のいずれかを選択することができる。保存モードに暗号化保存を含ませているのは、撮影装置3で撮影した被写体画像に利用制限を設けられるようにするためである。保存モードが暗号化保存のときに撮影された被写体画像は暗号化されてフラッシュメモリ22に記憶され、利用条件(ここでは、本人認証の成功)を満足しなければ該被写体画像は再生できない。また、保存モードが非暗号化保存のときに撮影された被写体画像は暗号化されずにフラッシュメモリ22に記憶され、利用条件を満足すことなく該被写体画像は再生可能である。
In the present embodiment, the user can select either encrypted storage or non-encrypted storage as the storage mode. The reason why encrypted storage is included in the storage mode is to allow use restrictions to be applied to the subject image captured by the
撮影装置3の撮影手段33は、シャッター操作がなされたか確認し(S3)、シャッター操作がなされていないときは保存モード設定処理(S2)に戻る。また、シャッター操作がなされると、撮影装置3の撮影手段33は被写体画像を撮影し(S4)、撮影装置3の撮影制御手段30は所定のファイル形式の画像ファイル220を生成する(S5)。なお、撮影装置3の撮影制御手段30が生成する画像ファイル220には、撮影手段33が撮影した被写体画像に加えてこの時点の保存モードが含まれ、本実施形態では、被写体画像のメタデータにこの時点の保存モードが書き込まれることになる。
The photographing means 33 of the photographing
次に、撮影装置3の撮影制御手段30は、画像ファイル220をセキュアメモリカード2に保存する処理を開始する(S6)。
Next, the imaging control means 30 of the
撮影装置3の撮影制御手段30は、像ファイル220をセキュアメモリカード2に保存する処理を開始した後、画像ファイル220の被写体画像をセキュアメモリカード2に保存する際、この時点の保存モードを確認し(S7)、この時の保存モードが暗号化保存の場合、セキュアメモリカード2のコントローラ20に対して、被写体画像の暗号化保存を指示する(S8)。なお、暗号化保存を指示するのは被写体画像の本体のみで、メタデータについては暗号化保存を指示しない。
The photographing control means 30 of the photographing
セキュアメモリカード2のコントローラ20は、撮影装置3から被写体画像の暗号化保存が指示されると、撮影装置3の撮影制御手段30から送信された被写体画像の暗号化命令を暗号部210に送信し(S9)、セキュアチップ21の暗号部210は被写体画像を暗号化する(S10)。
The
セキュアメモリカード2のコントローラ20は、セキュアチップ21の暗号部210を利用して被写体画像を暗号化すると、暗号化した被写体画像の書き込み命令をフラッシュメモリ22へ送信し(S11)、暗号化した被写体画像をフラッシュメモリ22に記憶して(S12)、この手順は終了する。
When the
また、撮影装置3の撮影制御手段30は、図5のS6において、この時点の保存モードが非暗号化保存の場合、セキュアメモリカード2のコントローラ20に対して、被写体画像の非暗号化保存を指示する(S13)。
Further, when the storage mode at this time is non-encrypted storage in S6 of FIG. 5, the
セキュアメモリカード2のコントローラ20は、撮影装置3から被写体画像の非暗号化保存が指示されると、セキュアチップ21の暗号部210を用いて暗号化することなく、撮影装置3から送信された被写体画像の書き込み命令をフラッシュメモリ22へ送信し(S14)、被写体画像をフラッシュメモリ22に記憶して(S15)、この手順は終了する。
When the
なお、ハードディスクと同様に、セキュアメモリカード2のフラッシュメモリ22には、フラッシュメモリ22に読み書きを行う際のブロック単位(例えば、512バイト)が定められているため、撮影装置3の撮影制御手段30は、セキュアメモリカード2に被写体画像を送信する際、被写体画像をブロック単位に分割してセキュアメモリカード2に送信する。
Similar to the hard disk, the
また、セキュアチップ21の暗号部210が対応している暗号アルゴリズムにより処理単位(例えば、128バイト)は定めるため、セキュアメモリカード2のコントローラ20は、撮影制御手段30から送信されたブロック単位の被写体画像を該処理単位に分割して暗号化する。
Further, since the processing unit (for example, 128 bytes) is determined by the encryption algorithm supported by the
加えて、図4に図示したように、撮影装置3の撮影制御手段30が生成する画像ファイル220には、画像データとして、被写体画像以外に、被写体画像のサムネイル画像も含まれる場合もあるため、被写体画像のサムネイル画像が画像ファイル220に含まれる場合には、被写体画像に加え、被写体画像のサムネイル画像も暗号化してセキュアメモリカード2のフラッシュメモリ22に記憶することが望ましい。
In addition, as illustrated in FIG. 4, the
ここから、ユーザが保存モードを設定する保存モード設定処理(S2)について説明する。図6は、NFCカード6を用いて保存モードを設定する第1の手法を説明する図で、図7は、NFCカード6を用いて保存モードを設定する第2の手法を説明する図を説明するフロー図である。
From here, the storage mode setting process (S2) in which the user sets the storage mode will be described. FIG. 6 is a diagram for explaining a first method for setting the storage mode using the
図6を参照しながら、NFCカード6を用いて保存モードを設定する第1の手法について説明する。NFCカード6を用いて保存モードを設定する第1の手法は、暗号化保存の設定にNFCカード6を利用し、非暗号化保存の設定にボタンを利用する形態である。
A first method for setting the storage mode using the
NFCカード6を用いて保存モードを設定する第1の手法において、撮影装置3の保存モード設定手段34は、保存モードを設定する操作がなされるのを監視する(S20)。ここで、保存モードを設定する操作は、ユーザがNFCカード6を撮影装置3のCLF35にかざす操作、または、ユーザが保存モードを非暗号化保存に設定するボタンを押す操作のいずれかになる。
In the first method of setting the storage mode using the
撮影装置3の保存モード設定手段34は、撮影装置3のCLF35からNFCカード6を検知したことが通知されると、ユーザがNFCカード6を撮影装置3のCLF35にかざす操作を行ったと判断する。また、撮影装置3の保存モード設定手段34は、ユーザが保存モードを非暗号化保存に設定するボタンに対応するボタン信号が入力されると、ユーザが保存モードを非暗号化保存に設定するボタンを押したと判断する。
When notified from the
なお、保存モードを非暗号化保存に設定する物理的なボタンを撮影装置3に備えさせてもよいが、図1では、保存モードを非暗号化保存に設定するためのボタンオブジェクト3bを撮影画面3aに表示している。
Note that a physical button for setting the storage mode to unencrypted storage may be provided in the photographing
撮影装置3の保存モード設定手段34は、撮影装置3のCLF35からNFCカード6を検知したことが通知されると、保存モードを暗号化保存に設定して(S21)、S20に戻る。また、撮影装置3の保存モード設定手段34は、ユーザが保存モードを非暗号化保存に設定するボタンに対応するボタン信号が入力されると、保存モードを非暗号化保存に設定して(S22)、S20に戻る。
When notified from the
次に、図7を参照しながら、NFCカード6を用いて保存モードを設定する第2の手法について説明する。NFCカード6を用いて保存モードを設定する第2の手法は、撮影装置3にNFCカード6をかざす毎に、暗号化保存と非暗号化保存が切り替わるようにした形態である。
Next, a second method for setting the storage mode using the
NFCカード6を用いて保存モードを設定する第2の手法において、撮影装置3の保存モード設定手段34は、保存モードを設定する操作がなされるのを監視する(S30)。第2の手法では、保存モードを設定する操作は、ユーザがNFCカード6を撮影装置3のCLF35にかざす操作のみになるため、撮影装置3の保存モード設定手段34は、撮影装置3のCLF35からNFCカード6を検知したことが通知されると、ユーザがNFCカード6を撮影装置3のCLF35にかざす操作を行ったと判断する。
In the second method of setting the storage mode using the
撮影装置3の保存モード設定手段34は、撮影装置3のCLF35からNFCカード6を検知したことが通知されると、この時の保存モードが暗号化保存であるか確認する(S31)。この時の保存モードが暗号化保存であれば、撮影装置3の保存モード設定手段34は、保存モードを非暗号化保存に設定して(S32)、S30に戻る。また、この時の保存モードが暗号化保存でなければ、撮影装置3の保存モード設定手段34は、保存モードを暗号化保存に設定して(S33)、S30に戻る。
When the storage
次に、画像保護システム1の再生装置4について説明する。図3に図示したように、画像保護システム1の再生装置4は、本発明を実施するための機能として、セキュアメモリカード2に記憶されている画像ファイル220を再生する表示手段41と、画像ファイル220の被写体画像をセキュアメモリカード2から読み出す際、画像ファイル220の保存モードが暗号化保存の場合、セキュアメモリカード2のコントローラ20に対して、ユーザから取得した本人認証データをセキュアメモリカード2の本人認証部212に照合させる指示を行った後、本人認証に成功すると、セキュアメモリカード2のコントローラ20に対して、被写体画像の復号読み出しを指示し、画像ファイル220の保存モードが非暗号化保存の場合、セキュアメモリカード2のコントローラ20に対して、被写体画像の非復号読み出しを指示する再生制御手段40と、セキュアメモリカード2と通信するためのメモリカードインターフェース42を備え、画像ファイル220を再生する際、セキュアメモリカード2が再生装置4に装着される。
Next, the
再生装置4の表示手段41は、液晶や有機ELなどのディスプレイである。再生装置4の再生制御手段40は、再生装置4に実装されるアプリケーションによって実現される手段である。
The display means 41 of the
図8は、再生装置4の再生制御手段40の動作を説明する図である。再生装置4にて画像を再生する際、再生装置4の再生制御手段40は、再生装置4で再生する画像ファイル220をユーザに選択させる処理を実行する(S40)。
FIG. 8 is a diagram for explaining the operation of the playback control means 40 of the
再生装置4で再生する画像ファイル220をユーザに選択させる処理として、第1実施形態の再生制御手段40は、セキュアチップ21のフラッシュメモリ22に記憶されている画像ファイル220のファイル名の一覧を表示手段41に表示させて、再生装置4で再生する画像ファイル220のファイル名をユーザに選択させる。
As processing for causing the user to select an
再生装置4で再生する画像ファイル220のファイル名をユーザが選択すると、再生装置4の再生制御手段40は、再生装置4で再生する画像ファイル220の保存モードを確認する(S41)。
When the user selects the file name of the
再生装置4で再生する画像ファイル220の保存モードが暗号化保存であれば、暗号化保存の画像ファイル220の利用条件として設定されている本人認証を行うために、再生装置4の再生制御手段40は、本人認証データをユーザから取得し、セキュアメモリカード2のコントローラ20に対して、ユーザから取得した本人認証データをセキュアメモリカード2の本人認証部212に照合させる指示を行う(S42)。
If the storage mode of the
本人認証データをユーザから取得する手法は、本人認証データの内容に依存する。例えば、本人認証データをNFCカード6に格納されているカード番号とするとき、ICカードリーダ等を利用してユーザが所持するNFCカード6からカード番号を読み取る。
The method of acquiring the personal authentication data from the user depends on the content of the personal authentication data. For example, when the personal authentication data is a card number stored in the
セキュアメモリカード2のコントローラ20は、本人認証データをセキュアメモリカード2の本人認証部212に照合させる指示を再生装置4から受けると、セキュアチップ21の本人認証部212に本人認証データを含む本人認証命令を送信して(S43)、本人認証部212は本人認証データを照合し(S44)、セキュアメモリカード2のコントローラ20は本人認証結果を再生装置4へ返信する(S45)。
When the
再生装置4の再生制御手段40は、セキュアメモリカード2から送信された本人認証結果を確認し(S46)、本人認証結果が失敗の場合、この手順の先頭に戻る。
The playback control means 40 of the
再生装置4の再生制御手段40は、セキュアメモリカード2から送信された本人認証結果が成功の場合、セキュアメモリカード2のコントローラ20に対して、再生する画像ファイル220のファイル名を指定して、被写体画像の復号読み出しを指示する(S47)。
When the personal authentication result transmitted from the
セキュアメモリカード2のコントローラ20は、被写体画像の復号読み出しを再生装置4から指示されると、指定された画像ファイル220の被写体画像の暗号文を読み出す命令をフラッシュメモリ22へ送信し(S48)、被写体画像の暗号文をフラッシュメモリ22から読み出す(S49)。
When instructed by the
そして、セキュアメモリカード2のコントローラ20は、被写体画像の暗号文の復号命令をセキュアチップ21の復号部211に送信し(S50)、セキュアチップ21の復号部211は被写体画像の暗号文を復号する(S51)。
Then, the
セキュアメモリカード2のコントローラ20は、セキュアチップ21の復号部211が復号した被写体画像を再生装置4に送信し(S52)、再生装置4の再生制御手段40は、復号された被写体画像を表示手段41に表示して(S53)、この手順を終了する。
The
また、図6のS21において、再生装置4の再生制御手段40は、ユーザが選択した画像ファイル220の保存モードが非暗号化保存の場合、セキュアメモリカード2のコントローラ20に対して、被写体画像の非復号読み出しを指示する(S54)。
In S21 of FIG. 6, the playback control means 40 of the
セキュアメモリカード2のコントローラ20は、被写体画像の非復号読み出しを再生装置4から指示されると、この指示で特定される被写体画像を読み出す命令をフラッシュメモリ22へ送信し(S55)、フラッシュメモリ22から被写体画像を読み出す(S56)。
When the
そして、セキュアメモリカード2のコントローラ20は、フラッシュメモリ22から読み出した被写体画像を再生装置4へ送信し(S57)、再生装置4の再生制御手段40は、セキュアメモリカード2から受信した被写体画像を表示手段41に表示して(S58)、この手順を終了する。
Then, the
上述しているように、セキュアメモリカード2には、フラッシュメモリ22に読み書きを行う際のブロック単位が定められているため、セキュアメモリカード2のセキュアチップ21は、フラッシュメモリ22から被写体画像の読み出しを行う際、被写体画像をブロック単位に分割して再生装置4に送信する。
As described above, since the
また、セキュアチップ21の復号部211が対応している暗号アルゴリズムにより処理単位は定めるため、セキュアメモリカード2のコントローラ20は、被写体画像を該処理単位に分割して復号する。
Since the processing unit is determined by the encryption algorithm supported by the
[第2実施形態]
上述した第1実施形態では、保存モードが暗号化保存で撮影された被写体画像の利用条件を本人認証の成功のみとしていたが、位置計測機能を備えている装置(例えば、スマートフォン)を被写体画像の撮影および再生に利用する場合が増えているため、保存モードが暗号化保存の被写体画像の利用条件を位置認証の成功または本人認証の成功のいずれかにすると、予め設定されたエリアにユーザが居さえすれば、暗号化保存で撮影された被写体画像を再生できるようになる。
[Second Embodiment]
In the first embodiment described above, the use condition of the subject image captured with the storage mode being encrypted storage is only the success of the personal authentication. Since the use of images for shooting and playback is increasing, if the use mode of the subject image for encrypted storage is set to either successful location authentication or successful identity authentication, the user is present in a preset area. As long as this is done, it is possible to play back the subject image that was shot in encrypted storage.
図9は、第2実施形態にかかる再生装置5のブロック図である。図9に図示したように、第2実施形態にかかる再生装置5は、セキュアメモリカード2に記憶されている被写体画像を表示する表示手段51と、被写体画像の再生を制御する再生制御手段50と、セキュアメモリカード2と通信するためのメモリカードインターフェース52と、再生装置5の位置情報を計測する位置計測手段53を備え、被写体画像を再生する際、セキュアメモリカード2が再生装置5に装着される。
FIG. 9 is a block diagram of the
スマートフォンや携帯電話などで位置情報を計測する手法として、無線基地局からの信号を利用する手法、GPS衛星および無線基地局からの信号を利用する手法、GPS衛星からの信号を利用する手法などがあるが、位置情報を計測できれば、位置情報を計測する手法は任意でよい。 As a method of measuring position information with a smartphone or a mobile phone, there are a method using a signal from a radio base station, a method using a signal from a GPS satellite and a radio base station, a method using a signal from a GPS satellite, etc. However, as long as position information can be measured, any method for measuring position information may be used.
位置認証を行えるように、第2実施形態にかかる再生装置5の再生制御手段50には、暗号化保存で撮影された被写体画像を再生できるエリアを示すエリア情報が記憶される。暗号化保存で撮影された被写体画像を再生できるエリアとしては会社の建物内がよい。
In order to perform position authentication, the playback control means 50 of the
図10は、第2実施形態にかかる再生装置5の再生制御手段50の動作を説明する図である。第2実施形態にかかる再生装置5の再生制御手段50の動作は、第1実施形態にかかる再生装置4の再生制御手段40の動作とほぼ変わらず、図10において、図8と同じ内容のステップには、図8と同じ符号を付加し、ここでは詳細に説明しない。
FIG. 10 is a diagram for explaining the operation of the reproduction control means 50 of the
第2実施形態にかかる再生装置5の再生制御手段50は、図10のS41aにおいて、再生装置5で再生する画像ファイル220の保存モードが暗号化保存であれば、まず、保存モードが暗号化保存の画像ファイル220の利用条件として設定されている位置認証を行うために、位置計測手段53を利用してこの時点の位置情報を取得し、取得した位置情報が再生制御手段50に設定されているエリア情報に含まれるか確認する。
When the storage mode of the
取得した位置情報がエリア情報に含まれる場合、再生装置5の再生制御手段50は、図10のS47に進み、暗号化保存で撮影された画像ファイル220の被写体画像を再生する処理を行う。
If the acquired position information is included in the area information, the playback control means 50 of the
また、取得した位置情報がエリア情報に含まれない場合、再生装置5の再生制御手段50は、図10のS42に進み、図8と同様に、保存モードが暗号化保存の画像ファイル220の利用条件として設定されている本人認証を行い、本人認証に成功すると、暗号化保存で撮影された画像の再生する処理を行う。
If the acquired position information is not included in the area information, the playback control means 50 of the
1 画像保護システム
2 セキュアメモリカード
20 コントローラ
21 セキュアチップ
210 暗号部
211 復号部
212 本人認証部
22 フラッシュメモリ
3 撮影装置
30 撮影制御手段
31 表示手段
32 メモリカードインターフェース
33 撮影手段
34 保存モード設定手段
4 再生装置
40 再生制御手段
41 表示手段
42 メモリカードインターフェース
6 非接触型携帯デバイス(NFCカード)
DESCRIPTION OF
Claims (5)
被写体画像を撮影する撮影手段と、暗号化保存と非暗号化保存のいずれかの保存モードをユーザに設定させるための手段で、保存モードが非暗号化保存に設定されている状態で、ユーザが所持する非接触型携帯デバイスを検知すると、保存モードを暗号化保存に切り替える保存モード設定手段と、前記撮影手段が前記被写体画像を撮影すると、前記被写体画像とこの時点の保存モードを含む画像ファイルを生成した後、前記画像ファイルの前記被写体画像を前記セキュアメモリカードの前記フラッシュメモリに保存する際、この時の保存モードが暗号化保存の場合、前記セキュアメモリカードの前記コントローラに対して、前記被写体画像の暗号化保存を指示し、この時の保存モードが非暗号保存の場合、前記セキュアメモリカードの前記コントローラに対して、前記被写体画像の非暗号化保存を指示する撮影制御手段を備えた撮影装置と、
から少なくとも構成したことを特徴とする画像保護システム。 A secure chip having an encryption unit for encrypting data with an encryption key and a personal authentication unit for verifying personal authentication data; a flash memory for storing data; an interface for communicating with the secure chip and the flash memory; When the external device instructs to store the encrypted data, the data received from the external device is encrypted by the encryption unit, and the ciphertext of the data is written to the flash memory, and the non-encrypted storage of the data is instructed from the external device. Then, a secure memory card mounted with a controller that performs a process of writing data received from an external device into the flash memory without encryption,
The photographing means for photographing the subject image, and means for allowing the user to set either the encrypted storage mode or the non-encrypted storage mode. In the state where the storage mode is set to the non-encrypted storage mode, When a non-contact portable device possessed is detected, a storage mode setting unit that switches a storage mode to encrypted storage, and when the photographing unit captures the subject image, an image file including the subject image and the current storage mode is obtained. After the generation, when the subject image of the image file is stored in the flash memory of the secure memory card, if the storage mode at this time is encrypted storage, the subject of the subject to the controller of the secure memory card When the encrypted storage of the image is instructed and the storage mode at this time is non-encrypted storage, the copy of the secure memory card is stored. Relative controllers, the imaging apparatus comprising an imaging control means for instructing the storage unencrypted of the subject image,
An image protection system comprising at least the above.
前記セキュアメモリカードの前記セキュアチップは、データを復号鍵により復号する復号部を有し、前記コントローラは、復号したデータを読み出す指示を外部装置から受けると、読み出し指示を受けたデータを前記フラッシュメモリから読み出し、前記復号部にて復号してから外部装置へ送信し、復号せずにデータを読み出す指示を外部装置から受けると、読み出し指示を受けたデータを前記フラッシュメモリから読み出し、復号することなくデータを外部装置へ送信する処理を行う、
ことを特徴とする、請求項1乃至3のいずれか一項に記載した画像保護システム。 When reading the subject image of the image file from the secure memory card, if the storage mode included in the image file is encrypted storage, the authentication data acquired from the user is sent to the controller of the secure memory card. If the user authentication is successful after giving an instruction to collate to the personal authentication unit, the controller of the secure memory card is instructed to read the subject image by decoding, and the save mode included in the image file is In the case of non-encrypted storage, including a playback device including playback control means for instructing the controller of the secure memory card to read the subject image without decryption,
The secure chip of the secure memory card has a decryption unit that decrypts data with a decryption key, and when the controller receives an instruction to read the decrypted data from an external device, the data received the read instruction is stored in the flash memory. When the instruction to read data without decoding is received from the external device, it is read from the flash memory without being decoded. Process to send data to external device,
The image protection system according to claim 1, wherein the image protection system is an image protection system.
The reproduction apparatus includes position measurement means for measuring position information, and the reproduction control means includes area information registered in the reproduction control means when the storage mode included in the image file to be reproduced is encryption storage. The position information measured by the position measuring means is collated, and when the position information is included in the area information, the controller of the secure memory card is decrypted by using the decrypting unit without performing personal authentication. The image protection system according to claim 4, wherein an instruction to read the subject image is issued.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012270842A JP6024435B2 (en) | 2012-12-11 | 2012-12-11 | Image protection system, photographing apparatus and reproducing apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012270842A JP6024435B2 (en) | 2012-12-11 | 2012-12-11 | Image protection system, photographing apparatus and reproducing apparatus |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014116864A JP2014116864A (en) | 2014-06-26 |
| JP6024435B2 true JP6024435B2 (en) | 2016-11-16 |
Family
ID=51172430
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012270842A Expired - Fee Related JP6024435B2 (en) | 2012-12-11 | 2012-12-11 | Image protection system, photographing apparatus and reproducing apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6024435B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104732158A (en) * | 2015-04-09 | 2015-06-24 | 上海斐讯数据通信技术有限公司 | Encryption photographing method, system and device |
| JP7417455B2 (en) * | 2020-03-27 | 2024-01-18 | キヤノン株式会社 | Electronic devices and their control methods and programs |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10124399A (en) * | 1996-10-22 | 1998-05-15 | Mitsubishi Electric Corp | IC memory card |
| ATE488815T1 (en) * | 2001-06-04 | 2010-12-15 | Renesas Electronics Corp | MEMORY CARD |
| EP1833006B1 (en) * | 2006-03-10 | 2014-01-08 | LG Electronics Inc. | Method and apparatus for protocol selection on ICC |
| JP2009094818A (en) * | 2007-10-09 | 2009-04-30 | Olympus Imaging Corp | Terminal device |
| CN101866463A (en) * | 2009-04-14 | 2010-10-20 | 中兴通讯股份有限公司 | An eNFC terminal, an eNFC smart card and a communication method thereof |
| JP6044761B2 (en) * | 2012-08-23 | 2016-12-14 | 大日本印刷株式会社 | Image protection system, photographing apparatus and reproducing apparatus |
-
2012
- 2012-12-11 JP JP2012270842A patent/JP6024435B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2014116864A (en) | 2014-06-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10158795B2 (en) | Electronic apparatus for communicating with another apparatus | |
| CN100393107C (en) | Electronic device and information processing apparatus and control method thereof, | |
| JP4931924B2 (en) | Media data processing apparatus and media data processing method | |
| US20150296554A1 (en) | Electronic device capable of communicating with another device | |
| JP4911705B2 (en) | Imaging device | |
| JPWO2006085584A1 (en) | Information processing apparatus, browsing terminal, private information browsing system, private information browsing method, information processing program, and private information browsing program | |
| US20140152868A1 (en) | Imaging device, image storing method, and recording medium for processing image capturing location information | |
| JP4305854B2 (en) | Image management apparatus and method | |
| JP6024435B2 (en) | Image protection system, photographing apparatus and reproducing apparatus | |
| JP2004215090A (en) | Image communication system and image processing device | |
| JP6044761B2 (en) | Image protection system, photographing apparatus and reproducing apparatus | |
| JP2007329688A (en) | Data processing apparatus and method | |
| CN101360215A (en) | The projector password system and the usage method of the projector password system | |
| JP4420450B2 (en) | Image recording device | |
| US20150326394A1 (en) | Method for certifying a displayed picture | |
| JP2011223638A (en) | Imaging apparatus | |
| JP2009094818A (en) | Terminal device | |
| JP2006319575A (en) | Mobile terminal system and function restriction method therefor | |
| JP4409318B2 (en) | Digital camera, photographing management system, and photographing management method | |
| JP2007159001A (en) | Data recording and reproducing apparatus | |
| JP2009200577A (en) | Image recording device | |
| KR100739525B1 (en) | System and method for data transmission and reception using encoded images | |
| JP2008099098A (en) | Digital photography equipment | |
| JP2011135512A (en) | Image output device | |
| JP5573108B2 (en) | Digital camera |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151029 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160902 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160913 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160926 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6024435 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |