JP5789982B2

JP5789982B2 - 撮影方向決定プログラム及び表示装置

Info

Publication number: JP5789982B2
Application number: JP2010294512A
Authority: JP
Inventors: 友久蓮見
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2010-12-29
Filing date: 2010-12-29
Publication date: 2015-10-07
Anticipated expiration: 2030-12-29
Also published as: JP2012141467A

Description

本発明は、撮影方向決定プログラム及び表示装置に関する。

次のような写真表示方法が知られている。この写真表示方法は、撮影地点や撮影方向に応じて地図上に写真を表示する（例えば、特許文献１）。

特開２０１０−３９５８３号公報

しかしながら、従来の写真表示方法では、撮影画像の撮影方向を算出することができなかった。

本発明による撮影方向決定プログラムは、撮影画像から対象を選択する選択処理と、前記撮影画像の撮影方向と選択された前記対象への方向とのなす角度を前記撮影画像から算出する角度算出処理と、前記撮影画像の撮影位置を含む地図と、前記地図における前記撮影位置を通過するガイドラインと、を表示部に表示する表示処理と、前記表示部に表示された前記ガイドラインの前記地図における方向を変更する変更処理と、変更された前記ガイドラインと前記撮影位置と前記角度とに基づいて、前記地図における撮影方向を決定する撮影方向決定処理と、をコンピュータに実行させることを特徴とする。
本発明による表示装置は、撮影画像から対象を選択する選択部と、前記撮影画像の撮影方向と選択された前記対象への方向とのなす角度を前記撮影画像から算出する角度算出部と、前記撮影画像の撮影位置を含む地図と、前記地図における前記撮影位置を通過するガイドラインと、を表示する表示部と、前記表示部に表示された前記ガイドラインの前記地図における方向を変更する変更部と、変更された前記ガイドラインと前記撮影位置と前記角度とに基づいて、前記地図における撮影方向を決定する撮影方向決定部と、を備えることを特徴とする。

本発明によれば、撮影画像の撮影方向を算出することができる。

パソコンの一実施の形態の構成を示すブロック図である。アプリケーション画面の一例を示す図である。方位情報編集処理の流れを示すフローチャート図である。地図上に撮影地点を示すピン４ａと、撮影方位を示す矢印４ｂとを表示した場合の具体例を示す図である。撮影画像上でのランドマークの指定例を示した図である。ガイドラインの表示例を示した図である。ガイドラインの他の用途を模式的に示した図である。

図１は、本実施の形態における画像編集装置の一実施の形態の構成を示すブロック図である。画像編集装置としては、例えば、パーソナルコンピュータ（パソコン）１００が用いられ、このパソコン１００は、操作部材１０１と、接続ＩＦ（インターフェース）１０２と、制御装置１０３と、ＨＤＤ（ハードディスクドライブ）１０４と、モニタ１０５とを備えている。

操作部材１０１は、使用者によって操作される種々の装置、例えばキーボードやマウスを含む。接続ＩＦ１０２は、パソコン１００と外部機器とを接続するためのインターフェースである。本実施の形態では、パソコン１００は、この接続ＩＦ１０２を介してデジタルカメラと接続され、デジタルカメラからは撮影によって得られた画像ファイルが取り込まれる。なお、接続ＩＦ１０２としては、パソコン１００とデジタルカメラとを有線接続するためのＵＳＢインターフェースや、無線接続するための無線ＬＡＮモジュールなどが用いられる。

本実施の形態では、接続ＩＦ１０２を介して取り込まれる画像ファイルには、ヘッダ情報として、撮影地点を示す情報、例えばＧＰＳ衛星から取得されたＧＰＳ位置情報（撮影地点を示す緯度経度情報）や、撮影方位を示す情報、例えば電子コンパスによって計測された方位情報を記録することが可能となっている。このため、撮影に用いたデジタルカメラがＧＰＳ位置情報や方位情報を取得する機能を備えている場合には、画像ファイルのヘッダ情報としてＧＰＳ位置情報や方位情報が記録されている。また、撮影に用いたデジタルカメラがＧＰＳ位置情報や方位情報のいずれか一方を取得する機能を備えている場合には、取得されたいずれか一方の情報がヘッダ情報として記録されている。本実施の形態では、画像ファイルには、少なくともＧＰＳ位置情報が記録されているものとする。

制御装置１０３は、ＣＰＵ、メモリ、およびその他の周辺回路によって構成され、パソコン１００の全体を制御する。なお、制御装置１０３を構成するメモリは、例えばＳＤＲＡＭ等の揮発性のメモリである。このメモリは、ＣＰＵがプログラム実行時にプログラムを展開するためのワークメモリや、データを一時的に記録するためのバッファメモリを含む。

ＨＤＤ１０４は、接続ＩＦ１０２を介して取り込まれた画像ファイルのデータや、制御装置１０３で実行される種々のプログラムのデータ等を記録するための記録装置である。なお、ＨＤＤ１０４に記録されるプログラムのデータは、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭなどの記憶媒体に記録されて提供され、使用者が当該記憶媒体を用いてプログラムのデータをＨＤＤ１０４にインストールすることによって、制御装置１０３がプログラムを実行できるようになる。本実施の形態では、ＨＤＤ１０４には、画像を編集するための画像編集用アプリケーションがインストールされている。モニタ１０５は、例えば液晶モニタであって、制御装置１０３から出力される種々の表示用データが表示される。

本実施の形態におけるパソコン１００では、使用者は、画像編集用のアプリケーションを起動して、画像ファイルにヘッダ情報として記録されている方位情報を修正することができる。また、画像ファイルに方位情報が記録されていない場合には、新たに方位情報を記録することができる。本実施の形態では、画像ファイルに記録されている方位情報を修正する処理、および画像ファイルに方位情報を追加する処理を、方位情報編集処理と呼ぶこととする。

例えば、制御装置１０３は、使用者によって画像編集用アプリケーションの実行が指示されると、図２に示すアプリケーション画面を表示する。このアプリケーション画面上には、ＨＤＤ１０４に記録されている画像ファイルのサムネイル画像が一覧表示される。また、各サムネイル画像には、対応する画像ファイルのファイル名とともに、画像ファイルに上述したＧＰＳ位置情報が記録されていることを示すアイコン２ａと、方位情報が記録されていることを示すアイコン２ｂとが関連付けて表示されている。

すなわち、アイコン２ａが表示されている画像ファイルには、ＧＰＳ位置情報が記録されており、アイコン２ａが表示されていない画像ファイルには、ＧＰＳ位置情報が記録されていないことを示している。また、アイコン２ｂが表示されている画像ファイルには、方位情報が記録されており、アイコン２ｂが表示されていない画像ファイルには、方位情報が記録されていないことを示している。図２に示す例では、３つの画像ファイル全てにＧＰＳ位置情報が記録されていることがわかる。また、最も右に表示されている１つの画像ファイルには方位情報が記録されているが、他の２つの画像ファイルには方位情報が記録されていないことがわかる。

使用者は、一覧表示されているサムネイル画像のうちの１つを選択して、そのサムネイル画像に対応する画像ファイルの編集を指示することができる。制御装置１０３は、使用者によってアプリケーション画面上で画像ファイルの編集が指示された場合には、図３に示す画像編集処理を実行する。

ステップＳ１０において、制御装置１０３は、画像ファイルのヘッダ情報からＧＰＳ位置情報と方位情報とを読み出す。このとき、画像ファイルのヘッダ情報にＧＰＳ位置情報しか記録されていない場合には、ＧＰＳ位置情報のみを読み出す。

その後、ステップＳ２０へ進み、制御装置１０３は、アプリケーション画面上に地図を表示し、該地図上に撮影地点や撮影方位を明示する。例えば、ステップＳ１０でＧＰＳ位置情報と方位情報とを読み出した場合には、制御装置１０３は、図４に示すように、地図上に撮影地点を示すピン４ａと、撮影方位を示す直線、例えば矢印４ｂとを表示する。これに対して、ステップＳ１０でＧＰＳ位置情報のみを読み出した場合には、制御装置１０３は、地図上に撮影地点を示すピン４ａのみを表示する。その後、ステップＳ３０へ進む。

ステップＳ３０では、制御装置１０３は、使用者によって、撮影方位の編集が指示されたか否かを判断する。例えば、使用者は、方位情報が記録されている画像ファイルに対しては、地図上に表示された矢印４ｂの向きを確認して、その方位にずれがある場合には、方位情報の修正を指示することができる。一方、方位情報が記録されていない画像ファイルに対しては、画像ファイルに方位情報を新たに記録するように指示することができる。ステップＳ３０で肯定判断した場合には、ステップＳ４０へ進む。

ステップＳ４０では、制御装置１０３は、使用者に対して、撮影画像上で撮影方位を算出するための基準となるランドマークを指定するように指示する。例えば、使用者は、撮影画像に被写体として写っているランドマークの１つを、撮影画像上でマウスを用いてクリックすることによって指定することができる。例えば、図５に示す例では、撮影画像内のランドマークである山の水平方向の位置を示す直線５ａ上のいずれかの点が指定されるものとする。なお、図５に示す撮影画像内の点線５ｂは、撮影画像の水平方向の中心位置を示している。

その後、ステップＳ５０へ進み、制御装置１０３は、撮影画像上で使用者によってランドマークが指定されたか否かを判断する。ステップＳ５０で肯定判断した場合には、ステップＳ６０へ進む。ステップＳ６０では、制御装置１０３は、撮影画像の水平方向の中心位置と、ステップＳ５０で指定されたランドマーク位置との撮影画像内における水平角度を算出する。ここで、撮影画像内における任意の点（ランドマーク位置）と撮影画像の水平方向の中心位置との水平角度の算出方法は、例えば特開２００６−２０３３４７号公報に開示されている方法を用いることとし、ここでは詳細な説明を省略する。その後、ステップＳ７０へ進む。

ステップＳ７０では、制御装置１０３は、ステップＳ６０で算出した水平角に基づいて、使用者が撮影方位を修正するために用いるガイドラインを地図上に表示する。具体的には、制御装置１０３は、図６（ａ）に示すように、矢印６ａとガイドライン６ｂの交点がＧＰＳ位置情報が示す位置となるように、撮影画像の水平方向の中心位置に相当する方位、すなわち撮影方位を指す矢印６ａと、矢印６ａとステップＳ６０で算出した水平角度θをなすガイドライン６ｂとを表示する。ここで表示されるガイドライン６ｂは、地図上のランドマーク位置を示す直線となる。このとき、制御装置１０３は、ステップＳ１０で方位情報を読み出した場合には、その方位情報に基づいて撮影方位を特定し、地図上で矢印６ａが特定した撮影方位を向くように矢印６ａおよびガイドライン６ｂを表示する。一方、制御装置１０３は、ステップＳ１０で方位情報を読み出していない場合には、矢印６ａが地図上の所定方向、例えば北を向くように矢印６ａおよびガイドライン６ｂを表示する。

なお、図６（ａ）において、地図上のランドマーク６ｃは、使用者がステップＳ５０で指定した撮影画像内のランドマークに相当する。すなわち、この図６（ａ）では、ガイドライン６ｂは、地図上のランドマーク６ｃの方向を正確に示していないことから、画像ファイルに記録されている方位情報にズレが生じていることがわかる。本実施の形態では、使用者は、地図上でガイドライン６ｂの向きがランドマーク６ｃの方向を向くように修正することにより、画像ファイルに記録されている方位情報を編集することができる。このために、制御装置１０３は、以下のように処理をする。

ステップＳ８０において、制御装置１０３は、使用者によってガイドライン６ｂの向きを変更するために、ガイドラインの移動が指示されたか否かを判断する。本実施の形態では、例えば、使用者は、地図上でガイドライン６ｂをドラッグすることによって、ガイドライン６ｂの向きを変更することができる。ステップＳ８０で肯定判断した場合には、ステップＳ９０へ進み、制御装置１０３は、使用者によるマウスのドラッグ操作に応じて、ガイドライン６ｂを移動させる。本実施の形態では、使用者は、図６（ｂ）に示すように、ガイドライン６ｂがランドマーク６ｃの方向を向くように、ガイドライン６ｂを移動させる。このとき、制御装置１０３は、ガイドライン６ｂと矢印６ａとのなす角を、上述した角度θに保ったまま、矢印６ａとガイドライン６ｂとの交点を回転中心として、矢印６ａとガイドライン６ｂを回転させる。

その後、ステップＳ１００へ進み、制御装置１０３は、ガイドライン６ｂの移動が終了して撮影方位の確定が指示されたか否かを判断する。例えば、制御装置１０３は、使用者によるマウスのドラッグ操作が終了したときに、撮影方位の確定が指示されたと判断する。ステップＳ１００で肯定判断した場合には、ステップＳ１１０へ進む。

ステップＳ１１０では、撮影方位が確定した時点における矢印６ａの向きを、撮影画像の撮影方位として算出し、その方位を示す情報で画像ファイルの方位情報を更新する。このとき、画像ファイルに方位情報が記録されている場合には、ここで算出した方位情報で既に記録されている方位情報を上書きする。これに対して、画像ファイルに方位情報が記録されていない場合には、ここで算出した方位情報を新たに画像ファイルのヘッダ情報として記録する。その後、処理を修了する。なお、画像にＧＰＳ位置情報が記録されていない場合は、方位編集に先立ち、地図上での撮影位置をクリックにより、撮影位置情報を記録する。

以上説明した本実施の形態によれば、以下のような作用効果を得ることができる。
（１）制御装置１０３は、使用者によって撮影画像上で撮影方位を算出するための基準となるランドマークが指定されると、撮影画像の水平方向の中心位置と、指定されたランドマーク位置との撮影画像内における水平角度θを算出する。そして、制御装置１０３は、地図上のランドマークの位置と、上記水平角度θとに基づいて、撮影画像の撮影方位を算出するようにした。これによって、撮影画像の撮影方向を算出することができる。

（２）制御装置１０３は、使用者が撮影方位を編集するためのガイドラインとして、地図上のランドマーク位置を示す直線を表示し、使用者によるガイドラインの操作に基づいて、撮影画像の撮影方位を算出するようにした。これによって、使用者は、地図上に表示されたガイドラインを操作するだけで、容易に撮影方位を編集することができる。

（３）制御装置１０３は、ガイドラインとともに、撮影方位を示す矢印を地図上に表示し、使用者によってガイドラインの向きが地図上の前記ランドマーク位置を向くように操作された場合には、ガイドラインと矢印とのなす角を維持したまま、ガイドラインと矢印とを回転させ、回転後の矢印が地図上で向く方位を、撮影画像の撮影方位として算出するようにした。これによって、使用者は、ガイドラインの向きをランドマーク位置に合わせるだけで、容易に撮影方位を編集することができる。

（４）制御装置１０３は、使用者によって地図上でガイドラインがドラッグされる操作を受け付け、該操作に基づいてガイドラインの向きをランドマーク位置に向けるようにした。これによって、使用者は、地図上でガイドラインをドラッグするだけで、容易に撮影方位を編集することができる。

（５）制御装置１０３は、算出した撮影方位に基づいて、画像ファイルの方位情報を更新して、撮影画像と方位情報とを関連付けるようにした。これによって、後に、撮影画像の撮影方位を特定することが可能となる。

―変形例―
なお、上述した実施の形態の画像編集装置は、以下のように変形することもできる。
（１）上述した実施の形態では、使用者は、地図上でガイドライン６ｂをドラッグすることによって、ガイドライン６ｂの向きを変更することができる例について説明した。しかしながら、ガイドライン６ｂの向きの変更方法はこれに限定されず、例えば、使用者は、地図上の任意の位置をクリックして指定することにより、クリックした位置にガイドライン６ｂの先端を向けるように指示することができる。この場合、制御装置１０３は、ガイドライン６ｂと矢印６ａとのなす角を角度θに保ったまま、使用者によってクリックされた地図上の位置にガイドライン６ｂの先端が向くように、矢印６ａとガイドライン６ｂとを回転させる。

（２）上述した実施の形態では、制御装置１０３は、使用者からの指示に基づいて、画像ファイルに記録されている方位情報を編集できる例について説明した。しかしながら、制御装置１０３は、使用者からの指示に基づいて、画像ファイルに記録されているＧＰＳ位置情報も編集できるようにしてもよい。例えば、使用者は、図４に示した地図上で、ピン４ａを初期表示された位置とは別の位置にドラッグして移動させることによって、撮影地点を変更することができるようにする。あるいは、使用者は、図４に示した地図上で、正しい撮影地点をクリックすることによって、撮影地点を変更することができるようにしてもよい。

制御装置１０３は、使用者によって撮影地点が変更された場合には、変更後の撮影地点を示す位置情報で、画像ファイルに記録されているＧＰＳ位置情報を上書きするようにすればよい。なお、この場合は、使用者は、撮影地点と撮影方位とのそれぞれを編集することができ、制御装置１０３は、撮影地点と撮影方位との両方が編集された場合には、画像ファイルに記録されているＧＰＳ位置情報と方位情報をいずれも更新する。

（３）上述した実施の形態では、制御装置１０３は、使用者によって撮影方位が編集された場合には、編集結果に基づいて、画像ファイルに記録されている方位情報を更新する例について説明した。このとき、制御装置１０３は、図６に示したように、地図内で使用者によって指定されたランドマーク６ｃの位置情報（緯度経度情報）や方位情報も画像ファイルのヘッダ情報として記録するようにしてもよい。これによって、画像ファイルに記録されているランドマーク６ｃの位置情報や方位情報を参照することにより、使用者がどのランドマークを基準にして撮影画像の方位情報を編集したかを把握することが可能となる。

また、このとき、パソコン１００が通信回線によりインターネット等に接続されている場合には、制御装置１０３は、ランドマーク６ｃの位置情報に基づいてランドマーク６ｃに関する情報、例えばランドマーク６ｃの名称を取得し、該ランドマーク６ｃに関する情報も画像ファイルのヘッダ情報として記録するようにしてもよい。

（４）上述した実施の形態では、制御装置１０３は、使用者によって撮影方位が編集された場合には、編集結果に基づいて、画像ファイルに記録されている方位情報を更新する例について説明した。このとき、画像ファイルに記録されている方位情報が磁方位である場合には、真方位に変換した上で地図上に表示して、撮影方位の編集を受け付ける必要がある。よって、この場合には、あらかじめＨＤＤ１０４に磁方位と真方位を相互に変換するためのデータベースを用意しておき、制御装置１０３は、図３のステップＳ１０で方位情報を読み出した後に、該データベースを参照して、磁方位から真方位に変換する。また、ステップＳ１１０で画像ファイルの方位情報を更新する際には、真方位であることを示す情報をヘッダに記録する。

（５）上述した実施の形態では、使用者によって撮影画像上で指定されたランドマーク位置と撮影画像の水平方向の中心位置との水平角度を算出し、これに基づいて地図上に矢印６ａとガイドライン６ｂを表示するようにした。そして、使用者は、ガイドライン６ｂの向きを変更することによって、撮影方位を編集できるようにした。しかしながら、地図上に表示した矢印６ａとガイドライン６ｂとを別の用途にも用いることができる。例えば、使用者は、撮影画像内に名前を知らないランドマークが写っているときに、そのランドマークの名称を調べられるようにしてもよい。

具体的には、使用者は、図５に示した撮影画像上で、名前を知っている第１のランドマークと、名前を調べたい第２のランドマークとを指定する。制御装置１０３は、これら２つのランドマークが指定されると、指定された２つのランドマークと、撮影画像の水平方向の中心位置との水平角度をそれぞれ算出する。そして、制御装置１０３は、算出結果に基づいて、図７に示すように、第１のガイドライン７ａと第２のガイドライン７ｂとの交点がＧＰＳ位置情報が示す位置となるように、撮影方位を指す矢印６ａと、第１のランドマークであるＡ山の方位を示す第１のガイドライン７ａと、第２のランドマークであるＢ山の方位を示す第２のガイドライン７ｂとを表示する。使用者は、表示された第２のガイドライン７ｂが示す方位に存在するランドマークの名称を地図上で確認することにより、撮影画像内に写っていた名前を知らない第２のランドマークは、Ｂ山であったことを把握することができる。

なお、この場合も画像ファイルに記録されている方位情報にズレがある場合には、第１のガイドライン７ａと第２のガイドライン７ｂは、実際のランドマーク位置とはズレた方位を示すことになる。この場合は、使用者は第１のランドマークは名前を知っているため、第１のガイドライン７ａが第１のランドマークであるＡ山を向くように、第１のガイドライン７ａの向きを変更することができる。制御装置１０３は、第１のガイドライン７ａの向きが変更された場合には、矢印６ａと第１のガイドライン７ａとのなす角、および矢印６ａと第２のガイドライン７ｂとのなす角をそれぞれ維持したまま、第１のガイドライン７ａと第２のガイドライン７ｂとの交点を回転中心として、矢印６ａ、第１のガイドライン７ａ、第２のガイドライン７ｂを回転させる。これにより、第２のガイドライン７ｂも使用者が名前を知りたいＢ山の方向を向くことになり、使用者は、第２のランドマークがＢ山であることを把握することができる。ここでは、名前を知りたいランドマークが第２のランドマークのみ、すなわち１つである場合の例について説明したが、名前を知りたいランドマークが複数ある場合でも、同様に処理が可能である。

（６）上述した実施の形態では、画像編集装置としてパソコン１００を用いる例について説明した。しかしながら、画像ファイルを読み出して画像編集処理を行うことができる他の装置、例えば、携帯端末やデジタルカメラ等にも本発明を適用することができる。

なお、本発明の特徴的な機能を損なわない限り、本発明は、上述した実施の形態における構成に何ら限定されない。また、上述の実施の形態と複数の変形例を組み合わせた構成としてもよい。

１００パソコン、１０１操作部材、１０２接続ＩＦ、１０３制御装置、１０４ＨＤＤ、１０５モニタ

Claims

撮影画像から対象を選択する選択処理と、
前記撮影画像の撮影方向と選択された前記対象への方向とのなす角度を前記撮影画像から算出する角度算出処理と、
前記撮影画像の撮影位置を含む地図と、前記地図における前記撮影位置を通過するガイドラインと、を表示部に表示する表示処理と、
前記表示部に表示された前記ガイドラインの前記地図における方向を変更する変更処理と、
変更された前記ガイドラインと前記撮影位置と前記角度とに基づいて、前記地図における撮影方向を決定する撮影方向決定処理と、
をコンピュータに実行させる撮影方向決定プログラム。
前記撮影方向決定処理は、前記撮影位置を交点として、変更された前記ガイドラインと前記角度をなす方向を前記地図における撮影方向とする請求項１に記載の撮影方向決定プログラム。
前記表示処理は、前記ガイドラインを線で前記表示部に表示する請求項１又は請求項２に記載の撮影方向決定プログラム。
前記表示処理は、前記撮影位置を交点として、前記ガイドラインと前記角度をなす方向線を前記表示部に表示する請求項１から請求項３の何れか一項に記載の撮影方向決定プログラム。
前記撮影方向決定処理が決定した前記地図における撮影方向と前記撮影画像とを関連付ける関連付け処理をコンピュータに実行させる請求項１から請求項４の何れか一項に記載の撮影方向決定プログラム。
前記変更処理は、ユーザの操作に基づいて前記ガイドラインを変更する請求項１から請求項５の何れか一項に記載の撮影方向決定プログラム。
前記表示処理は、前記地図における前記対象の位置を前記表示部に表示する請求項１から請求項６の何れか一項に記載の撮影方向決定プログラム。
前記表示処理は、前記対象に関する情報を前記表示部に表示する請求項１から請求項６の何れか一項に記載の撮影方向決定プログラム。
撮影画像から対象を選択する選択部と、
前記撮影画像の撮影方向と選択された前記対象への方向とのなす角度を前記撮影画像から算出する角度算出部と、
前記撮影画像の撮影位置を含む地図と、前記地図における前記撮影位置を通過するガイドラインと、を表示する表示部と、
前記表示部に表示された前記ガイドラインの前記地図における方向を変更する変更部と、
変更された前記ガイドラインと前記撮影位置と前記角度とに基づいて、前記地図における撮影方向を決定する撮影方向決定部と、を備える表示装置。