JP7779896B2 - 制御装置、撮像装置、制御方法、及びプログラム - Google Patents

Description

本開示の技術は、制御装置、撮像装置、制御方法、及びプログラムに関する。

特開平１０－１３４２７２号公報には、大空間の熱画像から火災発生や侵入者の検知、環境制御を行うための大空間防災等のモニタリングシステムにおいて、温度フィルタにより特定の温度域の熱画像を取り出すための赤外線カメラと、常温から火災監視に必要な温度範囲まで異なる温度域の複数の温度フィルタを有し該複数の温度フィルタから赤外線カメラの温度フィルタを選択する温度フィルタ選択手段と、赤外線カメラから取り出し処理された熱画像データを記憶する画像データ記憶手段と、予め設定された複数のモニタリングモードの切り換えタイミングに応じて温度フィルタ選択手段を制御して赤外線カメラの温度フィルタを選択し、モニタリングモード毎に赤外線カメラから熱画像データを取り出して各モニタリングモードの処理を実行する制御処理手段とを備えたことを特徴とする大空間防災等のモニタリングシステムが開示されている。

国際公開第２００５／７１３７２号パンフレットには、被写体像を結像するための撮影光学系と、撮影光学系により結像された被写体像を撮像して画像信号を出力するための撮像素子部と、画像の撮影に係る操作を行うための撮影操作部と、を有し、分光画像を取得し得るように構成された画像撮影部、を具備した画像処理システムであって、当該画像処理システムが取り得る複数のモードに各対応するモード関連情報を表示するためのモード表示手段をさらに具備したことを特徴とする画像処理システムが開示されている。

特表２００４－５３４９４１号公報には、レンズ組立体を含む手持ち式赤外線カメラであって、該レンズ組立体がハウジングによって支持され、該ハウジングが、電気エネルギー源と、レンズ組立体を介して受け取る情報を記録および処理する処理手段とを保持するように構成され、装置を手動により、かつ視覚によって制御する使用者制御手段がハウジングに設けられている手持ち式赤外線カメラにおいて、ハウジングが実質的に伸長形状であり、一方の端部にレンズ組立体が装架され、反対側の端部が使用者用ハンドルとして形成され、ハウジングの一方の側に、使用者の親指で操作するように意図された手動制御手段の集合体と、視覚による制御手段とが設けられ、視覚による制御手段が、手動制御手段の集合体とレンズ組立体との間に配置され、使用者の目および体から離して赤外線カメラを保持する時に、見ることができるように適合され、赤外線カメラが片手で操作するように意図されていることを特徴とする手持ち式赤外線カメラが開示されている。

本開示の技術に係る一つの実施形態は、第１モードと第２モードとで、制御対象における制御内容を異ならせることができる制御装置、撮像装置、制御方法、及びプログラムを提供する。

本開示の技術に係る第１の態様は、プロセッサと、プロセッサに接続又は内蔵されたメモリと、を備え、プロセッサは、撮像装置のイメージセンサによって受光された光に基づいて撮像する第１モードと、イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを備え、第１モードと第２モードとで、制御因子が異なる制御装置である。

本開示の技術に係る第２の態様は、第１の態様に係る制御装置において、制御因子は、ディスプレイに対して表示させる表示制御因子を含む制御装置である。

本開示の技術に係る第３の態様は、第２の態様に係る制御装置において、プロセッサは、第１モードでは、表示制御因子として、光がイメージセンサによって受光されることで得られた撮像画像をディスプレイに対して表示させる撮像画像表示因子を設定し、第２モードでは、表示制御因子として、温度を示す温度情報をディスプレイに対して表示させる温度情報表示因子を設定する制御装置である。

本開示の技術に係る第４の態様は、第１の態様から第３の態様の何れか一つの態様に係る制御装置において、制御因子は、投光器を動作させる投光制御因子を含み、プロセッサは、第２モードでは、投光制御因子として、投光器の投光を抑制させる投光抑制制御因子を設定する制御装置である。

本開示の技術に係る第５の態様は、第１の態様から第４の態様の何れか一つの態様に係る制御装置において、制御因子は、撮像設定に関する撮像設定因子を含む制御装置である。

本開示の技術に係る第６の態様は、第５の態様に係る制御装置において、撮像設定は、投光器に関する設定、シャッタスピードに関する設定、絞りに関する設定、測光に関する設定、イメージセンサの感度に関する設定、ハイダイナミックレンジに関する設定、及び防振制御に関する設定のうちの少なくとも１つの設定を含む制御装置である。

本開示の技術に係る第７の態様は、第１の態様から第６の態様の何れか一つの態様に係る制御装置において、制御因子は、画像処理設定に関する画像処理設定因子を含む制御装置である。

本開示の技術に係る第８の態様は、第７の態様に係る制御装置において、画像処理設定は、ノイズリダクションに関する設定、シャープネスに関する設定、コントラストに関する設定、及びトーンに関する設定のうちの少なくとも１つの設定を含む制御装置である。

本開示の技術に係る第９の態様は、プロセッサと、プロセッサに接続又は内蔵されたメモリと、を備え、プロセッサは、撮像装置のイメージセンサによって受光された光に基づいて撮像する第１モードと、イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを備え、投光器の状態がオンである場合には、第１モードを設定し、投光器の状態がオフである場合には、第２モードを設定する制御装置である。

本開示の技術に係る第１０の態様は、第９の態様に係る制御装置において、プロセッサは、第２モードにおいて、温度に応じて第２モードから第１モードに切り替わる制御装置である。

本開示の技術に係る第１１の態様は、第１０の態様に係る制御装置において、投光器は、パルス発光を行い、プロセッサは、パルス発光の発光期間に第１モードを設定し、パルス発光の発光停止期間に第２モードを設定する動作を、パルス発光の発光タイミングに応じて繰り返す制御装置である。

本開示の技術に係る第１２の態様は、第１の態様から第１１の態様の何れか一つの態様に係る制御装置において、プロセッサは、イメージセンサによって受光されることで得られた第１撮像画像と、温度を示す温度情報とを合成した合成画像を出力する制御装置である。

本開示の技術に係る第１３の態様は、第１の態様から第１２の態様の何れか一つの態様に係る制御装置と、イメージセンサとを備える撮像装置である。

本開示の技術に係る第１４の態様は、撮像装置のイメージセンサによって受光された光に基づいて撮像する第１モードと、イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを切り替えること、及び、第１モードと第２モードとで、制御因子を異ならせることを含む制御方法である。

本開示の技術に係る第１５の態様は、撮像装置のイメージセンサによって受光された光に基づいて撮像する第１モードと、イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを切り替えること、及び、投光器の動作がオンである場合には、第１モードを設定し、投光器の動作がオフである場合には、第２モードを設定することを含む制御方法である。

本開示の技術に係る第１６の態様は、コンピュータに、撮像装置のイメージセンサによって受光された光に基づいて撮像する第１モードと、イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを切り替えること、及び、第１モードと第２モードとで、制御因子を異ならせることを含む処理を実行させるためのプログラムである。

本開示の技術に係る第１７の態様は、コンピュータに、撮像装置のイメージセンサによって受光された光に基づいて撮像する第１モードと、イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを切り替えること、及び、投光器の動作がオンである場合には、第１モードを設定し、投光器の動作がオフである場合には、第２モードを設定することを含む処理を実行させるためのプログラムである。

第１実施形態に係るカメラの一例を示す斜視図である。 第１実施形態に係るカメラの内部構成の一例を示すブロック図である。 第１実施形態に係るカメラの電気的構成の一例を示すブロック図である。 第１実施形態に係るターレットフィルタの構成及び動作の一例を示す説明図である。 第１実施形態に係るＣＰＵの機能的構成の一例を示すブロック図である。 第１実施形態に係るＣＰＵのモード切替処理部としての構成の一例を示すブロック図である。 第１実施形態に係るＣＰＵの撮像処理部としての構成の一例を示すブロック図である。 第１実施形態に係る撮像処理で得られた撮像画像の一例を示す正面図である。 第１実施形態に係るＣＰＵの温度測定処理部としての構成の一例を示すブロック図である。 第１実施形態に係るＣＰＵの波長選択部としての機能の一例を示す説明図である。 第１実施形態に係る温度測定処理で得られた合成画像の第１例を示す正面図である。 第１実施形態に係る温度測定処理で得られた合成画像の第２例を示す正面図である。 第１実施形態に係る温度測定処理で得られた合成画像の第３例を示す正面図である。 第１実施形態に係る温度測定処理で得られた合成画像の第４例を示す正面図である。 第１実施形態に係るモード切替処理の流れの一例を示すフローチャートである。 第１実施形態に係る撮像処理の流れの一例を示すフローチャートである。 第１実施形態に係る温度測定処理の流れの一例を示すフローチャートである。 第１実施形態に係る撮像処理で得られた撮像画像の変形例を示す正面図である。 第１実施形態に係る温度測定処理で得られた合成画像の変形例を示す正面図である。 第２実施形態に係るＣＰＵのモード切替処理部としての構成の一例を示すブロック図である。 第２実施形態に係るモード切替処理の流れの一例を示すフローチャートである。 第３実施形態に係るＣＰＵのパラメータ変更処理部としての構成の一例を示すブロック図である。 第３実施形態に係るＣＰＵの撮像処理部としての構成の一例を示すブロック図である。 第３実施形態に係るＣＰＵの温度測定処理部としての構成の一例を示すブロック図である。 第３実施形態に係るパラメータ変更処理の流れの一例を示すフローチャートである。 第４実施形態に係るＣＰＵのモード切替処理部としての構成の一例を示すブロック図である。 第４実施形態に係るモード切替処理の流れの一例を示すフローチャートである。 第５実施形態に係るＣＰＵの統合表示処理部としての構成の一例を示すブロック図である。 第５実施形態に係る統合表示処理の流れの一例を示すフローチャートである。 第１変形例に係る撮像装置の電気的構成の一例を示すブロック図である。 第２変形例に係る撮像装置の電気的構成の一例を示すブロック図である。

以下、添付図面に従って本開示の技術に係る制御装置、撮像装置、制御方法、及びプログラムの実施形態の一例について説明する。

先ず、以下の説明で使用される文言について説明する。

ＣＰＵとは、“Central Processing Unit”の略称を指す。ＧＰＵとは、“Graphics Processing Unit”の略称を指す。ＮＶＭとは、“Non-Volatile Memory”の略称を指す。ＲＡＭとは、“Random Access Memory”の略称を指す。ＩＣとは、“Integrated Circuit”の略称を指す。ＡＳＩＣとは、“Application Specific Integrated Circuit”の略称を指す。ＰＬＤとは、“Programmable Logic Device”の略称を指す。ＦＰＧＡとは、“Field-Programmable Gate Array”の略称を指す。ＳｏＣとは、“System-on-a-chip”の略称を指す。ＳＳＤとは、“Solid State Drive”の略称を指す。ＨＤＤとは、“Hard Disk Drive”の略称を指す。ＥＥＰＲＯＭとは、“Electrically Erasable and Programmable Read Only Memory”の略称を指す。ＳＲＡＭとは、“Static Random Access Memory”の略称を指す。Ｉ／Ｆとは、“Interface”の略称を指す。ＵＳＢとは、“Universal Serial Bus”の略称を指す。ＣＭＯＳとは、“Complementary Metal Oxide Semiconductor”の略称を指す。ＣＣＤとは、“Charge Coupled Device”の略称を指す。ＬＡＮとは、“Local Area Network”の略称を指す。ＷＡＮとは、“Wide Area Network”の略称を指す。ＢＰＦとは、“Band Pass Filter”の略称を指す。Ｉｒとは、“Infrared Rays”の略称を指す。ＥＬとは、“Electro Luminescence”の略称を指す。

本明細書の説明において、「垂直」とは、完全な垂直の他に、本開示の技術が属する技術分野で一般的に許容される誤差であって、本開示の技術の趣旨に反しない程度の誤差を含めた意味合いでの垂直を指す。本明細書の説明において、「水平」とは、完全な水平の他に、本開示の技術が属する技術分野で一般的に許容される誤差であって、本開示の技術の趣旨に反しない程度の誤差を含めた意味合いでの水平を指す。本明細書の説明において、「平行」とは、完全な平行の他に、本開示の技術が属する技術分野で一般的に許容される誤差であって、本開示の技術の趣旨に反しない程度の誤差を含めた意味合いでの平行を指す。本明細書の説明において、「直交」とは、完全な直交の他に、本開示の技術が属する技術分野で一般的に許容される誤差であって、本開示の技術の趣旨に反しない程度の誤差を含めた意味合いでの直交を指す。本明細書の説明において、「一致」とは、完全な一致の他に、本開示の技術が属する技術分野で一般的に許容される誤差であって、本開示の技術の趣旨に反しない程度の誤差を含めた意味合いでの一致を指す。本明細書の説明において、「等間隔」とは、完全な等間隔の他に、本開示の技術が属する技術分野で一般的に許容される誤差であって、本開示の技術の趣旨に反しない程度の誤差を含めた意味合いでの等間隔を指す。

［第１実施形態］
はじめに、第１実施形態について説明する。一例として図１に示すように、カメラ１は、カメラ本体１０と、レンズユニット２０とを備える。カメラ１は、可視光を撮像することにより可視光画像を得る機能と、近赤外光を撮像することにより近赤外光画像を得る機能と、被写体から熱輻射により発せられる電磁波に基づいて被写体の温度を測定する機能とを備える。カメラ１は、本開示の技術に係る「撮像装置」の一例である。

カメラ本体１０の前面１１には、レンズユニット２０を取り付けるためのカメラ側マウント１２が設けられている。また、カメラ本体１０の前面１１には、被写体に向けて照明光ＩＬを照射するための照射窓１３が設けられている。

カメラ本体１０は、照明光ＩＬを発生する投光器１４を備える。投光器１４は、例えば、ピーク波長が１５５０ｎｍの近赤外光を、照明光ＩＬとして発するＬＥＤである。投光器１４は、ハロゲンライトでもよい。投光器１４が発生した照明光ＩＬは、照射窓１３を透過してカメラ本体１０の前方に射出される。投光器１４は、本開示の技術に係る「投光器」の一例である。

また、カメラ本体１０は、イメージセンサ１５を備える。イメージセンサ１５は、被写体からレンズユニット２０を介して入射する光Ｌを撮像する。イメージセンサ１５は、受光面１５Ａを有する。レンズユニット２０に入射した光Ｌは、レンズユニット２０によって受光面１５Ａに結像される。光Ｌが受光面１５Ａに結像されることで像が得られる。受光面１５Ａには、複数のフォトダイオードがマトリクス状に配置されている。

一例として、複数のフォトダイオードには、可視光に感度を有する複数のシリコンフォトダイオードと、近赤外光に感度を有する複数のインジウム・ガリウム・ヒ素フォトダイオードとが含まれている。以降、シリコンフォトダイオードを、Ｓｉダイオードと称し、インジウム・ガリウム・ヒ素フォトダイオードを、ＩｎＧａＡｓダイオードと称する。複数のＳｉダイオードは、受光した可視光に応じたアナログ画像データを生成して出力する。複数のＩｎＧａＡｓダイオードは、受光した近赤外光に応じたアナログ画像データを生成して出力する。以下では、特に区別して説明する必要がない場合、イメージセンサ１５に入射する可視光及び近赤外光を光と称する。

第１実施形態では、イメージセンサ１５としてＣＭＯＳイメージセンサを例示しているが、本開示の技術はこれに限定されず、例えば、イメージセンサ１５がＣＣＤイメージセンサ等の他種類のイメージセンサであっても本開示の技術は成立する。イメージセンサ１５は、本開示の技術に係る「撮像装置のイメージセンサ」の一例である。

レンズユニット２０は、鏡筒２１と、レンズ側マウント２２とを備える。レンズ側マウント２２は、鏡筒２１の後端部に設けられている。レンズ側マウント２２は、カメラ本体１０のカメラ側マウント１２に接続可能に構成されている。レンズユニット２０は、レンズ側マウント２２によってカメラ本体１０に着脱可能に装着される。なお、レンズユニット２０は、カメラ本体１０に着脱不能に固定されていてもよい。

一例として図２に示すように、レンズユニット２０は、対物レンズ３０、フォーカスレンズ３１、ズームレンズ３２、絞り３３、ぶれ補正レンズ３４、ターレットフィルタ３５、及び調整レンズ３７を備える。レンズユニット２０の光軸ＯＡに沿って被写体側から像側にかけて順に、対物レンズ３０、フォーカスレンズ３１、ズームレンズ３２、絞り３３、ぶれ補正レンズ３４、ターレットフィルタ３５、及び調整レンズ３７が配置されている。

対物レンズ３０は、鏡筒２１の先端部に固定されており、光を集光するレンズである。フォーカスレンズ３１は、像の合焦位置を調節するためのレンズである。ズームレンズ３２は、ズーム倍率を調節するためのレンズである。

絞り３３は、光の量を調節するための光学要素である。絞り３３は、開口３３Ａを有する。ズームレンズ３２によって導かれた光は開口３３Ａを通過する。絞り３３は、開口３３Ａの口径が可変である可動式の絞りである。ズームレンズ３２によって導かれた光の量は、絞り３３によって変更される。ぶれ補正レンズ３４は、像のぶれを補正するためのレンズである。

ターレットフィルタ３５は、複数の光学フィルタを有している。ターレットフィルタ３５は、複数の光学フィルタのうちレンズユニット２０内の光の光路に挿入される光学フィルタが切り替えられることで、光に含まれる複数の波長帯域の光（一例として、可視光、及び、近赤外波長帯域内の異なる波長帯域の近赤外光）を選択的に透過させる光学要素である。レンズユニット２０内の光の光路は、例えば、光軸ＯＡ上に位置する。以下、レンズユニット２０内の光の光路を、単に光路と称する。ターレットフィルタ３５の構成については、後に図４を用いて詳述する。

調整レンズ３７は、ターレットフィルタ３５が備える複数の光学フィルタを切り替えた場合における焦点距離の差異を調整するためのレンズである。

なお、フォーカスレンズ３１、ズームレンズ３２、絞り３３、ぶれ補正レンズ３４、ターレットフィルタ３５、及び調整レンズ３７の並び順は、上記以外でもよい。また、対物レンズ３０、フォーカスレンズ３１、ズームレンズ３２、ぶれ補正レンズ３４、及び調整レンズ３７の各々は、単一のレンズでもよく、また、複数のレンズを有するレンズ群でもよい。また、レンズユニット２０は、フォーカスレンズ３１、ズームレンズ３２、ぶれ補正レンズ３４、及び調整レンズ３７に加えてその他のレンズを備えていてもよい。また、レンズユニット２０は、ハーフミラー、又は偏光素子等の光学素子を備えていてもよい。

一例として図２に示すように、レンズユニット２０は、ズーム駆動機構４２、絞り駆動機構４３、ぶれ補正駆動機構４４、ターレット駆動機構４５、及び調整駆動機構４７を備える。ズーム駆動機構４２、絞り駆動機構４３、ぶれ補正駆動機構４４、ターレット駆動機構４５、及び調整駆動機構４７は、鏡筒２１の後端部に設けられた電気接点３８に電気的に接続されている。

カメラ本体１０は、制御回路５０を備える。制御回路５０は、カメラ側マウント１２に設けられた電気接点５８に電気的に接続されている。レンズ側マウント２２がカメラ側マウント１２に接続され、レンズユニット２０がカメラ本体１０に装着された状態では、電気接点３８が電気接点５８と接続され、制御回路５０がズーム駆動機構４２、絞り駆動機構４３、ぶれ補正駆動機構４４、ターレット駆動機構４５、及び調整駆動機構４７と電気的に接続される。

ズーム駆動機構４２、絞り駆動機構４３、ぶれ補正駆動機構４４、ターレット駆動機構４５、及び調整駆動機構４７は、いずれもモータ等のアクチュエータを含む駆動機構である。

一例として図３に示すように、制御回路５０は、コンピュータ６０、ズーム駆動回路５２、絞り駆動回路５３、ぶれ補正駆動回路５４、ターレット駆動回路５５、及び調整駆動回路５７を備える。ズーム駆動回路５２、絞り駆動回路５３、ぶれ補正駆動回路５４、ターレット駆動回路５５、及び調整駆動回路５７は、入出力Ｉ／Ｆ５９を介してコンピュータ６０と接続されている。

コンピュータ６０は、ＣＰＵ６１、ＮＶＭ６２、及びＲＡＭ６３を備えている。ＣＰＵ６１、ＮＶＭ６２、及びＲＡＭ６３は、バス６４を介して相互に接続されており、バス６４は入出力Ｉ／Ｆ５９に接続されている。

ＮＶＭ６２は、非一時的記憶媒体であり、各種パラメータ及び各種プログラムを記憶している。例えば、ＮＶＭ６２は、ＥＥＰＲＯＭである。但し、これは、あくまでも一例に過ぎず、ＥＥＰＲＯＭに代えて、又は、ＥＥＰＲＯＭと共に、ＨＤＤ、及び／又はＳＳＤ等をＮＶＭ６２として適用してもよい。ＲＡＭ６３は、各種情報を一時的に記憶し、ワークメモリとして用いられる。ＣＰＵ６１は、ＮＶＭ６２から必要なプログラムを読み出し、読み出したプログラムをＲＡＭ６３で実行する。ＣＰＵ６１は、ＲＡＭ６３上で実行するプログラムに従ってカメラ１の全体を制御する。

ＣＰＵ６１は、本開示の技術に係る「プロセッサ」の一例であり、ＲＡＭ６３は、本開示の技術に係る「メモリ」の一例である。また、コンピュータ６０は、本開示の技術に係る「制御装置」の一例である。

ズーム駆動回路５２は、コンピュータ６０の指示に従って、ズーム駆動機構４２を駆動させることにより、フォーカスレンズ３１の位置と、ズームレンズ３２の位置とを調整する。フォーカスレンズ３１及びズームレンズ３２は、ズーム駆動機構４２から動力が付与されることによってレンズユニット２０の光軸ＯＡに沿って移動する。

絞り駆動回路５３は、コンピュータ６０の指示に従って、絞り駆動機構４３を駆動させることにより、絞り３３に設けられた開口３３Ａ（図２参照）の口径を変更する。

ぶれ補正駆動回路５４は、コンピュータ６０の指示及び後述するフィードバック回路７５から出力されたフィードバック信号に従って、ぶれ補正駆動機構４４を駆動させることにより、ぶれ補正レンズ３４の位置を調整する。ぶれ補正レンズ３４は、ぶれ補正駆動機構４４から動力が付与されることによってレンズユニット２０の光軸ＯＡと垂直な平面に沿って移動する。ぶれ補正レンズ３４は、具体的には、イメージセンサ１５に光が結像されることで得られる像のぶれが補正される方向へ移動する。

ターレット駆動回路５５は、コンピュータ６０の指示に従って、ターレット駆動機構４５を駆動させることにより、ターレットフィルタ３５の回転方向の位置を調整する。ターレットフィルタ３５は、ターレット駆動機構４５から動力が付与されることによってレンズユニット２０の光軸ＯＡと垂直な平面に沿って回転する。ターレットフィルタ３５の回転動作については、後に図４を用いて詳述する。

調整駆動回路５７は、コンピュータ６０の指示に従って、調整駆動機構４７を駆動させることにより、調整レンズ３７の位置を調整する。調整レンズ３７は、調整駆動機構４７から動力が付与されることによってレンズユニット２０の光軸ＯＡに沿って移動する。

一例として図３に示すように、カメラ本体１０は、イメージセンサドライバ７１、信号処理回路７２、投光制御回路７３、振動センサ７４、フィードバック回路７５、ディスプレイ７６、ディスプレイ制御回路７７、入力デバイス７８、入力回路７９、及び外部Ｉ／Ｆ８０を備える。イメージセンサドライバ７１、信号処理回路７２、投光制御回路７３、フィードバック回路７５、ディスプレイ制御回路７７、入力回路７９、及び外部Ｉ／Ｆ８０は、入出力Ｉ／Ｆ５９を介してコンピュータ６０と接続されている。

イメージセンサドライバ７１は、コンピュータ６０の指示に従って、イメージセンサ１５に光を撮像させる。信号処理回路７２は、イメージセンサ１５から出力されたアナログ画像データに対して各種の信号処理を施すことによりデジタル画像データを生成して出力する。

投光制御回路７３は、コンピュータ６０の指示に従って、投光器１４をオンとオフに切り替える。投光器１４は、オンに切り替えられると照明光を出力し、オフに切り替えられると照明光の出力を停止する。

振動センサ７４は、例えば、ジャイロセンサであり、カメラ１の振動を検出する。振動センサ７４に含まれるジャイロセンサは、カメラ１のピッチ軸及びヨー軸の各軸周りの振動を検出する。振動センサ７４は、ジャイロセンサによって検出されたピッチ軸周りの振動及びヨー軸周りの振動をピッチ軸及びヨー軸に平行な２次元状の面内での振動に変換することで、カメラ１に対してピッチ軸の方向に作用する振動及びヨー軸の方向に作用する振動を検出する。振動センサ７４は、検出した振動に応じた振動検出信号を出力する。

なお、振動センサ７４は、加速度センサであってもよい。また、振動センサ７４の代わりに、例えば、ＮＶＭ６２及び／又はＲＡＭ６３に記憶された時系列的に前後する撮像画像を比較することで得た動きベクトルを振動として用いてもよい。また、物理的なセンサによって検出された振動と、画像処理によって得られた動きベクトルとに基づいて最終的に使用される振動が導出されてもよい。

フィードバック回路７５は、振動センサ７４から出力された振動検出信号に対して各種の信号処理を施すことにより、フィードバック信号を生成する。フィードバック回路７５は、入出力Ｉ／Ｆ５９を介してぶれ補正駆動回路５４と接続されており、コンピュータ６０の指示に従って、フィードバック信号をぶれ補正駆動回路５４に出力する。

ディスプレイ７６は、例えば、液晶ディスプレイ又はＥＬディスプレイ等であり、画像及び／又は文字情報等を表示する。ディスプレイ制御回路７７は、コンピュータ６０の指示に従って、ディスプレイ７６に画像を表示させる。

入力デバイス７８は、例えば、タッチパネル及び／又はスイッチ等のデバイスであり、ユーザから与えられた指示を受け付ける。入力回路７９は、ユーザによって入力デバイス７８に与えられた指示に応じた入力信号を出力する。外部Ｉ／Ｆ８０は、外部装置と通信可能に接続されるインターフェースである。

一例として図４に示すように、ターレットフィルタ３５は、円板８１を備える。円板８１には、円板８１の周方向に沿って等間隔に複数の光学フィルタとして、Ｉｒカットフィルタ８２、第１ＢＰＦ８３Ａ、第２ＢＰＦ８３Ｂ、第３ＢＰＦ８３Ｃ、及び第４ＢＰＦ８３Ｄが設けられている。以下では、特に区別して説明する必要がない場合、Ｉｒカットフィルタ８２、第１ＢＰＦ８３Ａ、第２ＢＰＦ８３Ｂ、第３ＢＰＦ８３Ｃ、及び第４ＢＰＦ８３Ｄを光学フィルタと称する。また、以下では、特に区別して説明する必要がない場合、第１ＢＰＦ８３Ａ、第２ＢＰＦ８３Ｂ、第３ＢＰＦ８３Ｃ、及び第４ＢＰＦ８３ＤをＢＰＦ８３と称する。

ターレットフィルタ３５は、ターレット方式で複数の光学フィルタを光路に対して選択的に挿脱させる。具体的には、図４に示す円弧矢印Ｒ方向にターレットフィルタ３５が回転することで、Ｉｒカットフィルタ８２、第１ＢＰＦ８３Ａ、第２ＢＰＦ８３Ｂ、第３ＢＰＦ８３Ｃ、及び第４ＢＰＦ８３Ｄが、光路（一例として、光軸ＯＡ上の光路）に対して選択的に挿脱される。光学フィルタが光路に挿入されると、光学フィルタの中心を光軸ＯＡが貫き、光路に挿入された光学フィルタの中心とイメージセンサ１５の受光面の中心とが一致する。

Ｉｒカットフィルタ８２は、赤外線をカットし、赤外線以外の光のみを透過させる光学フィルタである。ＢＰＦ８３は、近赤外光を透過させる光学フィルタである。第１ＢＰＦ８３Ａ、第２ＢＰＦ８３Ｂ、第３ＢＰＦ８３Ｃ、及び第４ＢＰＦ８３Ｄは、それぞれ異なる波長帯域の近赤外光を透過させる。

第１ＢＰＦ８３Ａは、１０００ｎｍ（ナノメートル）近傍の波長帯域に対応している光学フィルタである。一例として、第１ＢＰＦ８３Ａは、９５０ｎｍから１１００ｎｍの波長帯域の近赤外光のみを透過させる。以下、第１ＢＰＦ８３Ａを透過した近赤外光を第１近赤外光と称する。

第２ＢＰＦ８３Ｂは、１２５０ｎｍ近傍の波長帯域に対応している光学フィルタである。一例として、第２ＢＰＦ８３Ｂは、１１５０ｎｍから１３５０ｎｍの波長帯域の近赤外光のみを透過させる。以下、第２ＢＰＦ８３Ｂを透過した近赤外光を第２近赤外光と称する。

第３ＢＰＦ８３Ｃは、１５５０ｎｍ近傍の波長帯域に対応している光学フィルタである。一例として、第３ＢＰＦ８３Ｃは、１５００ｎｍから１７５０ｎｍの波長帯域の近赤外光のみを透過させる。以下、第３ＢＰＦ８３Ｃを透過した近赤外光を第３近赤外光と称する。

第４ＢＰＦ８３Ｄは、２１５０ｎｍ近傍の波長帯域に対応している光学フィルタである。一例として、第４ＢＰＦ８３Ｄは、２０００ｎｍから２４００ｎｍの波長帯域の近赤外光のみを透過させる。以下、第４ＢＰＦ８３Ｄを透過した近赤外光を第４近赤外光と称する。

以下では、特に区別して説明する必要がない場合、第１近赤外光、第２近赤外光、第３近赤外光、及び第４近赤外光を近赤外光と称する。なお、ここで挙げた各帯域には、本開示の技術が属する技術分野で一般的に許容される誤差であって、本開示の技術の趣旨を逸脱しない範囲内の誤差も含まれている。また、ここで挙げた各波長帯域は、あくまでも一例に過ぎず、それぞれ異なる波長帯域であればよい。

Ｉｒカットフィルタ８２が光路に挿入され、Ｉｒカットフィルタ８２を透過した可視光がイメージセンサ１５の受光面に結像されると、受光面に配置された複数のＳｉダイオードが、受光した可視光を撮像することで得たアナログ画像データを出力する。これにより、可視光を撮像することにより可視光画像を得る機能が実現される。またＢＰＦ８３が光路に挿入され、ＢＰＦ８３を透過した近赤外光がイメージセンサ１５の受光面に結像されると、受光面に配置された複数のＩｎＧａＡｓダイオードが、受光した近赤外光を撮像することで得たアナログ画像データを出力する。これにより、近赤外光を撮像することにより近赤外光画像を得る機能が実現される。

上述の通り、カメラ１は、可視光を撮像することにより可視光画像を得る機能、及び近赤外光を撮像することにより近赤外光画像を得る機能を備える。また、カメラ１は、可視光画像を得る機能及び近赤外光画像を得る機能に加えて、被写体から熱輻射により発せられる電磁波に基づいて被写体の温度を測定する機能を備える。第１実施形態では、測定精度を向上させるために、二色温度測定法を利用する。二色温度測定法による温度測定を実現するためには、例えば、異なる二つの波長帯域の光を撮像することが要求される。第１実施形態では、異なる二つの波長帯域の光を生成するための一手段として、ターレットフィルタ３５が用いられており、一例として、二つの波長帯域の近赤外光が温度測定に用いられる。

一例として図５に示すように、撮像支援処理は、ＣＰＵ６１によって撮像支援処理プログラム１００が実行されることで実現される。撮像支援処理プログラム１００は、本開示の技術に係る「プログラム」の一例である。図５に示す例では、ＮＶＭ６２に撮像支援処理プログラム１００が記憶されており、ＣＰＵ６１が、ＮＶＭ６２から撮像支援処理プログラム１００を読み出し、ＲＡＭ６３上で実行する。

ＣＰＵ６１は、ＲＡＭ６３上で実行する撮像支援処理プログラム１００に従って撮像支援処理を行う。ＣＰＵ６１は、ＲＡＭ６３上で撮像支援処理プログラム１００を実行することで、モード切替処理部１１０、撮像処理部１２０、及び温度測定処理部１３０として機能する。

ＣＰＵ６１は、動作モードとして、撮像モードと温度測定モードとを備えており、撮像モードと温度測定モードとを切り替える。撮像処理部１２０は、ＣＰＵ６１の動作モードが撮像モードに切り替えられた場合に動作する処理部である。撮像処理部１２０は、イメージセンサ１５によって可視光が撮像されることにより得られた可視光画像、又はイメージセンサ１５によって近赤外光が撮像されることにより得られた近赤外光画像をディスプレイ７６に表示させる撮像処理を実行する処理部である。

温度測定処理部１３０は、ＣＰＵ６１の動作モードが温度測定モードに切り替えられた場合に動作する処理部である。温度測定処理部１３０は、イメージセンサ１５によって近赤外光が撮像されることにより得られた近赤外光画像に基づいて被写体の温度分布を算出し、被写体の温度分布に基づいて作成した温度情報をディスプレイ７６に表示させる温度測定処理を実行する処理部である。

モード切替処理部１１０は、ＣＰＵ６１の動作モードを撮像モードと温度測定モードとに切り替えるモード切替処理を実行する処理部である。以下、モード切替処理部１１０、撮像処理部１２０、及び温度測定処理部１３０について順に説明する。

モード切替処理部１１０は、モード選択情報取得部１１１、モード判定部１１２、フラグ設定部１１３、投光制御部１１４、及びモード設定部１１５を有する。

一例として図６に示すように、モード選択情報取得部１１１は、例えば、受付デバイスを介して、動作モードとして撮像モードを選択する撮像モード選択情報と、動作モードとして温度測定モードを選択する温度測定モード選択情報とを選択的に取得する。受付デバイスは、各種情報を受け付け、受け付けた各種情報をＣＰＵ６１に出力する。受付デバイスの一例としては、入力回路７９及び外部Ｉ／Ｆ８０が挙げられる。なお、以下では、説明の便宜上、特に区別して説明する必要がない場合、撮像モード選択情報及び温度測定モード選択情報を、モード選択情報と称する。

入力デバイス７８には、ユーザからの各種指示が入力される。入力回路７９は、入力デバイス７８に入力された指示に応じた情報をＣＰＵ６１に出力する。入力回路７９は、ユーザから入力デバイス７８に与えられたモード選択指示に応じてモード選択情報をＣＰＵ６１に出力する。モード選択情報取得部１１１は、入力回路７９から入力されたモード選択情報を取得する。外部Ｉ／Ｆ８０は、外部装置（図示省略）から出力されたモード選択情報を受信し、受信したモード選択情報をＣＰＵ６１に出力する。モード選択情報取得部１１１は、外部Ｉ／Ｆ８０から入力されたモード選択情報を取得する。

モード判定部１１２は、モード選択情報取得部１１１によって取得されたモード選択情報によって選択された動作モードが撮像モードであるのか、又は温度測定モードであるのかを判定する。モード判定部１１２は、モード選択情報取得部１１１によって取得されたモード選択情報が撮像モード選択情報である場合には、モード選択情報によって選択された動作モードが撮像モードであると判定する。また、モード判定部１１２は、モード選択情報取得部１１１によって取得されたモード選択情報が温度測定モード選択情報である場合には、モード選択情報によって選択された動作モードが温度測定モードであると判定する。

ＲＡＭ６３には、表示制御フラグ記憶領域１４１及び投光制御フラグ記憶領域１４２が設けられている。表示制御フラグ記憶領域１４１は、ディスプレイ７６に対して表示させる画像を指定する表示制御フラグ１５１を記憶する。投光制御フラグ記憶領域１４２は、投光器１４の動作を指定する投光制御フラグ１５２を記憶する。

フラグ設定部１１３は、モード判定部１１２によって動作モードが撮像モードであると判定された場合には、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として撮像画像表示フラグ１５１Ａを設定し、かつ、投光制御フラグ記憶領域１４２に投光制御フラグ１５２として投光オン制御フラグ１５２Ａを設定する。また、フラグ設定部１１３は、モード判定部１１２によって動作モードが温度測定モードであると判定された場合には、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として合成画像表示フラグ１５１Ｂを設定し、投光制御フラグ記憶領域１４２に投光制御フラグ１５２として投光オフ制御フラグ１５２Ｂを設定する。以下では、特に区別して説明する必要がない場合、表示制御フラグ１５１及び投光制御フラグ１５２を制御フラグと称する。

投光制御部１１４は、フラグ設定部１１３によって投光オン制御フラグ１５２Ａが設定された場合に、投光制御回路７３にオン指令を出力する。オン指令は、投光器１４をオンに切り替える指令である。また、投光制御部１１４は、フラグ設定部１１３によって投光オフ制御フラグ１５２Ｂが設定された場合に、投光制御回路７３にオフ指令を出力する。オフ指令は、投光器１４をオフに切り替える指令である。なお、オンとは、投光器１４が投光を行う設定を指し、オフとは、投光器１４が投光を行わない設定を指す。

モード設定部１１５は、表示制御フラグ１５１として撮像画像表示フラグ１５１Ａが設定された場合には、ＣＰＵ６１の動作モードとして撮像モードを設定する。また、モード設定部１１５は、表示制御フラグ１５１として合成画像表示フラグ１５１Ｂが設定された場合には、ＣＰＵ６１の動作モードとして温度測定モードを設定する。

第１実施形態において、撮像モードは、本開示の技術に係る「第１モード」の一例であり、温度測定モードは、本開示の技術に係る「第２モード」の一例である。また、表示制御フラグ１５１及び投光制御フラグ１５２は、本開示の技術に係る「制御因子」の一例である。また、ディスプレイ７６及び投光器１４は、本開示の技術に係る「制御対象」の一例であり、ディスプレイ７６に表示される画像、及び投光器１４の動作は、本開示の技術に係る「制御対象に対する制御内容」の一例である。また、表示制御フラグ１５１は、本開示の技術に係る「表示制御因子」の一例であり、撮像画像表示フラグ１５１Ａは、本開示の技術に係る「撮像画像表示因子」の一例であり、合成画像表示フラグ１５１Ｂは、本開示の技術に係る「温度情報表示因子」の一例である。また、投光オン制御フラグ１５２Ａ及び投光オフ制御フラグ１５２Ｂは、本開示の技術に係る「投光制御因子」の一例であり、投光オン制御フラグ１５２Ａは、本開示の技術に係る「投光オン制御因子」の一例であり、投光オフ制御フラグ１５２Ｂは、本開示の技術に係る「投光抑制制御因子」の一例である。

一例として図７に示すように、撮像処理部１２０は、波長選択部１２１、ターレット制御部１２２、撮像制御部１２３、表示制御部１２４を有する。

波長選択部１２１は、入力デバイス７８によって受け付けられた波長選択指示に従って、複数の波長帯域から撮像に用いる一つの波長帯域を選択する。一例として、波長選択部１２１は、可視光の波長帯域、９５０ｎｍから１１００ｎｍの第１近赤外光の波長帯域、１１５０ｎｍから１３５０ｎｍの第２近赤外光の波長帯域、１５００ｎｍから１７５０ｎｍの第３近赤外光の波長帯域、及び２０００ｎｍから２４００ｎｍの第４近赤外光の波長帯域から一つの波長帯域を選択する。なお、ここでは、入力デバイス７８によって受け付けられた波長選択指示に従って波長帯域が選択される形態例を挙げて説明しているが、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って波長帯域が選択されてもよい。

ターレット制御部１２２は、複数の光学フィルタのうち、波長選択部１２１によって選択された波長帯域に対応する光学フィルタを光路に挿入させる回転指令をターレット駆動回路５５に対して出力する。ターレット駆動回路５５は、回転指令を受け取ると、ターレット駆動機構４５を駆動させることにより、回転指令に対応する光学フィルタが光路に挿入される位置にターレットフィルタ３５を回転させる。

撮像制御部１２３は、イメージセンサドライバ７１に対して撮像指令を出力する。撮像指令は、イメージセンサ１５に光を撮像させる指令である。イメージセンサ１５は、被写体から発せられた光を撮像し、光を撮像することで得たアナログ画像データを出力する。信号処理回路７２は、イメージセンサ１５から出力されたアナログ画像データに対して各種の信号処理を施すことによりデジタル画像データを生成して出力する。

表示制御部１２４は、信号処理回路７２によって生成されたデジタル画像データに基づいて撮像画像１６１Ａをディスプレイ７６に表示させる。撮像画像１６１Ａは、例えば、動画像で表示されるが、静止画像で表示されてもよい。

図８には、撮像処理部１２０によって撮像処理が実行されることによりディスプレイ７６に表示された撮像画像１６１Ａの一例が示されている。図８に示す例では、建物の窓１６２の室内側に設けられたカーテン１６３に火１６４がついている撮像画像１６１Ａがディスプレイ７６に表示されている。

一例として図９に示すように、温度測定処理部１３０は、波長選択部１３１、第１ターレット制御部１３２、第１撮像制御部１３３、第２ターレット制御部１３４、第２撮像制御部１３５、温度導出部１３６、及び表示制御部１３７を有する。

一例として図１０に示すように、波長選択部１３１は、二色温度測定法に用いる二つの波長帯域、すなわち第１波長帯域及び第２波長帯域を選択する。一例として、波長選択部１３１は、第１波長帯域及び第２波長帯域として、９５０ｎｍから１１００ｎｍの第１近赤外光の波長帯域、１１５０ｎｍから１３５０ｎｍの第２近赤外光の波長帯域、１５００ｎｍから１７５０ｎｍの第３近赤外光の波長帯域、及び２０００ｎｍから２４００ｎｍの第４近赤外光の波長帯域から二つの波長帯域を選択する。また、一例として、波長選択部１３１は、第１波長帯域及び第２波長帯域として、第１近赤外光の波長帯域、第２近赤外光の波長帯域、第３近赤外光の波長帯域、及び第４近赤外光の波長帯域のうちの隣接する二つの波長帯域を選択する。

また、一例として、波長選択部１３１は、第１波長帯域及び第２波長帯域として、第１近赤外光の波長帯域、第２近赤外光の波長帯域、第３近赤外光の波長帯域、及び第４近赤外光の波長帯域から被写体の温度に基づいて二つの波長帯域を選択する。また、一例として、波長選択部１３１は、第１波長帯域及び第２波長帯域として、第１近赤外光の波長帯域、第２近赤外光の波長帯域、第３近赤外光の波長帯域、及び第４近赤外光の波長帯域から、被写体の温度が高くになる従って短い波長帯域を選択する。

例えば、火災の場合、被写体の温度は、火災状況から予想される温度に関する情報、及び／又は、ユーザが入力デバイス７８に入力した情報に基づいて予測される。火災状況から予想される温度に関する情報は、図９に示す外部Ｉ／Ｆ８０を通じて取得される。火災状況から予想される温度に関する情報は、火災発生からの経過時間に対する標準火災温度に関する情報でもよい。標準火災温度は、ＩＳＯ８３４にて定められている。なお、波長選択部１３１は、図９に示す入力デバイス７８によって受け付けられた波長選択指示に従って波長帯域を切り替えてもよい。

一例として図９に示すように、第１ターレット制御部１３２は、複数のＢＰＦ８３（図４参照）のうち波長選択部１３１によって選択された第１波長帯域に対応するＢＰＦ８３を光路に挿入させる第１回転指令をターレット駆動回路５５に対して出力する。ターレット駆動回路５５は、第１回転指令を受け取ると、ターレット駆動機構４５を駆動させることにより、第１回転指令に対応するＢＰＦが光路に挿入される位置にターレットフィルタ３５を回転させる。

第１撮像制御部１３３は、イメージセンサドライバ７１に対して第１撮像指令を出力する。第１撮像指令は、イメージセンサ１５に光を撮像させる指令である。イメージセンサ１５は、第１波長帯域に対応するＢＰＦ８３を透過した第１近赤外光を撮像し、第１近赤外光を撮像することで得た第１アナログ画像データを出力する。信号処理回路７２は、イメージセンサ１５から出力された第１アナログ画像データに対して各種の信号処理を施すことにより第１デジタル画像データを生成して出力する。

第２ターレット制御部１３４は、複数のＢＰＦ８３のうち波長選択部１３１によって選択された第２波長帯域に対応するＢＰＦ８３を光路に挿入させる第２回転指令をターレット駆動回路５５に対して出力する。ターレット駆動回路５５は、第２回転指令を受け取ると、ターレット駆動機構４５を駆動させることにより、第２回転指令に対応するＢＰＦが光路に挿入される位置にターレットフィルタ３５を回転させる。

第２撮像制御部１３５は、イメージセンサドライバ７１に対して第２撮像指令を出力する。第２撮像指令は、イメージセンサ１５に光Ｌを撮像させる指令である。イメージセンサ１５は、第２波長帯域に対応するＢＰＦを透過した第２近赤外光を撮像し、第２近赤外光を撮像することで得た第２アナログ画像データを出力する。信号処理回路７２は、イメージセンサ１５から出力された第２アナログ画像データに対して各種の信号処理を施すことにより第２デジタル画像データを生成して出力する。

温度導出部１３６は、第１デジタル画像データ及び第２デジタル画像データに基づいて、二色温度測定法により、被写体の温度分布を算出する。具体的には、温度導出部１３６は、イメージセンサ１５が有する複数の物理画素のそれぞれについて、第１デジタル画像データから物理画素が出力した第１信号の値を抽出し、第２デジタル画像データから物理画素が出力した第２信号の値を抽出する。そして、温度導出部１３６は、複数の物理画素のそれぞれについて、第１信号の値及び第２信号の値に基づいて物理画素によって測定された温度を二色温度測定法に基づいて導出する。温度の導出には、二色温度測定法に基づく計算式が用いられてもよく、また、データマッチングテーブルが用いられてもよい。そして、温度導出部１３６は、複数の物理画素のそれぞれによって測定された温度を導出することで被写体の温度分布を算出する。

表示制御部１３７は、温度導出部１３６によって得られた被写体の温度分布に基づいて温度に関連する温度情報を生成する。そして、表示制御部１３７は、第１デジタル画像データ又は第２デジタル画像データに基づいて得られる撮像画像に温度情報を合成した合成画像１６１Ｂを出力し、合成画像１６１Ｂをディスプレイ７６に表示させる。温度情報の一例としては、例えば、温度が予め定められた閾値以上である領域を示す情報、温度の具体的な数値を示す情報、予め定められた温度の範囲毎に区画された複数の区画を温度の具体的な数値と併せて示す情報、又は温度に応じた色調で温度分布を示す情報等が挙げられる。

図１１には、温度測定処理部１３０によって温度測定処理が実行されることによりディスプレイ７６に表示された合成画像１６１Ｂの第１例が示されている。第１例に係る合成画像１６１Ｂは、温度が予め定められた閾値以上である領域を示す温度情報１６６が撮像画像１６５に合成された画像である。第１例では、温度情報１６６は、例えば、四角形状の枠を示す情報であるが、枠以外の情報でもよい。また、枠は、四角形状以外でもよい。また、枠は、温度に応じた色で表示されてもよい。また、枠が温度に応じた色で表示される場合には、色に対応する温度を示すスケール表示が枠と併せて表示されてもよい。また、温度情報１６６には、温度の具体的な数値を示す文字列が含まれてもよい。温度の具体的な数値は、温度の最大値及び／又は最小値でもよい。また、温度情報１６６は、静止して表示されてよいし、点滅して表示されてもよい。

図１２には、温度測定処理部１３０によって温度測定処理が実行されることによりディスプレイ７６に表示された合成画像１６１Ｂの第２例が示されている。第２例に係る合成画像１６１Ｂは、温度の具体的な数値を示す複数の温度情報１６７Ａ、１６７Ｂ及び１６７Ｃが撮像画像１６５に合成された画像である。温度の具体的な数値は、温度の最大値及び／又は最小値でもよい。また、複数の温度情報１６７Ａ、１６７Ｂ及び１６７Ｃは、静止して表示されてよいし、点滅して表示されてもよい。

図１３には、温度測定処理部１３０によって温度測定処理が実行されることによりディスプレイ７６に表示された合成画像１６１Ｂの第３例が示されている。第３例に係る合成画像１６１Ｂは、予め定められた温度の範囲毎に区画された複数の区画を温度の具体的な数値と併せて示す温度情報１６８が撮像画像１６５に合成された画像である。温度の具体的な数値は、温度の最大値及び／又は最小値でもよい。また、温度情報１６８は、静止して表示されてよいし、点滅して表示されてもよい。

図１４には、温度測定処理部１３０によって温度測定処理が実行されることによりディスプレイ７６に表示された合成画像１６１Ｂの第４例が示されている。第４例に係る合成画像１６１Ｂは、温度に応じた色調で温度分布を示す温度情報１６９が撮像画像１６５に合成された画像である。図１４に示す第４例の温度分布は、図１３に示す第３例の各区画の温度を温度に対応する色調で表示したものである。色調は、例えば、基準温度（例えば、３０００℃）を中心として一定の色相角（例えば、１℃につき０．０１°）で規定されている。また、色調に代えて、無彩色の濃淡で温度分布が可視化されていてもよい。温度情報１６９は、色調に対応する温度を示すインディケータを含んでいてもよい。また、温度情報１６９には、温度の具体的な数値を示す文字列が含まれてもよい。温度の具体的な数値は、温度の最大値及び／又は最小値でもよい。また、温度情報１６９は、静止して表示されてよいし、点滅して表示されてもよい。

温度情報１６６、１６７Ａ、１６７Ｂ、１６７Ｃ、１６８、及び１６９は、本開示の技術に係る「温度情報」の一例である。撮像モードで得られた撮像画像１６１Ａは、本開示の技術に係る「撮像画像」及び「第１撮像画像」の一例である。温度測定モードで得られた合成画像１６１Ｂは、本開示の技術に係る「合成画像」の一例である。なお、以下では、特に区別して説明する必要がない場合、撮像モードで得られた撮像画像１６１Ａ、及び温度測定モードで得られた合成画像１６１Ｂを画像と称する。

次に、第１実施形態の作用として、カメラ１の制御方法について説明する。

はじめに、図１５を参照しながら、ＣＰＵ６１が実行する撮像支援処理のうち、モード切替処理部１１０（図６参照）が実行するモード切替処理について説明する。

ステップＳ１１で、モード選択情報取得部１１１は、モード選択情報を取得する。

ステップＳ１２で、モード判定部１１２は、モード選択情報取得部１１１によって取得されたモード選択情報に基づいて、モード選択情報によって選択された動作モードが撮像モードであるのか、又は温度測定モードであるのかを判定する。ステップＳ１２において、撮像モードであると判定された場合、図１５に示す処理は、ステップＳ１３に移行し、温度測定モードであると判定された場合、図１５に示す処理は、ステップＳ１６に移行する。

ステップＳ１３で、フラグ設定部１１３は、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として撮像画像表示フラグ１５１Ａを設定し、かつ、投光制御フラグ記憶領域１４２に投光制御フラグ１５２として投光オン制御フラグ１５２Ａを設定する。

ステップＳ１４で、投光制御部１１４は、投光器１４をオンにする。

ステップＳ１５で、モード設定部１１５は、ＣＰＵ６１の動作モードとして撮像モードを設定する。

ステップＳ１６で、フラグ設定部１１３は、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として合成画像表示フラグ１５１Ｂを設定し、投光制御フラグ記憶領域１４２に投光制御フラグ１５２として投光オフ制御フラグ１５２Ｂを設定する。

ステップＳ１７で、投光制御部１１４は、投光器１４をオフにする。

ステップＳ１８で、モード設定部１１５は、ＣＰＵ６１の動作モードとして温度測定モードを設定する。

続いて、図１６を参照しながら、ＣＰＵ６１が実行する撮像支援処理のうち、撮像処理部１２０（図７参照）が実行する撮像処理について説明する。

ステップＳ２１で、波長選択部１２１は、入力デバイス７８によって受け付けられた波長選択指示に従って、複数の波長帯域から撮像に用いる一つの波長帯域を選択する。

ステップＳ２２で、ターレット制御部１２２は、複数の光学フィルタのうち、波長選択部１２１によって選択された波長帯域に対応する光学フィルタが光路に挿入される位置にターレットフィルタ３５を回転させる。

ステップＳ２３で、撮像制御部１２３は、イメージセンサ１５に光を撮像させる。イメージセンサ１５は、光を撮像することで得たアナログ画像データを出力し、信号処理回路７２は、アナログ画像データに対して各種の信号処理を施すことによりデジタル画像データを生成して出力する。

ステップＳ２４で、表示制御部１２４は、信号処理回路７２によって生成されたデジタル画像データに基づいて撮像画像１６１Ａをディスプレイ７６に表示させる。

続いて、図１７を参照しながら、ＣＰＵ６１が実行する撮像支援処理のうち、温度測定処理部１３０（図９参照）が実行する温度測定処理について説明する。

ステップＳ３１で、波長選択部１３１は、二色温度測定法に用いる二つの波長帯域、すなわち第１波長帯域及び第２波長帯域を選択する。

ステップＳ３２で、第１ターレット制御部１３２は、複数のＢＰＦ８３（図４参照）のうち波長選択部１３１によって選択された第１波長帯域に対応するＢＰＦ８３が光路に挿入される位置にターレットフィルタ３５を回転させる。

ステップＳ３３で、第１撮像制御部１３３は、第１波長帯域に対応するＢＰＦ８３を透過した第１近赤外光をイメージセンサ１５に撮像させる。イメージセンサ１５は、第１近赤外光を撮像することで得た第１アナログ画像データを出力し、信号処理回路７２は、第１アナログ画像データに対して各種の信号処理を施すことにより第１デジタル画像データを生成して出力する。

ステップＳ３４で、第２ターレット制御部１３４は、複数のＢＰＦ８３のうち波長選択部１３１によって選択された第２波長帯域に対応するＢＰＦ８３が光路に挿入される位置にターレットフィルタ３５を回転させる。

ステップＳ３５で、第２撮像制御部１３５は、第２波長帯域に対応するＢＰＦ８３を透過した第２近赤外光をイメージセンサ１５に撮像させる。イメージセンサ１５は、第２近赤外光を撮像することで得た第２アナログ画像データを出力し、信号処理回路７２は、第２アナログ画像データに対して各種の信号処理を施すことにより第２デジタル画像データを生成して出力する。

ステップＳ３６で、温度導出部１３６は、第１デジタル画像データ及び第２デジタル画像データに基づいて、二色温度測定法により、被写体の温度分布を算出する。

ステップＳ３７で、表示制御部１３７は、温度導出部１３６によって得られた被写体の温度分布に基づいて温度に関連する温度情報を生成する。そして、表示制御部１３７は、第１デジタル画像データ又は第２デジタル画像データに基づいて得られる撮像画像に温度情報を合成した合成画像１６１Ｂを出力し、合成画像１６１Ｂをディスプレイ７６に表示させる

なお、ＣＰＵ６１は、撮像モード及び温度測定モードの各モードにおいて、フォーカスレンズ３１を光軸ＯＡに沿って移動させることでピントの位置を調節する制御、及びズームレンズ３２を移動させることでズーム倍率を調節する制御をズーム駆動機構４２に対して行う。また、ＣＰＵ６１は、撮像モード及び温度測定モードの各モードにおいて、ぶれ補正レンズ３４を移動させることで像のぶれを補正する制御をぶれ補正駆動機構４４に対して行う。また、ＣＰＵ６１は、撮像モード及び温度測定モードの各モードにおいて、絞り３３に設けられた開口３３Ａの口径を変更することで絞り３３を透過する光の量を調節する制御を絞り駆動機構４３に対して行う。また、ＣＰＵ６１は、撮像モード及び温度測定モードの各モードにおいて、調整レンズ３７を移動させることで焦点の位置を調整する制御を調整駆動機構４７に対して行う。

第１実施形態に係るカメラ１の制御方法は、本開示の技術に係る「制御方法」の一例である。

次に、第１実施形態の効果について説明する。

第１実施形態では、ＣＰＵ６１は、イメージセンサ１５に対して光を撮像させる撮像モードと、イメージセンサ１５によって受光された近赤外光に基づいて温度を導出する温度測定モードとを備える。そして、撮像モードと温度測定モードとでは、制御フラグが異なる。したがって、撮像モードと温度測定モードとで制御対象における制御内容を異ならせることができる。

例えば、第１実施形態では、制御フラグは、ディスプレイ７６に対して表示させる表示制御フラグ１５１を含む。したがって、撮像モードと温度測定モードとで、制御対象における制御内容を異ならせることの一例として、ディスプレイ７６に表示される画像を異ならせることができる。

また、第１実施形態では、制御フラグは、投光器１４を動作させる投光制御フラグ１５２を含む。したがって、撮像モードと温度測定モードとで、制御対象における制御内容を異ならせることの一例として、投光器１４の動作を異ならせることができる。

このように、第１実施形態では、撮像モードと温度測定モードとで制御対象における制御内容を異ならせることができるので、例えば撮像モードと温度測定モードとで制御フラグが同じである場合に比して、撮像装置の動作を各モードに適した動作に制御することができる。

また、ＣＰＵ６１は、撮像モードでは、表示制御フラグ１５１として、光がイメージセンサ１５によって受光されることで得られた撮像画像１６１Ａをディスプレイ７６に対して表示させる撮像画像表示フラグ１５１Ａを設定する。これにより、温度情報を含まない撮像画像１６１Ａがディスプレイ７６に表示される。したがって、撮像モードでは、例えば撮像画像１６１Ａが温度情報を含む場合に比して、撮像画像１６１Ａの視認性を向上させることができる。

また、ＣＰＵ６１は、温度測定モードでは、表示制御フラグ１５１として、温度を示す温度情報を含む合成画像１６１Ｂをディスプレイ７６に対して表示させる合成画像表示フラグ１５１Ｂを設定する。これにより、温度情報を含む合成画像１６１Ｂがディスプレイ７６に表示される。したがって、温度測定モードでは、例えば温度情報がディスプレイ７６に表示されない場合に比して、ユーザが被写体の温度を的確に把握することができる。

また、ＣＰＵ６１は、撮像モードでは、投光制御フラグ１５２として、投光器１４をオンに切り替える投光オン制御フラグ１５２Ａを設定する。これにより、撮像モードでは、投光器１４がオンに切り替えられる。したがって、撮像モードでは、被写体から放射される光の量を確保することができる。これにより、例えば、火災で室内に煙が充満している状況下であっても、ユーザが撮像画像１６１Ａを通じて室内環境を確認することができる。

また、ＣＰＵ６１は、温度測定モードでは、投光制御フラグ１５２として、投光器１４をオフに切り替える投光オフ制御フラグ１５２Ｂを設定する。これにより、温度測定モードでは、投光器１４がオフに切り替えられる。したがって、被写体から放射される近赤外光に投光器１４による照明光が混在することを回避することができる。また、例えば被写体から放射される近赤外光に投光器１４による照明光が混在する場合に比して、温度測定の測定精度を向上させることができる。

また、ＣＰＵ６１は、撮像モードと温度測定モードとに切り替わることに応じて、投光器１４をオンとオフに切り替える。したがって、例えばユーザが投光器１４をオンとオフに切り替える必要がある場合に比して、利便性を高めることができる。

また、ＣＰＵ６１は、温度測定モードでは、イメージセンサ１５によって受光されることで得られた撮像画像と、温度を示す温度情報とを合成した合成画像１６１Ｂを出力する。したがって、合成画像１６１Ｂがディスプレイ７６に表示されることにより、ユーザが被写体の状況と温度を容易に把握できる。

次に、第１実施形態の変形例について説明する。

第１実施形態では、一例として図８に示すように、建物の窓１６２の室内側に設けられたカーテン１６３に火１６４がついている撮像画像１６１Ａがディスプレイ７６に表示される例が示されているが、撮像画像１６１Ａは、どのような画像でもよい。例えば、一例として図１８に示すように、撮像画像１６１Ａは、人の腕１７０が撮像されることで得られた画像でもよい。

また、第１実施形態では、一例として図１１から図１４に示すように、建物の窓の室内側に設けられたカーテンに火がついている撮像画像と温度情報とを合成した合成画像１６１Ｂがディスプレイ７６に表示される例が示されているが、合成画像１６１Ｂは、撮像画像と温度情報とが合成された画像であれば、どのような画像でもよい。例えば、一例として図１９に示すように、合成画像１６１Ｂは、人の腕１７０が撮像されることで得られた撮像画像１７１に温度分布を示す温度情報１７２が合成された画像でもよい。合成は、例えば、アルファブレンドによる複数の画像の重畳であってもよいし、撮像画像に対する温度情報の埋め込みであってもよい。

また、第１実施形態では、図６に示すフラグ設定部１１３によって投光オフ制御フラグ１５２Ｂが設定される代わりに、フラグ設定部１１３によって投光抑制制御フラグが設定されてもよい。また、フラグ設定部１１３によって投光抑制制御フラグが設定された場合、投光制御部１１４は、投光制御回路７３に投光抑制指令を出力し、投光制御回路７３は、投光抑制指令に従って投光器１４の投光を抑制（つまり投光器１４から投光される光の量を抑制）させてもよい。抑制とは、例えば、光の量を基準量よりも小さくする動作を指す。基準量は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。

［第２実施形態］
次に、第２実施形態について説明する。

第２実施形態では、第１実施形態に対し、カメラ１の構成が次のように変更されている。以下、第２実施形態について第１実施形態と異なる点を説明する。

一例として図２０に示すように、モード切替処理部１１０は、状態信号取得部１８１、状態信号判定部１８２、フラグ設定部１１３、投光制御部１１４、及びモード設定部１１５を有する。

状態信号取得部１８１は、投光器１４の動作の状態に応じて投光制御回路７３から出力された状態信号を取得する。投光制御回路７３は、投光器１４がオンの状態では、投光器１４がオンの状態を表すオン状態信号を状態信号として出力し、投光器１４がオフの状態では、投光器１４がオフの状態を表すオン状態信号を状態信号として出力する。

状態信号判定部１８２は、状態信号取得部１８１によって取得された状態信号が、投光器１４がオンの状態を表すオン状態信号であるか否かを判定する。

フラグ設定部１１３は、状態信号判定部１８２によって状態信号がオン状態信号であると判定された場合には、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として撮像画像表示フラグ１５１Ａを設定する。また、フラグ設定部１１３は、状態信号判定部１８２によって状態信号がオン状態信号ではないと判定された場合には、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として合成画像表示フラグ１５１Ｂを設定する。

モード設定部１１５は、表示制御フラグ１５１として撮像画像表示フラグ１５１Ａが設定された場合には、ＣＰＵ６１の動作モードとして撮像モードを設定する。また、モード設定部１１５は、表示制御フラグ１５１として合成画像表示フラグ１５１Ｂが設定された場合には、ＣＰＵ６１のモードとして温度測定モードを設定する。

第２実施形態において、撮像モードは、本開示の技術に係る「第１モード」の一例であり、温度測定モードは、本開示の技術に係る「第２モード」の一例である。また、表示制御フラグ１５１は、本開示の技術に係る「制御因子」の一例である。また、ディスプレイ７６は、本開示の技術に係る「制御対象」の一例であり、ディスプレイ７６に表示される画像は、本開示の技術に係る「制御対象に対する制御内容」の一例である。また、表示制御フラグ１５１は、本開示の技術に係る「表示制御因子」の一例であり、撮像画像表示フラグ１５１Ａは、本開示の技術に係る「撮像画像表示因子」の一例であり、合成画像表示フラグ１５１Ｂは、本開示の技術に係る「温度情報表示因子」の一例である。

次に、第２実施形態の作用として、カメラ１の制御方法について説明する。

第２実施形態では、撮像処理部１２０が実行する撮像処理、及び温度測定処理部１３０が実行する温度測定処理は、第１実施形態と同じである。第２実施形態では、モード切替処理部１１０が実行するモード切替処理が、第１実施形態と異なる。以下、図２１を参照しながら、第２実施形態に係るモード切替処理部１１０が実行するモード切替処理について説明する。

ステップＳ４１で、状態信号取得部１８１は、投光器１４の動作の状態に応じて投光制御回路７３から出力された状態信号を取得する。

ステップＳ４２で、状態信号判定部１８２は、状態信号がオン状態信号であるか否かを判定する。ステップＳ４２において、オン状態信号であると判定された場合、図２１に示す処理は、ステップＳ４３に移行し、オン状態信号ではないと判定された場合、図２１に示す処理は、ステップＳ４５に移行する。

ステップＳ４３で、フラグ設定部１１３は、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として撮像画像表示フラグ１５１Ａを設定する。

ステップＳ４４で、モード設定部１１５は、ＣＰＵ６１の動作モードとして撮像モードを設定する。

ステップＳ４５で、フラグ設定部１１３は、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として合成画像表示フラグ１５１Ｂを設定する。

ステップＳ４６で、モード設定部１１５は、ＣＰＵ６１の動作モードとして温度測定モードを設定する。

第２実施形態に係るカメラ１の制御方法は、本開示の技術に係る「制御方法」の一例である。

次に、第２実施形態の効果について第１実施形態と異なる点を説明する。

第２実施形態では、ＣＰＵ６１は、投光器１４の状態がオンである場合には、撮像モードを設定し、投光器１４の状態がオフである場合には、温度測定モードを設定する。したがって、例えば投光器１４のオンオフの動作に応じて撮像モードと温度測定モードとに切り替わらない場合に比して、利便性を高めることができる。

［第３実施形態］
次に、第３実施形態について説明する。

第３実施形態では、第１実施形態に対し、カメラ１の構成が次のように変更されている。以下、第３実施形態について第１実施形態と異なる点を説明する。

一例として図２２に示すように、ＣＰＵ６１は、上述のモード切替処理部１１０、撮像処理部１２０、及び温度測定処理部１３０に加えて、パラメータ変更処理部１９０として機能する。パラメータ変更処理部１９０は、ＣＰＵ６１のモードが撮像モードである場合、及び温度測定モードである場合に動作する処理部である。パラメータ変更処理部１９０は、撮像モードと温度測定モードとで異なるモード別パラメータ２１１を設定する処理部である。パラメータ変更処理部１９０は、モード判定部１９１及びモード別パラメータ設定部１９２を有する。

モード判定部１９１は、ＣＰＵ６１の動作モードが撮像モードであるのか、又は温度測定モードであるのかを判定する。

ＲＡＭ６３には、モード別パラメータ２１１を記憶するパラメータ記憶領域２０１が設けられている。

モード別パラメータ設定部１９２は、モード判定部１９１によってＣＰＵ６１の動作モードが撮像モードであると判定された場合には、撮像条件等に基づいて各種パラメータ設定処理を行うことにより、撮像モードに対応する撮像モード用パラメータ２１１Ａを導出する。そして、モード別パラメータ設定部１９２は、パラメータ記憶領域２０１にモード別パラメータ２１１として撮像モード用パラメータ２１１Ａを設定する。

また、モード別パラメータ設定部１９２は、モード判定部１９１によってＣＰＵ６１の動作モードが温度測定モードであると判定された場合には、温度測定条件等に基づいて各種パラメータ設定処理を行うことにより、温度測定モードに対応する温度測定モード用パラメータ２１１Ｂを導出する。そして、モード別パラメータ設定部１９２は、パラメータ記憶領域２０１にモード別パラメータ２１１として温度測定モード用パラメータ２１１Ｂを設定する。

撮像モード用パラメータ２１１Ａは、撮像に関して設定された第１撮像設定パラメータ２１２Ａ、及び撮像画像に対する画像処理に関して設定された第１画像処理設定パラメータ２１３Ａを含む。同様に、温度測定モード用パラメータ２１１Ｂは、撮像に関して設定された第２撮像設定パラメータ２１２Ｂ、及び撮像画像に対する画像処理に関して設定された第２画像処理設定パラメータ２１３Ｂを含む。

第１撮像設定パラメータ２１２Ａ及び第２撮像設定パラメータ２１２Ｂは、投光器１４に関するパラメータ、シャッタスピードに関するパラメータ、絞り３３に関するパラメータ、測光に関するパラメータ、イメージセンサ１５の感度に関するパラメータ、ハイダイナミックレンジに関するパラメータ、及び防振制御に関するパラメータを含む。イメージセンサ１５の感度に関するパラメータは、イメージセンサ１５のゲインに関するパラメータ及び／又はイメージセンサ１５の変換効率に関するパラメータを含む。

第１画像処理設定パラメータ２１３Ａ及び第２画像処理設定パラメータ２１３Ｂは、ノイズリダクションに関するパラメータ、シャープネスに関するパラメータ、コントラストに関するパラメータ、及びトーンに関するパラメータを含む。

撮像モード用パラメータ２１１Ａに含まれる第１撮像設定パラメータ２１２Ａは、一例として、次のように設定される。
投光器１４に関するパラメータは、投光器１４が投光を行うパラメータに設定される。
シャッタスピードに関するパラメータは、シャッタスピードを基準スピード以上にするパラメータに設定される。シャッタスピードとは、メカニカルシャッタにおける先幕が開き始めてから後幕が閉じ終わるまでの間の時間、電子先幕シャッタが作動してからメカニカルシャッタの後幕が閉じ終わるまでの間の時間、又は電子シャッタが作動し始めてから作動し終わるまでの間の時間によって規定されている。基準スピードは、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
絞り３３に関するパラメータは、絞り量を基準絞り量以上にするパラメータに設定される。絞り量とは、絞り３３に設けられた開口３３Ａの口径に比例する。基準絞り量は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
測光に関するパラメータは、測光をアベレージ測光方式又はマルチパターン測光方式で行うパラメータに設定される。測光とは、被写体の明るさを測ることである。
イメージセンサ１５のゲインに関するパラメータは、イメージセンサ１５のゲインを基準ゲイン以上にするパラメータに設定される。イメージセンサ１５のゲインとは、例えば、イメージセンサ１５のフォトダイオードに接続されているＡ／Ｄ変換器（図示省略）のアナログゲインを指す。基準ゲインは、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
イメージセンサ１５の変換効率に関するパラメータは、イメージセンサ１５の変換効率を基準変換効率以上にするパラメータに設定される。イメージセンサ１５の変換効率とは、イメージセンサ１５に含まれるフォトダイオードに接続されている可変コンデンサ（図示省略）に蓄積された電荷を電圧に変換する効率を指す。基準変換効率は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
ハイダイナミックレンジに関するパラメータは、ハイダイナミックレンジをオンにするパラメータに設定される。ハイダイナミックレンジとは、撮像画像１６１Ａの明部と暗部のコントラスト（つまり明暗比）を向上させる表示技術である。ハイダイナミックレンジをオンにするとは、ダイナミックレンジを基準レンジよりも拡げることである。基準レンジは、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
防振制御に関するパラメータは、防振制御をオンにするパラメータに設定される。防振制御とは、像のぶれが補正される方向へぶれ補正レンズ３４を移動させる制御のことである。防振制御をオンにするとは、ぶれ補正レンズ３４を移動させる制御を行うことである。

ノイズリダクションに関するパラメータは、ノイズリダクションの強弱の度合を第１基準度合よりも大きくするパラメータに設定される。ノイズリダクションとは、撮像画像に出現するノイズを減少させる画像処理であり、ノイズリダクションの強弱とは、撮像画像に出現するノイズを減少させる割合を増減させることである。第１基準度合いは、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
シャープネスに関するパラメータは、シャープネスの強弱の度合を第２基準度合よりも大きくするパラメータに設定される。シャープネスとは、撮像画像の輪郭の強調のことであり、シャープネスの強弱とは、撮像画像の輪郭を強調する割合を増減させることである。第２基準度合は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
コントラストに関するパラメータは、コントラストの強弱の度合を第３基準度合よりも大きくするパラメータに設定される。コントラストとは、撮像画像の明暗及び／又は色彩の差異のことであり、コントラストの強弱とは、撮像画像の明暗及び／又は色彩の差異を増減させることである。第３基準度合は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
トーンに関するパラメータは、トーンの強弱の度合を第４基準度合よりも大きくするパラメータに設定される。トーンとは、撮像画像の色調のことであり、トーンの強弱とは、撮像画像の色調の多少を増減させることである。第４基準度合は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。

また、温度測定モード用パラメータ２１１Ｂに含まれる第２撮像設定パラメータ２１２Ｂは、一例として、次のように設定される。
投光器１４に関するパラメータは、投光器１４が投光を行わないパラメータに設定される。
シャッタスピードに関するパラメータは、シャッタスピードを基準スピード未満にするパラメータに設定される。基準スピードは、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
絞り３３に関するパラメータは、絞り量を基準量未満にするパラメータに設定される。基準絞り量は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
測光に関するパラメータは、測光をハイライト重点測光方式、中央重点測光方式、又はスポット測光方式で行うパラメータに設定される。
イメージセンサ１５のゲインに関するパラメータは、イメージセンサ１５のゲインを基準ゲイン未満にするパラメータに設定される。基準ゲインは、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
イメージセンサ１５の変換効率に関するパラメータは、イメージセンサ１５の光電変換効率を基準変換効率未満にするパラメータに設定される。基準変換効率は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
ハイダイナミックレンジに関するパラメータは、ハイダイナミックレンジをオフにするパラメータに設定される。ハイダイナミックレンジをオフにするとは、ダイナミックレンジを基準レンジに設定することである。基準レンジは、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
防振制御に関するパラメータは、防振制御をオフにするパラメータに設定される。

また、温度測定モード用パラメータ２１１Ｂに含まれる第２画像処理設定パラメータ２１３Ｂは、一例として、次のように設定される。
ノイズリダクションに関するパラメータは、ノイズリダクションの強弱の度合を第１基準度合以下にするパラメータに設定される。第１基準度合いは、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
シャープネスに関するパラメータは、シャープネスの強弱の度合を第２基準度合以下にするパラメータに設定される。第２基準度合は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
コントラストに関するパラメータは、コントラストの強弱の度合を第３基準度合以下にするパラメータに設定される。第３基準度合は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。
トーンに関するパラメータは、トーンの強弱の度合を第４基準度合以下にするパラメータに設定される。第４基準度合は、固定値であってもよいし、ユーザが入力デバイス７８に入力した指示、及び／又は、各種条件（例えば、被写体の温度及び／又は撮像条件など）に従って変更される可変値であってもよい。

一例として図２３に示すように、ＣＰＵ６１が撮像モードである場合に、撮像制御部１２３は、パラメータ記憶領域２０１に記憶された撮像モード用パラメータ２１１Ａに含まれる第１撮像設定パラメータ２１２Ａに従って撮像に関する撮像設定を行う。
（１）撮像制御部１２３は、投光器１４に関する設定として、投光器１４が投光を行う設定にし、投光制御回路７３に対してオン指令を出力する。
（２）撮像制御部１２３は、シャッタスピードに関する設定として、シャッタスピードを基準スピード以上に設定し、シャッタスピードを調節する。
（３）撮像制御部１２３は、絞り３３に関する設定として、絞り量を基準量以上に設定し、設定した絞り量に対応する絞り指令を絞り駆動回路５３に対して出力する。
（４）撮像制御部１２３は、測光に関する設定として、測光方式をアベレージ測光方式又はマルチパターン測光方式に設定する。
（５）撮像制御部１２３は、イメージセンサ１５のゲインに関する設定として、イメージセンサ１５のゲインを基準ゲイン以上に設定する。
（６）撮像制御部１２３は、イメージセンサ１５の光電変換効率に関する設定として、イメージセンサ１５の光電変換効率を基準光電変換効率以上に設定する。撮像制御部１２３は、設定したゲイン及び光電変換効率に対応する感度指令をイメージセンサドライバ７１に対して出力する。
（７）撮像制御部１２３は、ハイダイナミックレンジに関する設定として、ハイダイナミックレンジをオンに設定する。
（８）撮像制御部１２３は、防振制御に関する設定として、防振制御をオンに設定し、ぶれ補正駆動回路５４に対してぶれ補正指令を出力する。

また、一例として図２３に示すように、ＣＰＵ６１が撮像モードである場合に、表示制御部１２４は、パラメータ記憶領域２０１に記憶された撮像モード用パラメータ２１１Ａに含まれる第１画像処理設定パラメータ２１３Ａに従って画像処理に関する画像処理設定を行う。
（９）表示制御部１２４は、ノイズリダクションに関する設定として、ノイズリダクションの強弱の度合を第１基準度合よりも大きく設定する。
（１０）表示制御部１２４は、シャープネスに関する設定として、シャープネスの強弱の度合を第２基準度合よりも大きく設定する。
（１１）表示制御部１２４は、コントラストに関する設定として、コントラストの強弱の度合を第３基準度合よりも大きく設定する。
（１２）表示制御部１２４は、トーンに関する設定として、トーンの強弱の度合を第４基準度合よりも大きく設定する。

一例として図２４に示すように、ＣＰＵ６１が温度測定モードである場合に、第１撮像制御部１３３及び第２撮像制御部１３５は、パラメータ記憶領域２０１に記憶された温度測定モード用パラメータ２１１Ｂに含まれる第２撮像設定パラメータ２１２Ｂに従って撮像に関する撮像設定を行う。
（１）第１撮像制御部１３３及び第２撮像制御部１３５は、投光器１４に関する設定として、投光器１４が投光を行わない設定にし、投光制御回路７３に対してオフ指令を出力する。
（２）第１撮像制御部１３３及び第２撮像制御部１３５は、シャッタスピードに関する設定として、シャッタスピードを基準スピード未満に設定し、シャッタスピードを調節する。
（３）第１撮像制御部１３３及び第２撮像制御部１３５は、絞り３３に関する設定として、絞り量を基準量未満に設定し、設定した絞り量に対応する絞り指令を絞り駆動回路５３に対して出力する。
（４）第１撮像制御部１３３及び第２撮像制御部１３５は、測光に関する設定として、測光方式をハイライト重点測光方式、中央重点測光方式、又はスポット測光方式に設定する。
（５）第１撮像制御部１３３及び第２撮像制御部１３５は、イメージセンサ１５のゲインに関する設定として、イメージセンサ１５のゲインを基準ゲイン未満に設定する。
（６）第１撮像制御部１３３及び第２撮像制御部１３５は、イメージセンサ１５の光電変換効率に関する設定として、イメージセンサ１５の光電変換効率を基準光電変換効率未満に設定する。第１撮像制御部１３３及び第２撮像制御部１３５は、設定したゲイン及び光電変換効率に対応する感度指令をイメージセンサドライバ７１に対して出力する。
（７）第１撮像制御部１３３及び第２撮像制御部１３５は、ハイダイナミックレンジに関する設定として、ハイダイナミックレンジをオフに設定する。
（８）第１撮像制御部１３３及び第２撮像制御部１３５は、防振制御に関する設定として、防振制御をオフに設定し、ぶれ補正駆動回路５４に対してぶれ補正停止指令を出力する。

また、一例として図２４に示すように、ＣＰＵ６１が温度測定モードである場合に、表示制御部１３７は、パラメータ記憶領域２０１に記憶された温度測定モード用パラメータ２１１Ｂに含まれる第２画像処理設定パラメータ２１３Ｂに従って画像処理に関する画像処理設定を行う。
（９）表示制御部１３７は、ノイズリダクションに関する設定として、ノイズリダクションの強弱の度合を第１基準度合以下に設定する。
（１０）表示制御部１３７は、シャープネスに関する設定として、シャープネスの強弱の度合を第２基準度合以下に設定する。
（１１）表示制御部１３７は、コントラストに関する設定として、コントラストの強弱の度合を第３基準度合以下に設定する。
（１２）表示制御部１３７は、トーンに関する設定として、トーンの強弱の度合を第４基準度合以下に設定する。

第３実施形態において、投光器１４に関する設定、シャッタスピードに関する設定、絞り３３に関する設定、測光に関する設定、イメージセンサ１５の感度に関する設定、ハイダイナミックレンジに関する設定、及び防振制御に関する設定は、本開示の技術に係る「撮像設定」の一例である。また、第１撮像設定パラメータ２１２Ａ及び第２撮像設定パラメータ２１２Ｂは、本開示の技術に係る「撮像設定に関する撮像設定因子」及び「制御因子」の一例である。また、ノイズリダクションに関する設定、シャープネスに関する設定、コントラストに関する設定、及びトーンに関する設定は、本開示の技術に係る「画像処理設定」の一例である。また、第１画像処理設定パラメータ２１３Ａ及び第２画像処理設定パラメータ２１３Ｂは、本開示の技術に係る「画像処理設定に関する画像処理設定因子」及び「制御因子」の一例である。

次に、第３実施形態の作用として、カメラ１の制御方法について説明する。

第３実施形態では、モード切替処理部１１０が実行するモード切替処理、撮像処理部１２０が実行する撮像処理、及び温度測定処理部１３０が実行する温度測定処理は、第１実施形態と同じである。第３実施形態では、パラメータ変更処理部１９０がパラメータ変更処理を実行する点が、第１実施形態と異なる。以下、図２５を参照しながら、第３実施形態に係るパラメータ変更処理部１９０が実行するパラメータ変更処理について説明する。

ステップＳ５１で、モード判定部１１２は、ＣＰＵ６１の動作モードが撮像モードであるのか、又は温度測定モードであるのかを判定する。ステップＳ５１において、撮像モードであると判定された場合、図２５に示す処理は、ステップＳ５２に移行し、温度測定モードであると判定された場合、図２５に示す処理は、ステップＳ５３に移行する。

ステップＳ５２で、モード別パラメータ設定部１９２は、撮像モードに対応する撮像モード用パラメータ２１１Ａを導出し、パラメータ記憶領域２０１にモード別パラメータ２１１として撮像モード用パラメータ２１１Ａを設定する。

ステップＳ５３で、モード別パラメータ設定部１９２は、温度測定モードに対応する温度測定モード用パラメータ２１１Ｂを導出し、パラメータ記憶領域２０１にモード別パラメータ２１１として温度測定モード用パラメータ２１１Ｂを設定する。

第３実施形態に係るカメラ１の制御方法は、本開示の技術に係る「制御方法」の一例である。

次に、第３実施形態の効果について第１実施形態と異なる点を説明する。

第３実施形態では、撮像モードと温度測定モードとで、撮像設定に関する撮像設定パラメータが異なる。つまり、一例として、撮像モードでは、第１撮像設定パラメータ２１２Ａが設定され、温度測定モードでは、第２撮像設定パラメータ２１２Ｂが設定される。したがって、例えば撮像モードと温度測定モードとで撮像設定パラメータが同じである場合に比して、撮像モードでは、例えば撮像画像について良好な画質を得ることができ、温度測定モードでは、例えばＣＰＵ６１の負担を軽減しつつ測定精度を確保することができる。

また、撮像設定は、投光器１４に関する設定を含む。ＣＰＵ６１は、撮像モードでは、投光器１４が投光を行う設定にし、温度測定モードでは、投光器１４が投光を行わない設定にする。したがって、撮像モードでは、例えば投光器１４が投光を行う場合に比して、被写体から放射される光の量を確保することにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、例えば投光器１４が投光を行う場合に比して、被写体から放射される近赤外光に投光器１４による照明光が混在することを抑制することにより、測定精度を確保することができる。

また、撮像設定は、シャッタスピードに関する設定を含む。ＣＰＵ６１は、撮像モードでは、シャッタスピードを基準スピード以上に設定し、温度測定モードでは、シャッタスピードを基準スピード未満に設定する。つまり、ＣＰＵ６１は、撮像モードでのシャッタスピードを温度測定モードでのシャッタスピードよりも長く設定する。これにより、撮像モードでは、イメージセンサ１５に入射する光の量を確保することにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、イメージセンサ１５から出力される第１アナログ画像データ及び第２アナログ画像データにノイズが含まれることを抑制することにより、測定精度を確保することができる。

また、撮像設定は、絞り３３に関する設定を含む。ＣＰＵ６１は、撮像モードでは、絞り量を基準量以上に設定し、温度測定モードでは、絞り量を基準量未満に設定する。つまり、ＣＰＵ６１は、撮像モードでの絞り量を温度測定モードでの絞り量よりも多く設定する。これにより、撮像モードでは、イメージセンサ１５に入射する光の量を確保することにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、イメージセンサ１５から出力される第１アナログ画像データ及び第２アナログ画像データにノイズが含まれることを抑制することにより、測定精度を確保することができる。

また、撮像設定は、測光に関する設定を含む。ＣＰＵ６１は、撮像モードでは、測光方式をアベレージ測光方式又はマルチパターン測光方式に設定し、温度測定モードでは、測光方式をハイライト重点測光方式、中央重点測光方式、又はスポット測光方式に設定する。これにより、撮像モードでは、被写体全体から放射され、イメージセンサ１５に入射する光の量を確保することにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、被写体の最も温度の高い領域から放射され、イメージセンサ１５に入射する光の量が飽和することを抑制することにより、測定精度を確保することができる。

また、撮像設定は、イメージセンサ１５の感度に関する設定を含む。イメージセンサ１５の感度に関するパラメータは、イメージセンサ１５のゲインに関するパラメータ及びイメージセンサ１５の変換効率に関するパラメータを含む。ＣＰＵ６１は、撮像モードでは、イメージセンサ１５のゲインを基準ゲイン以上に設定し、温度測定モードでは、イメージセンサ１５のゲインを基準ゲイン未満に設定する。つまり、ＣＰＵ６１は、撮像モードでのゲインを温度測定モードでのゲインよりも高く設定する。これにより、撮像モードでは、露光に応じたアナログ画像データが得られることにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、イメージセンサ１５から出力される第１アナログ画像データ及び第２アナログ画像データにノイズが含まれること、及び、被写体の最も温度の高い領域から放射された光に対して第１アナログ画像データ及び第２アナログ画像データのピーク値が飽和することを抑制することにより、測定精度を確保することができる。

また、ＣＰＵ６１は、撮像モードでは、イメージセンサ１５の変換効率を基準変換効率以上に設定し、温度測定モードでは、イメージセンサ１５の変換効率を基準変換効率未満に設定する。つまり、ＣＰＵ６１は、撮像モードでの変換効率を温度測定モードでの変換効率よりも高く設定する。これにより、撮像モードでは、露光に応じたアナログ画像データが得られることにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、イメージセンサ１５から出力される第１アナログ画像データ及び第２アナログ画像データにノイズが含まれること、及び、被写体の最も温度の高い領域から放射された光に対して第１アナログ画像データ及び第２アナログ画像データのピーク値が飽和することを抑制することにより、測定精度を確保することができる。

また、撮像設定は、ハイダイナミックレンジに関する設定を含む。ＣＰＵ６１は、撮像モードでは、ハイダイナミックレンジをオンに設定し、温度測定モードでは、ハイダイナミックレンジをオフに設定する。これにより、撮像モードでは、ダイナミックレンジが基準レンジよりも拡がることにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、ダイナミックレンジが基準レンジに設定されることにより、測定精度を確保することができる。

また、撮像設定は、防振制御に関する設定を含む。ＣＰＵ６１は、撮像モードでは、防振制御をオンに設定し、温度測定モードでは、防振制御をオフに設定する。これにより、撮像モードでは、像のぶれが抑制されることにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、像のぶれを抑制するために必要なＣＰＵ６１の演算処理量を低減することにより、ＣＰＵ６１の負担を軽減することができる。

また、第３実施形態では、撮像モードと温度測定モードとで、画像処理設定に関する画像処理設定パラメータが異なる。つまり、一例として、撮像モードでは、第１画像処理設定パラメータ２１３Ａが設定され、温度測定モードでは、第２画像処理設定パラメータ２１３Ｂが設定される。したがって、例えば撮像モードと温度測定モードとで画像処理設定パラメータが同じである場合に比して、撮像モードでは、例えば撮像画像について良好な画質を得ることができ、温度測定モードでは、例えばＣＰＵ６１の負担を軽減することができる。

また、画像処理設定は、ノイズリダクションに関する設定を含む。ＣＰＵ６１は、撮像モードでは、ノイズリダクションの強弱の度合を第１基準度合よりも大きく設定し、温度測定モードでは、ノイズリダクションの強弱の度合を第１基準度合以下に設定する。つまり、ＣＰＵ６１は、撮像モードでのノイズリダクションを温度測定モードでのノイズリダクションよりも強く設定する。これにより、撮像モードでは、撮像画像に含まれるノイズが低減されることにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、ノイズを低減するために必要なＣＰＵ６１の演算処理量を低減することにより、ＣＰＵ６１の負担を軽減することができる。

また、画像処理設定は、シャープネスに関する設定を含む。ＣＰＵ６１は、撮像モードでは、シャープネスの強弱の度合を第２基準度合よりも大きく設定し、温度測定モードでは、シャープネスの強弱の度合を第２基準度合以下に設定する。つまり、ＣＰＵ６１は、撮像モードでのシャープネスを温度測定モードでのシャープネスよりも強く設定する。これにより、撮像モードでは、撮像画像のシャープネスが強まることにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、シャープネスを調節するために必要なＣＰＵ６１の演算処理量を低減することにより、ＣＰＵ６１の負担を軽減することができる。

また、画像処理設定は、コントラストに関する設定を含む。ＣＰＵ６１は、撮像モードでは、コントラストの強弱の度合を第３基準度合よりも大きく設定し、温度測定モードでは、コントラストの強弱の度合を第３基準度合以下に設定する。つまり、ＣＰＵ６１は、撮像モードでのコントラストを温度測定モードでのコントラストよりも強く設定する。これにより、撮像モードでは、撮像画像のコントラストが強まることにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、コントラストを調節するために必要なＣＰＵ６１の演算処理量を低減することにより、ＣＰＵ６１の負担を軽減することができる。

また、画像処理設定は、トーンに関する設定を含む。ＣＰＵ６１は、撮像モードでは、トーンの強弱の度合を第４基準度合よりも大きく設定し、温度測定モードでは、トーンの強弱の度合を第４基準度合以下に設定する。つまり、ＣＰＵ６１は、撮像モードでのトーンを温度測定モードでのトーンよりも強く設定する。これにより、撮像モードでは、撮像画像のコントラストが強まることにより、撮像画像について良好な画質を得ることができる。一方、温度測定モードでは、コントラストを調節するために必要なＣＰＵ６１の演算処理量を低減することにより、ＣＰＵ６１の負担を軽減することができる。

次に、第３実施形態の変形例について説明する。

第３実施形態では、撮像モードと温度測定モードとで、投光器１４に関する設定、シャッタスピードに関する設定、絞り３３に関する設定、測光に関する設定、イメージセンサ１５の感度に関する設定、ハイダイナミックレンジに関する設定、及び防振制御に関する設定が異なるが、撮像モードと温度測定モードとで異ならせる撮像設定の組み合わせは、上記以外でもよい。例えば、ハイダイナミックレンジに関する設定は、撮像モード及び温度測定モードの両方でオンに設定されてもよい。また、防振制御に関する設定は、撮像モード及び温度測定モードの両方でオンに設定されてもよい。

また、撮像モードと温度測定モードとで異ならせる撮像設定は、投光器１４に関する設定、シャッタスピードに関する設定、絞り３３に関する設定、測光に関する設定、イメージセンサ１５の感度に関する設定、ハイダイナミックレンジに関する設定、及び防振制御に関する設定の少なくとも１つの設定を含んでいれば、上記以外でもよい。また、撮像モードと温度測定モードとで異ならせる撮像設定は、投光器１４に関する設定、シャッタスピードに関する設定、絞り３３に関する設定、測光に関する設定、イメージセンサ１５の感度に関する設定、ハイダイナミックレンジに関する設定、及び防振制御に関する設定以外に、カメラ１に関する各種撮像設定を含んでいてもよい。

また、第３実施形態では、撮像モードと温度測定モードとで、ノイズリダクションに関する設定、シャープネスに関する設定、コントラストに関する設定、及びトーンに関する設定が異なるが、撮像モードと温度測定モードとで異ならせる画像処理設定の組み合わせは、上記以外でもよい。

また、撮像モードと温度測定モードとで異ならせる画像処理設定は、ノイズリダクションに関する設定、シャープネスに関する設定、コントラストに関する設定、及びトーンに関する設定の少なくとも１つの設定を含んでいれば、上記以外でもよい。また、撮像モードと温度測定モードとで異ならせる画像処理設定は、ノイズリダクションに関する設定、シャープネスに関する設定、コントラストに関する設定、及びトーンに関する設定以外に、カメラ１に関する各種画像処理設定を含んでいてもよい。

また、第３実施形態では、ＣＰＵ６１は、温度測定モードでは、投光器１４が投光を行わない設定にするが、投光器１４が投光を抑制する設定（つまり投光器１４から投光される光の量を抑制する設定）にしてもよい。

［第４実施形態］
次に、第４実施形態について説明する。

第４実施形態では、第１実施形態に対し、カメラ１の構成が次のように変更されている。以下、第４実施形態について第１実施形態と異なる点を説明する。

一例として図２６に示すように、モード切替処理部１１０は、モード判定部１１２、測定温度取得部２２１、温度測定モード終了判定部２２２、フラグ設定部１１３、投光制御部１１４、及びモード設定部１１５を有する。

モード判定部１１２は、ＣＰＵ６１の動作モードが撮像モードであるのか、又は温度測定モードであるのかを判定する。

測定温度取得部２２１は、モード判定部１１２によってＣＰＵ６１の動作モードが温度測定モードであると判定された場合には、温度測定モードで測定された被写体の温度（以下、測定温度と称する）を取得する。測定温度は、被写体の温度分布の値、被写体の温度分布の値のうちの最高値、被写体の温度分布の値のうちの最頻値、被写体の温度分布の値のうちの中央値、及び被写体の温度分布の平均値のいずれでもよい。

温度測定モード終了判定部２２２は、測定温度取得部２２１で取得された測定温度に基づいて温度測定モードを終了するか否かを判定する。一例として、温度測定モード終了判定部２２２は、測定温度取得部２２１で取得された測定温度に基づく値を導出し、導出した値が閾値以下であるか否かを判定することにより、測定モードを終了するか否かを判定する。測定温度に基づく値は、測定温度から導かれる値であれば何でもよく、例えば、測定温度そのものの値でもよく、また、測定温度に基づいて算出される輻射熱量等の値でもよい。また、測定温度に基づく値の導出には、計算式が用いられてもよく、また、データマッチングテーブルが用いられてもよい。温度測定モード終了判定部２２２は、測定温度に基づく値が閾値以下である場合には、温度測定モードを終了すると判定する。

フラグ設定部１１３は、温度測定モード終了判定部２２２によって温度測定モードを終了すると判定された場合には、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として撮像画像表示フラグ１５１Ａを設定し、かつ、投光制御フラグ記憶領域１４２に投光制御フラグ１５２として投光オン制御フラグ１５２Ａを設定する。

投光制御部１１４は、フラグ設定部１１３によって投光オン制御フラグ１５２Ａが設定された場合に、投光制御回路７３にオン指令を出力する。オン指令は、投光器１４をオンに切り替える指令である。

モード設定部１１５は、ＣＰＵ６１のモードとして撮像モードを設定する。

次に、第４実施形態の作用として、カメラ１の制御方法について説明する。

第４実施形態では、撮像処理部１２０が実行する撮像処理、及び温度測定処理部１３０が実行する温度測定処理は、第１実施形態と同じである。第３実施形態では、モード切替処理部１１０が実行するモード切替処理が、第１実施形態と異なる。以下、図２７を参照しながら、第４実施形態に係るモード切替処理部１１０が実行するモード切替処理について説明する。

ステップＳ６１で、モード判定部１１２は、ＣＰＵ６１のモードが撮像モードであるのか、又は温度測定モードであるのかを判定する。ステップＳ６１において、撮像モードであると判定された場合、図２７に示す処理は、ステップＳ６２に移行し、温度測定モードであると判定された場合、図２７に示す処理は終了する。

ステップＳ６２で、測定温度取得部２２１は、温度測定モードで測定された測定温度を取得する。

ステップＳ６３で、温度測定モード終了判定部２２２は、測定温度取得部２２１で取得された測定温度に基づいて温度測定モードを終了するか否かを判定する。ステップＳ６３において、温度測定モードを終了すると判定された場合、図２７に示す処理は、ステップＳ６４に移行し、温度測定モードを終了しないと判定された場合、図２７に示す処理は終了する。

ステップＳ６４で、フラグ設定部１１３は、表示制御フラグ記憶領域１４１に表示制御フラグ１５１として撮像画像表示フラグ１５１Ａを設定し、かつ、投光制御フラグ記憶領域１４２に投光制御フラグ１５２として投光オン制御フラグ１５２Ａを設定する。

ステップＳ６５で、投光制御部１１４は、投光器１４をオンに切り替える。

ステップＳ６６で、モード設定部１１５は、ＣＰＵ６１のモードとして撮像モードを設定する。

第４実施形態に係るカメラ１の制御方法は、本開示の技術に係る「制御方法」の一例である。

次に、第４実施形態の効果について第１実施形態と異なる点を説明する。

第４実施形態では、ＣＰＵ６１は、温度測定モードにおいて、被写体の温度に応じて温度測定モードから撮像モードに切り替わる。したがって、例えば被写体の温度に応じて温度測定モードから撮像モードに切り替わらない場合に比して、利便性を高めることができる。

［第５実施形態］
次に、第５実施形態について説明する。

第５実施形態では、第１実施形態に対し、カメラ１の構成が次のように変更されている。以下、第５実施形態について第１実施形態と異なる点を説明する。

一例として図２８に示すように、ＣＰＵ６１は、統合表示処理部２３０として機能する。統合表示処理部２３０は、投光器１４をパルス発光させながら、パルス発光の発光期間に撮像モードを設定し、パルス発光の発光停止期間に温度測定モードを設定する動作を、パルス発光の発光タイミングに応じて繰り返す処理部である。投光器１４は、パルス発光を行うことで、断続的な投光を行う。統合表示処理部２３０は、パルス発光制御部２４１、撮像処理部１２０、パルス発光停止制御部２４２、温度測定処理部１３０、及び統合表示制御部２４３を有する。

パルス発光制御部２４１は、投光制御回路７３にパルス発光指令を出力し、投光器１４に対してパルス発光させる制御を行う。

撮像処理部１２０は、波長選択部１２１、ターレット制御部１２２、及び撮像制御部１２３を有する。波長選択部１２１、ターレット制御部１２２、及び撮像制御部１２３の機能は、第１実施形態と同じである。撮像処理部１２０は、イメージセンサ１５に可視光又は近赤外光を撮像させることにより撮像画像を得る撮像処理を実行する。

パルス発光停止制御部２４２は、投光制御回路７３にパルス発光停止指令を出力し、投光器１４に対してパルス発光を停止させる制御を行う。

温度測定処理部１３０は、波長選択部１３１、第１ターレット制御部１３２、第１撮像制御部１３３、第２ターレット制御部１３４、第２撮像制御部１３５、及び温度導出部１３６を有する。波長選択部１３１、第１ターレット制御部１３２、第１撮像制御部１３３、第２ターレット制御部１３４、第２撮像制御部１３５、及び温度導出部１３６の機能は、第１実施形態と同じである。温度測定処理部１３０は、イメージセンサ１５によって近赤外光が撮像されることにより得られた近赤外光画像に基づいて被写体の温度分布を算出し、被写体の温度分布に基づいて温度情報を生成する温度測定処理を実行する。

統合表示制御部２４３は、撮像処理部１２０によって得られた撮像画像と温度測定処理部１３０によって得られた温度情報を統合した統合画像２５１を出力し、統合画像２５１をディスプレイ７６に表示させる。統合画像２５１は、撮像処理部１２０によって得られた撮像画像に、温度測定処理部１３０によって得られた温度情報を合成した画像であってもよく、また、撮像処理部１２０によって得られた撮像画像と、温度測定処理部１３０によって得られた温度情報とを並べて表示する画像でもよい。また、温度情報は、例えば、温度が予め定められた閾値以上である領域を示す情報、温度の具体的な数値を示す情報、予め定められた温度の範囲毎に区画された複数の区画を温度の具体的な数値と併せて示す情報、又は温度に応じた色調で温度分布を示す情報等でもよい。

第５実施形態において、撮像画像は、本開示の技術に係る「撮像画像」及び「第１撮像画像」の一例であり、温度情報は、本開示の技術に係る「温度情報」の一例である。また、統合画像２５１は、本開示の技術に係る「合成画像」の一例である。

次に、第５実施形態の作用として、カメラ１の制御方法について説明する。

第５実施形態では、統合表示処理部２３０が統合表示処理を実行する点が、第１実施形態と異なる。以下、図２９を参照しながら、第５実施形態に係る統合表示処理部２３０が実行する統合表示処理について説明する。

ステップＳ７１で、パルス発光制御部２４１は、投光器１４にパルス発光させる。

ステップＳ７２で、撮像処理部１２０は、イメージセンサ１５に可視光又は近赤外光を撮像させることにより撮像画像を得る。

ステップＳ７３で、パルス発光停止制御部２４２は、投光器１４にパルス発光を停止させる。

ステップＳ７４で、温度測定処理部１３０は、イメージセンサ１５に近赤外光を撮像させることにより得た近赤外光画像に基づいて被写体の温度分布を算出し、被写体の温度分布に基づいて温度情報を生成する

ステップＳ７５で、統合表示制御部２４３は、撮像処理部１２０によって得られた撮像画像と、温度測定処理部１３０によって得られた温度情報とを統合した統合画像２５１を出力し、統合画像２５１をディスプレイ７６に表示させる。

第５実施形態に係るカメラ１の制御方法は、本開示の技術に係る「制御方法」の一例である。

次に、第５実施形態の効果について第１実施形態と異なる点を説明する。

第５実施形態では、投光器１４は、パルス発光を行い、ＣＰＵ６１は、パルス発光の発光期間に撮像モードを設定し、パルス発光の発光停止期間に温度測定モードを設定する動作を、パルス発光の発光タイミングに応じて繰り返す。これにより、撮像モードで得られた撮像画像に、温度測定モードで得られた温度情報を統合した統合画像を得ることができる。

また、ＣＰＵ６１は、撮像処理部１２０によって得られた撮像画像と温度測定処理部１３０によって得られた温度情報を統合した統合画像２５１を出力する。したがって、撮像モードと温度測定モードとに切り替わらなくても、撮像画像に温度情報が統合された統合画像２５１がディスプレイ７６に表示されることにより、ユーザが被写体の状況と温度との関係を視覚的に把握できる。

次に、第１実施形態から第５実施形態に共通の変形例について説明する。

第１実施形態から第５実施形態において、ＣＰＵ６１は、撮像モードと温度測定モードと備えるが、撮像モード及び温度測定モード以外のモードを備えていてもよい。

また、第１実施形態から第５実施形態において、ＣＰＵ６１は、撮像モードと温度測定モードとで、表示制御フラグ１５１及び投光制御フラグ１５２をそれぞれ異ならせるが、表示制御フラグ１５１及び投光制御フラグ１５２以外の制御フラグを異ならせてもよい。

また、第１実施形態から第５実施形態では、表示制御フラグ１５１として、撮像画像１６１Ａをディスプレイ７６に対して表示させる撮像画像表示フラグ１５１Ａ、及び、撮像画像に温度情報を合成させた合成画像１６１Ｂをディスプレイ７６に対して表示させる合成画像表示フラグ１５１Ｂが設定される。しかしながら、撮像画像表示フラグ１５１Ａ及び合成画像表示フラグ１５１Ｂ以外の表示制御フラグ１５１が設定されてもよい。また、温度測定モードでは、合成画像表示フラグ１５１Ｂの代わりに、温度情報をディスプレイ７６に対して表示させる温度情報表示フラグが設定され、ディスプレイ７６に温度情報が表示されてもよい。温度情報表示フラグは、本開示の技術に係る「温度情報表示因子」の一例である。

また、第１実施形態から第５実施形態では、ぶれ補正レンズ３４を移動させることにより像のぶれが補正されるが、例えば、本開示の技術に係る「光学素子」の一例としてイメージセンサ１５を移動させることにより像のぶれが補正されてよい。また、複数の撮像画像に基づく画像処理技術により像のぶれが補正されてもよい。

また、第１実施形態から第５実施形態において、二色温度測定法による温度測定では、９５０ｎｍから１１００ｎｍの波長帯域、１１５０ｎｍから１３５０ｎｍの波長帯域、１５００ｎｍから１７５０ｎｍの波長帯域、及び２００ｎｍから２４００ｎｍの波長帯域から二つの波長帯域が選択されるが、これら以外の波長帯域から二つの波長帯域が選択されてもよい。

また、第１実施形態から第５実施形態において、二色温度測定法による温度測定では、近赤外光が用いられるが、例えば可視光などの近赤外光以外の光が用いられてもよい。

また、第１実施形態から第５実施形態において、カメラ１が撮像装置の一例として挙げられているが、本開示の技術はこれに限定されず、スマートデバイス、ウェアラブル端末、細胞観察装置、眼科観察装置、又は外科顕微鏡等の各種の電子機器に内蔵されるデジタルカメラであってもよい。

また、第１実施形態から第５実施形態において、ＣＰＵ６１の機能的な構成、及びＣＰＵ６１が実行する処理の順序は、一例であり、種々改変されてもよい。

また、第１実施形態から第５実施形態における複数の技術のうち組み合わせ可能な技術は、適宜、組み合わされてもよい。

また、第１実施形態から第５実施形態では、カメラ１内のコンピュータ６０によって撮像支援処理が実行される形態例を挙げて説明したが、本開示の技術はこれに限定されない。例えば、図３０に示すように、ＬＡＮ又はＷＡＮ等のネットワーク３１０を介してカメラ１と通信可能に接続された外部装置３１２内のコンピュータ３１４によって撮像支援処理が実行されるようにしてもよい。図３０に示す例では、コンピュータ３１４は、ＣＰＵ３１６、ストレージ３１８、及びメモリ３２０を備えている。ストレージ３１８には、撮像支援処理プログラム１００が記憶されている。

カメラ１は、ネットワーク３１０を介して外部装置３１２に対して撮像支援処理の実行を要求する。これに応じて、外部装置３１２のＣＰＵ３１６は、ストレージ３１８から撮像支援処理プログラム１００を読み出し、撮像支援処理プログラム１００をメモリ３２０上で実行する。ＣＰＵ３１６は、メモリ３２０上で実行する撮像支援処理プログラム１００に従って撮像支援処理を行う。そして、ＣＰＵ３１６は、撮像支援処理が実行されることで得られた処理結果を、ネットワーク３１０を介してカメラ１に提供する。

また、カメラ１と外部装置３１２とが撮像支援処理を分散して実行するようにしてもよいし、カメラ１と外部装置３１２を含む複数の装置とが撮像支援処理を分散して実行するようにしてもよい。なお、図３０に示す例では、カメラ１及び外部装置３１２が本開示の技術に係る「撮像装置」の一例である。

また、第１実施形態から第５実施形態では、ＮＶＭ６２に撮像支援処理プログラム１００が記憶されている形態例を挙げて説明したが、本開示の技術はこれに限定されない。例えば、図３１に示すように、撮像支援処理プログラム１００が記憶媒体３３０に記憶されていてもよい。記憶媒体３３０は、非一時的記憶媒体である。記憶媒体３３０の一例としては、ＳＳＤ又はＵＳＢメモリなどの任意の可搬型の記憶媒体が挙げられる。

記憶媒体３３０に記憶されている撮像支援処理プログラム１００は、コンピュータ６０にインストールされる。ＣＰＵ６１は、撮像支援処理プログラム１００に従って撮像支援処理を実行する。

また、通信網（図示省略）を介してコンピュータ６０に接続される他のコンピュータ又はサーバ装置等の記憶部に撮像支援処理プログラム１００を記憶させておき、カメラ１の要求に応じて撮像支援処理プログラム１００がダウンロードされ、コンピュータ６０にインストールされるようにしてもよい。

なお、コンピュータ６０に接続される他のコンピュータ又はサーバ装置等の記憶部、又はＮＶＭ６２に撮像支援処理プログラム１００の全てを記憶させておく必要はなく、撮像支援処理プログラム１００の一部を記憶させておいてもよい。

また、図３１に示す例では、カメラ１にコンピュータ６０が内蔵されている態様例が示されているが、本開示の技術はこれに限定されず、例えば、コンピュータ６０がカメラ１の外部に設けられるようにしてもよい。

また、図３１に示す例では、ＣＰＵ６１は、単数のＣＰＵであるが、複数のＣＰＵであってもよい。また、ＣＰＵ６１に代えてＧＰＵを適用してもよい。

また、図３１に示す例では、コンピュータ６０が例示されているが、本開示の技術はこれに限定されず、コンピュータ６０に代えて、ＡＳＩＣ、ＦＰＧＡ、及び／又はＰＬＤを含むデバイスを適用してもよい。また、コンピュータ６０に代えて、ハードウェア構成及びソフトウェア構成の組み合わせを用いてもよい。

第１実施形態から第５実施形態で説明した撮像支援処理を実行するハードウェア資源としては、次に示す各種のプロセッサを用いることができる。プロセッサとしては、例えば、ソフトウェア、すなわち、プログラムを実行することによって、撮像支援処理を実行するハードウェア資源として機能する汎用的なプロセッサであるＣＰＵが挙げられる。また、プロセッサとしては、例えば、ＦＰＧＡ、ＰＬＤ、又はＡＳＩＣなどの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路が挙げられる。何れのプロセッサにもメモリが内蔵又は接続されており、何れのプロセッサもメモリを使用することによって撮像支援処理を実行する。

撮像支援処理を実行するハードウェア資源は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ、又はＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、撮像支援処理を実行するハードウェア資源は１つのプロセッサであってもよい。

１つのプロセッサで構成する例としては、第１に、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが、撮像支援処理を実行するハードウェア資源として機能する形態がある。第２に、ＳｏＣなどに代表されるように、撮像支援処理を実行する複数のハードウェア資源を含むシステム全体の機能を１つのＩＣチップで実現するプロセッサを使用する形態がある。このように、撮像支援処理は、ハードウェア資源として、上記各種のプロセッサの１つ以上を用いて実現される。

更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電気回路を用いることができる。また、上記の撮像支援処理はあくまでも一例である。したがって、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。

以上に示した記載内容及び図示内容は、本開示の技術に係る部分についての詳細な説明であり、本開示の技術の一例に過ぎない。例えば、上記の構成、機能、作用、及び効果に関する説明は、本開示の技術に係る部分の構成、機能、作用、及び効果の一例に関する説明である。よって、本開示の技術の主旨を逸脱しない範囲内において、以上に示した記載内容及び図示内容に対して、不要な部分を削除したり、新たな要素を追加したり、置き換えたりしてもよいことは言うまでもない。また、錯綜を回避し、本開示の技術に係る部分の理解を容易にするために、以上に示した記載内容及び図示内容では、本開示の技術の実施を可能にする上で特に説明を要しない技術常識等に関する説明は省略されている。

本明細書において、「Ａ及び／又はＢ」は、「Ａ及びＢのうちの少なくとも１つ」と同義である。つまり、「Ａ及び／又はＢ」は、Ａだけであってもよいし、Ｂだけであってもよいし、Ａ及びＢの組み合わせであってもよい、という意味である。また、本明細書において、３つ以上の事柄を「及び／又は」で結び付けて表現する場合も、「Ａ及び／又はＢ」と同様の考え方が適用される。

本明細書に記載された全ての文献、特許出願及び技術規格は、個々の文献、特許出願及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。

Claims (15)

1. プロセッサと、
   前記プロセッサに接続又は内蔵されたメモリと、を備え、
   前記プロセッサは、
   被写体から撮像装置のイメージセンサに入射し前記イメージセンサによって受光された光を撮像する第１モードと、前記被写体から前記イメージセンサに入射し前記イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを備え、
   前記被写体に向けて照明光を照射する投光器の状態がオンである場合には、前記第１モードを設定し、前記投光器の状態がオフである場合には、前記第２モードを設定する
   制御装置。
2. 前記第１モードと前記第２モードとで、制御因子が異なる
   請求項１に記載の制御装置。
3. 前記制御因子は、ディスプレイに対して表示させる表示制御因子を含む
   請求項２に記載の制御装置。
4. 前記プロセッサは、
   前記第１モードでは、前記表示制御因子として、前記光が前記イメージセンサによって受光されることで得られた撮像画像を前記ディスプレイに対して表示させる撮像画像表示因子を設定し、
   前記第２モードでは、前記表示制御因子として、前記温度を示す温度情報を前記ディスプレイに対して表示させる温度情報表示因子を設定する
   請求項３に記載の制御装置。
5. 前記制御因子は、投光器を動作させる投光制御因子を含み、
   前記プロセッサは、前記第２モードでは、前記投光制御因子として、前記投光器の投光を抑制させる投光抑制制御因子を設定する
   請求項２から請求項４の何れか一項に記載の制御装置。
6. 前記制御因子は、撮像設定に関する撮像設定因子を含む
   請求項２から請求項４の何れか一項に記載の制御装置。
7. 前記撮像設定は、投光器に関する設定、シャッタスピードに関する設定、絞りに関する設定、測光に関する設定、前記イメージセンサの感度に関する設定、ハイダイナミックレンジに関する設定、及び防振制御に関する設定のうちの少なくとも１つの設定を含む
   請求項６に記載の制御装置。
8. 前記制御因子は、画像処理設定に関する画像処理設定因子を含む
   請求項２から請求項６の何れか一項に記載の制御装置。
9. 前記画像処理設定は、ノイズリダクションに関する設定、シャープネスに関する設定、コントラストに関する設定、及びトーンに関する設定のうちの少なくとも１つの設定を含む
   請求項８に記載の制御装置。
10. 前記プロセッサは、前記第２モードにおいて、前記温度に応じて前記第２モードから前記第１モードに切り替わる
    請求項１から請求項９の何れか一項に記載の制御装置。
11. 前記投光器は、パルス発光を行い、
    前記プロセッサは、前記パルス発光の発光期間に前記第１モードを設定し、前記パルス発光の発光停止期間に前記第２モードを設定する動作を、前記パルス発光の発光タイミングに応じて繰り返す
    請求項１０に記載の制御装置。
12. 前記プロセッサは、前記イメージセンサによって受光されることで得られた第１撮像画像と、前記温度を示す温度情報とを合成した合成画像を出力する
    請求項１から請求項１１の何れか一項に記載の制御装置。
13. 請求項１から請求項１２の何れか一項に記載の制御装置と、
    前記イメージセンサと、
    を備える撮像装置。
14. 被写体から撮像装置のイメージセンサに入射し前記イメージセンサによって受光された光を撮像する第１モードと、前記被写体から前記イメージセンサに入射し前記イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを切り替えること、及び、
    前記被写体に向けて照明光を照射する投光器の動作がオンである場合には、前記第１モードを設定し、前記投光器の動作がオフである場合には、前記第２モードを設定すること
    を含む制御方法。
15. コンピュータに、
    被写体から撮像装置のイメージセンサに入射し前記イメージセンサによって受光された光を撮像する第１モードと、前記被写体から前記イメージセンサに入射し前記イメージセンサによって受光された近赤外光に基づいて温度を導出する第２モードとを切り替えること、及び、
    前記被写体に向けて照明光を照射する投光器の動作がオンである場合には、前記第１モードを設定し、前記投光器の動作がオフである場合には、前記第２モードを設定すること
    を含む処理を実行させるためのプログラム。