WO2006033255A1 - プロジェクタ装置、携帯電話、カメラ - Google Patents

Abstract

　プロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像に基づいて、その投射像の投射面における映り具合を調整するためのキャリブレーション動作をその投射像の投射中に繰り返し実行するキャリブレーション制御装置とを備える。

Description

明 細 書

プロジェクタ装置、携帯電話、カメラ

技術分野

[0001] 本発明は、液晶表示パネルを用いた投射型液晶プロジェクタのように、画像を投射 面に投射してその投射像を生成するプロジェクタ装置であって、携帯電話やカメラに 内蔵されるハンディタイプのプロジェクタ装置などに関する。

背景技術

[0002] 投射型液晶プロジェクタとして、ハロゲンランプやキセノンランプなどの光源を用い たものが従来力も知られている。これは、光源から出力された光を赤 (R)、緑 (G)およ び青 (B)の 3原色光に分離し、それぞれを異なる液晶表示パネルに導!、て透過させ た後に再び合成して、その合成光を投影レンズを介してスクリーンなどの投射面へ投 射するものである。しかし、こうしたランプ光源を用いた投射型液晶プロジェクタでは、 光学系の分離 ·合成が必要であるために装置が大型化してしまうと 、う欠点があった 。そこで、こうした欠点を解決するために、たとえば R、 Gおよび Bの 3種類のレーザ光 を光源として用いたもの（特許文献 1)や、 R、 Gおよび Bの 3種類の LED光を光源とし て用いたもの（特許文献 2)などが知られている。

[0003] 特許文献 1 :特開平 9 326981号公報

特許文献 2：特開 2000— 194275号公報

発明の開示

発明が解決しょうとする課題

[0004] 特許文献 1や 2に開示されるような光源を用いて装置を小型化することにより、手に 持って使用できるハンディタイプの投射型液晶プロジェクタを構築することができる。 しかし、ハンディタイプの投射型液晶プロジェクタはユーザが手に持って使用すること から、従来のような据え置き型の投射型液晶プロジェクタと比べて、その使用方法に おいて異なる点がある。そのため、ユーザにとって使いやすいハンディタイプの投射 型液晶プロジェクタを実現するためには、従来の据え置き型の投射型液晶プロジェク タには無力つた様々な動作を行う必要がある。 課題を解決するための手段

[0005] 本発明によるプロジェクタ装置は、投射像を生成し、その投射像を撮影して投射像 の種々の調節を行う。

本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像を生成 する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装 置により撮影して取得された投射像の撮像画像に基づ ヽて、その投射像の投射面に おける映り具合を調整するためのキャリブレーション動作をその投射像の投射中に繰 り返し実行するキャリブレーション制御装置とを備える。

上記のプロジェクタ装置において、キャリブレーション制御装置は、キヤリブレーショ ン動作を一定周期ごとに繰り返し実行することができる。あるいは、ユーザからの操作 入力を受け付けるための操作入力装置をプロジェクタ装置がさらに備え、キヤリブレ ーシヨン制御装置は、キャリブレーション動作を操作入力装置への操作入力が行わ れるごとに繰り返し実行することもできる。

本発明のプロジェクタ装置において、投射像生成装置は、所定の形状パターンを 含む画像を投射し、キャリブレーション制御装置は、その投射像の撮像画像中に含ま れて 、る所定の形状パターンに基づ 、て、キャリブレーション動作を実行することが できる。

上記のプロジェクタ装置において、投射像生成装置は、所定の形状パターンを含 む画像を所定の短時間だけ投射し、撮像装置は、その画像の投射タイミングに同期 して、投射像を被写体として撮影することが好ましい。

上記のプロジェクタ装置において、キャリブレーション動作の実行頻度を設定する ための設定装置をプロジェクタ装置がさらに備えることとし、キャリブレーション制御装 置は、その設定装置により第 1の実行頻度が設定された場合は、キャリブレーション 動作を投射像の投射中に繰り返し実行し、第 2の実行頻度が設定された場合は、キ ヤリブレーシヨン動作を投射像の投射中に 1回だけ実行し、第 3の実行頻度が設定さ れた場合は、キャリブレーション動作を実行しな 、こととしてもよ!/、。

[0006] または、本発明のプロジェクタ装置は、所定の形状パターンを含む画像を投射面に 投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像 画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像 中に含まれて 、る所定の形状パターンに基づ!、て、投射像のフォーカス状態を調節 するフォーカシング装置とを備える。

あるいは、本発明のプロジェクタ装置は、静止画像および動画像のいずれかを投射 面に投射してその静止画像または動画像の投射像を生成する投射像生成装置と、 撮影した被写体の撮像画像を取得する撮像装置と、投射像生成装置により静止画 像が投射されているときには、撮像装置により撮影して取得された投射像の撮像画 像に基づ 、て、投射像のフォーカス状態を調節するフォーカシング装置とを備える。 上記のプロジェクタ装置において、投射像生成装置は、動画像を投射する場合に は、その動画像に所定の形状パターンを含めて投射し、フォーカシング装置は、投 射像生成装置により所定の形状パターンが含められた動画像が投射されているとき には、その投射像の撮像画像中に含まれている所定の形状パターンに基づいて、投 射像のフォーカス状態を調節することができる。

上記のプロジェクタ装置において、フォーカシング装置は、投射像のフォーカス状 態の調節をその投射像の投射中に繰り返し行うことができる。このとき、投射像のフォ 一カス状態の調節を一定周期ごとに繰り返し行うことが好ましい。あるいは、ユーザか らの操作入力を受け付けるための操作入力装置をプロジェクタ装置がさらに備え、投 射像のフォーカス状態の調節を操作入力装置への操作入力が行われるごとに繰り返 し行うこととしてもよい。

上記のプロジェクタ装置において、投射像生成装置は、所定の形状パターンを含 む画像を所定の短時間だけ投射し、撮像装置は、その画像の投射タイミングに同期 して、投射像を被写体として撮影することが好ましい。

上記のプロジェクタ装置にぉ 、て、投射像のフォーカス状態の調節頻度を設定する ための設定装置をプロジェクタ装置がさらに備えることとし、フォーカシング装置は、 設定装置により第 1の調節頻度が設定された場合は、投射像のフォーカス状態の調 節をその投射像の投射中に繰り返し行い、第 2の調節頻度が設定された場合は、投 射像のフォーカス状態の調節をその投射像の投射中に 1回だけ行い、第 3の調節頻 度が設定された場合は、投射像のフォーカス状態の調節を行わな 、こととしてもよ!/ヽ または、本発明のプロジェクタ装置は、所定の形状パターンを含む画像を投射面に 投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像 画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像 中に含まれている所定の形状パターンに基づいて、投射像の明るさを調節する明る さ調節装置とを備える。

あるいは、本発明のプロジェクタ装置は、光源を有し、その光源力 発せられる光を 用いて画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、 撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影して取得さ れた投射像の撮像画像に基づいて、光源からの発光量を変化させることにより、投射 像の明るさを調節する明るさ調節装置とを備える。

上記のプロジェクタ装置において、明るさ調節装置は、投射像の明るさを所定の基 準値よりも暗くする場合には、光源力もの発光量を低下させて投射像の明るさを調節 し、投射像の明るさを基準値よりも明るくする場合には、画像自体の明るさを変えるこ とにより、投射像の明るさを調節することができる。

上記のプロジェクタ装置において、明るさ調節装置は、投射像の明るさの調節をそ の投射像の投射中に繰り返し行うことができる。このとき、投射像の明るさの調節を一 定周期ごとに繰り返し行うことが好ましい。あるいは、ユーザ力もの操作入力を受け付 けるための操作入力装置をプロジェクタ装置がさらに備え、投射像の明るさの調節を 操作入力装置への操作入力が行われるごとに繰り返し行うこととしてもよい。

上記のプロジェクタ装置において、投射像生成装置は、所定の形状パターンを含 む画像を所定の短時間だけ投射し、撮像装置は、その画像の投射タイミングに同期 して、投射像を被写体として撮影することが好ましい。

上記のプロジェクタ装置において、投射像の明るさの調節頻度を設定するための設 定装置をプロジェクタ装置がさらに備えることとし、明るさ調節装置は、設定装置によ り第 1の調節頻度が設定された場合は、投射像の明るさの調節をその投射像の投射 中に繰り返し行い、第 2の調節頻度が設定された場合は、投射像の明るさの調節を その投射像の投射中に 1回だけ行い、第 3の調節頻度が設定された場合は、投射像 の明るさの調節を行わな 、こととしてもよ!/、。

[0008] または、本発明のプロジェクタ装置は、所定の形状パターンを含む画像を投射面に 投射してその画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像 画像を取得する撮像装置と、撮像装置により撮影して取得された投射像の撮像画像 中に含まれて 、る所定の形状パターンに基づ!、て、投射像の色合!、を調節する色 合い調節装置とを備える。

あるいは、本発明のプロジェクタ装置は、複数の色の光を発光する光源を有し、そ の光源カゝら発せられる各色の光を合成した光を用いて画像を投射面に投射してその 画像の投射像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得す る撮像装置と、撮像装置により撮影して取得された投射像の撮像画像に基づ ヽて、 光源からの発光量をその発光色ごとに変化させることにより、投射像の色合いを調節 する色合!ゝ調節装置とを備える。

上記のプロジェクタ装置において、色合い調節装置は、投射像の色合いの調節を その投射像の投射中に繰り返し行うことができる。このとき、投射像の色合いの調節 を一定周期ごとに繰り返し行うことが好ましい。あるいは、ユーザからの操作入力を受 け付けるための操作入力装置をプロジェクタ装置がさらに備え、投射像の色合いの 調節を操作入力装置への操作入力が行われるごとに繰り返し行うこととしてもよい。 上記のプロジェクタ装置において、投射像生成装置は、所定の形状パターンを含 む画像を所定の短時間だけ投射し、撮像装置は、その画像の投射タイミングに同期 して、投射像を被写体として撮影することが好ましい。

上記のプロジェクタ装置において、投射像の色合いの調節頻度を設定するための 設定装置をプロジェクタ装置がさらに備えることとし、色合い調節装置は、設定装置 により第 1の調節頻度が設定された場合は、投射像の色合いの調節をその投射像の 投射中に繰り返し行い、第 2の調節頻度が設定された場合は、投射像の色合いの調 節をその投射像の投射中に 1回だけ行い、第 3の調節頻度が設定された場合は、投 射像の色合 、の調節を行わな 、こととしてもよ!/、。

[0009] または、本発明のプロジェクタ装置は、投射像の形状を特定するための所定の図形 または記号を含む画像を投射面に投射してその画像の投射像を生成する投射像生 成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮像装置により撮影 して取得された投射像の撮像画像中に含まれて 、る図形または記号に基づ 、て、投 射像生成装置の投射方向と投射面との角度に応じて生じる投射像の台形状の歪み を補正する台形補正装置とを備える。

あるいは、本発明によるプロジェクタ装置は、ヒンジ部を中心に折りたたみ可能な構 造を有し、ヒンジ部を介して連結された第 1の部位と第 2の部位を有する筐体部と、筐 体部の折りたたみ角度を検出する検出装置と、画像を投射面に投射してその画像の 投射像を生成し、その投射方向が第 1の部位に対して固定されている投射像生成装 置と、検出装置によって検出された折りたたみ角度に基づいて、投射像生成装置の 投射方向と投射面との角度に応じて生じる投射像の台形状の歪みを補正する台形 補正装置とを備える。

あるいは、本発明によるプロジェクタ装置は、所定の回転軸を中心として回転可能 な構造を有する第 1の部位と、その第 1の部位に連結された第 2の部位とを有する筐 体部と、所定の基準位置に対する第 1の部位の回転角度を検出する検出装置と、画 像を投射面に投射してその画像の投射像を生成し、その投射方向が第 1の部位に対 して固定されている投射像生成装置と、検出装置によって検出された回転角度に基 づいて、投射像生成装置の投射方向と投射面との角度に応じて生じる投射像の台 形状の歪みを補正する台形補正装置とを備える。

上記のプロジェクタ装置において、台形補正装置は、台形状の歪みの補正を投射 像の投射中に繰り返し行うことができる。このとき、台形状の歪みの補正を一定周期 ごとに繰り返し行うことが好ましい。あるいは、ユーザ力もの操作入力を受け付けるた めの操作入力装置をプロジェクタ装置がさらに備え、台形状の歪みの補正を操作入 力装置への操作入力が行われるごとに繰り返し行うこととしてもよい。

上記のプロジェクタ装置において、投射像生成装置は、図形または記号を含む画 像を所定の短時間だけ投射し、撮像装置は、その画像の投射タイミングに同期して、 投射像を被写体として撮影することが好まし ヽ。

上記のプロジェクタ装置において、台形状の歪みの補正頻度を設定するための設 定装置をプロジェクタ装置がさらに備えることとし、台形補正装置は、設定装置により 第 1の補正頻度が設定された場合は、台形状の歪みの補正を投射像の投射中に繰 り返し行い、第 2の補正頻度が設定された場合は、台形状の歪みの補正を投射像の 投射中に 1回だけ行い、第 3の補正頻度が設定された場合は、台形状の歪みの補正 を行わな 、こととしてもよ 、。

または、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像 を生成する投射焦点位置が可変な投射像生成装置と、撮影した被写体の撮像画像 を取得する撮像焦点位置が可変な撮像装置と、撮像装置により撮影して取得された 投射像の撮像画像に基づいて、その投射像の投射面における映り具合を調整する ためのキャリブレーション動作を実行するキャリブレーション制御装置とを備える。そし て、投射像生成装置は、異なる複数の投射焦点位置において投射像をそれぞれ生 成し、撮像装置は、投射像生成装置により複数の投射焦点位置において生成された 複数の投射像の撮像画像を、プロジェクタ装置に対する距離が複数の投射焦点位 置とそれぞれほぼ等 、複数の撮像焦点位置にぉ 、てそれぞれ取得し、キヤリブレ ーシヨン制御装置は、撮像装置により複数の撮像焦点位置において取得された複数 の投射像の撮像画像に基づ 、て、キャリブレーション動作を実行する。

あるいは、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射 像を生成する投射焦点位置が可変な投射像生成装置と、撮影した被写体の撮像画 像を取得する撮像焦点位置が可変な撮像装置と、撮像装置により撮影して取得され た投射像の撮像画像に基づいて、その投射像の投射面における映り具合を調整す るためのキャリブレーション動作を実行するキャリブレーション制御装置とを備える。そ して、投射像生成装置は、異なる複数の投射焦点位置において投射像をそれぞれ 生成し、撮像装置は、投射像生成装置により複数の投射焦点位置において生成され た複数の投射像の撮像画像を、固定された 1つの撮像焦点位置にお!、てそれぞれ 取得し、キャリブレーション制御装置は、撮像装置により 1つの撮像焦点位置におい て取得された複数の投射像の撮像画像に基づ 、て、キャリブレーション動作を実行 する。

上記のプロジェクタ装置において、撮像装置により 1つの撮像焦点位置において取 得された複数の投射像の撮像画像が所定の条件を満たす場合には、その複数の投 射像の撮像画像に基づ ヽて撮像焦点位置を調節した後、その調節後の撮像焦点位 置において、投射像生成装置による複数の投射像の生成と、撮像装置による複数の 投射像の撮像画像の取得とを再び行うことが好ましい。あるいは、上記のプロジェクタ 装置において、撮像装置は、取得される撮像画像のピントが近くから無限遠まで合つ ているパンフォーカス状態となるように撮像焦点位置を固定し、その撮像焦点位置に ぉ ヽて複数の投射像の撮像画像をそれぞれ取得することとしてもょ 、。

上記のプロジェクタ装置にぉ ヽて、投射像を撮像装置によって撮影する前の撮像 焦点位置の状態を記憶する状態記憶装置をプロジ クタ装置がさらに備え、投射像 生成装置による投射像の生成を止めた後、またはキャリブレーション制御装置による キャリブレーション動作の実行を止めた後に、状態記憶装置により記憶された状態へ と撮像焦点位置を戻すこととしてもょ 、。

[0011] または、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像 を生成する投射像生成装置と、撮影した被写体の撮像画像を取得するズーミング可 能な撮像装置と、撮像装置のズーム位置を制御するズーミング制御装置と、撮像装 置により撮影して取得された投射像の撮像画像に基づ ヽて、その投射像の投射面に おける映り具合を調整するためのキャリブレーション動作を実行するキヤリブレーショ ン制御装置とを備える。そして、投射像を撮像装置により撮影する際、ズーミング制 御装置は、撮像装置における撮影範囲が投射像の投射範囲を少なくとも含むように 予め設定された所定のズーム位置に、撮像装置のズーム位置を制御する。

上記のプロジェクタ装置にぉ 、て、投射像を撮像装置によって撮影する前のズーム 位置の状態を記憶する状態記憶装置をプロジ クタ装置がさらに備え、投射像生成 装置による投射像の生成を止めた後、またはキャリブレーション制御装置によるキヤリ ブレーシヨン動作の実行を止めた後に、状態記憶装置により記憶された状態へとズ ーム位置を戻すことが好まし!/、。

[0012] または、本発明のプロジェクタ装置は、所定の色合い特性で発光する光源を有し、 その光源から発せられる光を用いて画像を投射面に投射してその画像の投射像を 生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、撮 像画像の色合 ヽを調節する色合 ヽ調節装置と、撮像装置により撮影して取得された 投射像の撮像画像に基づいて、その投射像の投射面における映り具合を調整する ためのキャリブレーション動作を実行するキャリブレーション制御装置とを備える。そし て、投射像を撮像装置により撮影する際、色合い調節装置は、光源の色合い特性に 応じて予め定められた所定の色変換法則に基づいて、取得された撮像画像の色合 いを調節する。

上記のプロジェクタ装置にぉ 、て、投射像を撮像装置によって撮影する前の色合 い調節装置における色変換法則の状態を記憶する状態記憶装置をプロジェクタ装 置がさらに備え、投射像を撮像装置によって撮影しない場合には、色合い調節装置 にお ヽて所定の色変換法則とは異なる色変換法則に基づ ヽて撮像画像の色合 、を 調節し、投射像生成装置による投射像の生成を止めた後、またはキャリブレーション 制御装置によるキャリブレーション動作の実行を止めた後に、状態記憶装置により記 憶された状態へと色合 、調節装置における色変換法則の状態を戻すことが好ま 、 または、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射像 を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置と、 撮像装置の撮像方向を変化させるための撮像方向変化機構と、撮像装置により撮影 して取得された投射像の撮像画像に基づ ヽて、その投射像の投射面における映り具 合を調整するためのキャリブレーション動作を実行するキャリブレーション制御装置と 、投射像生成装置の投射方向と撮像装置の撮像方向が同一方向であるか否かを判 定する判定装置と、判定装置により投射方向と撮像方向が同一方向ではないと判定 された場合には警告を発する警告装置とを備える。

あるいは、本発明のプロジェクタ装置は、画像を投射面に投射してその画像の投射 像を生成する投射像生成装置と、撮影した被写体の撮像画像を取得する撮像装置 と、撮像装置の撮像方向を変化させるための撮像方向変化機構と、撮像装置により 撮影して取得された投射像の撮像画像に基づ ヽて、その投射像の投射面における 映り具合を調整するためのキャリブレーション動作を実行するキャリブレーション制御 装置と、投射像生成装置の投射方向と撮像装置の撮像方向が同一方向であるか否 かを判定する判定装置と、判定装置により投射方向と撮像方向が同一方向であると 判定された場合にのみ、投射像生成装置の動作を許可する動作許可装置とを備え る。

[0014] 本発明による携帯電話は、上記の 、ずれかのプロジェクタ装置と、外部の無線通信 設備を介して他の端末との通信を行うための無線通信装置とを備える。また、本発明 によるカメラは、上記の 、ずれかのプロジェクタ装置を備える。

[0015] なお、上記の各装置は、同様の機能を実現するための手段に置き換えることもでき る。すなわち、投射像生成装置を投射手段に置き換えてもよい。また、撮像装置に代 えて撮像手段を用いてもよい。同様に、キャリブレーション制御装置をキヤリブレーシ ヨン制御手段としてもよいし、操作入力装置を操作入力手段としてもよい。設定装置 の代わりに設定手段を使用してもょ 、。

[0016] 上記と同様に、フォーカシング装置に代えてフォーカシング手段としてもよい。明る さ調節装置に代えて明るさ調節手段としてもよい。色合い調節装置に代えて色合い 調節手段としてもよい。台形補正装置に代えて台形補正手段としてもよい。検出装置 に代えて検出手段としてもょ 、。ズーミング制御装置に代えてズーミング制御手段と してもよい。状態記憶装置に代えて状態記憶手段としてもよい。判定装置に代えて判 定手段としてもよい。警告装置に代えて警告手段としてもよい。動作許可装置に代え て動作許可手段としてもよい。無線通信装置に代えて無線通信手段としてもよい。 発明の効果

[0017] 本発明によれば、従来の据え置き型の投射型液晶プロジェクタには無力つた様々 な動作を行うことにより、使 、やす 、ノヽンディタイプの投射型液晶プロジェクタを実現 することができる。

図面の簡単な説明

[0018] [図 1]本発明の一実施形態によるプロジェクタ付き携帯電話機の外観図である。

[図 2]プロジェクタ付き携帯電話機のブロック図である。

[図 3]プロジェクタモジュールの断面図である。

[図 4]投射対象画像にコントラスト算出用画像を重畳した様子を示す図である。

[図 5]コントラスト算出用画像の重畳タイミングを示すタイミングチャートである。

[図 6]投射対象画像に明るさ検出用画像を重畳した様子を示す図である。 圆 7]投射対象画像に形状特定用図形を重畳した様子を示す図である。

[図 8]折りたたみ角度 Θと台形歪みとの関係を示した図である。

[図 9]回転角度 φと台形歪みとの関係を示した図である。

圆 10]同焦点移動方式を用いて撮像画像のピント調節と投射像のフォーカス状態の 調節を同時に行う様子を示した図である。

圆 11]カメラ固定方式を用いて撮像画像のピント調節と投射像のフォーカス状態の調 節を別々に行う様子を示した図である。

圆 12]撮影範囲が投射範囲を含むようにズーム位置を制御するときの様子を示した 図である。

圆 13]本発明の他の実施形態によるプロジェクタ付き携帯電話機の外観図である。 符号の説明

1 ：操作部 2:表示部

3 ：折りたたみヒンジ部 4:メイン液晶表示器

5 ：サブ液晶表示器 6：プロジェクタモジユーノレ

7 ：カメラモジュール 10：プロジェクタ付き携帯電話機

61: ：投影レンズ 62:液晶パネル

63: ： LED光源 64: LED駆動部

65: ：液晶駆動部 66：レンズ駆動部

71: ：撮影レンズ 72:イメージセンサ

73: ：レンズ駆動部 74:カメラ制御 CPU

101: ： CPU 102:メモリ

103: ：近距離通信部 104:メモリカード

105: ：マイク 106：外咅インターフェイス

107: ：電源 108:通信制御部

109: ：アンテナ 110:操作キー群

111: ：スピーカー 112:開閉角度センサ

発明を実施するための最良の形態

第 1の実施の形態 以下、図面を参照して本発明を実施するための第 1の形態について説明する。図 1 は、本発明の一実施の形態による携帯可能なハンディタイプのプロジェクタ付き携帯 電話機 10の外観図である。（a)は正面図、（b)は側面図、（c)は背面図をそれぞれ 表している。図 1において、プロジェクタ付き携帯電話機 10の筐体は操作部 1と表示 部 2によって構成されており、操作部 1と表示部 2は回動可能な折りたたみヒンジ部 3 を介して連結されている。すなわち、プロジェクタ付き携帯電話機 10は折りたたみヒン ジ部 3を回動中心に折りたたみ可能な構造を有している。

[0021] 操作部 1には、ユーザ力もの操作入力を受け付けるための各種の操作キーが配設 されている。この操作キーには、カメラ機能やメール送受信機能、インターネットへの 接続機能などを備えた一般的な携帯電話機と同様のキーが含まれている。たとえば 、通話を開始または終了するための操作キー、電話番号や文字等を入力するための 操作キー、画面操作用のカーソルキー、カメラ撮影モードやメール送受信モード、ィ ンターネットへの接続モードなど各種の動作モードへ移行するための操作キーなど が含まれている。操作部 1にはさらにこうした一般的な携帯電話機と同様の操作キー に加えて、後述するプロジェクタモジュール 6を用いて画像を投射するモード（プロジ ェクタモード)へ移行するための操作キーが配設されている。たとえば、符号 21に示 す操作キーが押されるとプロジェクタモードへ移行し、プロジェクタモジュール 6によつ て後で説明するようにして画像力 Sスクリーンや壁面などの投射面に投射されて、その 画像の投射像が生成される。

[0022] 表示部 2には、正面側にメイン液晶表示器 4が配設され、背面側にサブ液晶表示器 5が配設されている。表示部 2の背面側にはさらに、プロジェクタモジュール 6とカメラ モジュール 7が配設されて!/、る。

[0023] 図 2は、図 1のプロジェクタ付き携帯電話機 10の構成を説明するブロック図である。

図 2において、操作部 1側には CPU101と、メモリ 102と、近距離通信部 103と、マイ ク 105と、外部インターフェイス（IZF) 106と、電源 107と、通信制御部 108と、アン テナ 109と、操作キー群 110と、スピーカー 111と、開閉角度センサ 112とが備えられ 、着脱可能なメモリカード 104が実装されている。

[0024] 表示部 2側にはメイン液晶表示器 4と、サブ液晶表示器 5と、プロジェクタモジユー ル (プロジェクタ部） 6と、カメラモジュール (カメラ部） 7と、スピーカー 201とが備えられ ている。

[0025] CPU101は、制御プログラムに基づいて、プロジェクタ付き携帯電話機 10を構成 する各部力 入力される信号を用いて所定の演算を行うなどして、プロジェクタ付き 携帯電話機 10の各部に対する制御信号を送出することにより、電話機動作、カメラ 動作、プロジェクタ動作をそれぞれ制御する。なお、制御プログラムは CPU101内の 不図示の不揮発性メモリに格納されている。

[0026] メモリ 102は CPU101の作業用エリアとして使用される。近距離通信部 103は、たと えば、赤外線通信回路によって構成され、 CPU101の指令により外部機器との間で データを送受信する。また外部インターフェイス 106は、 CPU101の指令により不図 示のケーブルまたはクレードルを介して外部機器との間でデータを送受信する。近距 離通信部 103または外部インターフェイス 106を用いることにより、各種の映像'音声 データを外部機器力 入力することが可能である。

[0027] メモリカード 104は不揮発性メモリによって構成され、 CPU101の指令により、たと えば、カメラモジュール 7より出力される画像データや、近距離通信部 103または外 部インターフェイス 106を介して外部機器カゝら入力される映像'音声データなどのデ ータの保存および読み出しが可能である。

[0028] マイク 105は、集音した音声を電気信号に変換して CPU101へ送出する。音声信 号は、録音時にはメモリカード 104に記録され、通話時には通信制御部 108へ送ら れる。スピーカー 111は、 CPU101から出力された音声信号による音声を再生する。 操作キー群 110は、前述した各種の操作キーを 1つのブロックにまとめて表したもの であり、押下された操作キーに対応する操作信号を CPU101へ送出する。通信制御 部 108は無線送受信回路を含み、 CPU101の指令により不図示の基地局を介して 他の電話機との間で通信を行う。通信制御部 108は、電話音声の他にもカメラモジュ ール 7で撮影された画像データや、プロジェクタモジュール 6で投射するための画像 データなどを送受信可能に構成されている。アンテナ 109は通信制御部 110の送受 信アンテナである。

[0029] 電源 107は、たとえば、着脱可能な電池パックおよび DCZDC変換回路などで構 成され、携帯電話機 10内の各部に必要な電力を供給する。開閉角度センサ 112は 、折り畳みヒンジ部 3の回動角、すなわちプロジェクタ付き携帯電話機 10の折りたた み角度 Θを検出して、 CPU101へ送出する。

[0030] メイン液晶表示器 4とサブ液晶表示器 5は、 CPU101の指令により画像やテキスト などの情報をそれぞれ表示する。スピーカー 201は、通話時に CPU101から出力さ れた音声信号による音声を再生する。

[0031] プロジェクタモジュール 6は、投影レンズ 61と、液晶ノネル 62と、 LED光源 63と、 L ED駆動部 64と、液晶駆動部 65と、レンズ駆動部 66とを含む。 LED駆動部 64は、 C PU101から出力される LED駆動信号に応じて LED光源 63に電流を供給する。 LE D光源 63は、供給電流に応じた出力で R (赤）、 G (緑)および B (青）の 3原色光をそ れぞれ照射して液晶パネル 62を照明する。これら各色の光が合成されることにより、 LED光源 63から白色光が照射される。なお、 RGB各色の光の強度は、 LED駆動部 64からの電流強度によってそれぞれ個別に調節することができる。

[0032] 液晶駆動部 65は、画像データに応じて液晶パネル駆動信号を生成し、生成した駆 動信号で液晶パネル 62を駆動することにより、液晶パネル 62上に画像を表示する。 具体的には、液晶層に対して画像信号に応じた電圧を画素ごとに印加する。電圧が 印加された液晶層は液晶分子の配列が変わり、当該液晶層の光の透過率が変化す る。この透過率の変化によって画像が表される。なお、液晶パネル 62はカラーフィル タを有しており、各画素が RGBいずれかの色に対応している。これにより、液晶パネ ル 62には RGB各色の画素を組み合わせたカラー画像が表示される。

[0033] 液晶パネル 62に表示する画像は、メモリカード 104に保存されている画像や、外部 機器力 入力された画像、後述するようにしてカメラモジュール 7によって撮像された 画像など、様々な画像の中から選択することができる。メイン液晶表示器 4やサブ液 晶表示器 5に表示されて ヽる画像と同じものであってもよ!/、し、動画像であってもよ ヽ 。また、メール文章などを選択して表示するようにしてもよい。

[0034] 以上説明したように選択された画像を液晶パネル 62に表示した後、 LED光源 63 力 照射された RGB各色の光を合成した白色光を通過させることにより、液晶パネル 62に表示された画像の光像が生成される。レンズ駆動部 66は、 CPU101から出力 される制御信号に基づいて、投影レンズ 61を光軸方向に進退駆動する。こうして投 影レンズ 61の焦点位置を変化させることにより、後述する投射像のフォーカス状態の 調節が行われる。投影レンズ 61は、液晶パネル 62から射出される光像をスクリーン などの投射面へ向けて投射する。このようにして、 RGB各色の光を合成した白色光を 用いて、選択された画像を投射面に投射して、その画像の投射像を生成する。

[0035] カメラモジュール 7は、撮景レンズ 71と、イメージセンサ 72と、レンズ駆動部 73と、力 メラ制御 CPU74とを含む。イメージセンサ 72としては CCDや CMOS撮像素子など が用いられる。カメラ制御 CPU74は、 CPU101の指令によりイメージセンサ 72およ びレンズ駆動部 73を駆動制御する。レンズ駆動部 73は、カメラ制御 CPU74からの 制御信号に応じて、撮影レンズ 71を構成する焦点調節レンズ (不図示)を光軸に沿 つて前後方向へ駆動することにより、撮影レンズ 71の焦点位置を変化させる。これに より、被写体像のピント調節が行われる。

[0036] 撮影レンズ 71は、イメージセンサ 72の撮像面上に被写体像を結像させる。カメラ制 御 CPU74はイメージセンサ 72に撮像を開始させ、撮像終了後にイメージセンサ 72 力 蓄積電荷信号を読み出し、所定の信号処理を施した上で画像データとして CPU 101へ送出する。なお、カメラモジュール 7で撮影した画像データを送信する場合に は CPU101から通信制御部 108へ画像データが送出される。また、撮影画像を投射 する場合にはカメラ制御 CPU74から CPU101を経由してプロジェクタモジュール 6 へ画像データが送出される。このようにして、カメラモジュール 7において撮影した被 写体の撮像画像を取得する。

[0037] 図 3はプロジェクタモジュール 6の断面図である。（a)は携帯電話機 10の側面図中 にプロジェクタモジュール 6の断面図を示したものであり、 (b)はその拡大図である。 図 2のレンズ駆動部 73は、レンズ支持部 731と駆動モータ 732を有している。レンズ 支持部 731は、投影レンズ 61の上下に配設されて投影レンズ 61を支持している。駆 動モータ 732は、その駆動動作によってレンズ支持部 731の位置を図の左右方向に 移動することにより、液晶パネル 62および LED光源 63と投影レンズ 61との間隔を調 節することができる。これにより、投射像のフォーカス状態を調節することができる。な お、図 2の LED駆動部 64と液晶駆動部 65については、図 3において図示を省略し ている。

[0038] 次に、プロジェクタ付き携帯電話機 10において画像を投射するときの動作内容に ついて説明する。プロジェクタ付き携帯電話機 10は、プロジェクタモジュール 6によつ て生成される投射像の投射面における映り具合を調整するための動作 (以下、キヤリ ブレーシヨン動作という）を、その投射像の投射中に繰り返し実行する。このキヤリブレ ーシヨン動作は、（1)フォーカス状態の調節、（2)明るさの調節、（3)ホワイトバランス の調節、および (4)台形歪みの補正 の各動作に分類される。以下、これらの各動作 について順に説明する。

[0039] (1)フォーカス状態の調節

プロジェクタモジュール 6にお 、て投射像のフォーカス状態が適切でな 、場合、す なわち投射面までの距離に対して投射像の焦点が正しく合って 、な 、場合には、ピ ントがずれてボケた投射像が映し出されてしまう。ピントが合った投射像を映すために は、適切なフォーカス状態に調節する必要がある。この投射像のフォーカス状態の調 節は、カメラモジュール 7により撮影して取得された投射像の撮像画像に基づ ヽて、 次のようにして行われる。

[0040] プロジェクタ付き携帯電話機 10は、プロジェクタモジュール 6によって画像を投射し ている間、カメラモジュール 7を用いてその投射像を撮像する。カメラモジュール 7に おいて取得された投射像の撮像画像は、 CPU101〖こ出力される。 CPU101は、カメ ラモジュール 7から出力された撮像画像のボケ具合を検出することにより、投射像の フォーカス状態が適切であるか否かを判断する。撮像画像がボケて 、る場合はフォ 一カス状態が適切でな 、と判断し、レンズ駆動部 66を用いて投影レンズ 61を駆動さ せる。このようにして、撮像画像がボケなくなるまで投影レンズ 61を駆動させることに より、投射像のフォーカス状態を調節して適切なフォーカス状態となるようにする。

[0041] 上記のフォーカス状態の調節は、デジタルカメラにおいて焦点位置を調節する際に 広く用いられているコントラスト検出方式と同様の方法によって行うことができる。すな わち、投影レンズ 61の焦点位置を様々に変化させて撮像画像を取得し、その撮像画 像のそれぞれについてコントラスト量を算出する。そして、各撮像画像のコントラスト 量を比較し、投影レンズ 61の焦点位置をコントラスト量が最大である撮像画像が取得 されたときの位置に合わせる。これにより、投射像のフォーカス状態を適切に調節す ることができる。なお、このときカメラモジュール 7において撮影画像のピント調節ゃホ ワイトバランス調節を行う必要がある力 この点については後で説明する。

[0042] しかし、投射像のフォーカス状態の調節中にその投射像自体が変化すると、それに よって撮像画像のコントラスト量が変化してしまうため、適切な調節結果が得られなく なる。特に動画を投射している場合は投射像が常に変化しているため、投射像のフ オーカス状態を調節することができない。そこでプロジェクタ付き携帯電話機 10にお いては、投射対象として選択された画像に、コントラスト量を算出するための所定の画 像 (以下、コントラスト算出用画像という）を重畳した後、それをプロジェクタモジュール 6により投射して投射像をカメラモジュール 7により撮像する。このようにすると、元の 投射対象画像が変化しても、重畳されたコントラスト算出用画像の部分は変化しない 。したがって、コントラスト算出用画像についてコントラスト量を算出し、そのコントラスト 量に基づいて投射像のフォーカス状態を調節することで、動画を投射中であっても 投射像のフォーカス状態を適切に調節することができる。

[0043] 図 4は、投射対象画像にコントラスト算出用画像を重畳した様子を示す図である。 ( a)は元の投射対象画像を示し、 (b)は（a)の投射対象画像にコントラスト算出用画像 を重畳した画像を示している。 （b)の画像では、下端部にファイル名と日付情報にカロ えて、符号 21に示すコントラスト算出用画像が重畳されている。このコントラスト算出 用画像 21は、コントラスト量が算出しやすいように縦ラインを複数連ねた所定の形状 パターンを有して 、る。このような所定の形状パターンによって形成されるコントラスト 算出用画像 21を含む画像が、プロジェクタモジュール 6によって投射面に投射され、 その投射像がカメラモジュール 7によって撮像される。こうして取得された撮像画像を 用いて、コントラスト算出用画像 21に基づいてコントラスト量が算出され、投射像のフ オーカス状態の調節が行われる。なお、ここで示したコントラスト算出用画像 21の形 状パターンは一例であって、コントラスト量が算出できるものであればどのような形状 パターンでもよ 、ことは言うまでもな!/、。

[0044] なお、上記のようなコントラスト量の演算には、カメラモジュール 7のイメージセンサ 7 2より画素単位で出力される撮像信号 (蓄積電荷信号)のうち、コントラスト算出用画 像 21と対応する領域の画素より出力される撮像信号のみが用いられる。

[0045] ここで、以上説明したようなコントラスト算出用画像の重畳は必ずしも常時行う必要 はなぐ所定の短時間だけ行うようにしてもよい。このようにすると、投射像を見ている 者に対してコントラスト算出用画像を重畳していることを気づかれにくくすることができ る。図 5は、その様子を説明するためのタイミングチャートである。液晶パネル 62に表 示する画像は、符号 31に示すタイミングで 1Z30秒ごとに更新する。すなわち、 1秒 間に 30フレームの画像表示を行う。

[0046] コントラスト算出用画像の重畳は、符号 32に示すタイミングで一定のフレーム間隔 ごとに行う。このタイミングでコントラスト算出用画像を含む画像が投射され、その他の タイミングではコントラスト算出用画像を含まない画像が投射される。さらにこのとき、 カメラモジュール 7による撮像画像の取得を符号 33に示すタイミングで行う。すなわ ち、コントラスト算出用画像を含む画像が投射されるタイミングに同期して、カメラモジ ユール 7にお ヽて投射像を撮像する。こうして撮像された撮像画像におけるコントラス ト算出用画像の部分の形状パターンに基づいて、符号 34に示すタイミングでコントラ スト量の計算および投射像のフォーカス状態の調節が行われる。

[0047] さらに、投射像のフォーカス状態の調節は、以上説明したように一定周期ごとに繰り 返し行うようにしてもよい。または、プロジェクタ付き携帯電話機 10に対して操作キー への入力操作が行われるごとに繰り返し行うようにしてもよい。操作キーへの入力操 作が行われると、それによつてプロジェクタ付き携帯電話機 10の位置や向きが変化し て投射像がぶれる場合がある。したがって、操作キーへの入力操作が行われるごと に投射像のフォーカス状態の調節を行うようにすると、投射像がぶれてしまった場合 でもそれを補正して見やす 、投射像とすることができる。

[0048] あるいは、フォーカス状態の調節頻度を設定できるようにしてもょ 、。たとえば、 3種 類の調節頻度を設定できるようにして、最も高い調節頻度が設定された場合は、上記 のように投射像の投射中にフォーカス状態の調節を繰り返し行う。一方、中間の調節 頻度が設定された場合は、最初の 1回だけ投射像の投射中にフォーカス状態の調節 を行い、最も低い調節頻度が設定された場合は、投射像のフォーカス状態の調節を 行わないようにする。このようにすると、投射像のフォーカス状態の調節が不要である 場合において電力消費を抑えることができる。なお、調節頻度の設定は操作キーの 入力操作などによって行うようにすることができる。

[0049] 上記の説明では、コントラスト算出用画像を重畳することにより、動画を投射中であ つても投射像のフォーカス状態を調節することとしていた。しかし、投射されている画 像が静止画であれば、その静止画に基づいてコントラスト量を算出し、投射像のフォ 一カス状態を適切に調節することができる。したがって、コントラスト算出用画像の重 畳は行わず、静止画を投射して ヽるときのみ投射像のフォーカス状態を調節するよう にしてもよい。さらに、動画を投射中の場合にはコントラスト算出用画像を重畳し、静 止画を投射中の場合にはコントラスト算出用画像を重畳しないようにして、コントラスト 算出用画像または静止画のいずれかに基づいてコントラスト量を算出し、投射像のフ オーカス状態を調節するようにしてもょ 、。

[0050] (2)明るさの調節

次に、明るさの調節について説明する。プロジェクタモジュール 6において適切な明 るさで投射が行われないと、投射像が暗すぎたり明るすぎたりして見えづらくなつてし まうため、投射像の明るさを適切に調節する必要がある。この投射像の明るさの調節 は、前述したフォーカス状態の調節と同様に、カメラモジュール 7によって撮影して取 得された投射像の撮像画像に基づ 、て行われる。

[0051] プロジェクタ付き携帯電話機 10は、カメラモジュール 7から出力された撮像画像の 明るさを CPU101において検出することにより、投射像の明るさが適切であるか否か を判断する。撮像画像が全体的に暗すぎたり明るすぎる場合は、投射像の明るさが 適切でな!、と判断し、 LED駆動部 64から LED光源 63への供給電流を増加または 減少させる。 LED駆動部 64からの供給電流量に応じて LED光源 63の発光強度が 変化し、投射像の明るさが変わる。このようにして、投射像の明るさが適切となるように 調節する。

[0052] なお、 LED光源 63が PWM点灯を行って 、る場合には、そのデューティ比を変え ることで投射像の明るさを調節するようにしてもよい。すなわち、 LED光源がパルス状 に発光する光源である場合は、そのノ ルス幅を広げることにより投射像を明るくし、逆 にパルス幅を狭めることにより投射像を暗くすることができる。さらに、 LED光源 63が RGB各色の光を複数組発光し、各組ごとに点灯のオンオフを個別に制御できるよう な場合には、その点灯組数を変えることで投射像の明るさを調節することもできる。以 上説明したような方法により、 LED光源 63の発光量を変化させて投射像の明るさを 調節することができる。

[0053] プロジェクタ付き携帯電話機 10は、上記のようにして撮像画像に基づいて投射像 の明るさを調節する場合、投射対象として選択された画像に、明るさを検出するため の所定の画像 (以下、明るさ検出用画像という）を重畳した後、それをプロジェクタモ ジュール 6により投射してその投射像をカメラモジュール 7により撮像する。このように すると、元の投射対象画像が変化しても、重畳された明るさ検出用画像の部分の明 るさに基づいて、投射像の明るさを適切に調節することができる。

[0054] 図 6は、投射対象画像に明るさ検出用画像を重畳した様子を示す図である。（a)は 元の投射対象画像を示し、 (b)は（a)の投射対象画像に明るさ検出用画像を重畳し た画像を示している。（b)の画像では、図 4 (b)のコントラスト算出用画像が重畳され た画像と同様に、下端部にファイル名と日付情報に加えて、符号 22に示す明るさ検 出用画像が重畳されている。この明るさ検出用画像 22は、明るさを検出しやすいよう に全体が無色（白色)である所定の形状パターンを有している。このような所定の形 状パターンによって形成される明るさ検出用画像 22を含む画像力 プロジェクタモジ ユール 6によって投射面に投射され、その投射像がカメラモジュール 7によって撮像さ れる。こうして取得された撮像画像を用いて、明るさ検出用画像 22に基づいて明るさ が検出され、投射像の明るさの調節が行われる。なお、ここで示した明るさ検出用画 像 22の形状パターンは一例であって、明るさが検出できるものであればどのような形 状パターンでもよ 、ことは言うまでもな 、。

[0055] なお、上記のような明るさの検出には、カメラモジュール 7のイメージセンサ 72より画 素単位で出力される撮像信号 (蓄積電荷信号)のうち、明るさ検出用画像 22と対応 する領域の画素より出力される撮像信号のみが用いられる。

[0056] 以上説明したような明るさ検出用画像の重畳を、前述したコントラスト算出用画像と 同様に所定の短時間だけ行うようにしてもよい。その場合には、明るさ検出用画像を 含む画像が投射されるタイミングに同期して、カメラモジュール 7において投射像を撮 像する。

[0057] また、前述したフォーカス状態の調節と同様に、この投射像の明るさの調節につい ても、一定周期ごとに繰り返し行うようにしてもよいし、またはプロジェクタ付き携帯電 話機 10に対して操作キーへの入力操作が行われるごとに繰り返し行うようにしてもよ い。操作キーへの入力操作が行われと、それによつてプロジェクタ付き携帯電話機 1 0の位置や向きが変化して投射面との距離が変化し、投射像の明るさが変化してしま う場合がある。したがって、操作キーへの入力操作が行われるごとに投射像の明るさ の調節を行うようにすると、その入力操作によって投射像の明るさが変化してしまった 場合でも、明るさを補正して見やす ヽ投射像とすることができる。

[0058] あるいは、フォーカス状態の調節と同様に、操作キーの入力操作によって明るさの 調節頻度を 3種類の中から設定できるようにしてもよい。すなわち、最も高い調節頻 度が設定された場合は、投射像の投射中に明るさの調節を繰り返し行い、中間の調 節頻度が設定された場合は、最初の 1回だけ投射像の投射中に明るさの調節を行い 、最も低い調節頻度が設定された場合は、投射像の明るさの調節を行わないように する。このようにすると、投射像の明るさの調節が不要である場合において電力消費 を抑えることができる。

[0059] 上記の説明では、 LED光源 63の発光量を変化させて投射像の明るさを調節する こととしていた。しかし、発光量を上げることは電力消費量や発熱量の増加につなが るため、できるだけ発光量を抑えることが望ましい。したがって、投射像の明るさに対 して所定の基準値を予め設定しておき、その基準値よりも暗くするときにだけ発光量 を低下させて投射像の明るさを調節するようにしてもよい。その場合、基準値よりも明 るくする際には、液晶パネル 62に表示する投射対象画像自体の明るさを変えること によって投射像の明るさを調節する。このときの色合いの変化には、 LUT(Look U p Table)処理やガンマ補正処理と呼ばれる方法などを用いることができる。 LUT処 理では、テーブルィ匕された対応関係に従って、画像データにおける各画素の色情報 値を補正する。ガンマ補正処理では、ガンマカーブと呼ばれる変換曲線に従って、 画像データにおける各画素の色情報値を補正する。なお、これ以外の方法を用いて 投射対象画像の明るさを変化させるようにしてもよい。 [0060] (3)ホワイトバランスの調節

次に、ホワイトバランスの調節について説明する。プロジェクタモジュール 6におい て投射像の色合 、を調節して 、な 、と、周囲の配光状況や投射面の色合 、によって は、投射像の見た目が本来の色合いとは異なるものとなってしまう場合がある。したが つて、投射像が本来の色合 、で見えるようにホワイトバランス調節を行う必要がある。 この投射像のホワイトバランスの調節は、前述したフォーカス状態の調節や明るさの 調節と同様に、カメラモジュール 7によって撮影して取得された投射像の撮像画像に 基づいて行われる。

[0061] プロジェクタ付き携帯電話機 10は、カメラモジュール 7から出力された撮像画像の 色合 、を CPU101にお 、て検出することにより、投射像のホワイトバランスが適切で ある力否かを判断する。検出した色合いが本来の色合いと異なる場合は、 LED駆動 部 64から LED光源 63への供給電流を RGB各色ごとに増加または減少させる。 LE D駆動部 64からの供給電流量に応じて、 LED光源 63において RGB各色の発光強 度がそれぞれ変化し、投射像の色合いが変わる。このようにして色合いを調節するこ とにより、投射像のホワイトバランスが適切となるように調節する。

[0062] なお、前述した明るさ調節の場合と同様に、 LED光源 63が PWM点灯を行ってい る場合には、 RGB各色ごとにデューティ比を変えることで投射像の色合いを調節す るよう〖こしてもよい。すなわち、 LED光源が RGB各色ごとにパルス状に発光する光源 である場合は、パルス幅を広げることによってその発光色の色合いを強くし、逆にパ ルス幅を狭めることによってその発光色の色合いを弱くすることができる。さらに、 LE D光源 63が RGB各色の光を複数組発光するような場合には、その点灯数を色によ つて変えることで投射像の色合いを調節することもできる。以上説明したような方法に より、 LED光源 63の発光量をその発光色ごとに変化させて投射像の色合いを調節し 、投射像のホワイトバランスの調節を行うことができる。

[0063] プロジェクタ付き携帯電話機 10は、上記のようにして撮像画像に基づいて投射像 のホワイトバランスを調節する場合、投射対象として選択された画像に、色合いを検 出するための所定の画像 (以下、色合い検出用画像という）を重畳した後、それをプ ロジェクタモジュール 6により投射して投射像をカメラモジュール 7により撮像する。こ のようにすると、元の投射対象画像が変化しても、重畳された色合い検出用画像の 部分の色合 、に基づ 、て、投射像のホワイトバランスを適切に調節することができる

[0064] 上記の色合い検出用画像は、図 6 (b)に示す明るさ検出用画像 22と兼用すること ができる。色合い検出用画像（明るさ検出用画像） 22は、全体が白色である所定の 形状パターンを有している。したがって、カメラモジュール 7によって取得された撮像 画像において、色合い検出用画像（明るさ検出用画像) 22に基づいて色合いを検出 し、その色合いを本来の白色と比較することで、ホワイトバランス調節を行うことができ る。なお、これ以外にもホワイトバランス調節を行うことができるようなものであればどの ような形状パターンでもよいことは言うまでもない。投射像のフォーカス状態の調節に 用いたコントラスト算出用画像のうち白色の部分を、色合い検出用画像や明るさ検出 用画像として用いるようにしてもょ 、。

[0065] なお、上記のような色合いの検出には、カメラモジュール 7のイメージセンサ 72より 画素単位で出力される撮像信号 (蓄積電荷信号)のうち、色合い検出用画像 22と対 応する領域の画素より出力される撮像信号のみが用いられる。

[0066] 以上説明したような色合い検出用画像の重畳を、前述したコントラスト算出用画像 や明るさ検出用画像と同様に、所定の短時間だけ行うようにしてもよい。その場合に は、色合い検出用画像を含む画像が投射されるタイミングに同期して、カメラモジュ ール 7にお 、て投射像を撮像する。

[0067] また、前述したフォーカス状態の調節や明るさの調節と同様に、このホワイトバラン スの調節についても、一定周期ごとに繰り返し行うようにしてもよいし、またはプロジェ クタ付き携帯電話機 10に対して操作キーへの入力操作が行われるごとに繰り返し行 うようにしてもよい。操作キーへの入力操作が行われと、それによつてプロジェクタ付 き携帯電話機 10の位置や向きが変化して、投射像の位置が変わる場合がある。この とき、投射像の位置が変わったことで周囲の配光状況や投射面の色合いが変化し、 その結果、投射像の見た目の色あいが変化してしまう場合がある。したがって、操作 キーへの入力操作が行われるごとに投射像のホワイトバランスの調節を行うようにす ると、その入力操作によって投射像の見た目の色合いが変化してしまった場合でも、 色合 、を補正して見やす 、投射像とすることができる。

[0068] あるいは、フォーカス状態の調節や明るさの調節と同様に、操作キーの入力操作に よってホワイトバランスの調節頻度を 3種類の中力も設定できるようにしてもよ 、。すな わち、最も高い調節頻度が設定された場合は、投射像の投射中にホワイトバランスの 調節を繰り返し行い、中間の調節頻度が設定された場合は、最初の 1回だけ投射像 の投射中にホワイトバランスの調節を行 、、最も低 、調節頻度が設定された場合は、 投射像のホワイトバランスの調節を行わないようにする。このよう〖こすると、投射像のホ ワイトバランスの調節が不要である場合において電力消費を抑えることができる。

[0069] 上記の説明では、投射像の色合いを調節する例としてホワイトバランスの調節につ V、て説明して 、たが、白以外の色を基準として色合 、を調節する場合に適用しても よい。

[0070] (4)台形歪みの補正

最後に、台形歪みの補正について説明する。台形歪みとは、プロジェクタモジユー ル 6による投射方向と投射面との角度に応じて生じる投射像の台形状の歪みのことを いう。投射方向が投射面に正対していない場合には、こうした台形歪みが生じること が知られている。この台形歪みの補正は、前述した各種の調節と同様に、カメラモジ ユール 7によって撮影して取得された投射像の撮像画像に基づいて行われる。

[0071] プロジェクタ付き携帯電話機 10は、カメラモジュール 7から出力された撮像画像の 形状を CPU101において検出することにより、投射像に台形歪みが生じている力否 かを判断する。台形歪みが生じている場合は、液晶駆動部 65を制御して、その台形 歪みとは逆の方向に液晶パネル 62上に表示する画像を歪ませ、台形歪みを打ち消 すようにする。この画像を投射することにより、台形歪みを補正する。

[0072] プロジェクタ付き携帯電話機 10は、上記のようにして撮像画像に基づいて台形歪 みを補正する場合、投射対象として選択された画像に、投射像の形状を特定するた めの所定の図形 (以下、形状特定用図形という）を重畳した後、それをプロジェクタモ ジュール 6により投射して投射像をカメラモジュール 7により撮像する。このようにする と、どのような内容の投射対象画像であっても、重畳された形状特定用図形に基づい て台形歪みを補正することができる。 [0073] 図 7は、投射対象画像に形状特定用図形を重畳した様子を示す図である。（a)は 元の投射対象画像を示し、 (b)は (a)の投射対象画像に形状特定用図形を重畳した 画像を示して!/、る。 (b)の画像では、投射対象画像の周囲に太枠状の形状特定用図 形 23が重畳されている。このような形状特定用図形 23を含む画像力 プロジェクタモ ジュール 6によって投射面に投射され、その投射像がカメラモジュール 7によって撮 像される。こうして取得された撮像画像を用いて、形状特定用図形 23に基づいて投 射像の形状が特定され、台形歪みの補正が行われる。なお、ここで示した形状特定 用図形 23は一例であって、投射像の形状を特定できるものであればどのような図形 でもよいことは言うまでもない。あるいは、図形ではなく記号や文字などを用いてもよ い。

[0074] 以上説明したような形状特定用図形の重畳を、前述したコントラスト算出用画像や 明るさ検出用画像、色合い検出用画像と同様に、所定の短時間だけ行うようにしても よい。その場合には、形状特定用図形を含む画像が投射されるタイミングに同期して 、カメラモジュール 7において投射像を撮像する。

[0075] また、前述した各種の調節と同様に、この台形歪みの補正についても、一定周期ご とに繰り返し行うようにしてもよいし、またはプロジェクタ付き携帯電話機 10に対して 操作キーへの入力操作が行われるごとに繰り返し行うようにしてもよい。操作キーへ の入力操作が行われと、それによつてプロジェクタ付き携帯電話機 10の位置や向き が変化して、投射像の投射方向と投射面との角度が変わり、その結果、台形歪みの 形状が変化してしまう場合がある。したがって、操作キーへの入力操作が行われるご とに台形歪みの補正を行うようにすると、その入力操作によって台形歪みの形状が変 化してしまった場合でも、台形歪みを補正して見やす!/ヽ投射像とすることができる。

[0076] あるいは、前述の各種の調節と同様に、操作キーの入力操作によって台形歪みの 補正頻度を 3種類の中から設定できるようにしてもよい。すなわち、最も高い補正頻 度が設定された場合は、投射像の投射中に台形歪みの補正を繰り返し行い、中間の 補正頻度が設定された場合は、最初の 1回だけ投射像の投射中に台形歪みの補正 を行い、最も低い補正頻度が設定された場合は、台形歪みの補正を行わないよう〖こ する。このようにすると、台形歪みの補正が不要である場合において電力消費を抑え ることがでさる。

[0077] 上記の説明では、形状特定用図形を重畳した画像を撮像し、その形状特定用図形 に基づいて投射像の形状を特定することにより、台形歪みの補正を行うこととしてい た。しかし、開閉角度センサ 112によって検出された折りたたみ角度 0に基づいて、 台形歪みの補正を行うようにしてもよい。このとき、プロジェクタモジュール 6による投 射像の投射方向が表示部 2に対して固定されているものとする。このようにすると、操 作部 1の底面部分を机上などに設置して投射する場合に、撮像を行わなくても簡単 に台形歪みを補正することができる。

[0078] 図 8は、水平面上に操作部 1を設置して垂直な投射面に投射したときの、折りたた み角度 Θと台形歪みとの関係を示した図である。 (a)は、折りたたみ角度 Θ力^ 0° よ りも小さい場合の投射の様子を側面図によって示した図であり、（b)は、（a)のときの 台形歪みの様子を正面図によって示した図である。（c)は、 0 = 90° である場合の 投射の様子を側面図によって示した図であり、（d)は、（b)のときの台形歪みの様子 を正面図によって示した図である。

[0079] 図 8 (a)、 (b)に示すように、折りたたみ角度 Θ力^ 0° よりも小さい場合には台形歪 みが発生する。また、これとは逆に折りたたみ角度 Θ力^ 0° よりも大きい場合にも、 台形歪みが発生する。この台形歪みの程度 (歪み具合）は、折りたたみ角度 Θによつ て変化し、その変化の割合は決まっている。したがって、折りたたみ角度 Θの値に応 じて、台形歪みを打ち消すために液晶パネル 62上に表示する画像を歪ませるときの 歪ませ具合を予め設定しておくことで、台形歪みを補正することができる。なお、図 8 ( c)、（d)に示すように、 0 = 90° である場合には台形歪みが発生しないため、台形 歪みの補正は必要ない。

[0080] または、プロジェクタ付き携帯電話機 10において、表示部 2の左右の中心軸を回転 軸とし、その回転軸を中心として表示部 2を回転可能な構造として、所定の基準位置 に対するその回転角度を検出し、検出された回転角度 φに基づいて台形歪みの補 正を行うこととしてもよい。なお、この場合にもプロジェクタモジュール 6による投射像 の投射方向は表示部 2に対して固定されているものとする。

[0081] 図 9は、水平面上に操作部 1を設置して垂直な投射面に投射したときの、表示部 2 の回転角度 φと台形歪みとの関係を示した図である。 (a)は、回転角度 φが 90° より も小さい場合の投射の様子を平面図によって示した図であり、（b)は、（a)のときの台 形歪みの様子を正面図によって示した図である。（c)は、 φ = 90° である場合の投 射の様子を平面図によって示した図であり、（d)は、（b)のときの台形歪みの様子を 正面図によって示した図である。なお、図 9において回転角度 φの基準位置は操作 部 1の左右の中心軸とし、折りたたみ角度 Θは 90° であるものとする。回転角度 φが 90° のとき、表示部 2の背面は投射面に正対している。

[0082] 図 9 (a)、（b)に示すように、回転角度 φが 90° よりも小さい場合には台形歪みが 発生する。また、これとは逆に回転角度 φが 90° よりも大きい場合にも、台形歪みが 発生する。この台形歪みの程度 (歪み具合）は、回転角度 φによって変化し、その変 化の割合は決まっている。したがって、折りたたみ角度 Θの場合と同様に、回転角度 Φの値に応じて、台形歪みを打ち消すために液晶パネル 62上に表示する画像を歪 ませるときの歪ませ具合を予め設定しておくことで、台形歪みを補正することができる 。なお、図 9 (c)、（d)に示すように、 = 90° である場合には台形歪みが発生しない ため、台形歪みの補正は必要ない。

[0083] さらに、以上説明した折りたたみ角度 Θに基づく台形歪みの補正と、回転角度 φに 基づく台形歪みの補正とを、組み合わせて用いるようにしてもよ!/、。

[0084] 以上説明したようにして、フォーカス状態の調節、明るさの調節、ホワイトバランスの 調節および台形歪みの補正の各動作を行うことにより、キャリブレーション動作を実行 する。なお、これらの各動作は必ずしも全て行う必要はなぐ選択した動作のみを実 行するようにしてちょい。

[0085] 次に、カメラモジュール 7にお 、て撮像画像のピントを調節する方法にっ 、て説明 する。撮像画像のピント調節には、コントラスト検出方式と呼ばれる方法が用いられる 。具体的には、撮影レンズ 71の焦点位置を様々に変化させて撮像画像を取得し、そ の撮像画像のそれぞれについてコントラスト量を算出する。そして、 CPU101におい て各撮像画像のコントラスト量を比較し、撮影レンズ 71の焦点位置をコントラスト量が 最大である撮像画像が取得されたときの位置に合わせて駆動するように、カメラ制御 CPU74に対して制御信号を出力する。投射像の撮像画像を適切に撮影してキヤリ ブレーシヨン動作を行うためには、このような撮影画像のピント調節を行う必要がある

[0086] 撮像画像のピント調節は、プロジェクタモジュール 6において実行する投射像のフォ 一カス状態の調節と同時に行ってもよいし、別々に行ってもよい。同時に行う場合に は同焦点移動方式と呼ばれる制御方法が用いられ、別々に行う場合にはカメラ固定 方式と呼ばれる制御方法が用いられる。以下、これらの制御方法の内容について順 に説明する。

[0087] 一同焦点移動方式

この制御方法では、カメラモジュール 7の撮像焦点位置、すなわち撮像画像に対す る撮影レンズ 71の焦点位置と、プロジェクタモジュール 6の投射焦点位置、すなわち 投射像に対する投影レンズ 61の焦点位置とを、同じ位置関係に保ちつつ変化させる 。ここで撮像焦点位置と投射焦点位置が同じ位置関係であるとは、プロジェクタ付き 携帯電話機 10に対する距離が両焦点位置でほぼ等しいことをいう。そして、プロジェ クタモジュール 6により異なる複数の投射焦点位置において投射像をそれぞれ生成 し、その複数の投射像の撮像画像をカメラモジュール 7により、その複数の投射焦点 位置とそれぞれ同じ位置関係に保たれている複数の撮像焦点位置においてそれぞ れ取得する。こうして取得された複数の投射像の撮像画像にっ ヽてコントラスト量を それぞれ算出し、コントラスト量が最大となったときの位置に合わせるように撮像焦点 位置と投射焦点位置を調節する。このようにして、撮像画像のピント調節と投射像の フォーカス状態の調節とを同時に行う。さらにこの際に、取得された複数の撮像画像 に基づ!/、て、投射像のフォーカス状態の調節以外のキャリブレーション動作も合わせ て実行してもよい。

[0088] 図 10は、以上説明した同焦点移動方式を用いて、撮像画像のピント調節と投射像 のフォーカス状態の調節を同時に行う様子を示した図である。図 10 (a)〜（e)では、 投射面力も約 50cmの位置にプロジェクタ付き携帯電話機 10が設置されている。な お、プロジェクタモジュール 6における最適な投射距離は 50cm程度であるものとする

[0089] 初めに（a)のように、カメラモジュール 7の撮像焦点位置とプロジェクタモジュール 6 の投射焦点位置を、共にプロジェクタ付き携帯電話機 10から 60cm離れた位置に合 わせる。この状態で、プロジェクタモジュール 6によって生成される投射像をカメラモジ ユール 7において撮影し、その撮像画像についてコントラスト量を算出する。次に (b) のように、カメラモジュール 7の撮像焦点位置とプロジェクタモジュール 6の投射焦点 位置を共にプロジェクタ付き携帯電話機 10から 55cm離れた位置に合わせて、その 投射像の撮像画像についてコントラスト量を算出する。

[0090] その後（c)〜（e)のように、カメラモジュール 7の撮像焦点位置とプロジェクタモジュ ール 6の投射焦点位置をプロジェクタ付き携帯電話機 10から 50cm、 45cm, 40cm 離れた位置に順に合わせ、その位置における投射像の撮像画像にっ ヽてコントラス ト量を算出する。そして、最大のコントラスト量が得られたときの位置に合わせて、カメ ラモジュール 7の撮像焦点位置とプロジェクタモジュール 6の投射焦点位置を調節す る。このようにして、撮像画像のピント調節を行うと共に、投射像のフォーカス状態の 調節を行う。

[0091] 以上説明したような同焦点移動方式を用いると、カメラモジュール 7の撮像焦点位 置とプロジェクタモジュール 6の投射焦点位置がプロジェクタ付き携帯電話機 10に対 してほぼ同じ距離に保たれる。ここで、投射焦点位置が投射面に近いほど高いコント ラストの投射像が生成され、撮像焦点位置が投射面に近 ヽほど投射像の撮像画像を 高いコントラストで取得できる。したがって、同焦点移動方式を用いることにより、合焦 状態とそうでない状態において算出されるコントラスト量の差を大きく取ることができ、 撮像焦点位置と投射焦点位置をともに正確に調節することができる。そのため、カメ ラモジュール 7において投射像を適切に撮影できるようにすることができる。なお、より 一層の高精度を必要とする場合には、上記のような方法で求められた撮像焦点位置 と投射焦点位置に一旦合わせた後、そこを中心としてさらに細力べ刻んだ焦点位置 の範囲において撮像焦点位置および投射焦点位置を変化させ、同様の処理を繰り 返せばよい。

[0092] 一力メラ固定方式

この制御方法では、カメラモジュール 7の撮像焦点位置を固定させた状態で、プロ ジェクタモジュール 6の投射焦点位置のみを変化させる。そして、異なる複数の投射 焦点位置にお!、て投射像の撮像画像を生成し、その複数の投射像の撮像画像を固 定された 1つの撮像焦点位置にお!ヽて取得する。こうして取得された複数の投射像 の撮像画像についてコントラスト量をそれぞれ算出し、コントラスト量が最大となったと きの位置に合わせてプロジェクタモジュール 6の投射焦点位置を調節する。

[0093] このようにして投射焦点位置を調節した後さらに、カメラモジュール 7により 1つの撮 像焦点位置において取得された上記の複数の投射像の撮像画像が所定の条件を 満たす場合、具体的には、その複数の投射像の撮像画像によって算出された最大コ ントラスト量が所定のしきい値よりも小さかった場合には、その複数の投射像の撮像 画像に基づいて、算出された最大コントラスト量を用いて、撮像焦点位置を投射焦点 位置と同 Cf立置に合わせるように調節する。その後、再びその調節後の撮像焦点位 置において投射焦点位置のみを変化させ、上記と同様にして、プロジェクタモジユー ル 6による複数の投射像の生成と、カメラモジュール 7による複数の投射像の撮像画 像の取得とを再び行う。こうして取得された各撮像画像についてコントラスト量を算出 して、その最大コントラスト量の位置に合わせて投射焦点位置を調節する。このような 処理を繰り返すことにより、撮像画像のピント調節と投射像のフォーカス状態の調節と を別々に行う。さらにこの際に、取得された複数の撮像画像に基づいて、投射像のフ オーカス状態の調節以外のキャリブレーション動作も合わせて実行してもよい。

[0094] 図 11は、以上説明したカメラ固定方式を用いて、撮像画像のピント調節と投射像の フォーカス状態の調節を別々に行う様子を示した図である。図 11 (a)〜（e)では図 1 0と同様に、投射面力も約 50cmの位置にプロジェクタ付き携帯電話機 10が設置され ており、プロジェクタモジュール 6における最適な投射距離は 50cm程度であるものと する。

[0095] 初めに（a)のように、カメラモジュール 7の撮像焦点位置をプロジェクタ付き携帯電 話機 10から 50cm離れた位置に固定した状態で、プロジェクタモジュール 6の投射焦 点位置をプロジェクタ付き携帯電話機 10から 60cm離れた位置に合わせる。この状 態で、プロジェクタモジュール 6によって生成される投射像をカメラモジュール 7にお いて撮像し、その撮像画像についてコントラスト量を算出する。次に (b)のように、撮 像焦点位置は (a)と同 Cf立置に固定したままで、投射焦点位置をプロジェクタ付き携 帯電話機 10から 55cm離れた位置に合わせ、その投射像の撮像画像についてコント ラスト量を算出する。

[0096] その後（c)〜（e)のように、カメラモジュール 7の撮像焦点位置をプロジェクタ付き携 帯電話機 10から 50cmの位置に固定したままで、プロジェクタモジュール 6の投射焦 点位置のみをプロジェクタ付き携帯電話機 10から 50cm、 45cm, 40cm離れた位置 に順に合わせ、その位置における投射像の撮像画像についてコントラスト量を算出 する。そして、最大のコントラスト量が得られたときの位置に合わせて、プロジェクタモ ジュール 6の投射焦点位置を調節し、その最大コントラスト量の値が予め定められた 所定のしきい値以上である力否かを判定する。しきい値以上であれば、投射像のフォ 一カス状態の調節を完了する。なお、この後さらにカメラモジュール 7において撮像 画像のピント調節を行うようにしてもよい。

[0097] 最大コントラスト量がしきい値よりも小さい場合は、その最大コントラスト量が得られ た位置に合わせて撮像焦点位置を調節した後、再び (a)〜 (e)のようにして投射焦 点位置を順に変化させ、その投射像の撮像画像をカメラモジュール 7にお 、て取得 する。取得された撮像画像についてコントラスト量を算出し、最大コントラスト量が得ら れた位置に合わせて投射焦点位置を調節してから、その最大コントラスト量としきい 値との比較を再度行う。このような処理を繰り返すことにより、撮像画像のピント調節と 投射像のフォーカス状態の調節を別々に行う。

[0098] 以上説明したようなカメラ固定方式を用いると、カメラモジュール 7における撮像画 像のピント調節と、プロジェクタモジュール 6における投射像のフォーカス状態の調節 とを別々に実行するため、同焦点移動方式よりも簡単な処理でこれらの調節を行うこ とができる。したがって、処理能力の低い CPUなどを用いた場合にも、カメラモジユー ル 7にお 、て投射像を適切に撮影できるようにすることができる。

[0099] なお、以上説明したカメラ固定方式において、投射像のフォーカス状態の調節を 1 回だけ行うようにしてもよい。すなわち、最初に固定した撮像焦点位置において取得 された複数の撮像画像に基づいて、投射焦点位置を最終的に決定し、再び処理を 繰りかえさな ヽようにしてもょ ヽ。投射像のボケ具合や撮像画像の被写界深度によつ ては、このようにしても投射像のフォーカス状態を適切に調節できる。さらにこの場合 、取得される撮像画像のピントが近くから無限遠まで合って ヽるパンフォーカス状態と なるように、カメラモジュール 7において撮像焦点位置を固定することが好ましい。こ のようにすれば、投射焦点位置の調節処理を複数回繰り返す必要がなぐ短時間で 投射像のフォーカス状態を調節して投射像を適切に撮影できるようにすることができ る。なお、このような投射像のフォーカス状態の調節方法は、カメラモジュール 7が焦 点調節機能を有しない単焦点カメラのようなものである場合にも適用することができる

[0100] 次に、カメラモジュール 7における撮像画像のホワイトバランス調節方法について説 明する。被写体を撮影してその撮像画像を取得する電子式カメラでは通常、様々な シーンの撮影にぉ 、て取得された撮像画像の色合!、を人間の見た目に合わせるた めに、ホワイトバランス調節が行われる。すなわち、撮影時に周囲の配光状況によつ て生じる被写体像の色合い変化を抑えて、その被写体像から得られる撮像画像が自 然な色合 ヽで表現されるように、予め定められた色変換法則などに基づ ヽて撮像画 像の色情報値を異なる値へと変換する。この変換後の色情報値によって、撮像画像 における色合いが表される。

[0101] 本実施形態のプロジェクタ付き携帯電話機 10では、カメラモジュール 7によって取 得された撮像画像が前述のように画像データとして CPU101に出力され、この画像 データに基づ 、て CPU101にお 、て上記のような色情報値の変換処理を実行する ことにより、撮像画像の色合いを調節する。このようにして、撮像画像のホワイトバラン ス調節が行われる。なお、このときに用いられる色変換法則の内容は、ユーザが撮影 シーンの種類を設定することで切り替えられる。

[0102] さらに、プロジェクタモジュール 6によって生成された投射像をカメラモジュール 7に より撮影する際には、以上説明したような撮像画像のホワイトバランス調節が自動的 に実行される。すなわち、プロジェクタモジュール 6を使用して投射像を生成する際に は、自動的にカメラモジュール 7において撮像画像を取得し、その撮像画像に対して ホワイトバランス調節を行う。この投射時における撮像画像のホワイトバランス調節で は、撮影シーンの種類がどの状態に設定されているかに関わらず、投射像の撮影用 に予め定められた所定の色変換法則に基づいて、カメラモジュール 7において取得 された撮像画像の色合いを調節する。なお、ここで述べた所定の色変換法則につい ては後で説明する。

[0103] 上記のようにして投射時における撮像画像のホワイトバランス調節を行う場合、プロ ジェクタモジュール 6の LED光源 63は初めに、予め設定された所定の色合いに調節 した光を出力する。このときの投射像をカメラモジュール 7において撮影し、投射時に おける撮像画像のホワイトバランス調節を行った後に、そのホワイトバランス調節後の 撮像画像に基づいて、前述したようなキャリブレーション動作を実行する。キヤリブレ ーシヨン動作において既に説明した投射像のホワイトバランス調節が行われることに より、 LED光源 63の発光色が上記の所定の色合いから変化して、投射像の色合い が調節される。

[0104] ここでプロジェクタモジュール 6の LED光源 63は、発光時の色合い特性に個体差 があり、上記のように予め設定された所定の色合いに調節した光を出力しても、その 出力光の実際の色合いは個体ごとに微妙に異なる。また、プロジェクタ付き携帯電話 機 10として仕様の異なる複数の機種が存在する場合は、機種ごとに異なる仕様の光 源が LED光源 63として用いられる場合がある。このような場合にも発光時の色合!ヽ 特性が異なるため、出力光の色合いに差が生じる。

[0105] そのため、本実施形態のプロジェクタ付き携帯電話機 10では、投射時における撮 像画像のホワイトバランス調節を、 LED光源 63の色合い特性に応じて予め定められ た所定の色変換法則に基づいて実行する。この所定の色変換法則には、上記で説 明したような LED光源 63における色合い特性の差が補正されるようなものが設定さ れる。すなわち、個体や機種ごとに LED光源 63の色合い特性を予め測定しておき、 その測定結果に基づいて、出力される光の色合いの差を打ち消すような色変換法則 をプロジェクタ付き携帯電話機 10の製造時に CPU101に記憶させておく。このような 色変換法則を用いることにより、 LED光源 63における色合い特性の差を補正し、カメ ラモジュール 7において投射像を適切に撮影できるようにすることができる。

[0106] なお、上記のような色変換法則をプロジェクタ付き携帯電話機 10の製造後に設定 できるようにしてもよい。たとえば、プロジェクタモジュール 6を使用して画像を投射す る前に、白色の投射面に対して LED光源 63からの出力光自体、すなわち無色透明 の画像を前述した所定の色合 、で投射し、その投射像をカメラモジュール 7にお 、て 撮影する。こうして取得された撮像画像に基づいて、基準特性に対する LED光源 63 の色合い特性の差を検出し、その検出結果に応じて、投射時における撮像画像のホ ワイトバランス調節に使用する色変換法則を設定することができる。

[0107] 以上説明した第 1の実施の形態によれば、次の作用効果を奏する。

(1)カメラモジュール 7により撮影して取得された投射像の撮像画像に基づ 、て、プ ロジェクタモジュール 6におけるキャリブレーション動作を投射像の投射中に繰り返し 実行することとした。具体的には、投射像のフォーカス状態の調節や、投射像の明る さの調節や、投射像の色合いの調節や、投射像の台形歪みの補正を、投射像の投 射中に繰り返し実行することとした。このようしたので、プロジェクタ付き携帯電話機 1 0を持っている手の向きが変化したりすることで投射中に投射像がぶれた場合にも、 投射像の映り具合を適切に調節することができる。

[0108] (2)キャリブレーション動作、すなわち投射像のフォーカス状態の調節や、投射像の 明るさの調節や、投射像の色合いの調節や、投射像の台形歪みの補正を、一定周 期ごとに繰り返し実行することとすれば、投射中において投射像の映り具合を常時調 節することができる。

[0109] (3)キャリブレーション動作、すなわち投射像のフォーカス状態の調節や、投射像の 明るさの調節や、投射像の色合いの調節や、投射像の台形歪みの補正を、操作キ 一への操作入力が行われるごとに繰り返し実行することもできる。このようにすれば、 操作キーへの操作入力によってプロジェクタ付き携帯電話機 10の位置や向きが変 化し、投射像がぶれてしまった場合でも、それを補正して見やすい投射像とすること ができる。

[0110] (4)投射像の撮像画像中に含まれている所定の形状パターンに基づいて、キヤリブ レーシヨン動作のうち投射像のフォーカス状態の調節と、投射像の明るさの調節と、 投射像の色合いの調節とを行うこととした。具体的には、所定の形状パターンを有す るコントラスト算出用画像に基づいて投射像のフォーカス状態を調節し、所定の形状 ノターンを有する明るさ検出用画像に基づいて投射像の明るさを調節し、所定の形 状パターンを有する色合 、検出用画像に基づ 1、て投射像の色合!、を調節することと した。このようにしたので、投射像のフォーカス状態、明るさおよび色合いを投射中に ぉ 、て調節することができる。

[0111] (5)また、投射像の撮像画像中に含まれている投射像の形状を特定するための所定 の図形または記号に基づいて、キャリブレーション動作のうち投射像の台形歪みの補 正を行うこととした。このようにしたので、投射中においても投射像の台形歪みを補正 することができる。

[0112] (6)所定の形状パターンを含む画像や、所定の図形または記号を含む画像を所定 の短時間だけ投射するようにし、その画像の投射タイミングに同期して投射像を被写 体として撮影することとすれば、投射像を見て!、る者に対してその形状パターンや図 形または記号を気づかれに《することができる。

[0113] (7)キャリブレーション動作、すなわち投射像のフォーカス状態の調節や、投射像の 明るさの調節や、投射像の色合いの調節や、投射像の台形歪みの補正について、そ の頻度を設定することもできる。そして、 3種類の頻度を設定可能とし、最も高い頻度 が設定された場合はこれらのキャリブレーション動作を投射像の投射中に繰り返し実 行し、中間の頻度が設定された場合はこれらのキャリブレーション動作を投射像の投 射中に 1回だけ実行し、最も低 、頻度が設定された場合はこれらのキヤリブレーショ ン動作を行わないようにすることができる。このようにすれば、上記のようなキヤリブレ ーシヨン動作が不要である場合に電力消費を抑えることができる。

[0114] (8)静止画像が投射されているときには、その投射像を撮影して取得された撮像画 像に基づいて、投射像のフォーカス状態を調節することもできる。このようにしても、 投射像のフォーカス状態を投射中にお ヽて調節することができる。

[0115] (9)さらに上記の場合において、動画像が投射されているときには、所定の形状バタ ーンを有するコントラスト算出用画像を含む画像を投射することもできる。このようにす れば、動画像を投射中のときにも投射像のフォーカス状態を投射中にお ヽて調節す ることがでさる。

[0116] (10) LED光源 63からの発光量を変化させることにより投射像の明るさを調節するこ ととしているので、簡単な処理で投射像の明るさを調節できる。さらにこのとき、所定 の基準値よりも暗くする場合には LED光源 63からの発光量を低下させて投射像の 明るさを調節し、所定の基準値よりも明るくする場合には液晶パネル 62に表示する 画像自体の明るさを変えることによって投射像の明るさを調節することもできる。この ようにすれば、発光量を抑えて電力消費量や発熱量を低減することができる。

[0117] (l l) LED光源 63からの発光量を RGB各発光色ごとに変化させることにより投射像 の色合 、を調節することとして 、るので、簡単な処理で投射像の色合 、を調節できる

[0118] (12)操作部 1と表示部 2の折りたたみ角度 Θを検出し、その折りたたみ角度 Θに基 づいて台形歪みを補正することとした。または、表示部 2の回転角度 φを検出し、そ の回転角度 Φに基づいて台形歪みを補正することとした。このようにしたので、カメラ モジュール 6を用いた投射像の撮像を行わなくても、簡単な制御で台形歪みを補正 することができる。

[0119] (13)撮像画像のピント調節において同焦点移動方式を用いた場合には、プロジェク タモジュール 6によって異なる複数の投射焦点位置において投射像をそれぞれ生成 し、その複数の投射像の撮像画像をカメラモジュール 7によって取得する。このとき、 その複数の投射像の撮像画像を、プロジェクタ付き携帯電話 10に対する距離が投 射像を生成した複数の投射焦点位置とそれぞれほぼ等しい複数の撮像焦点位置に おいてそれぞれ取得することとした。このようにしたので、カメラモジュール 7において 投射像を適切に撮影できるようにすることができる。

[0120] (14)撮像画像のピント調節においてカメラ固定方式を用いた場合には、プロジェクタ モジュール 6によって異なる複数の投射焦点位置において投射像をそれぞれ生成し 、その複数の投射像の撮像画像をカメラモジュール 7によって取得する。このとき、そ の複数の投射像の撮像画像を、固定された 1つの撮像焦点位置にぉ ヽてそれぞれ 取得することとした。このようにしても、カメラモジュール 7において投射像を適切に撮 影でさるよう〖こすることがでさる。

[0121] (15)カメラ固定方式を用いた場合はさらに、 1つの撮像焦点位置において取得され た複数の投射像の撮像画像が所定の条件を満たす場合には、その複数の投射像の 撮像画像に基づ ヽて撮像焦点位置を調節した後、その調節後の撮像焦点位置にお いて、プロジェクタモジュール 6による複数の投射像の生成と、カメラモジュール 7によ る複数の投射像の撮像画像の取得とを再び行うこととした。このようにしたので、最初 に固定された撮像焦点位置が適切ではな力つた場合でも、調節後の撮像焦点位置 において投射像を適切に撮影できるようにすることができる。

[0122] (16)また、カメラ固定方式を用いる場合において、取得される撮像画像のピントが近 く力も無限遠まで合っているパンフォーカス状態となるように、カメラモジュール 7にお V、て撮像焦点位置を固定し、その撮像焦点位置にぉ 、て複数の投射像の撮像画像 を取得することとすれば、投射焦点位置の調節処理を複数回繰り返す必要がなぐ 短時間で投射像を適切に撮影できるようにすることができる。

[0123] (17)投射時における撮像画像のホワイトバランス調節において、投射像をカメラモジ ユール 7により撮影する際、 LED光源 63の色合い特性に応じて予め定められた所定 の色変換法則に基づいて、取得された撮像画像の色合いを調節することとした。この ようにしたので、撮像画像のホワイトバランス調節、すなわち撮像画像の色合い調節 を行う場合にも、カメラモジュール 7において投射像を適切に撮影できるようにするこ とがでさる。

[0124] 第 2の実施の形態

本発明の第 2の実施の形態について説明する。この実施形態ではカメラモジュール 7にズーム機能が付いており、撮影時にユーザの操作によって任意のズーム位置へ と動かすことができる。これにより、ユーザは被写体を拡大または縮小して撮影するこ とができる。なお、本実施形態の外観および構成は第 1の実施の形態と同じであるた め、ここでは説明を省略する。

[0125] 本実施形態において、カメラモジュール 7の撮影レンズ 71はズーミング可能なズー ムレンズであり、カメラ制御 CPU 74の制御に基づ 、てレンズ駆動部 73によって駆動 されることでそのズーム位置が制御される。カメラ制御 CPU74は、投射像をカメラモ ジュール 7により撮影する際には、予め設定された所定のズーム位置となるように撮 影レンズ 71のズーム位置を制御する。すなわち、プロジェクタモジュール 6を使用し て投射像を生成する際には、自動的にカメラモジュール 7にお 、て撮影レンズ 71を 所定のズーム位置へと制御して撮像画像を取得する。このときの所定のズーム位置 は、カメラモジュール 7における撮影範囲がプロジェクタモジュール 6による投射像の 投射範囲を少なくとも含むように設定される。なお、投射像の投射範囲は、プロジェク タ付き携帯電話機 10と投射面の距離によって変動する。したがって、その変動量を 考慮して撮影範囲の方が大きくなるように所定のズーム位置を設定しておくことが好 ましい。

[0126] カメラモジュール 7は、上記の所定のズーム位置としたときの撮影範囲により、プロ ジェクタモジュール 6によって生成される投射像を撮像する。この撮像画像に基づ!/ヽ て、 CPU101とプロジェクタモジュール 6において前述したようなキャリブレーション動 作を行い、投射像の映り具合を調節する。

[0127] 図 12は、撮影範囲が投射範囲を含むようにカメラモジュール 7のズーム位置を制御 するときの様子を示した図である。 (a)の平面図と（b)の正面図は、ズーム位置を制 御する前の撮影範囲と投射範囲の関係を示した図である。このときのカメラモジユー ル 7による撮影範囲は、プロジェクタモジュール 6による投射範囲よりも狭くなつている 。このままでは投射像の全体を撮影することができないため、投射時にはズーム位置 を制御して撮影範囲を拡大する。

[0128] (c)の平面図と (d)の正面図は、所定のズーム位置へと制御した後の撮影範囲と投 射範囲の関係を示した図である。このとき、（a)および (b)の状態よりもズーム位置を 後退させることによりカメラモジュール 7の撮影範囲を拡大して、その撮影範囲がプロ ジェクタモジュール 6による投射範囲を含むように拡大する。このようにしてズーム位 置を制御する。なお、ズーム位置が前述の所定のズーム位置よりも撮影範囲が拡大 する側にあった場合には、上記と同様に所定のズーム位置となるように制御してもよ V、し、そのままズーム位置を変えな!/、こととしてもよ!/、。

[0129] 以上説明した第 2の実施の形態によれば、投射像をカメラモジュール 7により撮影 する際、カメラ制御 CPU74によって、カメラモジュール 7における撮影範囲が投射像 の投射範囲を少なくとも含むように予め設定された所定のズーム位置に、カメラモジ ユール 7のズーム位置を制御することとした。このようにしたので、カメラモジュール 7 にズーム機構が付いている場合でも投射像を適切に撮影できるようにすることができ る。

[0130] なお、上記の第 1および第 2の実施の形態において、投射像をカメラモジュール 7に よって撮影する前のカメラモジュール 7における各種の設定状態を CPU101におい て記憶し、プロジェクタモジュール 6による投射像の生成を止めた後、またはキヤリブ レーシヨン動作の実行を止めた後に、その記憶された状態へと各種の設定状態を戻 すこととしてもよい。ここでいう各種の設定状態には、第 1の実施の形態では撮像焦 点位置の状態や、撮像画像のホワイトバランス調節時に用いられる色変換法則の状 態が該当し、第 2の実施形態ではズーム位置の状態が該当する。なおこの場合にお いて、投射像をカメラモジュール 7により撮影する場合とそうでない場合とで、撮像画 像のホワイトバランス調節時に用いられる色変換法則が異なることは言うまでもない。

[0131] 第 3の実施の形態

本発明の第 3の実施の形態について説明する。図 13は、本実施形態によるプロジ クタ付き携帯電話機 10Aの外観図である。（a)と (b)は側面図、（c)は背面図を表 している。このプロジェクタ付き携帯電話機 10Aは、第 1の実施の形態と同じ操作部 1 と、表示部 2Aによって構成されている。表示部 2Aは、図に示す位置にプロジェクタ モジュール 6とカメラモジュール 7が配設されており、図 1のサブ液晶表示器 5は有し ていない。これ以外の点については、第 1の実施の形態における表示部 2と同一であ る。

[0132] カメラモジュール 7は、表示部 2Aのカメラ取付機構部 2Bに配設されている。この力 メラ取付機構部 2Bは、カメラモジュール 6の撮像方向を変化させるために回転可能 な機構を有している。そのため、カメラモジュール 7の撮像方向とプロジェクタモジュ ール 6の投射方向は、（b)に示すよう同一方向である場合と、（a)に示すように同一方 向でな 、場合とがある。 (a)のように一致しな 、場合にプロジェクタモジュール 6によ つて画像を投射すると、その投射像をカメラモジュール 7にお ヽて撮像することができ な 、ため、前述したようなキャリブレーション動作を実行できな 、。

[0133] そのため本実施形態では、カメラ取付機構部 2Bの回転角度を検出するための回 転角度検出部（不図示）を表示部 2Aに備えるようにし、その回転角度によってカメラ モジュール 7の撮像方向を判断する。そして、カメラモジュール 7の撮像方向とプロジ ェクタモジュール 6の投射方向が同一方向であるか否かを CPU101において判定し 、同一方向であると判定された場合にのみ、 CPU101においてプロジェクタモジユー ル 6の動作を許可する。

[0134] 上記の判定の結果、撮像方向と投射方向が同一方向でないと判定された場合には 、 CPU101においてプロジェクタモジュール 6の動作を禁止するとともに、カメラモジ ユール 7の撮像方向を変更するようユーザに促すための警告を発する。この警告は、 警告メッセージとしてメイン液晶表示器 4に表示したり、あるいはスピーカー 111から 警告音として出力したりすることができる。なお、上記のようなプロジェクタモジュール 6の動作の許可または禁止の制御と、警告音の出力とは、どちらか一方のみを実行 するようにしてちょい。

[0135] 以上説明した第 3の実施の形態によれば、次の作用効果を奏する。

( 1 )プロジェクタモジュール 6の投射方向とカメラモジュール 7の撮像方向が同一方向 であるか否かを判定し、同一方向ではないと判定された場合には警告を発することと したので、カメラモジュール 7の撮像方向が可変な場合でも投射像を適切に撮影でき るよう〖こすることがでさる。

[0136] (2)また、プロジェクタモジュール 6の投射方向とカメラモジュール 7の撮像方向が同 一方向であると判定された場合にのみ、プロジェクタモジュール 6の動作を許可する こととした。このようにしても、カメラモジュール 7の撮像方向が可変な場合に投射像を 適切に撮影できるようにすることができる。

[0137] なお、上記の各実施の形態では、プロジェクタ機能が携帯電話機に組み込まれた プロジェクタ付き携帯電話機を例に説明した。しかし、上記に説明したような動作を行 うプロジェクタ装置であれば、携帯電話機に組み込まれたものに限らず、プロジェクタ 機能とカメラ機能を有する小型の携帯型電子機器であればどのようなものでもよい。 あるいは、デジタルスチルカメラなどの電子式カメラにプロジェクタ機能を組み込み、 上記のような動作を実行させるようにしてもよい。

[0138] 上記の各実施の形態において説明した内容はあくまで一例であって、本発明はこ の内容に限定されるものではない。本発明の技術的思想の範囲内で考えられるその 他の態様も、本発明の範囲内に含まれる。

[0139] 次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。

日本国特許出願 2004年第 273417号（2004年 9月 21日出願） 日本国特許出願 2004年第 273427号（2004年 9月 21日出願) 日本国特許出願 2004年第 273428号（2004年 9月 21日出願) 日本国特許出願 2004年第 273429号（2004年 9月 21日出願) 日本国特許出願 2004年第 273433号（2004年 9月 21日出願) 日本国特許出願 2004年第 273435号（2004年 9月 21日出願)

Claims

請求の範囲

[1] 投射像を生成し、その投射像を撮影して投射像の種々の調節を行うプロジェクタ装 置。

[2] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、 撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、その 投射像の前記投射面における映り具合を調整するためのキャリブレーション動作をそ の投射像の投射中に繰り返し実行するキャリブレーション制御装置とを備える。

[3] 請求項 2のプロジェクタ装置において、

前記キャリブレーション制御装置は、前記キャリブレーション動作を一定周期ごとに 繰り返し実行する。

[4] 請求項 2のプロジェクタ装置において、

プロジェクタ装置は、ユーザ力 の操作入力を受け付けるための操作入力装置をさ らに備え、

前記キャリブレーション制御装置は、前記キャリブレーション動作を前記操作入力 装置への操作入力が行われるごとに繰り返し実行する。

[5] 請求項 2〜4の!、ずれかのプロジェクタ装置にお!、て、

前記投射像生成装置は、所定の形状パターンを含む画像を投射し、

前記キャリブレーション制御装置は、その投射像の撮像画像中に含まれて 、る前記 所定の形状パターンに基づ 、て、前記キャリブレーション動作を実行する。

[6] 請求項 5のプロジェクタ装置において、

前記投射像生成装置は、前記所定の形状パターンを含む画像を所定の短時間だ け投射し、

前記撮像装置は、その画像の投射タイミングに同期して、前記投射像を被写体とし て撮影する。

[7] 請求項 2〜6の!、ずれかのプロジェクタ装置にお!、て、 プロジェクタ装置は、前記キャリブレーション動作の実行頻度を設定するための設 定装置をさらに備え、

前記キャリブレーション制御装置は、

前記設定装置により第 1の実行頻度が設定された場合は、前記キャリブレーション 動作を前記投射像の投射中に繰り返し実行し、

第 2の実行頻度が設定された場合は、前記キャリブレーション動作を前記投射像の 投射中に 1回だけ実行し、

第 3の実行頻度が設定された場合は、前記キャリブレーション動作を実行しな!、。 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

所定の形状パターンを含む画像を投射面に投射してその画像の投射像を生成す る投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像中に含まれて 、る 前記所定の形状パターンに基づ 、て、前記投射像のフォーカス状態を調節するフォ 一力シング装置とを備える。

請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

静止画像および動画像のいずれかを投射面に投射してその静止画像または動画 像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記投射像生成装置により静止画像が投射されているときには、前記撮像装置に より撮影して取得された前記投射像の撮像画像に基づ ヽて、前記投射像のフォー力 ス状態を調節するフォーカシング装置とを備える。

請求項 9のプロジェクタ装置において、

前記投射像生成装置は、動画像を投射する場合には、その動画像に所定の形状 パターンを含めて投射し、

前記フォーカシング装置は、前記投射像生成装置により前記所定の形状パターン が含められた動画像が投射されているときには、その投射像の撮像画像中に含まれ て 、る前記所定の形状パターンに基づ 、て、前記投射像のフォーカス状態を調節す る。

[11] 請求項 8〜10の!、ずれか一項のプロジェクタ装置にお!ヽて、

前記フォーカシング装置は、前記投射像のフォーカス状態の調節をその投射像の 投射中に繰り返し行う。

[12] 請求項 11のプロジェクタ装置において、

前記フォーカシング装置は、前記投射像のフォーカス状態の調節を一定周期ごと に繰り返し行う。

[13] 請求項 11のプロジェクタ装置において、

プロジェクタ装置は、ユーザ力 の操作入力を受け付けるための操作入力装置をさ らに備え、

前記フォーカシング装置は、前記投射像のフォーカス状態の調節を前記操作入力 装置への操作入力が行われるごとに繰り返し行う。

[14] 請求項 8または 10のプロジェクタ装置において、

前記投射像生成装置は、前記所定の形状パターンを含む画像を所定の短時間だ け投射し、

前記撮像装置は、その画像の投射タイミングに同期して、前記投射像を被写体とし て撮影する。

[15] 請求項 11〜13の!、ずれか一項のプロジェクタ装置にお!ヽて、

プロジェクタ装置は、前記投射像のフォーカス状態の調節頻度を設定するための 設定装置をさらに備え、

前記フォーカシング装置は、

前記設定装置により第 1の調節頻度が設定された場合は、前記投射像のフォー力 ス状態の調節をその投射像の投射中に繰り返し行 、、

第 2の調節頻度が設定された場合は、前記投射像のフォーカス状態の調節をその 投射像の投射中に 1回だけ行!、、

第 3の調節頻度が設定された場合は、前記投射像のフォーカス状態の調節を行わ ない。

[16] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

所定の形状パターンを含む画像を投射面に投射してその画像の投射像を生成す る投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像中に含まれて 、る 前記所定の形状パターンに基づいて、前記投射像の明るさを調節する明るさ調節装 置とを備える。

[17] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

光源を有し、その光源カゝら発せられる光を用いて画像を投射面に投射してその画 像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、前記 光源からの発光量を変化させることにより、前記投射像の明るさを調節する明るさ調 節装置とを備える。

[18] 請求項 17のプロジェクタ装置において、

前記明るさ調節装置は、

前記投射像の明るさを所定の基準値よりも暗くする場合には、前記光源力もの発光 量を低下させて前記投射像の明るさを調節し、

前記投射像の明るさを前記基準値よりも明るくする場合には、前記画像自体の明る さを変えることにより、前記投射像の明るさを調節する。

[19] 請求項 16〜18のいずれか一項のプロジェクタ装置において、

前記明るさ調節装置は、前記投射像の明るさの調節をその投射像の投射中に繰り 返し行う。

[20] 請求項 19のプロジェクタ装置において、

前記明るさ調節装置は、前記投射像の明るさの調節を一定周期ごとに繰り返し行う [21] 請求項 19のプロジェクタ装置において、

プロジェクタ装置は、ユーザ力 の操作入力を受け付けるための操作入力装置をさ らに備え、

前記明るさ調節装置は、前記投射像の明るさの調節を前記操作入力装置への操 作入力が行われるごとに繰り返し行う。

[22] 請求項 16のプロジェクタ装置において、

前記投射像生成装置は、前記所定の形状パターンを含む画像を所定の短時間だ け投射し、

前記撮像装置は、その画像の投射タイミングに同期して、前記投射像を被写体とし て撮影する。

[23] 請求項 19〜21のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記投射像の明るさの調節頻度を設定するための設定装置 をさらに備え、

前記明るさ調節装置は、

前記設定装置により第 1の調節頻度が設定された場合は、前記投射像の明るさの 調節をその投射像の投射中に繰り返し行!、、

第 2の調節頻度が設定された場合は、前記投射像の明るさの調節をその投射像の 投射中に 1回だけ行い、

第 3の調節頻度が設定された場合は、前記投射像の明るさの調節を行わない。

[24] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

所定の形状パターンを含む画像を投射面に投射してその画像の投射像を生成す る投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像中に含まれて 、る 前記所定の形状パターンに基づ!、て、前記投射像の色合 、を調節する色合 、調節 装置とを備える。 [25] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

複数の色の光を発光する光源を有し、その光源から発せられる各色の光を合成し た光を用いて画像を投射面に投射してその画像の投射像を生成する投射像生成装 置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、前記 光源からの発光量をその発光色ごとに変化させることにより、前記投射像の色合いを 調節する色合!ゝ調節装置とを備える。

[26] 請求項 24または 25のプロジェクタ装置において、

前記色合!、調節装置は、前記投射像の色合!、の調節をその投射像の投射中に繰 り返し行う。

[27] 請求項 26のプロジェクタ装置において、

前記色合い調節装置は、前記投射像の色合いの調節を一定周期ごとに繰り返し行

[28] 請求項 26のプロジェクタ装置において、

プロジェクタ装置は、ユーザ力 の操作入力を受け付けるための操作入力装置をさ らに備え、

前記色合!、調節装置は、前記投射像の色合!、の調節を前記操作入力装置への操 作入力が行われるごとに繰り返し行う。

[29] 請求項 24のプロジェクタ装置において、

前記投射像生成装置は、前記所定の形状パターンを含む画像を所定の短時間だ け投射し、

前記撮像装置は、その画像の投射タイミングに同期して、前記投射像を被写体とし て撮影する。

[30] 請求項 26〜28のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記投射像の色合いの調節頻度を設定するための設定装置 をさらに備え、 前記色合い調節装置は、

前記設定装置により第 1の調節頻度が設定された場合は、前記投射像の色合いの 調節をその投射像の投射中に繰り返し行!、、

第 2の調節頻度が設定された場合は、前記投射像の色合!、の調節をその投射像 の投射中に 1回だけ行い、

第 3の調節頻度が設定された場合は、前記投射像の色合!、の調節を行わな!/、。

[31] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

投射像の形状を特定するための所定の図形または記号を含む画像を投射面に投 射してその画像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像中に含まれて 、る 前記図形または記号に基づいて、前記投射像生成装置の投射方向と前記投射面と の角度に応じて生じる投射像の台形状の歪みを補正する台形補正装置とを備える。

[32] 請求項 31のプロジェクタ装置において、

前記台形補正装置は、前記台形状の歪みの補正を前記投射像の投射中に繰り返 し行う。

[33] 請求項 32のプロジェクタ装置において、

前記台形補正装置は、前記台形状の歪みの補正を一定周期ごとに繰り返し行う。

[34] 請求項 32のプロジェクタ装置において、

プロジェクタ装置は、ユーザ力 の操作入力を受け付けるための操作入力装置をさ らに備え、

前記台形補正装置は、前記台形状の歪みの補正を前記操作入力装置への操作 入力が行われるごとに繰り返し行う。

[35] 請求項 31のプロジェクタ装置において、

前記投射像生成装置は、前記図形または記号を含む画像を所定の短時間だけ投 射し、

前記撮像装置は、その画像の投射タイミングに同期して、前記投射像を被写体とし て撮影する。

[36] 請求項 32〜34のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記台形状の歪みの補正頻度を設定するための設定装置を さらに備え、

前記台形補正装置は、

前記設定装置により第 1の補正頻度が設定された場合は、前記台形状の歪みの補 正を前記投射像の投射中に繰り返し行 、、

第 2の補正頻度が設定された場合は、前記台形状の歪みの補正を前記投射像の 投射中に 1回だけ行い、

第 3の補正頻度が設定された場合は、前記台形状の歪みの補正を行わな!/、。

[37] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射焦点位置が可変な投 射像生成装置と、

撮影した被写体の撮像画像を取得する撮像焦点位置が可変な撮像装置と、 前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、その 投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を 実行するキャリブレーション制御装置とを備え、

前記投射像生成装置は、異なる複数の投射焦点位置にぉ 、て前記投射像をそれ ぞれ生成し、

前記撮像装置は、前記投射像生成装置により前記複数の投射焦点位置において 生成された複数の投射像の撮像画像を、前記プロジェクタ装置に対する距離が前記 複数の投射焦点位置とそれぞれほぼ等し 、複数の撮像焦点位置にぉ 、てそれぞれ 取得し、

前記キャリブレーション制御装置は、前記撮像装置により前記複数の撮像焦点位 置にお 、て取得された複数の投射像の撮像画像に基づ 、て、前記キヤリブレーショ ン動作を実行する。

[38] 請求項 1のプロジェクタ装置において、 プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射焦点位置が可変な投 射像生成装置と、

撮影した被写体の撮像画像を取得する撮像焦点位置が可変な撮像装置と、 前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、その 投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を 実行するキャリブレーション制御装置とを備え、

前記投射像生成装置は、異なる複数の投射焦点位置にぉ 、て前記投射像をそれ ぞれ生成し、

前記撮像装置は、前記投射像生成装置により前記複数の投射焦点位置において 生成された複数の投射像の撮像画像を、固定された 1つの撮像焦点位置にぉ 、て それぞれ取得し、

前記キャリブレーション制御装置は、前記撮像装置により前記 1つの撮像焦点位置 にお 、て取得された複数の投射像の撮像画像に基づ 、て、前記キャリブレーション 動作を実行する。

[39] 請求項 38のプロジェクタ装置において、

前記撮像装置により前記 1つの撮像焦点位置において取得された複数の投射像の 撮像画像が所定の条件を満たす場合には、その複数の投射像の撮像画像に基づ ヽ て前記撮像焦点位置を調節した後、その調節後の撮像焦点位置において、前記投 射像生成装置による前記複数の投射像の生成と、前記撮像装置による前記複数の 投射像の撮像画像の取得とを再び行う。

[40] 請求項 38のプロジェクタ装置において、

前記撮像装置は、取得される撮像画像のピントが近くから無限遠まで合って ヽるパ ンフォーカス状態となるように前記撮像焦点位置を固定し、その撮像焦点位置にお V、て前記複数の投射像の撮像画像をそれぞれ取得する。

[41] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、 撮影した被写体の撮像画像を取得するズーミング可能な撮像装置と、 前記撮像装置のズーム位置を制御するズーミング制御装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、その 投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を 実行するキャリブレーション制御装置とを備え、

前記投射像を前記撮像装置により撮影する際、前記ズーミング制御装置は、前記 撮像装置における撮影範囲が前記投射像の投射範囲を少なくとも含むように予め設 定された所定のズーム位置に、前記撮像装置のズーム位置を制御する。

[42] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

所定の色合い特性で発光する光源を有し、その光源カゝら発せられる光を用いて画 像を投射面に投射してその画像の投射像を生成する投射像生成装置と、

撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像画像の色合!ヽを調節する色合!ヽ調節装置と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、その 投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を 実行するキャリブレーション制御装置とを備え、

前記投射像を前記撮像装置により撮影する際、前記色合い調節装置は、前記光源 の色合い特性に応じて予め定められた所定の色変換法則に基づいて、取得された 撮像画像の色合!、を調節する。

[43] 請求項 37〜40のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記投射像を前記撮像装置によって撮影する前の前記撮像 焦点位置の状態を記憶する状態記憶装置をさらに備え、

前記投射像生成装置による投射像の生成を止めた後、または前記キヤリブレーショ ン制御装置によるキャリブレーション動作の実行を止めた後に、前記状態記憶装置 により記憶された状態へと前記撮像焦点位置を戻す。

[44] 請求項 41のプロジェクタ装置において、

プロジェクタ装置は、前記投射像を前記撮像装置によって撮影する前の前記ズー ム位置の状態を記憶する状態記憶装置をさらに備え、

前記投射像生成装置による投射像の生成を止めた後、または前記キヤリブレーショ ン制御装置によるキャリブレーション動作の実行を止めた後に、前記状態記憶装置 により記憶された状態へと前記ズーム位置を戻す。

[45] 請求項 42のプロジェクタ装置において、

プロジェクタ装置は、前記投射像を前記撮像装置によって撮影する前の前記色合 い調節装置における色変換法則の状態を記憶する状態記憶装置をさらに備え、 前記投射像を前記撮像装置によって撮影しな ヽ場合には、前記色合 ヽ調節装置 において前記所定の色変換法則とは異なる色変換法則に基づいて撮像画像の色合 いを調節し、

前記投射像生成装置による投射像の生成を止めた後、または前記キヤリブレーショ ン制御装置によるキャリブレーション動作の実行を止めた後に、前記状態記憶装置 により記憶された状態へと前記色合い調節装置における色変換法則の状態を戻す。

[46] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、 撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置の撮像方向を変化させるための撮像方向変化機構と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、その 投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を 実行するキャリブレーション制御装置と、

前記投射像生成装置の投射方向と前記撮像装置の撮像方向が同一方向であるか 否かを判定する判定装置と、

前記判定装置により前記投射方向と前記撮像方向が同一方向ではないと判定され た場合には警告を発する警告装置とを備える。

[47] 請求項 1のプロジェクタ装置において、

プロジェクタ装置は、

画像を投射面に投射してその画像の投射像を生成する投射像生成装置と、 撮影した被写体の撮像画像を取得する撮像装置と、

前記撮像装置の撮像方向を変化させるための撮像方向変化機構と、

前記撮像装置により撮影して取得された前記投射像の撮像画像に基づ ヽて、その 投射像の前記投射面における映り具合を調整するためのキャリブレーション動作を 実行するキャリブレーション制御装置と、

前記投射像生成装置の投射方向と前記撮像装置の撮像方向が同一方向であるか 否かを判定する判定装置と、

前記判定装置により前記投射方向と前記撮像方向が同一方向であると判定された 場合にのみ、前記投射像生成装置の動作を許可する動作許可装置とを備える。

[48] プロジェクタ装置は、

ヒンジ部を中心に折りたたみ可能な構造を有し、前記ヒンジ部を介して連結された 第 1の部位と第 2の部位を有する筐体部と、

前記筐体部の折りたたみ角度を検出する検出装置と、

画像を投射面に投射してその画像の投射像を生成し、その投射方向が前記第 1の 部位に対して固定されている投射像生成装置と、

前記検出装置によって検出された折りたたみ角度に基づいて、前記投射像生成装 置の投射方向と前記投射面との角度に応じて生じる投射像の台形状の歪みを補正 する台形補正装置とを備える。

[49] プロジェクタ装置は、

所定の回転軸を中心として回転可能な構造を有する第 1の部位と、その第 1の部位 に連結された第 2の部位とを有する筐体部と、

所定の基準位置に対する前記第 1の部位の回転角度を検出する検出装置と、 画像を投射面に投射してその画像の投射像を生成し、その投射方向が前記第 1の 部位に対して固定されている投射像生成装置と、

前記検出装置によって検出された回転角度に基づいて、前記投射像生成装置の 投射方向と前記投射面との角度に応じて生じる投射像の台形状の歪みを補正する 台形補正装置とを備える。

[50] 請求項 48または 49のプロジェクタ装置において、 前記台形補正装置は、前記台形状の歪みの補正を前記投射像の投射中に繰り返 し行う。

[51] 請求項 50のプロジェクタ装置において、

前記台形補正装置は、前記台形状の歪みの補正を一定周期ごとに繰り返し行う。

[52] 請求項 50のプロジェクタ装置において、

プロジェクタ装置は、ユーザ力 の操作入力を受け付けるための操作入力装置をさ らに備え、

前記台形補正装置は、前記台形状の歪みの補正を前記操作入力装置への操作 入力が行われるごとに繰り返し行う。

[53] 請求項 50〜52のいずれか一項のプロジェクタ装置において、

プロジェクタ装置は、前記台形状の歪みの補正頻度を設定するための設定装置を さらに備え、

前記台形補正装置は、

前記設定装置により第 1の補正頻度が設定された場合は、前記台形状の歪みの補 正を前記投射像の投射中に繰り返し行 、、

第 2の補正頻度が設定された場合は、前記台形状の歪みの補正を前記投射像の 投射中に 1回だけ行い、

第 3の補正頻度が設定された場合は、前記台形状の歪みの補正を行わな!/、。

[54] 請求項 1〜53のいずれか一項に記載のプロジェクタ装置と、

外部の無線通信設備を介して他の端末との通信を行うための無線通信装置とを備 えた携帯電話。

[55] 請求項 1〜53のいずれか一項に記載のプロジェクタ装置を備えたカメラ。