WO1999067949A1

WO1999067949A1 - Imageur et procede

Info

Publication number: WO1999067949A1
Application number: PCT/JP1999/003310
Authority: WO
Inventors: Koichi Sakamoto
Original assignee: Fuji Photo Film Co., Ltd.
Priority date: 1998-06-22
Filing date: 1999-06-22
Publication date: 1999-12-29
Also published as: US20060187321A1; CN1229977C; DE69937298T2; EP1100262B1; EP1100262A4; CN1306722A; US7352393B2; EP1100262A1; DE69937298D1; US7057650B1; JP3485543B2

Description

EE ϋ D %

° ¾ si ^ コ ^ ^ つ X c ¾

：? i ® ^ 目 ^ 。専）画 ^ ^ ^c ¾ ¾ ^ ^ ¾ ¾ ω ¾ n 2 。画 ¾：： ¾ ¾ M « ； ¾ ¾ f ί © # ^ ^ ¾ 画喜 τι ( 7{ ^ s ^ ¾ f ί„Ψ a q ' y毐 ' ^ m

' ¥ ¾ ^£ ^ % ) ¾ ¾ ω ^ 奪画 Ύ 拏 ¾ ffl

。（ 0 ^ 喜 :\ ら一 m画 © « 画呦丫 ^ 一 ^ 琴画 ^ ^ S 21 ¾ ^ 画呦丫

画

：) 奪画喜 © ) § w $ ¾9 ^ r) 丁奪画喜 ί ^ 奪 } 画 i¾ 丫： ^ ^ ^ m 。 ^ ^ 翁画喜 if ' ^ i ■ rig

^ 丫喜 © 奪画呦丫喜 S ¾ 奪 m --I

¾ n ' w $ ¾ ¾ ^ 呦丫 w i <5 ¾ ' ¥ 、 ^^ : 喜 ¾ ¾s

· 嘉 ¾ ¾9 ^ ¾ -

^ ^ ^ » 画呦丫 ^ 專画喜 ¾ τ : ¾ m 喜 ¾ ¾

¾ ^ Λ 喜 ^ S

I€£0/66df/ Dd 6 6ん9/66 OVV ^ コ ¾ ff? ¾ 一 ^ 画 ^ ^ ^ 画 ^

^ ¾ 一 ^ ^ 画奪 ^ 91 T :4 W ' ：) ^ - ^ Μ 画喜 ¾ ' つ ½ 1ί 一 ^ 画 ^ ø C — ¾ - ¾ i 翁画喜靠 ^£ 9 ^ Φ © 一 ^ 画 ^ ω M ¾ ¾ ΐ 2.

' 2. I ¥ ¾ fi ω 奪画喜 _q

' 一 ^ 拏 ¾ 奪画 # ' ^ ^ ェ

Ί ¾ 21 ¾ ー q: 拏 ^ 画 ^ ω ： W 5 备 T ：) »f o a. 丄 Φ} ¾ ¾ ° S 、っ » ¾ ¾ つ ¾ ] a ¾ ？! ¾ ω τ 第

¾¾氍¾¾¾«wwtw專氍¾I Ei¾っeo;2:":ii-

¾ ^ 2 ¾ - m ¾ ¾ ΐ ¾^ 导奪画一 ^ 画 ^ ^ 拏 ¾ 專画 ¾9 ^ ¾ ^ 画 ^ 21 τ ： ^ m T ：) ¾ ½ ¾ 奪 } 画專 W ^ D f} 画 # si τ

FR ¾ 蒈 ί SI Τ Λ ¾ ¾ϊ 藪画専 ^ ^ - ^- 一 ^ 画專 G? C — ^ - m ~i ^ 画喜 * ' Φ © 一 ^ 画 ^ Co ¾

？ ^ ¾ 01 D ¾ m 2 一 ^ fl 画 T ' 、 ^ 1 ¾ ¾ ϊί ω ¾ ¾ co M 画喜靠 ¾ * f I Si si τ '

¾ * 專 ¾ ¾ ¥ W 一 ^ ^ つ ¾ 氍 ¾

* m si ^ 一 ^ 画専 ½ - m si ー

4- ^ ¾ 凝画専 ^ ω 凝 ¾ T :\ ¾ fi CD i 丄 φ} 裏 ¾ 奪 25 油 ¾ ω τ m

¾ ¾ 目画 ^ ^ ω ^ ¾ 目（《油 ζ

Ol€£0/66df/13d 6t6L9l66 OM <π

n

•YD R¾ <a

リ删 Q •^J IK ■H G

n X) 4J, m

则 d 画画 1 n

XJ [ι ¾ IK 1 -6

rl ► j お

5g Q G 画 AJ •YD 価

51 1

回 p G ,

画 G おリ IK p 画 G

■Φ m 画 AJ

画 ~> 膽耀

Q ？ぉ m - 画画

Q si ¾ IK g リ卿 D <n <n

> j 画 u AJ

ヽ、Λ "

画画画 5：

好ましくは成対象画像の撮影時の撮影条件を記憶しておき，選択された合成対象画像データに対応する撮影条件と背景画像の撮影条件とにもとづレ、て，選択された合成対象画像デ一夕によつて表される合成対象画像の色調整および輝度調整の少なくとも一方の画像 I/BJ 整処理を行い，画像調整処理された合成対象画像データと上記背景画像デ一夕とを合成する。

選択された合成対象画像について色調整および輝度調整の少なくとも一方の画像調整処理が行われるので , 画像調整処理された合成対象画像の画像特性は背景画像により近いものとなつている。得られる合成画像はより自然な感じのものとなる。

さらに，色調整および輝度調整の少なくとも一方の画像調整指令を入力させ，入力された画像調整指令にもとづいて，選択された合成対象画像データによつて表される合成対象画像の色調整および輝度調整の少なくとも一方の画像調整処理を行い , 画像調整処理された合成対象画像デ一夕と上記背景画像データとを合成してもよい

画像調整指令を入力することにより，所望の画像調整（色 S ，輝度調整）を行うことができる。ユーザの好みの合成画像となるように画像調整が可能となるさらに好ましくは，画像表示のための表示装置を設 M画喜 ¾ § W ^ ^ W 9 ^ ¾ * > ϊί 21 τ ^ ^ - ^ m画

^ ： W $ B ¾ S ϋ }画 Τ 二） ¾ s ® M m 画 T ^c ¾ ΐ S ¾ ¾ H 画 ^ ¾ ¾ s ¾

画 Q) — ^ > ¾ Ο) S H M t ^ s鼴 ¾ ω ^ 画 ^ ^ ¾ 0 ^ ¾ T 4 一 ^ 奪画奪 Η ^ ^ ^ 1 2. II：

$ m Ei 1 ® ΐ ^ 2 ¾ « ' 専 ½ ^ Ϊ τ ' 0- I ^ D

¾ 窨 ί ¾ U ^ 25 ¾ ¾ ffi ω 喜 ft Τ Φ SI T ^ } ¾ ¾ ¾ © 奪画專 ¾9 ^ ^i ^ 01 ri ¾ ΐ m m m m H ¾¾ί ^ 21 Τ ' ¾ 奪 ¾ ^ ¾ ^ - ^ 4- 画喜 ft っ ¾ ¾ ¾ 喜 ft ' ¾ ¾ 2 ¾ 翳 ^ ^ - m

21 ¾ ¾ S ω S ¾ 害 ί ® 奪 } 画 ^ ^ ^ Λ ί? ^ ~ ^ 4- g 拏凝画 ¾ J¾ ¾9 ^ ' ) 喜 Γ5 ¾ ¾ ω z m

° ^ i ^ ^ ^ ¾ m m ） $ ¥ Λ T 喜 ¾ つ ¾ ¾ 奪画専 ^ ^ ^ M 鱸 ¾ $ ¥ 0専画專 ^ ^ , τ ^ 喜 ¾ 奪画 ^ H ^ 、 if $ 拏 2) 喜籙 ^ 拏

。つ ^ & # 2 > Π 5 ¾ ^ i

¾ a n © ^— ^ > o M m co ^ ^ 喜 ¾ 奪画專 ^ ^ ⁽ X C. ^ ^ ^ m m ： W $ Y ' 再

$ 丫 ¾ ^ ¾s鱸 ω 一 ^ ^ > $ ^ ¥ Λ < 喜

¾ ω凝画專 ^ ^ 2 τ § ^ η ^ ^ 二）喜 ¾ SI T

' 25 ^ ^ ¾ 1 0- η ^ ¾ 2} τ喜拏 2 Τ ¾ 凝画

° s 4- 拏 ¾ 翁画 ^ ^ ^ ' っ拏二）喜 ¾ 拏 2 τ ¾ 凝画喜 # ¾ つ s l£C0/66df/XDd 6^6ム 9/66 OAV — 夕とを合成し，合成画像を表す合成画像データを出力する画像合成手段を備えていることを特徴とする。

第 2 の発明は，上記装置に適した方法も提供している。すなわち，合成対象画像を表わすデータおよび合成対象画像の撮影時の撮影条件を記憶し，背景を撮影して背景画像を表すデータを得，合成対象画像の撮影条件と背景の撮影時の撮影条件にもとづいて，合成対象画像データによつて表される合成対象画像の色調整および輝度調整の少なくとも一方の画像調整処理を行い，画像調整処理された合成対象画像データと背景画像データとを合成し，合成画像を表す合成画像データを出力することを特徴とする。

第 2 の発明によると，合成対象画像データおよび合成対象撮影条件が記憶される。また，背景が撮影され , 背景画像データが得られる。

合成対象画像の撮影条件と背景画像の撮影時における撮影条件とにもとづいて，記憶されている合成対象画像デ一夕によって表される合成対象画像の色調整および輝度調整の少なくとも一方の画像調整処理が行われる。画像調整処理された合成対象画像データと背景画像データとを合成し，合成画像を表す合成画像デー夕が出力される。

合成対象画像および背景画像の撮影条件にもとづいて，合成対象画像の色調整および輝度調整の少なくとっ ¾ r) B 拏 2 丁 ¾ ^ 画 ^ ^ Λ T £f 凝画遑 #

。 T ェっ二） ^ 4 辇凝画專

½ ¾9 ^ c ' η 拏 r) 喜拏 2 丁 ¾ 奪）画邕靠 η ¾ ii ' ^ : i §i ¾ ¾ ¾ 拏 ω 拏奪画 ' ^

° s ^ ^ ？：： 2

¾ ¾ ^ 画 ^ ^ > ® 苦鹦） A — て ° 2 ¾ Ik st? S 驢専画 g ^ A — て ' Q 2) :: > Y ¾ ^ ¾

¾ 鱸画 ^ ¾ ¾ ¾ ¾ 鼴奪画 ¾ ^ g * ^ A — て ^ i ^ ^ ^ 一 ^ 奪画喜 * ? 一 ^ 奪画 ^ ^ ^ ^ W S ¾ ¾鱸 ^ 画 ^f ： ¾ 暴驩凝画 ω 一

⑦ s膣 g » a ^ a鱸画 W ^ ' \ ^ ：:) ^ ¾ ¾ 鼴 » 画 $ γ ⁽ つ Υ ¾ ^ ¾ 籙鱸奪画 ® £ — ス > ¾ 、f ω 籙鱸 ¾ ¾ Λ τ a ϋ ¾

° W ¾ ^ 凝画 ^ ¾ ^ 目 S ¾ ¾ m ^ ° ¾ 亩 a f¾ ¾ S H « 画

® ? ¾ ¾ 鱸 s u ' ¾ n ¾ ' ^ ω c Kq.

画 ^ ^ ^ W 1 $| ¾ © i ¾i ¾ 口 4

° > ^ っ ¾ 2 ¾ ^ — 専画 « ¾9 ^ ¾ 0 ¾ ¾ Τ ： ¾ ¾ A ：）丄 ¾ί ¾ ^ 口 4 ' > っ ^ ¾

^ ω Co \

^ 目《奪画 ^ w ¾ r ° § i i ^ ¾ ^ © 、 ¾：) ^ 画喜 ¾ « ¾ 奪画奪画 ¾ «

¾ J<? ¾ ¾ a鼴 ^ 画 ° w q: ¾ ^ S ¾ ¾鱸画 ^ —

L l££0/66df/X3d 6 66 OAV ° っ ^ — © 奪画 ^ ^ Ώ 0 8 ¾

° 、っ ^ 一 ω 画喜 ft ¥) 図 L

つ ^ 爵 © 乙 · 「（ i 画喜 ft ： ^ 図 9 ¾

° 2 つ — ω凝！ M專 ^ ^ ^ ' 誓：

§ 、っ ^ 一 ⑦ 画專 ^ α 譽 ί ¾ί 副 |( _¥) 図 f ¾

、っ ¾ ^ 一 © 奪画 w ¾y ^ $喜 ϊί α 4 ^ m £

。 2 つ ^ 講 ω 乙 . ίί ^ ^ Μ ^ Μ Ζ

° ($ 図 n - ^ ^ ¾ m m m m τ

m ^ m ω m m

° 2 ^ ¾ n：：) $ ¥ Λ T 舊 ¾ つ ¾ ¾ ^ 画専 ^ 。暴鱸 ^ 喜 ^ ^ ^ 画専 ^ ^ ¾ ^ ¾ 凝画 ¾9 ·^ 、 w 挲：：）喜籙拏 τ

。つ ^ & ^ ^ r ^ m m o ^ - ^ ^ >

¾ 、f/ ω ¾ 鼴 $ ¥ Λ τ 喜 ¾ 画専 ¾^ ^ ' I ^ ■： ^ M m ^ ^ γ ' つ Y ¾ ^ ¾ ¾ 鱸

— > ¾ 、 © ¾ 鱸 $ ^ ¥ ^ ^ ¾ 鱸喜 ¾ 0 ^ 画專 ^ ^ ^ 2 、1 W $ 拏：：） * 挲 Τ ' ] ^ ^ §

l££0/66df/X3d 61^9/66 OM 4^ 1 1 1 1

PJV m ° rv ァ ϋίίϊ ~r -r m

I DO 1 QQ 1 — Θ ri O

O CD ri

-τ !1 r M n ァ H m 図 > o 5

ri Pi¾ϊ

rn 瓣 m 4 £3- o o o o

画画画画 O CO 11 l i

ο o ο

Θ Θ Θ OV NJ c n>

¾a , a ¾

O y ？ a+ Ω

F rttn trtn litn i rv o Θ Θ Θ Θ

,VH

¾^ - V

|MD m 1 4H ϋ rtn & fv Hi i ami m

Θ Θ Θ V 画

ΰίΠΙ!

画面 inn! 1 a ¾l 1

¾ Θ

ill ¾ [ VJ

幾 ill ¾l Π Π Π Π

Or r r fV i 1 1 1

Π Θ Π Π

i 1 1 - r

第 21図は第 3 の色補正処理の処理手順を示すフローチャートである。

第 22図は画像合成処理の処理手順を示すフローチヤートである。

第 23図は画像合成処理の処理手順を示すフローチヤートである。

第 24図は画像合成処理の処理手順を示すフローチヤートである。

第 25図は画像合成処理の処理手順を示すフローチヤ — トである。

第 26図はマニアル . コントラスト設定画面の一例を示している。

第 27図はコントラスト補正曲線の一例を示している第 28図は第 4 の色補正処理の処理手順を示すフローチヤ一トである。

第 29図は第 4 の色補正処理の処理手順を示すフローチャートである。発明を実施するための最良の形態

第 1 実施例

( 1 ) 撮像装置の概要

第 1 図は，撮像装置の電気的構成を示すブロック図である。二）乙 ¾ s ® s ' ？! 210 Z S y ^ · 一 ^ ° W y · - ' ？) 5 g ¾

。 ^ m ^ 一 ^ 画專 ^

4 拏 ¾ 奪画専 ^ ¾ ： w $ ¾ Si 、 2} 丄

¾ ¾ ¾ ' ：) 奪画 u ^ CD ° ^ \

¾>^¾呦¾¾喜i ¾ω} ¾つ¾*.ϋαi9·。

9 fi 1 ^ ¾¾ ¾>®丫^斟画 ^画Y裏s Qrsc cn gvn---, m ^ ¹ ？! ：) S ¾ M ff CO 2

。 ^ ^ ^ ：) ？ ® 丄

> n ¾ q f ° 2 画喜 ® ¾ 奪画 n γ ¾

1ί ¾ ^ 画 i } ¾ ¾ ¾ ¾ つ ¾

^ ¾ if ^ 画 ^ Q 21 ' つ

喜 ® ¾ ° > ί? SI ' つ ¾ if ^ 丄 ¾ 窨 ί § ¾ ¾ ϋ Υ w i ¾ § 4- ^ ¾ $ 画喜 @ ？! 画軎靠 ' A ¾ ' 奪画翁画 ^ ^ ° ¾

¾ i G9 ^ ( ^ Ύ ：〗 ― ^ 画 ® 画專 ¾9 ·^ ¾ 一 ^ 專画 § W $ 喜 21 }画 ^ ^ ' i 、 ί? 5 奪画喜 ft ^ ^ ¾ I CD 画 «

¾^ ^ ω ) ¾ § 、 Φ? ' 21 專画喜 # ： w τ r) ¾ ¾ ¾ fl ¾ ^ 喜 _q

' ¾ ω ° > ^ ¾ ^ ― ^ ^ 画 u ^ - w ¾ ½ ¾9 ^ ' 丄 W ) ^ 画 © ¾

W ¾ ( ½ ω呦丫 Ύ ^

：） ¾ ¾ ' ：) 製画 09 ^ t ¾ fi ' ^ ^ つ I £f ：) 丄喜 s (¾ ci

( 呦丫 ) 呦專 ' ？) 喜 ¾ fl Si l££0/66df/X3d 6纏 6 ΟΜ ¾ ¾ i ¾s ^ ¾ ^ 画 ^ ^ ^ ¹ ^ 画喜 a _¾ ^ 挲一 ^ 專画 ¾ ft 、

-- g Γι ¾ 奪 } 画喜 ft f ) — ¾ ¾y ^ 。 § ' d — ¾ § - ^ 奪画専 ½ ¾9 ^ 奪画喜 w ¾ Z ^ 2) ¾ m ' つ ¾ ¾ ¾ *} ^ ¾ § ¾ ；? ^ 画喜 ¾ ' >ι - ^ ^ ϊί 。 ¾ i >| — i w © 喜 * ' 呦 Ύ ) : :: g ^ ¾9 ^ 画 ' ) >ι 一 If

。 . γ 士：） S ΐ ¾ 回 S ¾ ¾9 ^ Λ Τ £Π ΐ ¾ 回奪画 ' 8 ¾ 回秦 m画 ^ ' ？! 1} § H ^ ^ ΪΤ? ¾ ^ ¾ 、 y γ. o ° 9: 、 if ¥ ^ _s s ζ ϋ 拏習 a ¾ §1 /i -

^ ¾ ¾ 拏動 ¾ ω w ω ¾ ニ ®

^ ¾ &¾ ' . ^ . ¾ 25 Λ 9 ¾ ⁽ Z ^ ^ m ^

Ύ - ^ ^ m ^ ^ ^ ϋ ® s ¾ ^ ' ε 2 ^ ^ Y. · て Q E べ , · a J? ベ ·

^ y ω W ¾r Λ Τ * 屮 if ω 凝画 H m ^ ^ ^ ^ 拏；: ΐ ϋ 拏習 ¾ ¾ 拏凝画 ' ζ 2 d

^ ^ ― da ¾ © ¾ ¾ ¾ ¾ 喜 ¾ ¾ * ^ W ^ ω 画 ¾ ¾g ^ ¾ If 拏 ΐ i 拏 ^B ¾ 拏 ^ 画 '

( § 4 5? - 9r 09 W ⑦ ' .^ 一 ϊ ½ g 画 ^ ' - ^ ^ ' d —

^ ^ ¾ ' — i ¾ 書 ί ) I ζ ω ^ - ^ 4- ^ ¾ i © ¾ ω ' d — ¾ί ΐί 画専

、4 - ί ^ ¾ ¾ ' d — 士 % if \ ^ ' ¾ ¾ ¾ι

21 画 66dT/丄コ d 6編 OM 景の光像が撮像レンズ 1 を通して撮像素子 2 の受光面上に結像する。背景画像を表す映像信号が撮像素子 2 から出力され，ァナログ / ディジ夕ル変換回路 3 において， R G B のデイジタル画像ァ一タに変換される。ァナログ / ディジタル変換回路 3 カゝら出力したディジ夕ル画像デ — タは , 信号処理回路 4 に入力する。

撮像装置には , 露出制御回路 7 が含まれている。ァナ口グ / ディジタル変換回路 3 カゝら出力される画像デ一夕は露出制御回路 7 に与えられる。露出制御回路 7 は，入力する画像デ一夕に基づいて撮影のための絞り値の調整，シャッ夕 · スピードの調整などの露出制御を行 o 。露出制御は測光素子 ( センサ）等からの出力信号に基づいて行うこともできる。露出制御回路 7 はまた , 入力した画像デ — 夕にもとづいて背景画像の平均輝度および背景画像の中心部分のスポット輝度を算出する。さらに露出制御回路 7 において , 平均輝度とスポッ卜輝度との輝度差にもとづいて逆光撮影か順光撮影かが判別される。

信号処理回路 4 において，画像データのガンマ補正が行われる。信号処理回路 4 から出力された画像デ一夕は , 背景画像メモリ 5 に入力し，一時的に記憶される。

像装置には，合成対象画像検索回路 8 も含まれている。の合成対象画像検索回路 8 は，撮影条件が異なる合成対象画像の中から， is 影した背景画像に適した合成対象画像を検索する回路である。

撮像置には，スト口ボ装置 9 も含まれており，ス卜ロボ置 9 から背景画像撮影時においてストロボ発光した実またはスト口ボ発光の有無を表すデータが合成対画像検索回路 8 に入力する。

合成対象画像検索回路 8 によつて見つけ出された背景画像適した合成対象画像デ一夕は，合成対象画像メモリから読出され，合成対象画像検索回路 8 を介して画処理回路 1 1に入力する。背景画像メモリ 5 に一時的に記憶されている背景画像を表すデータも画像処理回路 1 1 に入力する。

撮像装置には，色温度センサ 1 0も含まれている。色温度センサ 1 0カゝら出力される色温度情報（データ）が画像処理回路 1 1 に入力する。画像処理回路 1 1 において，入力した色温度情報にもとづいて後述する第 1 の色補正が行われる。

撮影より得られた背景画像データは画像処理回路 1 1および合成処理回路 1 5を介してディジタル / アナ口グ変換回路 1 3に入力する。ディジタル / アナログ回路

1 3において，背景画像データがアナログ映像信号に変換される。変換されたアナログ映像信号が画像表示用液 H日 ¾^ 示器 1 4に与えられ，背景画像が表示される。 9tt is。D ^S Mi ¾ 翁 r\

> glD 画回画瘫

鄉 Pr 回

回 a π> 9

Q n Si rttti 鄉 >f Sin ¾

Oft- Or 鄉づ- Γ 難鄕 av ¾ »画 i ¾S st ri

Θ lis

r]3tn Si 回 ^ \ ¾

CJ- 回 M

PC 回蘭回 · 4- rttn

Θ Π 回

5i- D>

6 M か

鄉 v ¾5 αν 漭 Si 画

> « *画 a 回

画 Ml 鄉 ^ Sマ^ ^ ·

m 鄉 ^ ¾l

e i a- i ^ ' £3- ¾ £3- ' r

¾

, «濉 ί ^ a画 ft画¾ ¾鄕 ¾ T π 一夕は D / A 変換回路 1 3を経て画像表示用 L C D 1 4に表示されるとともに，メモリ · カード 3 0にも与えられ，記録される。

第 2 図は，合成対象画像メモリ 6 に記憶されているファイル（合成対象画像メモリ ' ファイル）を示している。

合成対象画像メモリ · ファイルには，タグ領域と画像データ記憶領域とが含まれている。

画像データ記憶領域には，異なる撮影条件下で撮影して得られた複数の合成対象画像を表す合成対象画像データが記憶されている。具体的には，ストロボ発光下で対象物を撮影して得られたストロボ撮影合成対象画像データ，順光下で対象物を撮影して得られた順光撮影合成対象画像データ，および曇天下で対象物を撮影して得られた曇天 / 逆光撮影合成対象画像データが記憶されている。

ストロボ撮影合成対象画像データによって表されるストロボ撮影合成対象画像が第 3 図に，順光撮影合成対象画像データによつて表される順光撮影合成対象画像が第 4 図に，曇天 / 逆光撮影合成対象画像データによって表される曇天，逆光合成対象画像が第 5 図にそれそれ示されている。

上記の例においては，曇天のときの撮影と逆光のときの撮影とを同じ撮影条件下での撮影としている。し ω ^ A &f ¾ ¾ ¾ ω 呦專 ' ?! ¾ »

° § ^ ' ¾ ^ ^ ^ ^ co

^ ^ ^ a ^ § ί? s s ¾ ¾ ω ι¾ ^ ' ？! ^

¾ 挲 c ¾ ¾ 口 ^: ° i ^ ^ -2 ^ y c, ^ ^ - M ^ m ^ - ^ % m ^ ^ γ. ^ u i ¾ ¾ Sf ω i¾ W ' « ¾ ¾ ^ 蒈 ί · 0：拏 ¾ ¾ ¾ 誓 W ϊί 励 ί ' ^ Ύ ^ -- ° W 5 a ¾ 窨 ί ω 奪画専 ^ ^ § W q; :f r 一 ^ ^ 画 § 、 0 $ ¾ si 25 弒 ^ ¾ — » 画 ' ） Ι ¾ M

° §

M - ¾ ¾ » k c 譽 ί Λ ¾ «. 拏 ¾f ¾J ¾ ω ί§ ' m 4-拏 ^ ? ^ — ^ 奪画： I? ¾ τ： ^ a q ^ ' ( ¾ s » » ^ M m 4- ^ 拏 ¾ ( 誓 ¾ί 磨（ ω ^ ) m m

4 拏 κ o 一 ^ 画 ¾ -ί ¾ #^ i ^ 5 ¾

( ¾ ？) ¾ ^ ) ¾ 誓 ' ー » 画 W T :)

¾ 窨 ί % m ¥ 害 ί ° § 、 W $ m 2i (

^ ベ n ： ) a. ¾ ： ^ ^ ^ 一 ^ ^ 画 ¾ ^ ^ H ' so- m m ¾ ¾ ϊί ω 一 ^ 奪画 ¾ . 1? $ m ^ w M ¾ si ー奪画 ' n ? ^

。 1 っ m si j ( y ' il 3r ¾ 画 ^ ^

^ } fig 一凝画拏 ¾ 專画 ¾ 2- ^ ¾

¾ 0 . w ' ：つ 3 ¾ Si ω ' 土 ^ ¾ ω 「ig ¾ ^

¾ ϊί © # ω % ¾ 誓 ' 9 5? ¾ n ^

画 66機:) d 66ム9/66 OM 拏二）一 ^ ^ 画兽 i $ ¾ 2 ¾ — 二) S ί【専画喜 ft ' ¾ T ¾ ffi ' ) 図 H

0 c

^ ^ ^ - 9 Γι i ^ 翁画喜

¾ s遝 ¾ ^ 0 T -A- ^ ¾ ^ ¾ Λ

^ ^ M % ¾ 口 ^ sw>回sloi: ¥ ¾ a q ' M ^

D 。

^ ^ -2 § 4- a¾»呦EEf3©el¾e乙^。 ¾ 窨 ί ω ¾ ¾ 謇 ί ω奪画

^ n 乙 ' Π i ^ 画

M U ^ ^ 2. 1 ^ ίι ΐ 画喜靠 '

° ¾; 1 i ^ Q η ^ ( y c · ¾ ^ 画 W c · ^ 画喜 ft ？) i m Co 一 ^ 奪画喜： ¾ τ rj ¾ 蒈 ί · Γι i 奪画喜 *

° η ¾ ^ 凝画喜 » ) ( y 乙、1 u ^ m 奪画喜 # ' ？! iSI 9

¾ i ω > c (

¾ ^ ¾ ¾ ¾ ω ) つェ ¾ 4 一 ^ 画 α 会 α ：:】喜籙 ¾ ？ ^ 画專 Ψ ^

^ .

^ 2 ¾ ¾ 2. ^ ^ 25 ( § I ¾ η ¾ ^ 士挲 fi» ?5 ^ ^ 一，奪画 ^ ^ 丫：ム ¾ 回賊 Γι$ w ) » ¥ 腿 ¾ A £ 5 ¾ ¾ il ω i¾ ^ ½ ' ^ M m ^ ¾ Sf Q ^ ¾ gf ¾ ¾ 2k ° S ^ i ：？：？ 2 会 i ? Π fp CD ^ 遝 ¾

81

I£e0/66df/lDJ 66ム 9/660M される背景画像の一例を示している。このような背景画像が画像合成処理前に画像表示用液晶表示器 1 4に表示される。

第 8 図は，背景画像に合成対象圃像（左下の女性の画像）を合成した合成画像の一例を示してレ、る。このような合成画像が画像表示用液晶表示器 1 4に表示される。この合成画像は，重ね合わせ合成画像を見ながら , 上述のように合成対象画像の位置および大きさを調整した後のものである。

( 2 ) 画像合成処理

第 9 図から第 1 2図は，第 1 実施例における撮像装置による画像合成処理の手順を示すフ口一チヤ一トである。

撮影合成モードにおける画像合成に先立ち，上述のように合成対象画像メモリ 6 には，ストロボ撮影により得られたストロボ撮影合成対象画像データ，順光撮影により得られた順光撮影合成対象画像データおよび曇天撮影により得られた曇天 / 逆光撮影合成対象画像デ一夕が記憶されている。

ダイアル 2 1が回され合成撮影モードとされると，撮像素子 2 に結像している背景画像が画像表示用液晶表示器 1 4に常時（動画で）表示される ( ステップ 7 1 ) 。背景画像の構図が決定するとユーザによってシャツタ ' レリーズ ' ボタン（図示略）が押される。背景が撮影され，撮影により得られた背景画像を表わす背景画像データは背景画像メモリ 5 に一時的に記憶される。背景画像を表す背景画像デ一夕が背景画像メモリ 5 から s冗み出 2· れ，画像処理回路 1 1 , 合成処理回路 1 2およびディジ夕ル / アナログ変換回路 1 3を経て画像表示用液晶表示器 1 4に与えられる。すると，画像表示用液晶表示器 1 4に背景画像が静止画で表示される。実行ボタン 2 4が押されると（ステップ 4 2 ) 処理に入る。背景画像が順光撮影により得らか，逆光撮影により得られたものかが判別さテッフ。 4 3 ) この判別は，背景画像の中央の域の輝度レベルと背景画像の平均輝度レベルもとづいて露出制御回路 7 において行われる

光所合象対置のが。画れれスたるると背景画像がストロボ発光下において撮影され通合読成画象像定。次テの，たもる 9

像逆成差対画み合ののかにもッりどうか背景画像のストロボ判別が行われる（

像象で対光成領か出のスにプを，ら 4 4 ) 。このストロボ判別は，ス卜ロボ発光装出力されるストロボ情報にもとづいて行われ

つづいて，合成対象画像検索回路 8 により画像メモリ 6 に記憶されている複数の合成対表す合成対象画像デ一夕の中カら一つの合成データが見つけられる。この検索処理は，次ある。合成対象画像メモリ 6 に記憶されてい象画像ファイリレの夕グ領域から撮影条件情報

5 れ 0 5冗み出された撮影条件情報の中の順の撮影状況およびストロボ情報が背景画像のそれらとそれそれ一致している合成対象画像データが合成対象画像メモリ 6 から読み出される（ステップ 4 5で Y E S ) 背景画像の順光，逆光の撮影状況判別結果およびス卜ロボ判別結果に一致しているようなタグ領域を持つ合成対象画像データが合成対象画像メモリ 6 に記憶されていなければ（ステップ 4 5で N 0 ) , 合成対象画像メモリ 6 に記憶されている画像データの中からス卜ロボ撮影合成対象画像データが選択される（ステップ 4 6 ) 。選択されたストロボ撮影合成対象画像データが合成対象画像メモリ 6 から読み出される。

さらに，色温度センサ 1 0によって検出された背景画像の色温度が画像処理回路 1 1のメモリ（図示略）から読み出される（ステップ 4 7 ) 。合成対象画像メモリ 6 から読み出された合成対象画像の色温度と，読み出された背景画像の色温度との差が許容範囲内かどうかが判断される（ステップ 4 8 ) 。

許容範囲内でなければ（ステップ 4 8で N 0 ) ，合成対象画像についての第 1 の色補正処理が行われる（ステヅプ 5 0 ) 。この第 1 の色補正処理については後述する合成対象画像メモリ 6 から読み出された合成対象画像の色温度と，読み取られた背景画像の色温度との差 z ^ - | s ^ a v - T ^ a v | = e ^ a v 鴛っ

¾ S A 3 V ¾ ^ ¾' ® ¾ ¾ S ( 画 ^ ' ^ z ^ Ά V ¾ ¾f » ik ® 、 ^ 画喜晶 ' ( ¾ i 0- $ ¾ SI

25 m M ^ ( ( y ^ - 奪画奪 ^ ^ ) τ ^ a v ¾ ¾ a ( zt ® ）專画 ½ ¾9 ^ 。 2 · ^ 翥一 ^ ¾ ¾ ω ι¾ ^ — ^ ¾ S 挲画 ^ 锇 τ ^ -- e ί z 0 · 0 + 0 ί' s ϊ · 0 + H s 21 ζ · ο = & a 凝 ¾ a 一 ^ ¾ ¾ ω 肇画 ^ つ -2\ \ ¾ ^ 一：^ 奪画 ω 肇画 g s Η 專画喜靠 ' ^

° ¾ 、 ¾ ω 丄 W ' ?! π ¾g ¾ w ° ( z s 。乙 ^ ） w $ ^ 「i余 ^ ^ M W 羣 ¾ _s ¾ ¾ S ¾ ¾ zk 奪画喜 ft W ^ ^ ^ 画 ^ ^ ^ 9 n i 画 ^ ^ ^ ° 2 w ¾ 3 一 ^ 凝画軎 ¾

W ¾ 二） i ¾ 回賊 K FT? S ' » ¾ ' ¾ ¾ ω コ ° ( I S r、、 ^ 2 W ¾ ^ ^ ¾ ¾ 0 凝画喜 # ' 25 6

° 1 ^ ' ^ ） ¾ ¾ © 0 S。 ' ( S 3人 8 。乙 ^ ) ^ ¾ ¾ 2- M H ¾ ¾ il

ZZ K£0/66dT/lDd 9/660M 挲 Τ 2ί ^ - ^專画 ¾9 ^ ¾ v1 2. 1 $ m si ) 9 Γι 画專 « ¥ί ^ ^ コ ^

· て ,_t - ° S ^ >1 一 ½ g 專画 « ^ つ回 y ° ( S 。乙 ' ON •i- 99 ： ^ ^： ) ¾ w

^ m ^ %\ 画 ^ ω W i ^ T ：) .-6- 一て ' ？) ：) ^

^ :4 つ凝画專 ^ ^ ¾ ¾ ^ 凝画 Η ^

w $ 拏二）丁厘画拏 ω f i 拏管 m 拏凝画

° ( ZL ^ ん ^ ) ^ ^ 拏 ^ 軍

^ 画専：:) 奪画喜 ¾ ' 25 ^ ΐ it 習 ¾ ¾ 拏奪）画

。 ¾ V(- ¾ 二） I 拏暨 ffi 拏奪画っ ^ ¾ ε ΐ ¾ 回 ^ Λ η 4- / ( ^ ^ 一 ^ ： W ^ ^ ^ ^ 重 ° ( 99 。乙 ^ ^: ) ¾ q: ¾； q- ( M m — ^ ® « 画 D 7> ) ^ 重 ω ？ - ^ 画専

H ^ ^ ^ 一 ^ 凝画篁 ' 、 ^ 59 ΐ §2 回 S ϊίί

° 2 4- ¾ ¾ > つ ¾ S ¾ HT ¾ ¾ z c ^ 。 S ム ) ¾ ϋ ® 、 - π 画専 ^

( 0 N i Z S ^ r, ) .¥) U u . y ri »} ¾ m ^ 著 ε d ^ ε ^ a V

° ( ¾ w ^ w w » ¾ w 苦 ¾ ¾ ε ）

Γ) ¾ ¾ 992 ω a. ^ s s z〜 0 « > っ ^ ？） d ： d ) 1} ¾ ^ e ^ a

ZZ IC£0/66df/XDJ 9/660M 合成対象画像が一駒ずつ順に，画像表示用液晶表示器 1 4に表示される。ユーザは，所望の合成対象画像が表示されたときに実行ボタン 2 4を押すことにより合成対象画像を選択することとなる。新しい合成対象画像が選択された場合には，ステップ 4 7からの処理が繰り返される。

画像表示用液晶表示器 1 4の表示画面上に表示されている合成対象画像を見て，その合成対象画像を背景画像の組合わせで良いと判断したときには，ユーザは実行ボタン 2 4を押す ( ステップ 5 6で Y E S ) o

次に，画像表示用液晶表示器 1 4の表示画面上に表示されている合成対象画像（背景画像上に重ね合わされたもの）を見て，その合成対象画像の色ノランスがそれで良いかどうかがユーザによって判断される（ステップ 5 8 ) 。色バランスが良ければュ一ザによって再び実行ボタン 2 4が押される。

第 1 3図は，マ二アル表示用液晶表示器 2 5に表示されているマ二アル色バランス設定画面の一例を示している。マ二アル色バランス設定画面は，ユーザから表示指令が与えられることにより表示するようにしてもよい ₀

マニアル色ランス設定画面には，赤色を調整するときにユーザよって設定される領域 8 1 ，緑色を調整するときにュザによって設定される領域 8 5および青色を調整するときにユーザによって設定される領域 89 が含まれている。

赤色領域 81には，赤成分の量を多くするときにユーザによって夕ツチされる領域 82 , 赤成分の量を少なくするときにユーザによって夕ツチされる領域 83，および設定された赤成分が基準量（色バランス調整を行なつていないときの赤成分の量）よりもどの位離れているかを表示する設定表示領域 84が含まれている。緑色領域 85にも，緑成分の量を多くするときにユーザによつてタツチされる領域 86 , 緑成分の量を少なくするときにユーザによってタツチされる領域 87および設定された緑成分が基準量（色ノランス調整を行なっていないときの緑成分の量）カゝらどの位離れているかを表示する設定表示領域 88が含まれている。さらに，青領域 89にも，青成分の量を多くするときにユーザによって夕ツチされる領域 91 , 青成分の量を少なくするときにユーザによって夕ツチされる領域 92および設定された青成分が基準量（色ノランス調整を行なっていないときの青成分の量）からどの位離れているかを表示する設定表示領域 93が含まれている。

ュ一ザは，これらの領域 81カゝら 93を使って色ノランスを設定する。

第 14 A 図，第 14 B 図，第 14 C 図は，色バランス設定値（設定表示領域 84， 88および 89に表示されている設定値に対応する）とその補正量との関係を示している。これらの関係にもとづいて，色ノランス補正が行われる。後述するように， K a は L * a * b 表色系における色データ a *についての補正量であり， K b は L * a * b 表色系における色データ b *についての補正量である。

ユーザによって色ノランスが設定されると（ステツプ 59 ) , 後述する第 3 の色補正処理において用いられる色温度識別デ一夕が C B 1 に設定される（ステップ 60 ) ( 色温度識別データは C B 0 または C B 1 の値をとる。電源力 s オフからオンになったときには C B 0 に設定される）。その後，合成対象画像についての第 3 の色補正処理が実行される（ステップ 61 ) 。この第 3 の色補正処理についても詳しくは後述する。

画像表示用液晶表示器 14に表示されている合成対象画像の色バランスを調整する必要力 ^s なければ（ステツプ 58で YES ) ，ユーザによって実行ボタン 24が押されステップ 59から 61の処理はスキップされる。

つづいて，画像表示用液晶表示器 14に表示されている合成対象画像（背景画面上に重ね合わされたもの）をユーザが見て，合成対象画像の明るさが確認される ( ステップ 62 ) 。その明るさで良ければ（ステップ 62 で YES ) ，ユーザによって実行ボタン 24が押される。

表示されている合成対象画像の明るさが妥当ではな in Ml Θ 0 八 o

0 rv Θ Ml I !i - ύ. H Π I 1 a 八 li M -

H nrr ¾ N] Or f < 1

Mi V H- n ill II

- av (V Θ av 画 rv

画 ί 0 0 織

n av o Π ¾ Θ Π l!

卅 > N]

o

Π Π CM か 1

Θ ill fr O

o as .p|_f 0, Π rv r gffl m

<- 9 - 1 ¾¾

Q II 9 0 n & m 画一 8 呌 ri r

o f ¾ >i e! ¾

Q Θ ― Τ av av rv r ί r T ¾i f V] 織 0 画

¾H is ei Θ ei av Π OV - m

¾l ov EE av S Θ Ml αν a- av m 1

Si o

VI

ri m gli ΓΤ ov

vi t o

n H Θ

る合成対象画像（背景画像上に重ね合わされて）の位置が矢印キーパッド 2 2の操作により調整される。また , 合成対象画像の大きさがプッシュ · スィツチ 2 3の操作により調整される（ステップ 6 6 ) 。合成対象画像の位置および大きさが決定すると，ユーザによって実行ボタン 2 4が押され背景画像に合成対象画像が合成されて（合成処理回路 1 5において，合成対象画像の部分が背景画像から切り抜かれて，その切り抜かれた部分に合成対象画像が嵌め込まれて合成画像データが生成される），画像表示用液晶表示器 1 4に表示される（ステッフ。 6 8 ) 。

合成処理により得られた合成画像を表す合成画像デ一夕がメモリ ' カード 3 0に記録される（ステップ 6 9 ) 第 1 7図は，第 1 の色補正処理の処理手順を示すフ口 — チャートである。第 1 の色補正処理は合成対象画像の色（ホワイト）ノ ' ランス補正を行うものである。

第 1 の色補正処理においてはまず，合成対象画像の色温度倩報が合成対象画像メモリ · ファイルの夕グ領域から読出される（ステップ 1 0 1 ) 。

合成対象画像を表す画像データは R ， G , B の 8 ビッ卜画像デ一夕である。この 8 ビッ卜の画像データ R , G , B が三刺激値 X Y Z での画像データに変換される（ステップ 1 0 2 ， 1 0 3 ) 。変換された三刺激値 X Y Z での画像データが色バランス補正される。

具体的には 8 ビットの画像データ R ， G , B が一旦非線形 R G B データ R 。， G 。， B 。に変換される。非線形 R G B デ一夕 R 。， G 。， B 。がさらに線形 R G B データ， G 1 ， B 1 に変換される。最後に線形 R G B データ R , , G ！ , B 1 が三刺激値 X Y Z に変換される。

一般的に 8 ビットの画像データ R , G , B と非線形 R G B データ R 。， G 。， Β 。との間には式 4 に定める関係がある。式 4 にしたがって 8 ビットの画像デ一夕 R , G , Β が非線形 R G Β デ一タ R 。， G o , B 0 に変換される。

R 0 = R 2 5 5

G 0 = G 2 5 5

B 0二 L 2 5 5 式 4 非線形 R G B デ一夕 R 。， G 。， B 。と線形 R G B データ R ， G 1 , B ！との間には，撮像装置固有の特性（関数：で定める）を考慮すると，式 5 で示される関係がある。但し， V 。 = R 。， G 。， B 。， V 二 R 1 , G I ， B 1 である。

V f ( V ) 式 5 式 5 を用いて，非線形 R G B デ一夕 R 。， G 。， B 0 が線形 R G B データ R i ， G 1 , B ！に変換される 0 たとえば撮像装置のァ特性力 s I T U - R B T .709 ( INTERNAT I ONAL TEL E C OMMUN I CAT I ON UN I ON I TU R ad i o - c ommun i c at i on B T Seri es 709 ) に従うものとすると，式 5 は式 6 によって表わすことができる。非線形 R G B データ R 。， G _Q ， B 。が式 6 の関係式を用いて線形 R G B データ R i , G . , B 1 に変換される。 0

… 式 6 線形 R G B テ ― 夕 R 1 G B i カゝら刺激値 X

Z への変換は式 7 によ O て行われる 0 r r

X / 100 a l a 1 2 a i 3 R i

Y / 100 a 2 a 2 2 a 2 3 G i

X / 100 a 3 a 3 2 a 3 3 B i

J J

式 7 式 7 において用いられる a 1 1 〜 a 3 3のマ卜クスは卜ま/ :

1 1 AJ X Hi

AJ ih K ¾ Θ CO Ή

-TlJ PQ si お §

33 画屮 tsi

H

PH Θ St¹ +

\ \

1¾ \ Θ

t

画 rtd + Q X r_]rk V CO 1 X CO X VII X VII o oo

• Β¾ m oo t>- t

AJ Γ7Γ

IK 铤 II SS + + + +

v - Θ X Q + lrml H s.

HI Q 画 Q リ ) \ \ X ¾ \ \

m °ΓΝ

V is ) ≡i \

X X ΓΝ -TO ^ PQ HI IK w H m X 1 X oo

M o <n

屮 h O 画 iK り 1 + 1 +

II II

X) (¾ iK リ 1 X

V

刺激値）と X とは式 9 の関係がある y = 3.000 ² + 2.870 X - 0.275 式 9 式 8 および式 9 から X および y が算出される。算出された X および y を上述した関係式 x = X / ( X + Y + Z ) ， = Y / ( X + Y + Z ) に代入し， Y = 100. 0 ( = Υ n ) とすると X および Ζ 力 s 算出される。このようにして得られた X , Υ , Ζ が白色点 X _Π , Υ η ，

Z n である

合成対象画像の色温度を用いて撮影時の合成対象画像の白色点 X η , Υ _η , Z _n iが算出され，背景画像の色温度を用いて背景画像撮影時の背景画像の白色点 X n , Y Z _n が算出される。

算出された白色点 Χ _{η 1} , Υ π Ζ X π , Υ η

Z n を用いて補正係数 X n s / X m , Y n / Y n ! , Z n

/ Z n が算出される。式 10にした力 s つて，算出された補正係数を , 合成対象画像の三刺激値 X ， Y ， z に乗じることにより色バランス補正が行われる（ x _t ， Y ， Z が色バランス補正後の三刺激値（すなわち色バランス補正後の合成対象画像を表わすデータ）である）（ステップ 108 ) o

X , = X n X X X ' ri cs ^ ¾ ¾ 31 ¾ ^ ¾ &a 4 — ' ( S3人 ^ ΐ I I ^ 、 ^ o w Ί 一「 m w M

° ( I I I 。乙 ^ m m

^ 一 ^ 『ig m ¾ ¾

W § 據脉？ c ¾ 31 ¾ ^ ¾ &a - I ) S ¾ 31 ¾ ¾ ω z m

° ^ ( 99 ^ mzi ) 3i ¾ ^ ¾ ¾ - ¾ If ^ ¾ ¾i m 3Γ ¾ ^ ¾

¾ i - i . ^ ) .-A- — て ^ ( S ^ m o i ¾ )

) ¾ ¥) i ¾d m »} ¾ ^ 画喜靠 ^ ^ 鹪 zfc ® 凝画奪 ¾ ' ？ ! Γ} HI ¾ ^ ¾ ¾ ¾ ^ ) S W HI ¾ ¾ ω z m

° 9 ¾ ω ^ ¾ -

ΗΓ » ¾ 9: 画專 ^ ^ T¾ HI ¾ ¾

° 9 Π ^ 阖 ® ^ ¾ HI ii ^ ¾ » 害 ί co 7 ^ % ^ %難 ί ' MQ l ° ¾ 0- 4 ― Ar ― 口乙 4 ¾ 達 ί ΐ ¾ ί¾ ω ΐΕ ¾ HI K ¾ ω S 第 ' 《 msi m

。 ( 6 (Π 、 ^ ） § ^ ¾ ¾ Γ5 一 ^ 3 Ό H 5<? ( ι ζ ' ¹ Λ ' ¹ X ) m ≡ ： W 31 ¾ ^ ¾

⁰ ν1 ^ っ ¾ ¾ ¾ [i

Sii in ¾ ω ^ n ベ乙 25 Q Q ¾-} ω o ΐ ζ χ ^{1 u} z z z o I ^ 入 X ^{1 u} 入入 Λ l€£0/66df/IDd 6^6^.9/66 OM w ^ + Π

1 EE > |i

σ ？ F fV

1 3 Π c

Si αν ァ II n Π

1 Q PC OA- in ω rr Θ m Si Si ω ov av π 驰画

Θ > 画鄉 _o

0 Ok 図画 Θ

□> i Pf Θ EE -Hi ' Π 脔

a Θ

1 EE

鄕 H > rv OV

画 i 口 n> d 画 Q

1 Q Ά EE > a

Ml W CO 7 Θ

1 Θ n 鄕

ill t 画 m Si Pr

(V 3- 画画 H

Hi h- Q Θ VJ 癩

1 鄕书幾 Θ Θ

画 :ιι[ι

sS

ω

o

9 a- a- o m

G = G + K 式 1 2

B ₂ 二 B + K 輝度識別データが L Μ 0 には設定されていないと（ステップ 1 1 1 で Ν 0 ) , マニアル明るさ補正と判断され , 第 1 2図のステップ 6 3 において設定された明るさ補正値 Κ _Ε ( 第 1 6図参照 ) が読み取られる（ステップ 1 1 4 ) 。読み取った明るさ補正値 K _{E y}が R G B の合成対象画像デ — 夕にカロ算されることにより，明るさ補正が行われる

第 1 9図においては，逆光と曇天とでは異なる補正係数 K s となっているが，逆光の補正係数と曇天の補正係数との平均値を逆光および曇天の補正係数として共通に用いてもよい。

第 2 0図および第 2 1図は，合成対象画像についての第 3 の色補正処理の処理手順を示すフローチヤ一トである。

まず，合成対象画像の色温度情報が合成対象画像メモリ 6 のタグ領域から読出される（ステップ 1 6 0 ) 第 3 の色補正処理においては，上述のようにして R G Β 画像テータを三刺激値 X Y Z に変換するためのマトリクスが算出される ( ステップ 1 0 2 ) 。 R G B 画像データは算出されたマトリクスを用いて三刺激値 X Y Ζ に変換される。さらに，変換された三刺激値が L * V

* X X X ^ Or o

Si Si ¾ Θ Π

£3- 1 1 IS1 TO ° ¾ 漭

* II II

[S3 -I ν

>- si <! \

GO O

Q Ω C

\ \ 画

\

ω VJ dd X X t—

HI

ΓΤ 5i- Ml

1

Π 1

1 1

\ \ *

o

\ *

a + Π IS1

ΗΛ V \ \

o f

<- tSJ

鄕 o O

\

画 ov Z>

oo t ~ ^ CO Θ

癍鳊 oo OO

n n 画 #

Θ o

PC as cr 画 π si

像データから色データ a * ， b * が抽出される（ステップ 164 ) 。

読み取られたマニアル色バランス補正値を用いて，合成対象画像の L * a * b * 表色系における色データ a * b *について色ノランス補正処理力；実行される（ステップ 176 ) 。具体的には，ユーザがマ二アルで設定した設定値に応じて補正量が第 14A 図〜第 14 C 図を参照して読取られる。読取られた補正量 K a が色データ a * に力 Π 算される。また読取られた補正量 K b が色デー夕 b * に加算される。

色ノ ' ランス補正が終了すると， L * a * b * 表色系の画像データが R G B 画像データに変換される（ステツフ ° 177 ) o

色温度識別データが C B 1 に設定されていない場合には（ステップ 172 で N 0 ) ，色ノランス補正は行われなレ、（ステップ 175 ， 176 の処理はスキップされる）第 2 実施例

第 1 実施例における第 1 図〜第 8 図および第 13図〜第 19図はそのまま第 2 実施例に適用できる。

上述した第 1 実施例においては，合成対象画像メモリ 6 には，複数の異なる撮影条件下において撮影された合成対象画像を表す合成対象画像データが記憶されており，複数の合成対象画像の中から一つの合成対象画像を選択している。これに対して，第 2 実施例においては，合成対象画像メモリ 6 には，所定の撮影条件下において撮影された合成対象画像を表す合成対象画像データせ記憶されている。この一つの合成対象画像を表す合成対象画像デー夕について色補正を行って背景画像と合成するものである。

第 2 2図から第 2 5図は，合成処理の処理手順を示すフローチヤートである。これらの図において第 9 図から第 1 2図に示す処理と同一の処理については同一の符号を付して説明を省略する

合成対象画像メモリ 6 から読み取つた合成対象画像データによって表される合成対象画像の順光か逆光かを表わす情報と背景画像の順光か逆光かを表わす情報，および合成対象画像のストロボ情報と背景画像のストロボ情報のいずれも一致するかどうかが判断される ( ステツフ。 4 5 )

いずれの情報とも一致すると（ステップ 4 5で Y E S ) ，コン卜ラスト識別デ一夕は， C N 0 に設定される（ステップ 1 2 1 ) ( コントラスト識別デ — タは， C N 0 ， C N 1 または C N 2 の値をとる。電源がオフ力ゝらォンになつたときには初期値として C N 0 に設定される ) 。上記の情報の少なくとも一方の情報が一致しなければ（ステツプ 4 5で N 0 ) , 色温度識別データは C B 0 に設定され，コントラスト識別データは C N 2 に設定される（ステップ 1 2 2 ) 。すると後述する第 4 の色補正処理が行われる（ステップ 1 2 3 ) 。

また，合成対象画像の色温度情報と背景画像の色温度情報との差が許容範囲内かどうかが判断される（ステツプ 4 8 ) 。

これらの色温度情報の差が許容範囲内でなければ（ステップ 4 8で N O ) , 上述の第 1 の色補正処理が行われる（ステップ 1 2 4 ) 。これらの色温度情報の差が許容範囲内であれば（ステップ 4 8で Y E S ) ，ステップ 1 2 4 の処理はスキップされる。

また，上述したように合成対象画像の平均輝度と背景画像の平均輝度との輝度差の絶対値が所定値以内でなければ（ステップ 5 2で N 0 ) , 輝度識別データが L M 0 に設定される（ステップ 5 3 ) 。その後，上述のように合成対象画像についての色補正処理が行なわれる（ステップ 5 4 ) 。

また，コントラストのマニアル補正を行うこともできる。背景画像のコントラスト（背景画像の中の最暗部と最明部との輝度比）と比べて合成対象画像のコントラスト（合成対象画像の中の最暗部と最明部との輝度比）が（極端に）異なれば（ステップ 1 2 7 で N 0 ) , マニアルにより合成対象画像についてのコントラスト補正値が設定される（ステップ 1 2 8 ) 。マニアル表示用液晶表示器 2 5には，第 2 6図に示すマニアル · コントラスト設定画面 180 が表示されている（もっとも，ュ — ザからの指令に応じてマニアル · コントラスト設定画面 180 を表示するようにしてもよい）。設定画面 18 0 には，コントラストを強めるときにュ一ザによってタツチされる領域 181 ，コントラストを弱めることにユーザによって夕ツチされる領域 182 およびコントラストの設定値が表示される設定表示領域 183 が含まれている。

第 27図はコントラストの補正曲線を示すグラフである。

コントラストの設定値（第 26図のマニアル · コントラスト設定画面 180 の設定表示領域 183 に表示されている値）に応じた補正曲線が選ばれ，選ばれた補正曲線にした力つて補正が行われる。

たとえばマニアル · コントラスト設定画面 180 においてコントラストの設定値が「 + 2 」であるとすると， + 2 の曲線を用いて，合成対象画像について .コントラスト補正が行なわれる。

マ二アルでコントラスト補正値を設定した場合には，色温度識別データが C B 0 に設定され，コントラスト識別データが C N 1 に設定される（ステップ 129 ) 。その後合成対象画像について第 4 の補正処理が実行される（ステップ 130 ) 。

また第 2 実施例においては，マ二アルで色ノランス成情合てれ Aにラを Nを，口 3

対報成第お説設示色のボス }コる o

定するときには（ステツプ 5 8で N 0，ステップ 5 9 ) 温度識別データが C B 1 に設定され，かつコントト識別デ — 夕が C N 0 に設定される（ステップ 6 0 。その後ステップ 1 3 0 と同じ第 4 の色補正処理が対象画像について行なわれる（ステップ 6 1 A )

2 8図および第 2 9図は第 4 の色補正処理の処理手順すフローチャートである。第 4 の色補正処理は第色補正処理に対応するもので，第 3 の色補正処理ける処理と同一の処理については同一符号を付し明を省略する。

ントラスト識別デ一夕が C N 0 かどうかが判断さ ( ステツプ 1 6 0 ) コン卜ラスト識別データが C に設定されていれば（ステップ 1 6 1 で Y E S ) ，合象画像の順光か逆光力ゝの撮影状況およびストロボが背景画像の順光か逆光かの撮影状況およびスト情報とがそれぞれ一致している。の場合，合成対象画像中における最明部の輝度と冃京画像中における最明部における輝度とはほほ' 等しいまた合成対象画像中における最暗部における輝度と景画像中における取暗部における輝度とはほぼ等しい。したがつて合成対象画像中における最明部と最暗部との輝度比を表わす合成対象画像のコントラストと背景画像中における最明部と最暗部との輝度比を表わす背景画像のコントラストとはほぼ一致する。した § C 2) ¾ ^ ¾ 4 べ匚 ω ^画奪 ^ ' ^

¾ 3- 蔡画 Q) i 丄 ¾ W ^ 專画 α ¾ a 画 ω ¾ 害 ί ω 丄 ^ 誓 ^ 画専 ¾ II： ^ ff? ¾ ^ ¾ 3ΐ ¾ ^ Π C ¾ ¾ ^ ( m ^ HI ¾ 0 「 t + 」 ' Ύ ^ :4·

) ¾1 W 31 ¾ ^ ^ ^ π ¾ c ¾ ^ ^ λ

匚

fi* ω % m ' % m

° ( 19 I ' 99 ΐ 厶、 ^ · 、 i w Λ 「lg [ι* a ^ Λ ^ ^ Γι余 Q) % ⁽ ¾ί li ω凝画邕 # ） Q5? ΗΓ 匚 · - ' ( S 3入 s 9 I ' ^ ) ^

§ 、 if $ 2 N 0 一 rig ^ ^ 4 べ匚

( 691 ) w ¾6 ^ ^ 華

31 ¾ 4 ^ 4 べ匚 ( X. ^ 0： ¾ ^ HI べ匚 1 ^ ^ : l 31 » 4 ^ q c ¾ if ¾ 種工 T 二） - ' ( 0 Ν α 99 ΐ X- ^ Y- ) ^ 1

^ ^ ΐ ^ ^ ^ 2 N 0 5<? ー fig 耀 ^ Y. ^ 4 べ匚

。 (

S 9 I 。 ^ ^: ) W $ 拥 ^ ^ 7{ ^ ¾ 、1 ^ ^ i 2 N o ^ ^ - rig n ^ ^ ^ q ベ c ' ( ON 191 ^ ^

^ ^ ) H ) ¾ i 0 N 0 ^ 4^ - ^ 「ig ϋ 4 ^ 4 べ匚

I€£0/66Jf/13d 6fr6ム 9/66 O/W うなコントラスト補正曲線（たとえば，「 + 2 」の補正曲線）となるようにコントラスト補正値が算出される。

また第 1 実施例と同様に合成対象画像を表わす R G B データが L * a * b 表色系における画像デ一夕に変換される（ステップ 102 , 162 ) 。 L * a * b * 表色系における画像データから明るさデータ L * と色データ a * および b * とがそれぞれ抽出される（ステップ 163 ， 164 )

コン卜ラスト補正値が算出されるか，マニアルのコントラスト補正値が読み取られるとそれらの補正値を用いて，コントラスト補正曲線（第 27図参照）にもとづいて合成対象画像の明るさデータ L * についてコントラスト補正が行われる（ステップ 171 ) 。合成対象画像の色デ一夕 a * および b * については第 1 実施例と同様に色ノランス補正が行なわれるのはいうまでもない（ステヅプ 172 , 175 , 176 ) 。

上述の実施例においては，合成撮影モードが設定された場合について説明したが，この実施例による撮像装置は他のモード，たとえば撮影モード，合成モードなどの設定もできる。

ダィァル 21によって撮影モードが設定されたときには，撮像素子 2 によって被写体が撮影され，アナログ

/ — '、 , ヽ、、

ァインタル変換回路 3 においてディジタル画像デ一夕に変換される。ディジタル画像データは信号処理回路 4 においてガンマ補正される。画像データは背景画像メモリ 5 を通過して画像処理回路 1 1および合成処理回路 1 5を介してディジタル / アナ口グ変換回路 1 3に与えられる。画像デー夕はディジタル / アナログ変換回路 1 2においてアナ口グ映像信号に変換され画像表示用液晶表示器 1 4に与えられる。被写体像が画像表示用液晶表示器 1 4に表示される。ユーザは，画像表示用液晶表示器 1 4に表示されている被写体像を見ながら構図を決める。シャツ夕 - レリーズ · ボタンが押されると被写体像を表わす画像データが背景画像メモリ 5 に一時的に記憶される。

画像データは背景画像メモリ 5 から読出され，画像処理回路 1 1に与えられる。画像処理回路 1 1において，色温度センサ 1 0から与えられる色温度情報にもとづいて画像データについて色バランス調整が施される。また画像処理回路 1 1において，必要であれば明るさ調整その他の画像処理が行なわれる。画像データは合成処理回路 1 5を単に通過してメモリ ' カード 3 0に与えられ , 記録される。

ダイアル 2 1によつて合成モードが設定されるときには，撮影モードによつて背景となる被写体が撮影され , 背景画像を表わすデータが背景画像メモリ 5 に記憶されている。合成モ — ドが設定されると背景画像メモ

° 2 w n ' ^ ¾

D o ε - ^ - 「1 ¾ ：?） 4 ー ^ 拏 ¾ 画 ^ ^ ° w ¾ 奪画 ^ （ w ^ ^ ^ 製画專 ^ ^ ^ Γ) 専画 # 25 ^ ¾ q ¾ _τ ⁽ ^ ^ ^ ^ ^- z ^ ^ ' つ

c ^ ^ ¥ ω 9 if r 鱸 ^ 喜 ¾ '

^ 画喜 ft ' W $ ¾1 ^ 一 ^ 奪画專 ¾9 ^ ¾ 9 Γι 1 画 ¾9 ^ ° § ： $ 拏 # 奪画喜 ¾ I ¾ 習

¾ ¾ 拏奪画 ° § w ^ ^ 一 ^ 奪画喜暴 s n

S

Ol€£0/66df/13c[ 6C6.9/66 O

Claims

請求の範囲

1 . 異なる撮影条件の下での撮影によって得られた複数の合成対象画像を表わすデータを記憶する合成対象画像デ — 夕記憶手段，

背景を撮影して背景画像を表すデータを出力する撮像手段

上記撮像手段による背景画像の撮影時の撮影条件にもとづいて，上記合成画像データ記憶手段に記憶されている上記複数の合成対象画像データの中から，背景画像に適する一つの合成対象画像データを選択する合成対象画像選択手段，および

上記撮像手段から出力される背景画像に，上記合成対象画像選択手段によつて選択された合成対象画像を合成し , 合成画像を表す合成画像データを出力する画像合成手段，

を備えた撮像装置。

2 . 上記合成対象画像選択手段が，上記複数の合成対象画像デ一夕の中から，背景画像に適する一つの合成対象画像データを , 合成対象画像および背景画像の撮影条件に基づいて自動的に選択するものである，請求項 1 に記載の撮像装置。

3 . 選択指令を入力する選択指令入力手段をさらに備ん , 画 Q ) ¾ ¾ ϋ ^ 画 2 T ' ¾ ΐ 39 ^ ^ 画 2 Τ 酈：） $

¾ ΐ δ鱸専画 ^ ¾ S W ¾鱸画 ω 一 ^ > ¾ <\ι ω

¾ 膣 ¾ ¾ Λ ^ 凝画奪 ^ ^ 2 W $ 挲 Τ 一 ^ ^ 画奪 ^ ^ w $ ½ li ' 3 3 ^ ¾ 暴鼸奪 } 画 w $ ^ Y 画 2 Τ ) L ¾ ¾ ' ¾ 丫 ^ ¾ ¾ 鱸奪画 ^ Υ ¾ ^ Ιί ¾ 鱸 ^ 画 ω 一 > ¾ vf/ ω ¾ ϋ ¾ tt Λ £r ¾ H ¾ · 9

。喜 ¾ 専蒈 ί » ^ ） ϊι τ m ¾ ω ϋ

¾ ¾ -.0 ^

¾ ^ ¾ ? ^ 画喜 ft ^? 奪画専 ¾¾ ^ w ^ s w ¾ n 画 Q ） ¾ ¾ 鱸奪画 T ^ ^ 画 2 T

' ¾ Γ5 ¾ 籙鱸凝画 ^ ¾ ¾ ¾ W

¾ 鼴 ^ 画 ^： — ；？ > ^ ω m ^ M L ¾ H ¾ ω 画専拏一 ^ 奪画専 ^ ^ ^ n m ' 、） ^ ¾ ¾ ^ 画喜 ¾ ¾

^ ΕΙ τ ^ ？ ^ 1ί Q τ ¾ ΐ ½ ΐί專画専 w ¾9 ^ 01 Τ

D £L 9 ¾ ' ¾ ΐ ΞΙ ¾ ?1 « s 斟 2 ¾ Φ} ¾ ¾ ϊί a ¾ ¾ ω 画專 ¾9 ^ 01 τ -

° 喜 ^ ^ 謦 ί » 2 ：：) τ ϊι本 « ' ¾ ¾ a- ø ^ < n m ¾ 4一 ^ ^ 画 ^ ^ ^ 2 丁 ' ψ ω 一 ^ 専画專

^ ^ ) ϋ ¾ 21 ' 2. l S!i ) ^ ¾ ½ 1ί ¾ 0 ^ γ ¾ ΐ ^ Υ ^ ¾ ½ ii SI Τ ' ¾ ΐ ¾ϊ 1ί 画専 ^ τ l€€0/66d / jJ 6^6.9/66 O 調整処理された合成対象画像データと背景画像データとを合成するものである，

請求の範囲第 1 項に記載の撮像装置。

6 . 画像表示のための表示装置，

上記撮像手段により撮像された背景画像を表示するように上記表示装置を制御する背景画像表示制御手段，および

上記画像合成手段により合成された合成画像を表示するように上記表示装置を制御する合成画像表示制御手段，

を備えた請求の範囲第 1 項に記載の撮像装置。

7 . 上記表示装置に表示されている合成対象画像の位置および大きさの調整の少なくとも一方の調整指令を入力する調整指令入力手段，ならびに

上記調整指令入力手段から入力された調整指令にもとづいて，合成対象画像の位置および大きさの調整の少なくとも一方の調整を行う調整手段，

を備えた請求の範囲第 6 項に記載の撮像装置。

8 . 合成対象画像を表わすデータおよび合成対象画像の撮影時の撮影条件を記憶する合成対象情報記憶手段背景を撮影して背景画像を表すデータを出力する撮像手段，

上記合成対象情報記憶手段に記憶されている上記合成対象撮影条件と上記撮像手段による背景画像の撮影条件とにもとづいて，上記合成対象情報記憶手段に記憶されている合成対象画像データによって表される合成対象画像の色調整および輝度調整の少なくとも一方の画像調整処理を行う画像調整処理手段，ならびに上記画像調整処理手段によつて画像調整処理された合成対象画像データと上記撮像手段から出力される背景画像データとを合成し，合成画像を表す合成画像デ — 夕を出力する画像合成手段，

を備えた撮像装置。

9 . 上記合成対象画像情報記憶手段に記憶されている合成対象画像データが，ストロボ発光下における撮影によって得られたものである，請求の範囲第 8 項に記載の撮像装置。

1 0 . 色調整および輝度調整の少なくとも一方の画像調整指令を入力する画像調整指令入力手段をさらに備え上記画像調整処理手段が，

上記画像調整指令入力手段から入力された画像調整指令にもとづいて，合成対象画像の色調整および輝度調整の少なくとも一方の画像調整処理を行い，

上記画像合成手段が，上記画像調整手段により画像調整処理された合成対象画像データと上記背景画像デ — 夕とを合成するものである，請求の範囲第 8 項に記載の撮像装置。

1 1 . 画像表示のための表示装置，

上記撮像手段により撮像した上記背景画像を表示するように上記表示装置を制御する背景画像表示制御手段，および

を備えた請求の範囲第 8 項に記載の撮像装置。

1 2 . 上記表示装置に表示されている上記合成対象画像の位置および大きさの調整の少なくとも一方の調整指令を入力する調整指令入力手段，ならびに

上記調整指令入力手段から入力された調整指令にもとづレヽて，合成対象画像の位置および大きさの調整の少なくとも一方の調整を行う調整手段，

を備えた請求の範囲第 1 1項に記載の撮像装置。

1 3 . 異なる撮影条件の下での撮影によつて得られた複数の合成対象画像を表わすデー夕を記憶しておき，冃乐を撮影して背景画像を表すデータを得，

画像の撮影時の撮影条件にもとづいて，記憶されている上記複数の合成対象画像データの中から，背景画像に適する一つの合成対象画像デ一夕を選択し，冃画像データに，選択された合成対象画像データを合成し，合成画像を表す合成画像デー夕を出力する撮像方法。

1 4 . 合成対象画像を表わすデータおよび合成対象画像の撮影時の撮影条件を記憶し，

背景を撮影して背景画像を表すデータを得，合成対象画像の撮影条件と背景の撮影時における撮影条件とにもとづいて，合成対象画像データによって表される合成対象画像の色調整および輝度調整の少なくとも一方の画像調整処理を行い，

画像調整処理された合成対象画像データと背景画像データとを合成し，合成画像を表す合成画像データを出力する，

撮像方法。