JP7598031B2 - プログラム、画像処理方法、画像処理装置 - Google Patents

Description

本技術は、プログラム、画像処理方法、画像処理装置に関し、特に、撮影画像に写る被写体の明るさの調整を適切に行うことができるようにしたプログラム、画像処理方法、画像処理装置に関する。

証明写真機や、ゲームセンターに設置されるプリントシール機などの撮影装置においては、撮影された画像の写りをユーザが自分で調整できるようになっている。ユーザは、シール紙などに印刷された状態で受け取ることになる画像の写りを１枚ずつ好みに応じて調整することができる。

特開２０１５－１１８３２９号公報

画像の写りの調整として顔領域などの領域毎の明るさの調整が行われる。顔領域を基準にして明るさを調整した場合、他の領域の明るさに違和感が生じることがある。反対に、他の領域を基準にして明るさを調整した場合、顔領域の明るさに違和感が生じることがある。

本技術はこのような状況に鑑みてなされたものであり、撮影画像に写る被写体の明るさの調整を適切に行うことができるようにするものである。

本技術の一側面の画像処理装置は、撮影画像に写る人物の顔領域と前記顔領域以外の肌領域とをそれぞれ検出する検出部と、肌の明るさの調整レベルが選択されたことに応じて、前記顔領域と前記顔領域以外の肌領域がそれぞれ明るくなるように、前記顔領域の明るさと前記顔領域以外の肌領域の明るさとをそれぞれ異なる調整パラメータを用いて調整する調整部とを備える。

本技術の一側面においては、撮影画像に写る人物の顔領域と前記顔領域以外の肌領域とがそれぞれ検出され、肌の明るさの調整レベルが選択されたことに応じて、前記顔領域と前記顔領域以外の肌領域がそれぞれ明るくなるように、前記顔領域の明るさと前記顔領域以外の肌領域の明るさとがそれぞれ異なる調整パラメータを用いて調整される。

本技術によれば、撮影画像に写る被写体の明るさの調整を適切に行うことができる。

撮影スタジオにおける作業の流れを示す図である。 撮影画像の提供の例を示す図である。 レタッチ用PCにおけるファイル管理の例を示す図である。 画像選択画面の例を示す図である。 レタッチ画面の例を示す図である。 レタッチ選択領域の表示を拡大して示す図である。 一括レタッチが選択された場合の表示例を示す図である。 レタッチ対象の撮影画像が切り替えられた場合の表示例を示す図である。 レタッチパラメータの適用の例を示す図である。 レタッチ用PCの構成例を示すブロック図である。 レタッチ用PCの機能構成例を示すブロック図である。 レタッチ処理について説明するフローチャートである。 画像処理部の構成例を示すブロック図である。 肌領域の抽出の例を示す図である。 レタッチパラメータの例を示す図である。 明るさの調整に用いられる領域の表示例を示す図である。 レタッチ内容の引き継ぎの例を示す図である。 レタッチ内容の引き継ぎの例を示す図１７に続く図である。 レタッチ内容の引き継ぎの第１の例を示す図である。 レタッチ内容の引き継ぎの第２の例を示す図である。 レタッチ内容の引き継ぎの第３の例を示す図である。 画像処理部の他の構成例を示すブロック図である。

＜＜撮影スタジオでの作業の流れ＞＞
図１は、撮影スタジオにおける作業の流れを示す図である。

本技術は、例えばウェディングの記念撮影を行う撮影スタジオにおいて用いられる。本技術は、入学／卒業の記念写真、成人式の記念写真、七五三の記念写真などの、各種のイベントの記念写真の撮影を撮影スタジオにおいて行う場合にも適用可能である。

図１の左側に示すように、撮影スタジオにおける撮影はカメラマンにより行われる。図１の例においては、背景スクリーンの前に立つ新郎と新婦を被写体として撮影が行われている。新郎はタキシード姿であり、新婦はウェディングドレス姿である。新郎と新婦の周りには、カメラマンによる撮影にあわせて発光するストロボ装置などの機材が配置される。

カメラマンによる撮影は、構図を変えて、５０枚、１００枚などの多くの枚数の静止画像（写真）を撮影するようにして行われる。静止画像の構図は、新郎と新婦のポーズ、新郎、新婦とカメラマンとの位置関係、焦点距離などのカメラパラメータなどにより決定される。カメラマンにより撮影された静止画像である撮影画像は、カメラに接続された図示せぬPCに転送され、保存される。

撮影が終了した後、新郎と新婦は、撮影スタジオに用意されたレタッチスペースに移動し、図１の右側に示すように、レタッチ用PC１を利用して、カメラマンに撮影してもらった撮影画像を確認する。

また、新郎と新婦は、レタッチ用PC１のユーザとして、例えば最終的に印刷してもらう枚数分の撮影画像を選択し、自らレタッチすることによって、それぞれの撮影画像の写りを調整する。カメラマンにより撮影してもらった撮影画像の中から選択された、５枚、１０枚などの一部の撮影画像を対象としてレタッチが行われる。レタッチ（加工）には、撮影画像の写りを調整するための各種の画像処理が含まれる。

レタッチスペースには、１台、または複数台のレタッチ用PC１が用意される。保存用のPCに保存された撮影画像がレタッチ用PC１に転送され、レタッチ用PC１のディスプレイ１１に表示される。レタッチ用PC１には、カメラマンに撮影してもらった撮影画像をレタッチすることに用いられるアプリケーションであるレタッチアプリ１Ａがインストールされている。

このように、本技術を適用したレタッチ用PC１が設置された撮影スタジオにおいては、カメラマンに撮影してもらった撮影画像のレタッチがユーザ（新郎と新婦）自身により行われる。ユーザは、レタッチアプリ１Ａの機能を利用して、自分の好みの写りとなるように撮影画像のレタッチを行うことができる。タブレット端末などの、PCとは異なる端末にレタッチアプリ１Ａがインストールされ、レタッチに用いられるようにしてもよい。

図２は、撮影画像の提供の例を示す図である。

レタッチアプリ１Ａによるレタッチ済みの撮影画像は、撮影スタジオの運営会社により印刷され、矢印＃１に示すように、例えばアルバムなどの形で後日ユーザに渡される。

また、レタッチ済みの撮影画像は、矢印＃２に示すように、レタッチ用PC１から画像管理サーバ２にアップロードされ、画像管理サーバ２において管理される。画像管理サーバ２は、例えばインターネット上のサーバである。撮影スタジオの運営会社により、または、撮影スタジオの運営会社とは異なる事業者により画像管理サーバ２が管理される。

ユーザは、スマートフォンなどの自分の携帯端末３を操作し、画像管理アプリ３Ａを操作することによって、矢印＃３に示すように、自分たちが被写体となって撮影してもらった撮影画像を閲覧したり、ダウンロードしたりすることができる。画像管理アプリ３Ａは、画像管理サーバ２において管理されている撮影画像の閲覧等を行うためのアプリケーションである。画像管理アプリ３Ａは、例えば、画像管理サーバ２を管理する事業者により提供される。

撮影スタジオにおいて撮影された撮影画像の提供は、アルバムの形で行われるとともに、適宜、データの形で行われることになる。データでの撮影画像の提供が、アルバムの料金とは別料金で可能となるようにしてもよい。

データでの撮影画像の提供は、ユーザによりレタッチが行われた撮影画像だけでなく、レタッチ対象としてユーザにより選択されなかった撮影画像も提供するようにして行われる。レタッチ対象としてユーザにより選択されなかった撮影画像については、後述するように、ユーザの操作によらずに、レタッチアプリ１Ａによってレタッチが自動的に行われる。

ユーザは、レタッチ対象として選択しなかった撮影画像についても、データの形で受け取ることが可能となる。画像管理アプリ３Ａを用いるのではなく、ブラウザを利用して所定のサイトにアクセスし、画像管理サーバ２において管理されている撮影画像を受け取ることができるようにしてもよい。例えば、画像管理サーバ２の管理者が提供する画像提供サービスの会員登録を行うことにより、ユーザは、画像管理サーバ２において管理されている撮影画像を、画像管理アプリ３Ａを利用して、または、ブラウザを利用して受け取ることが可能となる。

携帯端末３ではなく、タブレット端末やPCなどの他の端末を利用して撮影画像を受け取ることができるようにしてもよい。

＜＜レタッチアプリについて＞＞
＜ファイル管理＞
図３は、レタッチ用PC１におけるファイル管理の例を示す図である。

図３の吹き出しに示すように、ユーザの識別情報であるユーザIDと紐付けて、allフォルダとalbumフォルダの２つのフォルダが用意される。allフォルダは、「all」のフォルダ名が設定されたフォルダであり、albumフォルダは、「album」のフォルダ名が設定されたフォルダである。

保存用のPCから転送されてきた撮影画像のファイルはallフォルダに格納される。レタッチ対象として選択され、レタッチが施された撮影画像のファイルがalbumフォルダに格納される。albumフォルダに格納されたファイルが、印刷に用いられるファイルとなる。

撮影を終えたユーザがレタッチを始めるとき、レタッチアプリ１Ａの画面上でユーザIDの入力が行われる。ユーザIDに基づいて、撮影画像がレタッチアプリ１Ａにより読み込まれ、撮影画像を用いた処理が行われる。例えば、ユーザIDに紐付けられているallフォルダに格納された全ての撮影画像のファイルがレタッチアプリ１Ａにより読み込まれる。撮影画像が読み込まれた後、レタッチ対象とする撮影画像の選択が行われる。

＜画面表示＞
・画像選択画面
図４は、画像選択画面の例を示す図である。

画像選択画面の上方には、５枚の撮影画像を選択することを案内するメッセージが表示される。撮影画像の選択枚数は、画像選択の前に、例えば、撮影スタジオのスタッフにより設定される。５枚の撮影画像を印刷してアルバムとして受け取るプランをユーザが申し込んでいる場合、選択枚数として５枚が設定される。

画像選択画面の右側にはサムネイル表示領域２１が形成される。サムネイル表示領域２１は、撮影画像のサムネイル画像が表示される領域である。例えば５０枚の撮影画像の撮影が行われている場合、５０枚の撮影画像のそれぞれのサムネイル画像が表示される。レタッチアプリ１Ａの画面を用いた各種の操作は、マウス、キーボードなどを用いて行われる。

サムネイル画像を用いて選択された撮影画像が、サムネイル表示領域２１の左側に形成された表示領域２２に拡大表示される。図４の例においては、サムネイル表示領域２１の左上端に表示されている撮影画像Ｐ１のサムネイル画像が選択され、撮影画像Ｐ１が表示領域２２に拡大表示されている。

表示領域２２の右下には決定ボタン２３が表示される。決定ボタン２３は、表示領域２２に表示されている撮影画像をレタッチ対象として決定するときに押下されるボタンである。ユーザは、サムネイル画像を選択することによってそれぞれの撮影画像を表示領域２２に順次拡大して表示させ、気に入った撮影画像があったとき、決定ボタン２３を押下してレタッチ対象として選択することになる。

表示領域２２の下には、ユーザにより選択された撮影画像のサムネイル画像が表示される選択画像表示領域２４が形成される。

５枚の撮影画像の選択が終了した場合、レタッチ対象とする撮影画像の選択は終了となる。レタッチ対象とする撮影画像の選択が終了した後、レタッチ対象として選択されたそれぞれの撮影画像に対するレタッチが行われる。

・レタッチ画面
図５は、レタッチ画面の例を示す図である。

レタッチ画面の中央上方には表示領域３１が形成される。表示領域３１は、いまレタッチ対象となっている撮影画像が拡大表示される領域である。表示領域３１の左側に形成されたサムネイル領域３２には、ユーザにより選択された撮影画像のサムネイル画像が表示される。図５の例においては、撮影画像Ｐ１乃至Ｐ５の５枚の撮影画像のサムネイル画像が表示されている。サムネイル画像を用いて選択された撮影画像Ｐ１が、表示領域３１に拡大表示される。

レタッチ画面の下には横長のレタッチ選択領域３３が形成される。レタッチ選択領域３３に表示されたボタンを用いて、レタッチの内容が選択される。レタッチ選択領域３３に表示されたボタンを用いてレタッチの内容が選択される毎に、選択された内容が表示領域３１の表示に反映される。ユーザは、表示領域３１の表示を見ながら、いまレタッチ対象となっている撮影画像に施すレタッチの内容をレタッチ選択領域３３の表示を用いて選択することになる。

図６は、レタッチ選択領域３３の表示を拡大して示す図である。

レタッチ選択領域３３は、顔・体全体の調整に用いられる情報の表示領域である領域３３－１、目元・メイクの調整に用いられる情報の表示領域である領域３３－２、および、明るさの調整に用いられる情報の表示領域である領域３３－３から形成される。

レタッチ選択領域３３の左側に形成された領域３３－１には、小顔感の調整に用いられる調整ボタン５１、顔のかたちの調整に用いられる調整ボタン５２、肌質の調整に用いられる調整ボタン５３、あご短くの調整に用いられる調整ボタン５４、スタイルアップの調整に用いられる調整ボタン５５が表示される。

小顔感として、５段階の大きさを選択することが可能とされる。小顔感の「０」は、顔の大きさを変えないで、オリジナルの大きさのままとすることを表す。ユーザは、「１」乃至「４」のいずれかの大きさを選択することにより、表示領域３１に表示されている撮影画像に写る自分の顔の大きさを調整することができる。

顔のかたちとして、「まる」、「たまご」、「ほっそり」の中からいずれかの形を選択することが可能とされる。ユーザはいずれかの形を選択することにより、表示領域３１に表示されている撮影画像に写る自分の顔の形を調整することができる。「レタッチなし」を選択することにより、顔の形を変えないことも可能とされる。

肌質として、５段階のレベルを選択することが可能とされる。肌質の「０」は、肌質を変えないで、オリジナルの肌質のままとすることを表す。ユーザは、いずれかのレベルを選択することにより、表示領域３１に表示されている撮影画像に写る自分の肌質の滑らかさの程度を調整することができる。

あご短くとして、３段階のレベルを選択することが可能とされる。あご短くの「０」は加工なし、すなわちあごを変えないで、オリジナルのあごのままとすることを表す。ユーザは、いずれかのレベルを選択することにより、表示領域３１に表示されている撮影画像に写る自分のあごの長さを調整することができる。

スタイルアップとして、３段階のレベルを選択することが可能とされる。スタイルアップの「０」は加工なし、すなわちスタイルを変えないで、オリジナルのスタイルのままとすることを表す。ユーザは、いずれかのレベルを選択することにより、表示領域３１に表示されている撮影画像に写る自分のスタイルを調整することができる。

レタッチ選択領域３３の中央に形成された領域３３－２には、目の大きさの調整に用いられる調整ボタン５６、目のかたちの調整に用いられる調整ボタン５７、メイクの濃さの調整に用いられる調整ボタン５８、鼻筋の調整に用いられる調整ボタン５９、ひげ消しの調整に用いられる調整ボタン６０が表示される。

目の大きさとして、５段階の大きさを選択することが可能とされる。目の大きさの「０」は加工なし、すなわち目の大きさを変えないで、オリジナルの大きさのままとすることを表す。ユーザは、いずれかの大きさを選択することにより、表示領域３１に表示されている撮影画像に写る自分の目の大きさを調整することができる。

目のかたちとして、「まる目」、「たれ目」、「ねこ目」の中からいずれかの形を選択することが可能とされる。ユーザは、いずれかの形を選択することにより、表示領域３１に表示されている撮影画像に写る自分の目の形を調整することができる。「加工なし」を選択することにより、目の形を変えないことも可能とされる。

メイクの濃さとして、５段階の濃さを選択することが可能とされる。メイクの濃さの「０」は、メイクの濃さを変えないで、オリジナルの濃さのままとすることを表す。ユーザは、いずれかの濃さを選択することにより、表示領域３１に表示されている撮影画像に写る自分のメイクの濃さを調整することができる。

鼻筋として、オン／オフを選択することが可能とされる。ユーザは、オンまたはオフを選択することにより、表示領域３１に表示されている撮影画像に写る自分の鼻筋のハイライト部分を強調するか、オリジナルの状態のままとするかを選択することができる。

ひげ消しとして、３段階のレベルを選択することが可能とされる。ひげ消しの「０」は、ひげを変えないで、オリジナルのひげのままとすることを表す。ユーザは、いずれかのレベルを選択することにより、表示領域３１に表示されている撮影画像に写る自分のひげを調整することができる。ひげ消しの機能は、レタッチ対象の人物が新郎である場合に有効となる。

レタッチ選択領域３３の右側に形成された領域３３－３には、肌のみの明るさの調整に用いられる調整ボタン６１、全体の明るさの調整に用いられる調整ボタン６２、背景のみの明るさの調整に用いられる調整ボタン６３が表示される。

肌の明るさの調整として、３段階の明るさを選択することが可能とされる。肌の明るさの「０」は、肌の明るさを変えないで、オリジナルの明るさのままとすることを表す。ユーザは、いずれかの明るさを選択することにより、表示領域３１に表示されている撮影画像に写る自分の肌の明るさを調整することができる。肌の明るさの調整機能の詳細については後述する。

全体の明るさの調整として、３段階の明るさを選択することが可能とされる。全体の明るさの「０」は、全体の明るさを変えないで、オリジナルの明るさのままとすることを表す。ユーザは、いずれかの明るさを選択することにより、表示領域３１に表示されている撮影画像に写る全体の明るさを調整することができる。

背景の明るさの調整として、３段階の明るさを選択することが可能とされる。背景の明るさの「０」は、背景の明るさを変えないで、オリジナルの明るさのままとすることを表す。ユーザは、いずれかの明るさを選択することにより、表示領域３１に表示されている撮影画像に写る背景の明るさを調整することができる。

図５の説明に戻り、表示領域３１の左側には一括レタッチに用いられる一括レタッチボタン３４が表示される。一括レタッチは、上述したような各種のレタッチ内容の組み合わせを一括して選択する機能である。

図５の例においては、レタッチ内容のレベルの組み合わせが異なる３種類のレベルの一括レタッチの中からいずれかのレベルを選択することができるようになっている。ユーザは、一括レタッチの機能を利用することにより、それぞれのレタッチ内容をレタッチ選択領域３３の表示を用いて選択することなく、一度の操作で選択することができる。

図７は、一括レタッチが選択された場合の表示例を示す図である。

一括レタッチボタン３４が操作された場合、角丸長方形のポップアップ画像７１がレタッチ画面に重ねて表示される。レタッチ画面の略中央に表示されるポップアップ画像７１には、一括レタッチの対象とする画像の範囲の選択に用いられる円形のボタンがメッセージとともに表示される。

ユーザは、ポップアップ画像７１に表示されているボタンを操作することにより、一括レタッチの内容を、いまレタッチ対象になっている１枚の画像のみに反映させるのか、いまレタッチ対象になっている１枚の画像を含む全て（５枚）の画像に反映させるのかを選択することができる。

図５の説明に戻り、表示領域３１の右側には加工前ボタン３５が設けられる。加工前ボタン３５は、表示領域３１の表示を、レタッチ前の状態に切り替えるときに操作されるボタンである。加工前ボタン３５が押下されている間、レタッチ前の状態の撮影画像が表示領域３１に表示される。ユーザは、加工前ボタン３５を用いることにより、レタッチ後の状態とレタッチ前の状態とを見比べ、レタッチの程度が強すぎないかどうかなどを確認することができる。

加工前ボタン３５の下には、レタッチ対象とする人物の選択に用いられる人物選択ボタン３６が設けられる。ユーザは、人物選択ボタン３６を用いることにより、撮影画像の左側に写る人物のみ、右側に写る人物のみ、２人とも、のいずれかを選択してレタッチを施すことができる。撮影画像に対して顔認識などが行われ、レタッチの画像処理の対象となる人物がユーザの操作に応じて選択される。

ユーザは、このような各種の機能を用いて、表示領域３１に表示させている撮影画像に施すレタッチの内容を選択することができる。このように、レタッチアプリ１Ａを用いて行うことができるレタッチには、顔・体全体の調整、目元・メイクの調整、明るさの調整が少なくとも含まれる。

レタッチ対象とする撮影画像がサムネイル領域３２の表示を用いて切り替えられ、撮影画像Ｐ１乃至Ｐ５のそれぞれのレタッチが順次行われる。レタッチが施された撮影画像Ｐ１乃至Ｐ５のそれぞれのファイルがalbumフォルダに格納される。

図８は、レタッチ対象とする撮影画像が切り替えられた場合の表示例を示す図である。

レタッチ対象とする撮影画像が切り替えられた場合、吹き出し形状のポップアップ画像７２がレタッチ画面に重ねて表示される。ポップアップ画像７２は、レタッチ画面の略中央上方に形成された表示領域３１を吹き出し元とするとするように、レタッチ画面の中央より若干下方の位置に表示される。ポップアップ画像７２には、１つ前の写真（撮影画像）で設定したレタッチ内容を、切り替え後の撮影画像にも反映させるか否かの選択に用いられる横長長方形のボタンがメッセージとともに表示される。

すなわち、レタッチ対象とする撮影画像が切り替えられ場合、一括レタッチボタン３４が操作されたときに表示されるポップアップ画像７１と異なる形状の画像がポップアップ画像７２として表示される。

ユーザは、ポップアップ画像７２の表示を用いることにより、切り替え前の撮影画像に対して選択したレタッチ内容を、切り替え後の撮影画像に引き継ぐことができる。レタッチ内容の引き継ぎ機能の詳細については後述する。

図９は、レタッチパラメータの適用の例を示す図である。

図９に示すように、ユーザによる操作によって撮影画像Ｐ１乃至Ｐ５のそれぞれに施されたレタッチの内容が、allフォルダに格納されたそれぞれの未選択画像に反映される。未選択画像は、画像選択画面においてレタッチ対象として選択されなかった撮影画像である。画像選択画面においてレタッチ対象として選択された撮影画像は、選択画像となる。

レタッチ済みの撮影画像Ｐ１乃至Ｐ５のうちのどの撮影画像のレタッチの内容をそれぞれの未選択画像に対して反映させるかが、例えば、選択画像に写る顔の状態と、未選択画像に写る顔の状態とに基づいて選択される。この場合、それぞれの撮影画像が解析され、それぞれの撮影画像に写る顔の状態が認識される。それぞれの未選択画像に写る顔の状態に近い状態で顔が写っている選択画像が選択され、選択された選択画像に対して施されたレタッチの内容が未選択画像に反映される。

＜＜レタッチ用PC１の構成と動作＞＞
＜レタッチ用PC１の構成＞
図１０は、レタッチ用PC１の構成例を示すブロック図である。

CPU(Central Processing Unit)１０１、ROM(Read Only Memory)１０２、RAM(Random Access Memory)１０３は、バス１０４により相互に接続される。

バス１０４には、さらに、入出力インタフェース１０５が接続される。入出力インタフェース１０５には、入力部１０６、出力部１０７、記憶部１０８、通信部１０９、およびドライブ１１０が接続される。

入力部１０６は、キーボード、マウスなどにより構成される。

出力部１０７は、ディスプレイ１１などにより構成される。

記憶部１０８は、ハードディスクや不揮発性のメモリなどにより構成される。記憶部１０８は、CPU１０１が実行するレタッチアプリ１Ａなどのプログラム、撮影画像などの各種の情報を記憶する。

通信部１０９は、インターネット、LANなどのネットワークに対するインタフェースである。例えば、通信部１０９は、撮影スタジオのカメラに接続された保存用のPCと通信を行い、保存用のPCから送信されてきた、レタッチを始めようとするユーザが被写体として写る撮影画像を受信する。また、通信部１０９は、画像管理サーバ２との間で通信を行い、レタッチ済みの撮影画像を画像管理サーバ２に送信する。

ドライブ１１０は、リムーバブルメディア１１１に対するデータの書き込み、リムーバブルメディア１１１からのデータの読み出しを制御する。保存用のPCからの撮影画像の取り込みがリムーバブルメディア１１１を介して行われるようにしてもよい。

図１１は、レタッチ用PC１の機能構成例を示すブロック図である。

図１１に示すように、レタッチ用PC１においては、レタッチアプリ１Ａが実行されることにより画像処理部１２１が実現される。画像処理部１２１は、画像取得部１３１、レタッチ処理部１３２、出力制御部１３３、および表示制御部１３４により構成される。

画像取得部１３１は、画像選択画面に対するユーザの操作を受け付け、レタッチ対象としてユーザにより選択された撮影画像を例えば記憶部１０８から取得する。画像取得部１３１により取得されたレタッチ対象の撮影画像は、レタッチ処理部１３２と表示制御部１３４に供給される。

また、画像取得部１３１は、レタッチ対象のそれぞれの撮影画像に対するレタッチが終了した場合、未選択画像を例えば記憶部１０８から取得し、レタッチ処理部１３２に出力する。

レタッチ処理部１３２は、顔認識を行い、レタッチ対象の撮影画像に写る顔を認識する。レタッチ処理部１３２は、認識した顔の各部の特徴を解析し、レタッチ画面に対するユーザの操作に応じて、レタッチに関する各種の画像処理を行う。各部の特徴の解析が機械学習によって生成された推論モデルを用いて行われるようにしてもよい。

例えば、レタッチ処理部１３２は、目の大きさや目の形の調整に関する操作が行われた場合、目の輪廓の位置をユーザによる選択内容に応じてずらすなどの画像処理を行う。また、レタッチ処理部１３２は、メイクの濃さの調整に関する操作が行われた場合、頬の部分に所定の色のチークの画像を合成したり、唇の部分に所定の色の口紅の画像を合成したりする画像処理を行う。

レタッチ処理部１３２は、肌質の調整に関する操作が行われた場合、肌の明るさを調整するなどの画像処理を行う。レタッチ処理部１３２は、顔の大きさ（小顔感）や顔の形の調整に関する操作が行われた場合、顔の輪廓の位置をユーザによる選択内容に応じてずらすなどの画像処理を行う。

レタッチ処理部１３２による画像処理の結果を表す情報は、表示制御部１３４に供給され、レタッチ画面の表示に用いられる。

また、レタッチ処理部１３２は、レタッチ対象のそれぞれの撮影画像に対するレタッチが終了した場合、未選択画像を含むそれぞれの撮影画像を解析し、レタッチ済みの撮影画像に施したレタッチの内容を未選択画像に反映させる。レタッチ処理部１３２によりレタッチが施された撮影画像は出力制御部１３３に供給される。

出力制御部１３３は、ユーザによる操作に応じてレタッチが施された撮影画像をalbumフォルダに保存する。

また、出力制御部１３３は、レタッチ済みの撮影画像（選択画像と未選択画像）を通信部１０９に出力し、画像管理サーバ２に送信させる。

表示制御部１３４は、画像選択画面、レタッチ画面などの、レタッチアプリ１Ａの各種の画面の表示を制御する。

＜レタッチ用PC１の動作＞
図１２のフローチャートを参照して、レタッチアプリ１Ａが行うレタッチ処理について説明する。

ステップＳ１において、画像処理部１２１の表示制御部１３４は、画像選択画面（図４）を表示する。

ステップＳ２において、画像取得部１３１は、画像選択画面に対するユーザの操作に応じて、レタッチ対象とする撮影画像の選択を受け付ける。画像取得部１３１は、レタッチ対象とする撮影画像を取得する。

ステップＳ３において、画像取得部１３１は、レタッチ対象とする撮影画像の選択が終了か否かを判定する。レタッチ対象とする撮影画像の選択が終了してないとステップＳ３において判定された場合、ステップＳ１に戻り、画像の選択が続けられる。

例えば５枚の撮影画像が選択された場合、レタッチ対象とする撮影画像の選択を終了するとしてステップＳ３において判定される。

ステップＳ４において、表示制御部１３４は、レタッチ画面（図５）を表示する。ユーザは、レタッチ画面を用いて撮影画像のレタッチを行う。

ステップＳ５において、レタッチ処理部１３２は、ユーザの操作に応じて画像処理を行い、レタッチ対象として選択された撮影画像にレタッチを施す。

ステップＳ６において、レタッチ処理部１３２は、レタッチが終了か否かを判定する。レタッチが終了ではないとステップＳ６において判定された場合、ステップＳ４に戻り、レタッチ対象として選択されたそれぞれの撮影画像に対するレタッチが続けられる。

例えばレタッチ対象として選択された全ての撮影画像のレタッチが行われた場合、レタッチを終了するとしてステップＳ６において判定される。

ステップＳ７において、レタッチ処理部１３２は、選択画像に施されたレタッチの内容と同じ内容のレタッチを、それぞれの未選択画像に反映させる。

ステップＳ８において、出力制御部１３３は、レタッチが施された未選択画像を保存する。

ステップＳ９において、通信部１０９は、レタッチが施された選択画像と未選択画像を画像管理サーバ２に送信する。その後、レタッチアプリ１Ａの処理は終了となる。

以上の処理により、ユーザは、自分が被写体となって撮影してもらった撮影画像の写りを自分で調整することができる。ユーザは、自分の好みの写りになっている撮影画像のアルバムを受け取ることができる。

また、ユーザは、携帯端末３を利用することにより、画像管理サーバ２において管理されている、写りを手動で調整した撮影画像と、手動で調整した内容と同じ内容のレタッチが自動的に施された撮影画像（未選択画像）をデータの形で受け取ることができる。

＜＜肌の明るさの調整機能＞＞
図５を参照して説明したように、レタッチ対象になっている撮影画像の明るさを調整することが可能とされる。ここで、領域３３－３の調整ボタン６１を用いて行われる、肌のみの明るさの調整機能について説明する。

＜画像処理部１２１の構成＞
図１３は、肌のみの明るさの調整機能を実現する画像処理部１２１の構成例を示すブロック図である。図１３には、画像処理部１２１の一部の構成のみを示している。

画像処理部１２１には、上述した構成の他に性別判定部１３５が設けられる。レタッチ処理部１３２においては、顔認識部１５１、肌領域抽出部１５２、および明るさ調整部１５３が実現される。レタッチ対象の撮影画像は、性別判定部１３５に入力されるとともに、レタッチ処理部１３２の各部に入力される。

性別判定部１３５は、撮影画像に写る人物の性別を判定する。性別判定部１３５による判定は、例えば、撮影画像を入力とし、撮影画像に写るそれぞれの人物の性別を出力とする推論モデルを用いて行われる。この場合、性別判定部１３５には、機械学習によって生成された、性別判定用の推論モデルがあらかじめ用意される。性別の判定が、レタッチ対象の撮影画像を解析して求められた人物の特徴に基づいて行われるようにしてもよい。

性別判定部１３５による判定結果は、レタッチ処理部１３２の明るさ調整部１５３に供給される。例えば、レタッチ対象の撮影画像に新婦だけが写っている場合、撮影画像に写っている人物が女性であることを表す情報が判定結果として供給される。また、レタッチ対象の撮影画像に新郎だけが写っている場合、撮影画像に写っている人物が男性であることを表す情報が判定結果として供給される。レタッチ対象の撮影画像に新婦と新郎が写っている場合、撮影画像に写っているそれぞれの人物が女性と男性であることを表す情報が判定結果として供給される。

レタッチ処理部１３２の顔認識部１５１は、撮影画像に写る人物の顔を認識し、顔領域を抽出する。顔認識部１５１による顔領域の抽出が、機械学習によって生成された推論モデルを用いて行われるようにしてもよいし、撮影画像を解析して求められた各部位の輪郭点などの特徴に基づいて行われるようにしてもよい。顔認識部１５１により抽出された顔領域の情報は、肌領域抽出部１５２と明るさ調整部１５３に供給される。

肌領域抽出部１５２は、撮影画像に写る人物の肌の領域を抽出する。例えば、肌領域抽出部１５２には、撮影画像を入力とし、撮影画像に写る人物の肌領域の情報を出力とする推論モデルが用意されている。肌領域抽出部１５２は、推論モデルを用いて抽出した肌領域と、顔認識部１５１により抽出された顔領域とに基づいて、顔領域以外の肌領域を抽出する。

図１４は、肌領域抽出部１５２による肌領域の抽出の例を示す図である。

例えば、図１４の左上に示す撮影画像Ｐ１１がレタッチ対象として選択されている場合について説明する。撮影画像Ｐ１１には、ウェディングドレス姿の新婦である人物Ｈ１が写っている。人物Ｈ１の胸元と、肩から腕（上腕）にかけての部分において肌が露出している。

このような撮影画像Ｐ１１がレタッチ対象となっている場合、顔認識部１５１においては、矢印＃１１の先に示すような顔領域が抽出される。

肌領域抽出部１５２は、撮影画像Ｐ１１を矢印＃１２の先に示すように肌領域抽出モデルＭに入力し、矢印＃１３の先に示すように、顔領域を含む肌領域を肌領域抽出モデルＭの出力に基づいて抽出する。撮影画像Ｐ１１には、顔の領域と肩から腕にかけての領域などが、人物Ｈ１の肌が露出している領域として写っている。

また、肌領域抽出部１５２は、矢印＃１４と矢印＃１５の先に示すように、肌領域抽出モデルＭを用いて抽出した肌領域から、顔認識部１５１により抽出された顔領域を除くことによって、矢印＃１６の先に示すように、顔領域以外の肌領域を抽出する。このようにして抽出された、顔領域以外の肌領域の情報が明るさ調整部１５３に供給される。

図１３の明るさ調整部１５３は、レタッチ対象の撮影画像に写る人物の顔領域を顔認識部１５１から供給された情報に基づいて特定し、顔領域以外の肌領域を肌領域抽出部１５２から供給された情報に基づいて特定する。明るさ調整部１５３は、顔領域と、顔領域以外の肌領域とを、それぞれ異なるレタッチパラメータを用いて調整する。レタッチパラメータは、明るさの調整量を規定するパラメータである。

例えば、明るさ調整部１５３は、顔領域に対する調整量の方が、顔領域以外の肌領域に対する調整量より多くなるようなレタッチパラメータを、調整ボタン６１を用いたユーザの操作に応じて選択し、それぞれの領域の明るさを調整する。すなわち、顔領域に対する明るさのレタッチパラメータとして、顔領域以外の肌領域に対する明るさのレタッチパラメータより明るくするレタッチパラメータが画像処理に用いられる。図５を参照して説明したように、調整ボタン６１を用いて、１または２の１種類のレベルが肌のみの明るさのレベルとして選択される。

これにより、明るさのレベルとして１，２のいずれのレベルをユーザが選択した場合であっても、図１５Ａに示すように、顔領域の方を、顔領域以外の肌領域よりも、より明るくするような画像処理が施されることになる。例えば、顔領域の明るさと、顔領域以外の肌領域の明るさが同じ明るさである場合、明るさの調整後の顔領域は、顔領域以外の肌領域より明るくなる。

撮影画像に写る人物が女性（新婦）である場合、通常、顔には化粧が施されることから、顔領域を明るめにしても違和感がない。顔領域の方を、顔領域以外の肌領域よりも明るくするような画像処理が施されることにより、顔領域以外の肌領域が明るくなりすぎて違和感がある写りになってしまうことを防ぐことが可能となる。

顔領域の方を、顔領域以外の肌領域よりも明るくするこのような画像処理が、性別判定部１３５による性別の判定結果に基づいて行われるようにしてもよい。

例えば、顔領域の方を、顔領域以外の肌領域よりも明るくする画像処理は、撮影画像に写る女性に対してのみ施される。この場合、撮影画像に写る男性に対しては、顔領域の明るさと、顔領域以外の手などの肌領域とを、それぞれ同じ程度だけ明るくするレタッチパラメータを用いた画像処理が施される。これにより、男性の顔領域だけが明るくなりすぎて違和感がある写りになってしまうことを防ぐことが可能となる。

また、明るさのレベルとして同じレベルをユーザが選択した場合であっても、図１５Ｂに示すように、女性の肌領域（顔領域を含む）の方を、男性の肌領域よりも、よりも明るくするレタッチパラメータが選択されるようにしてもよい。このように、女性の肌領域の明るさの調整と男性の肌領域の明るさの調整に、それぞれ異なるレタッチパラメータが用いられるようにしてもよい。

＜レタッチ画面の表示＞
図１６は、レタッチ画面の領域３３－３の表示例を示す図である。

調整ボタン６１を用いて肌のみの明るさを上述したようにして調整した後、ユーザは、さらに、調整ボタン６２を用いて全体の明るさを調整したり、調整ボタン６３を用いて背景の明るさを調整したりすることができる。

これに対して、調整ボタン６２を用いて全体の明るさを調整した後は、図１６Ａに示すように、調整ボタン６３を用いた背景の明るさの調整が制限される。図１６Ａの右側の例においては、全体の明るさのレベルが「１」として選択されたことに応じて、背景の明るさのレベルの選択が不可となるように、調整ボタン６３がグレーアウトして表示されている。

また、調整ボタン６３を用いて背景の明るさを調整した後は、図１６Ｂに示すように、調整ボタン６２を用いた全体の明るさの調整が制限される。図１６Ｂの右側の例においては、背景の明るさのレベルが「２」として選択されたことに応じて、全体の明るさのレベルの選択が不可となるように、調整ボタン６２がグレーアウトして表示されている。

すなわち、全体の明るさの調整と背景の明るさの調整は、排他的な関係にあり、いずれか一方の調整のみを行うことが可能とされる。全体の明るさの調整と背景の明るさの調整のうちの一方の調整が行われた後は、他方の調整が制限される。全体の明るさの調整と背景の明るさの調整も例えば明るさ調整部１５３により行われる。

例えば、全体を明るくした後に背景を明るくすることができるとした場合、背景に対して、明るさを調整する画像処理が重畳して適用されてしまい、白飛びが生じてしまう可能性が高くなる。全体の明るさの調整と背景の明るさの調整のいずれか一方の調整のみ行うことができるようにすることにより、そのような白飛びが発生してしまうのを防ぐことが可能となる。

なお、調整ボタン６２を用いて全体の明るさを調整した後であっても、または、調整ボタン６３を用いて背景の明るさを調整した後であっても、肌のみの明るさのレベルを選択可能なままとなるように、調整ボタン６１の表示は維持される（変わらない）。

明るさの調整レベルの選択に用いられる情報として調整ボタン６１乃至６３が表示されるものとしたが、スライドバーなどの他の選択情報が表示されるようにしてもよい。

＜＜レタッチ内容の引き継ぎ機能＞＞
図８を参照して説明したように、レタッチ対象の撮影画像を切り替えた場合、切り替え前の撮影画像に対して選択したレタッチ内容を、切り替え後の撮影画像に引き継ぐことが可能とされる。ここで、レタッチ内容の引き継ぎ機能について説明する。１つ前の撮影画像で設定したレタッチ内容を切り替え後の撮影画像にも反映させることがポップアップ画像７２の表示を用いて選択されたものとする。

＜レタッチ内容の引き継ぎ＞
図１７、図１８は、レタッチ内容の引き継ぎの例を示す図である。

図１７の矢印＃２１に示すように、撮影画像Ｐ２１を１枚目のレタッチ対象としたときのユーザの操作によって、「小顔感」が「３」、「顔のかたち」が「たまご」、「肌質」が「２」、・・・のそれぞれのレタッチパラメータが撮影画像Ｐ２１に対して設定されたものとする。図１７の下段に示すレタッチ済みの撮影画像Ｐ２１の写りは、上段に示すレタッチ前の撮影画像Ｐ２１の写りと異なる写りである。

撮影画像Ｐ２１のレタッチが終わり、レタッチ対象が撮影画像Ｐ２１から撮影画像Ｐ２２に切り替えられたとき、図１８の矢印＃２２の先に示すように、２枚目のレタッチ対象の撮影画像である撮影画像Ｐ２２のデフォルトのレタッチパラメータとして、レタッチ済みの撮影画像Ｐ１のレタッチパラメータが引き継がれる。表示領域３１には、撮影画像Ｐ２２が、レタッチ済みの撮影画像Ｐ２１と同じ内容のレタッチが施された状態で撮影画像Ｐ２１に代えて表示される。レタッチ選択領域３３の表示も、撮影画像Ｐ２２に施されているレタッチの内容に応じた表示となる。

ユーザは、撮影画像Ｐ２１と同じ内容のレタッチが施された撮影画像Ｐ２２を基準として、撮影画像Ｐ２２のレタッチを始めることができる。図１８の例においては、「小顔感」が「４」、「顔のかたち」が「ほっそり」、「肌質」が「１」、・・・のレタッチパラメータにより表される内容に調整されている。

撮影画像Ｐ２２のレタッチが終わり、３枚目のレタッチ対象の撮影画像が選択された場合も同様に、矢印＃２４に示すように、３枚目のレタッチ対象の撮影画像のデフォルトのレタッチパラメータとして、撮影画像Ｐ２２のレタッチパラメータが引き継がれる。

このように、レタッチ対象の撮影画像が切り替えられることに応じて、直前のレタッチ対象の撮影画像のレタッチの内容が、切り替え後の１枚の撮影画像の写りに引き継がれる。レタッチ対象の撮影画像が切り替えられる毎に、撮影画像の写りの引き継ぎが繰り返される。これにより、ユーザは、それぞれの撮影画像のレタッチを効率的に行うことができる。

切り替え後の撮影画像が、レタッチの調整がまだ行われてない未調整の画像である場合に以上のようなレタッチ内容の引き継ぎが行われるようにしてもよい。

＜引き継ぎ対象について＞
レタッチは、対象とする人物を選択して人物毎に行うことが可能とされる。レタッチ内容の引き継ぎは、新婦を対象としたレタッチの内容が新婦の写りに引き継がれ、新郎を対象としたレタッチの内容が新郎の写りに引き継がれるように、性別判定部１３５による性別の判定結果に基づいて行われる。

・新郎と新婦が写っている画像から、新郎と新婦が写っている他の画像への切り替え
図１９は、レタッチ内容の引き継ぎの第１の例を示す図である。

図１９には、新婦である人物Ｈ１と新郎である人物Ｈ２が写る撮影画像Ｐ３１のレタッチが終わり、レタッチ対象が、撮影画像Ｐ３１から、同じく人物Ｈ１と人物Ｈ２が写る撮影画像Ｐ３２に切り替えられたときのレタッチ内容の引き継ぎの例が示されている。

この場合、レタッチ対象として撮影画像Ｐ３１が選択されていたときに人物Ｈ１に対して施されたレタッチ内容が、矢印＃３１に示すように、撮影画像Ｐ３２に写る人物Ｈ１の写りに引き継がれる。性別判定部１３５による判定結果に基づいて、撮影画像Ｐ３１に写る女性の人物（人物Ｈ１）に対して施されたレタッチの内容が、撮影画像Ｐ３２に写る同じ女性の人物（人物Ｈ１）の写りに引き継がれる。

また、レタッチ対象として撮影画像Ｐ３１が選択されていたときに人物Ｈ２に対して施されたレタッチ内容が、矢印＃３２に示すように、撮影画像Ｐ３２に写る人物Ｈ２の写りに引き継がれる。性別判定部１３５による判定結果に基づいて、撮影画像Ｐ３１に写る男性の人物（人物Ｈ２）に対して施されたレタッチの内容が、撮影画像Ｐ３２に写る同じ男性の人物（人物Ｈ２）の写りに引き継がれる。

・新郎と新婦が写っている画像から、新郎または新婦が写っている画像への切り替え
図２０は、レタッチ内容の引き継ぎの第２の例を示す図である。

図２０には、新婦である人物Ｈ１と新郎である人物Ｈ２が写る撮影画像Ｐ３１のレタッチが終わり、レタッチ対象が、撮影画像Ｐ３１から、人物Ｈ１のみが写る撮影画像Ｐ３３、または、人物Ｈ２のみが写る撮影画像Ｐ３４に切り替えられたときのレタッチ内容の引き継ぎの例が示されている。

レタッチ対象が右下の撮影画像Ｐ３３に切り替えられた場合、レタッチ対象として撮影画像Ｐ３１が選択されていたときに人物Ｈ１に対して施されたレタッチ内容が、矢印＃３３に示すように、撮影画像Ｐ３３に写る人物Ｈ１の写りに引き継がれる。性別判定部１３５による判定結果に基づいて、撮影画像Ｐ３１に写る女性の人物（人物Ｈ１）に対して施されたレタッチの内容が、撮影画像Ｐ３３に写る同じ女性の人物（人物Ｈ１）の写りに引き継がれる。

この場合、レタッチ対象として撮影画像Ｐ３１が選択されていたときに人物Ｈ２に対して施されたレタッチ内容は引き継がれないことになる。

レタッチ対象が左下の撮影画像Ｐ３４に切り替えられた場合、レタッチ対象として撮影画像Ｐ３１が選択されていたときに人物Ｈ２に対して施されたレタッチ内容が、矢印＃３４に示すように、撮影画像Ｐ３４に写る人物Ｈ２の写りに引き継がれる。性別判定部１３５による判定結果に基づいて、撮影画像Ｐ３１に写る男性の人物（人物Ｈ２）に対して施されたレタッチの内容が、撮影画像Ｐ３４に写る同じ男性の人物（人物Ｈ２）の写りに引き継がれる。

この場合、レタッチ対象として撮影画像Ｐ３１が選択されていたときに人物Ｈ１に対して施されたレタッチ内容は引き継がれないことになる。

・新郎または新婦が写っている画像から、新郎と新婦が写っている画像への切り替え
図２１は、レタッチ内容の引き継ぎの第３の例を示す図である。

図２１の右側には、新婦である人物Ｈ１のみが写る撮影画像Ｐ３３のレタッチが終わり、レタッチ対象が、撮影画像Ｐ３３から、人物Ｈ１と新郎である人物Ｈ２が写る撮影画像Ｐ３１に切り替えられたときのレタッチ内容の引き継ぎの例が示されている。

この場合、レタッチ対象として撮影画像Ｐ３３が選択されていたときに人物Ｈ１に対して施されたレタッチ内容が、矢印＃３５に示すように、撮影画像Ｐ３１に写る人物Ｈ１の写りに引き継がれる。性別判定部１３５による判定結果に基づいて、撮影画像Ｐ３３に写る女性の人物（人物Ｈ１）に対して施されたレタッチの内容が、撮影画像Ｐ３１に写る同じ女性の人物（人物Ｈ１）の写りに引き継がれる。

図２１の左側には、新郎である人物Ｈ２のみが写る撮影画像Ｐ３４のレタッチが終わり、レタッチ対象が、撮影画像Ｐ３４から、人物Ｈ２と新婦である人物Ｈ１が写る撮影画像Ｐ３１に切り替えられたときのレタッチ内容の引き継ぎの例が示されている。

この場合、レタッチ対象として撮影画像Ｐ３４が選択されていたときに人物Ｈ２に対して施されたレタッチ内容が、矢印＃３６に示すように、撮影画像Ｐ３１に写る人物Ｈ２の写りに引き継がれる。性別判定部１３５による判定結果に基づいて、撮影画像Ｐ３４に写る男性の人物（人物Ｈ２）に対して施されたレタッチの内容が、撮影画像Ｐ３１に写る同じ男性の人物（人物Ｈ２）の写りに引き継がれる。

これにより、新婦を対象としたレタッチの内容が新郎の写りに引き継がれるなどの不具合を防ぐことが可能となる。

・レタッチ内容を引き継ぐか否かをユーザに選択させる例
レタッチ対象とする撮影画像の切り替え前と切り替え後とで人物の性別の構成が異なる場合に、図８を参照して説明したような情報が提示されるようにしてもよい。レタッチ内容を引き継ぐか否かをユーザに選択させることが行われる。

例えば、図２１の右側に示すように、レタッチ対象が、女性のみが写る撮影画像Ｐ３３から、女性と男性が写る撮影画像Ｐ３１に切り替えられた場合のように、撮影画像に写る人物の性別の構成が変化した場合、構図が大きく変わることから、レタッチ内容を引き継ぐことが適切でないこともある。適切ではないレタッチ内容が引き継がれるとそれを修正するのが煩雑になるが、適宜、レタッチ内容を引き継がないように選択できるようにすることにより、修正の手間を省くことが可能となる。

・人物の識別結果に基づく引き継ぎ
レタッチ内容の引き継ぎが性別の判定結果に基づいて行われるものとしたが、人物の識別結果に基づいて行われるようにしてもよい。ある人物を対象としたレタッチの内容が同一人物の写りに引き継がれることにより、新婦を対象としたレタッチの内容が同じ人物である新婦の写りに引き継がれ、新郎を対象としたレタッチの内容が同じ人物である新郎の写りに引き継がれる。

図２２は、画像処理部１２１の他の構成例を示すブロック図である。図２２に示す構成は、人物識別部１３６が設けられている点で、上述した画像処理部１２１の構成と異なる。

人物識別部１３６は、撮影画像に写るそれぞれの人物を識別する。人物識別部１３６による人物の識別は、例えば、撮影画像を入力とし、撮影画像に写る人物のIDを出力とする推論モデルを用いて行われる。この場合、人物識別部１３６には、機械学習によって生成された、人物識別用の推論モデルがあらかじめ用意される。人物の識別が、レタッチ対象の撮影画像を解析して求められた人物の特徴に基づいて行われるようにしてもよい。

人物識別部１３６による識別結果は、レタッチ処理部１３２に供給される。例えば、レタッチ対象の撮影画像に新婦だけが写っている場合、撮影画像に写っている新婦に割り当てられた人物IDが識別結果として供給される。また、レタッチ対象の撮影画像に新郎だけが写っている場合、撮影画像に写っている新郎に割り当てられた人物IDが識別結果として供給される。レタッチ対象の撮影画像に新婦と新郎が写っている場合、新婦に割り当てられた人物IDと新郎に割り当てられた人物IDが識別結果として供給される。

レタッチ処理部１３２においては、人物識別部１３６による識別結果に基づいて、レタッチ対象の切り替え前の撮影画像に写る人物に対して施されたレタッチの内容を、切り替え後の撮影画像に写る同一人物の写りに引き継ぐようにしてレタッチが施される。

これによっても、新婦を対象としたレタッチの内容が新郎の写りに引き継がれるなどの不具合を防ぐことが可能となる。

レタッチ対象とする撮影画像の切り替え前と切り替え後とで人物の構成が異なる場合に、図８を参照して説明したような情報が提示されるようにしてもよい。レタッチ内容を引き継ぐか否かをユーザに選択させることが行われる。

例えば、図２１の右側に示すように、レタッチ対象が、人物Ｈ１のみが写る撮影画像Ｐ３３から、人物Ｈ１と人物Ｈ２が写る撮影画像Ｐ３１に切り替えられた場合のように、撮影画像に写る人物の構成が変化した場合、構図が大きく変わることから、レタッチ内容を引き継ぐことが適切でないこともある。適切ではないレタッチ内容が引き継がれるとそれを修正するのが煩雑になるが、適宜、レタッチ内容を引き継がないように選択できるようにすることにより、修正の手間を省くことが可能となる。

＜＜変形例＞＞
・レタッチ場所の例
撮影スタジオに設置されたPCを利用してレタッチが行われるものとしたが、携帯端末３やユーザの自宅に設置されているPCなどの、他の装置を用いてレタッチを行うことができるようにしてもよい。

携帯端末３を用いたレタッチが可能とされている場合、撮影スタジオでの撮影を終えたユーザは、携帯端末３を操作して画像管理アプリ３Ａを起動させ、画像管理アプリ３Ａの画面上でレタッチを行うことになる。画像管理アプリ３Ａには、レタッチアプリ１Ａと同様の機能が搭載される。

携帯端末３のディスプレイには、上述したような画面が画像管理アプリ３Ａによって表示され、画像管理サーバ２にアップロードされた撮影画像を対象として、レタッチ対象の撮影画像の選択とレタッチが行われる。画像管理アプリ３Ａの機能を用いてレタッチが行われた撮影画像が印刷され、アルバムの形でユーザに提供されたり、レタッチ済みの撮影画像がそのままデータの形でユーザに提供されたりする。

これにより、ユーザは、自宅などの様々な場所でレタッチを行うことができる。また、ユーザは、時間を気にすることなく、こだわってレタッチを行うことができる。

・プログラムについて
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、汎用のパーソナルコンピュータなどにインストールされる。

インストールされるプログラムは、光ディスク（CD-ROM(Compact Disc-Read Only Memory)，DVD(Digital Versatile Disc)等）や半導体メモリなどよりなる図１０に示されるリムーバブルメディア１１１に記録して提供される。また、ローカルエリアネットワーク、インターネット、デジタル放送といった、有線または無線の伝送媒体を介して提供されるようにしてもよい。プログラムは、ROM１０２や記憶部１０８に、あらかじめインストールしておくことができる。

コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。

本明細書に記載された効果はあくまで例示であって限定されるものでは無く、また他の効果があってもよい。

本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。

例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。

また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。

さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。

１ レタッチ用PC， ２ 画像管理サーバ， ３ 携帯端末， １２１ 画像処理部， １３１ 画像取得部， １３２ レタッチ処理部， １３３ 出力制御部， １３４ 表示制御部， １３５ 性別判定部， １３６ 人物識別部， １５１ 顔認識部， １５２ 肌領域抽出部， １５３ 明るさ調整部

Claims (7)

1. 撮影画像に写る人物の顔領域と前記顔領域以外の肌領域とをそれぞれ検出し、
   肌の明るさの調整レベルが選択されたことに応じて、前記顔領域と前記顔領域以外の肌領域がそれぞれ明るくなるように、前記顔領域の明るさと前記顔領域以外の肌領域の明るさとをそれぞれ異なる調整パラメータを用いて調整する
   処理をコンピュータに実行させるプログラム。
2. 前記顔領域が前記顔領域以外の肌領域よりも明るくなるように、前記顔領域の明るさと前記顔領域以外の肌領域の明るさを調整する
   請求項１に記載のプログラム。
3. 前記撮影画像に写る人物の性別を判定し、
   前記顔領域が前記顔領域以外の肌領域よりも明るくなるように調整する画像処理を女性の人物に対して行い、男性の人物に対して行わない
   請求項１または２に記載のプログラム。
4. 肌の明るさの調整レベルの選択に用いられる第１の選択情報と、前記撮影画像全体の明るさの調整レベルの選択に用いられる第２の選択情報と、前記人物の背景の明るさの調整レベルの選択に用いられる第３の選択情報とが配置された、加工の内容の選択に用いられる加工画面を表示し、
   前記第２の選択情報を用いた選択と前記第３の選択情報を用いた選択の一方の選択が行われた場合、他方の選択が不可となるように、前記他方の選択に用いられる選択情報の表示を切り替える
   請求項１または２に記載のプログラム。
5. 前記一方の選択が行われた場合、前記第１の選択情報を用いた選択が可能なままとなるように、前記第１の選択情報の表示を維持する
   請求項４に記載のプログラム。
6. 画像処理装置が、
   撮影画像に写る人物の顔領域と前記顔領域以外の肌領域とをそれぞれ検出し、
   肌の明るさの調整レベルが選択されたことに応じて、前記顔領域と前記顔領域以外の肌領域がそれぞれ明るくなるように、前記顔領域の明るさと前記顔領域以外の肌領域の明るさとをそれぞれ異なる調整パラメータを用いて調整する
   画像処理方法。
7. 撮影画像に写る人物の顔領域と前記顔領域以外の肌領域とをそれぞれ検出する検出部と、
   肌の明るさの調整レベルが選択されたことに応じて、前記顔領域と前記顔領域以外の肌領域がそれぞれ明るくなるように、前記顔領域の明るさと前記顔領域以外の肌領域の明るさとをそれぞれ異なる調整パラメータを用いて調整する調整部と
   を備える画像処理装置。

Images