JP5792990B2 - 画像処理装置およびその制御方法 - Google Patents
画像処理装置およびその制御方法 Download PDFInfo
- Publication number
- JP5792990B2 JP5792990B2 JP2011102342A JP2011102342A JP5792990B2 JP 5792990 B2 JP5792990 B2 JP 5792990B2 JP 2011102342 A JP2011102342 A JP 2011102342A JP 2011102342 A JP2011102342 A JP 2011102342A JP 5792990 B2 JP5792990 B2 JP 5792990B2
- Authority
- JP
- Japan
- Prior art keywords
- frame
- frame rate
- cyclic
- noise reduction
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/21—Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/618—Noise processing, e.g. detecting, correcting, reducing or removing noise for random or high-frequency noise
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Picture Signal Circuits (AREA)
- Studio Devices (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Description
以下、図面を参照して本発明の例示的な実施形態に基づいて詳細に説明する。なお、以下の説明においては、本発明に係る画像処理装置の一例として、動画撮像機能を有するデジタルカメラを説明する。しかしながら、本発明に動画像を撮像する機能は必須ではなく、情報処理装置など、動画像を処理可能ないかなる装置に対しても適用可能である。
図1は本実施形態に係るデジタルカメラが有する構成要素のうち、動画像の撮像とノイズ低減処理に関わるものを模式的に示したブロック図である。
図2はNR部4の構成例を示すブロック図である。以下、図2を参照してNR部4の構成及び動作について説明する。
空間的NR部402では、入力端子401を介して第1信号処理部3から入力されるデジタル画像信号に対して、2次元的(空間的)なノイズ低減処理を施し、ローパスフィルタ(LPF)403、第1混合部407、第2混合部409に供給する。
NR部4におけるノイズ低減動作の具体例を説明する。なお、以下では、UI部8から設定された撮像フレームレートで動画像信号が撮像されているものとするが、ノイズ低減処理の対象となる動画データとそのフレームレートの入力方法は特に制限されない。例えば出力部6が記録媒体から読み出した動画データと、動画データのヘッダなどから取得したフレームレートがNR部4に供給されてもよい。また、フレームレートは必ずしもNR部4の外部から入力される必要もなく、NR部4が動画データから抽出あるいは判別するように構成されてもよい。
dn=|pn−ln| (1−3)
ここで、lnは現フレームの画素値、pnは前フレームの画素値である。
on=K*pn+(1−K)*yn (1−4)
・空間的NR部402が出力する、巡回型ノイズ低減処理を適用前の現フレームの画素値ynと、
・第1混合部407が出力する、巡回型ノイズ低減処理を適用後の現フレームの対応する位置の画素値onとを、
ある一定の重みwで以下のように加重平均して混合する。なお、ここで用いる現フレームは、第1混合部407で用いる現フレームと同一である。必要であれば、第1混合部407の処理が終わるまで、例えば第2混合部409で現フレームを遅延させる。
mn=w*on+(1−w)*yn (1−5)
なお、例えば回路規模を低減したい場合や、処理を単純化したい場合には、第2混合部409を用いなくてもよい。この場合、図2において、第1混合部407が出力するノイズ低減処理後のフレーム画像をフレームメモリ408に直接入力するように構成すればよい。この場合、第2混合部409による画質向上効果は得られないが、第1混合部407における撮像フレームレートに応じた混合処理による効果は実現できる。
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
S1でCPU301はプログラムで用いるパラメータを初期値に設定するなどの初期化処理を実行する。S2でCPU301はプログラムの終了が指示されたかどうか判定する。例えばCPU301は、指示入力部303から終了指示が入力されたか否かの判定であってよい。
S401でCPU301は、S3で読み込んだフレーム(現フレーム)に対し、ε−フィルタに相当する演算を2次元的に適用して空間的NR処理を適用し、メモリ302に書戻す。S402でCPU301は、空間的NR処理後の現フレームにLPF403に相当するローパスフィルタ演算を適用する。そしてCPU301は、処理フレームメモリ408から読み出した前フレーム(第1の実施形態の変形例の場合)と、LPF処理後の現フレームとの差分絶対値を画素毎に算出する。S403でCPU301はフレーム間差分絶対値と、動画像の撮像フレームレートと、外部記憶装置304から読み出したテーブルを用いて、巡回係数Kを求める。なお動画像の撮像フレームレートは、画像処理アプリケーションからユーザが設定した値であってもよいし、カメラ306から画像を読み込む前にカメラ306又は動画像データから取得してもよい。S404でCPU301は巡回係数Kを基に2フレームの加重平均(混合)を行う。S405でCPU301は、加重平均処理で得られたフレームを巡回型NR処理結果として例えば外部記憶装置304に出力するとともに、フレームメモリ408(メモリ302)に格納する。
本実施形態によっても、第1の実施形態(変形例含む)と同様の効果が得られる。
Claims (7)
- 予め定められたフレームレートを有する動画像に対して巡回型ノイズ低減処理を適用する画像処理装置であって、
前記フレームレートに基づいて、現フレームより前の前フレームの重みである巡回係数を決定する決定手段と、
前記巡回係数を用いて前記前フレームと前記現フレームの画素を混合する第1混合手段と、
前記第1混合手段で得られたフレームを、前記巡回型ノイズ低減処理を適用した前記現フレームとして出力する出力手段と、
巡回型ノイズ低減処理を適用する現フレームの画素値と、前記巡回型ノイズ低減処理を適用後の、前記現フレームの1フレーム前の前フレームの画素値との差分から、前記現フレームと前記前フレームとの相関の大きさを表す情報を算出する算出手段と、を有し、
前記決定手段は、
前記算出手段で算出された情報で表される相関の大きさが大きいほど前記巡回係数を大きな値に設定し、
前記算出手段で算出された情報で表される相関の大きさが同じであれば、前記フレームレートが第1フレームレートのときは前記巡回係数を第1の値に決定し、前記フレームレートが前記第1フレームレートよりも低い第2フレームレートのときは前記巡回係数を前記第1の値よりも小さな第2の値に決定することを特徴とする画像処理装置。 - 前記決定手段は、前記算出手段で算出された情報で表される相関の大きさが予め定めた範囲である場合において、前記算出手段で算出された情報で表される相関の大きさが同じであれば、前記フレームレートが第1フレームレートのときは前記巡回係数を第1の値に決定し、前記フレームレートが前記第1フレームレートよりも低い第2フレームレートのときは前記巡回係数を前記第1の値よりも小さな第2の値に決定することを特徴とする請求項1に記載の画像処理装置。
- さらに、前記巡回型ノイズ低減処理の適用前と適用後の前記現フレームの画素を混合する第2混合手段をさらに有し、
前記第2混合手段が、前記フレームレートが低いほど前記巡回型ノイズ低減処理を適用後の前記現フレームの重みを小さくして前記混合を行い、
前記第1混合手段は、前記第2混合手段でえられたフレームと前記現フレームの画素を混合することを特徴とする請求項1または請求項2のいずれか1項に記載の画像処理装置。 - さらに、前記巡回型ノイズ低減処理の適用前に、前記現フレームに対して空間的ノイズ低減処理を適用するフィルタ手段を有することを特徴とする請求項1乃至請求項3のいずれか1項に記載の画像処理装置。
- 請求項1乃至請求項4の何れか1項に記載の画像処理装置と、
光学系によって結像される光学像を光電変換する撮像素子と、
前記撮像素子から出力されたアナログ画像信号をデジタル画像信号に変換するA/D変換手段を有することを特徴とするデジタルカメラ。 - 予め定められたフレームレートを有する動画像に対して巡回型ノイズ低減処理を適用する画像処理装置の制御方法であって、
前記画像処理装置の決定手段が、前記フレームレートに基づいて、現フレームより前の前フレームの重みである巡回係数を決定する決定工程と、
前記画像処理装置の第1混合手段が、前記巡回係数を用いて前記前フレームと前記現フレームの画素を混合する第1混合工程と、
前記画像処理装置の出力手段が、前記第1混合手段で得られたフレームを、前記巡回型ノイズ低減処理を適用した前記現フレームとして出力する出力工程と、
前記画像処理装置の算出手段が、巡回型ノイズ低減処理を適用する現フレームの画素値と、前記巡回型ノイズ低減処理を適用後の、前記現フレームの1フレーム前の前フレームの画素値との差分から、前記現フレームと前記前フレームとの相関の大きさを表す情報を算出する算出工程と、を有し、
前記決定工程において前記決定手段は、
前記算出工程で算出された情報で表される相関の大きさが大きいほど前記巡回係数を大きな値に設定し、
前記算出工程で算出された情報で表される相関の大きさが同じであれば、前記フレームレートが第1フレームレートのときは前記巡回係数を第1の値に決定し、前記フレームレートが前記第1フレームレートよりも低い第2フレームレートのときは前記巡回係数を前記第1の値よりも小さな第2の値に決定することを特徴とする画像処理装置の制御方法。 - コンピュータを、請求項1乃至請求項4のいずれか1項に記載の画像処理装置の各手段として機能させるためのプログラム。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011102342A JP5792990B2 (ja) | 2011-04-28 | 2011-04-28 | 画像処理装置およびその制御方法 |
| US13/455,499 US8736719B2 (en) | 2011-04-28 | 2012-04-25 | Image processing apparatus and control method for the same |
| CN201210135418.4A CN102761682B (zh) | 2011-04-28 | 2012-05-02 | 图像处理设备及其控制方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011102342A JP5792990B2 (ja) | 2011-04-28 | 2011-04-28 | 画像処理装置およびその制御方法 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2012235306A JP2012235306A (ja) | 2012-11-29 |
| JP2012235306A5 JP2012235306A5 (ja) | 2014-06-19 |
| JP5792990B2 true JP5792990B2 (ja) | 2015-10-14 |
Family
ID=47055997
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011102342A Expired - Fee Related JP5792990B2 (ja) | 2011-04-28 | 2011-04-28 | 画像処理装置およびその制御方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US8736719B2 (ja) |
| JP (1) | JP5792990B2 (ja) |
| CN (1) | CN102761682B (ja) |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150049221A1 (en) * | 2013-08-19 | 2015-02-19 | Motorola Mobility Llc | Method and apparatus for pre-processing video frames |
| JP6223176B2 (ja) * | 2013-12-26 | 2017-11-01 | キヤノン株式会社 | 画像処理装置及び撮像信号の処理方法 |
| WO2015119207A1 (ja) | 2014-02-07 | 2015-08-13 | 株式会社モルフォ | 画像処理装置、画像処理方法、画像処理プログラム及び記録媒体 |
| CN104065854B (zh) * | 2014-06-18 | 2018-08-10 | 联想(北京)有限公司 | 一种图像处理方法及一种电子设备 |
| JP6494301B2 (ja) * | 2015-01-22 | 2019-04-03 | キヤノン株式会社 | 撮像装置及びその制御方法 |
| JP6525602B2 (ja) * | 2015-01-22 | 2019-06-05 | キヤノン株式会社 | 撮像装置及びその制御方法 |
| CN105872310B (zh) * | 2016-04-20 | 2020-03-17 | 上海联影医疗科技有限公司 | 可移动成像设备的图像运动检测方法及图像降噪方法 |
| CN107437238B (zh) * | 2016-05-25 | 2020-11-24 | 上海联影医疗科技股份有限公司 | 一种图像分块自适应递归降噪方法及装置 |
| GB2573703B (en) * | 2017-03-06 | 2020-09-09 | Mitsubishi Electric Corp | Object tracking device and object tracking method |
| JP7098958B2 (ja) * | 2018-02-28 | 2022-07-12 | 株式会社ニコン | 撮像装置、画像処理装置、および画像処理プログラム |
| CN109448648A (zh) * | 2018-12-17 | 2019-03-08 | 惠科股份有限公司 | 一种显示面板的驱动模块、驱动方法和显示装置 |
| JP7278092B2 (ja) * | 2019-02-15 | 2023-05-19 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、撮像装置の制御方法、及びプログラム |
| CN113223470A (zh) * | 2021-04-20 | 2021-08-06 | 绵阳惠科光电科技有限公司 | 显示面板的驱动方法、显示装置的驱动模块和计算机可读存储介质 |
| KR102448069B1 (ko) * | 2022-05-27 | 2022-09-27 | 주식회사 디알텍 | 방사선 촬영에 의해 획득된 영상에 포함된 노이즈를 저감하기 위한 영상 처리 방법 및 장치 |
| CN117252886B (zh) * | 2023-09-11 | 2024-11-05 | 广东源恒软件科技有限公司 | 一种基于图像分割的发票识别方法及系统 |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000209507A (ja) | 1999-01-12 | 2000-07-28 | Toshiba Corp | 固体撮像装置の低ノイズ化回路 |
| JP2003209731A (ja) * | 2002-01-09 | 2003-07-25 | Sony Corp | 画像信号処理方法及び撮像装置 |
| CN100566379C (zh) * | 2002-06-25 | 2009-12-02 | 松下电器产业株式会社 | 移动检测装置及其利用该装置的噪声衰减装置 |
| JP3873918B2 (ja) * | 2003-03-14 | 2007-01-31 | セイコーエプソン株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
| JP3760943B2 (ja) * | 2004-01-20 | 2006-03-29 | コニカミノルタフォトイメージング株式会社 | 撮像装置および動画のノイズ処理方法 |
| US7499159B2 (en) * | 2004-04-16 | 2009-03-03 | Ahura Corporation | Method and apparatus for conducting Raman spectroscopy using a remote optical probe |
| CN101010939A (zh) * | 2004-09-03 | 2007-08-01 | 松下电器产业株式会社 | 图像处理装置以及图像处理程序 |
| JP2006287634A (ja) * | 2005-03-31 | 2006-10-19 | Pioneer Electronic Corp | 信号処理装置、信号処理方法およびノイズ低減装置 |
| KR100757392B1 (ko) * | 2005-07-29 | 2007-09-10 | 닛뽕빅터 가부시키가이샤 | 노이즈검출장치 및 방법과, 이를 이용한 노이즈저감장치 및방법 |
| CN101415078B (zh) * | 2007-10-18 | 2010-08-18 | 深圳Tcl新技术有限公司 | 基于电影的视频的递归噪声降低方法及装置 |
| JP5052319B2 (ja) * | 2007-12-17 | 2012-10-17 | オリンパス株式会社 | 動画ノイズ低減処理装置、動画ノイズ低減処理プログラム、動画ノイズ低減処理方法 |
| JP5202277B2 (ja) * | 2008-12-18 | 2013-06-05 | キヤノン株式会社 | 撮像装置 |
-
2011
- 2011-04-28 JP JP2011102342A patent/JP5792990B2/ja not_active Expired - Fee Related
-
2012
- 2012-04-25 US US13/455,499 patent/US8736719B2/en not_active Expired - Fee Related
- 2012-05-02 CN CN201210135418.4A patent/CN102761682B/zh not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| US8736719B2 (en) | 2014-05-27 |
| US20120274855A1 (en) | 2012-11-01 |
| CN102761682A (zh) | 2012-10-31 |
| JP2012235306A (ja) | 2012-11-29 |
| CN102761682B (zh) | 2015-09-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5792990B2 (ja) | 画像処理装置およびその制御方法 | |
| JP6525707B2 (ja) | 画像処理装置、その制御方法及びプログラム、並びに撮像装置 | |
| US9538085B2 (en) | Method of providing panoramic image and imaging device thereof | |
| CN108141509B (zh) | 图像处理装置、摄像装置、图像处理方法和存储介质 | |
| JP6465563B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| US20100265353A1 (en) | Image Processing Device, Image Sensing Device And Image Reproduction Device | |
| JP5984493B2 (ja) | 画像処理装置、画像処理方法、撮像装置およびプログラム | |
| WO2013101547A1 (en) | Photo extraction from video | |
| JP6254938B2 (ja) | 画像ノイズ除去装置、および画像ノイズ除去方法 | |
| CN102629976A (zh) | 图像处理设备和图像处理设备的控制方法 | |
| US9462189B2 (en) | Piecewise perspective transform engine | |
| JP7297406B2 (ja) | 制御装置、撮像装置、制御方法およびプログラム | |
| JP6800806B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP2014027526A (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
| JP7009252B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP2010026734A (ja) | 画像処理装置およびその方法 | |
| JP5455728B2 (ja) | 撮像装置、画像処理装置、及び画像処理方法 | |
| JP5482589B2 (ja) | 画像処理装置、画像処理方法および画像処理用プログラム | |
| JP2017126964A (ja) | 撮像制御装置、および撮像装置 | |
| JP2015177528A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
| JP2020057242A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
| JP6494388B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
| JP6105960B2 (ja) | 画像処理装置、画像処理方法、および撮像装置 | |
| JP2009273072A (ja) | 高精細画像処理装置、高精細画像処理方法、およびプログラム | |
| JP5539561B2 (ja) | 画像処理装置およびその方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140423 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140423 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150122 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150209 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150401 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150424 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150618 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150710 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150807 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5792990 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |