[go: up one dir, main page]

CN107659786A - 一种全景视频监控装置及处理方法 - Google Patents

一种全景视频监控装置及处理方法 Download PDF

Info

Publication number
CN107659786A
CN107659786A CN201710871677.6A CN201710871677A CN107659786A CN 107659786 A CN107659786 A CN 107659786A CN 201710871677 A CN201710871677 A CN 201710871677A CN 107659786 A CN107659786 A CN 107659786A
Authority
CN
China
Prior art keywords
video
panoramic
image
projection face
video image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710871677.6A
Other languages
English (en)
Inventor
张斌
陈荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANGHAI ANVIZ TECHNOLOGY Co Ltd
Original Assignee
SHANGHAI ANVIZ TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANGHAI ANVIZ TECHNOLOGY Co Ltd filed Critical SHANGHAI ANVIZ TECHNOLOGY Co Ltd
Priority to CN201710871677.6A priority Critical patent/CN107659786A/zh
Publication of CN107659786A publication Critical patent/CN107659786A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

一种全景视频监控装置，处理器执行以下操作：步骤一，获取4路实时视频序列，确认每个序列中图像是否完整；步骤二，判断任意两路视频序列中同时刻的视频图像是否满足图像拼接条件，确认其存在范围内的重叠区域；步骤三，将4路实时视频序列裁剪成预设的形状；步骤四，确定全景投影面，并将4路实时视频序列中的视频图像映射至全景投影面；步骤五，建立视频图像上的像素点与全景投影的映射表，使视频图像的同一行数据的像素点分布于全景投影面的多行坐标点中，并根据视频图像至全景投影面的逆变换及映射表，计算实时全景投影面中所有坐标点的像素值；步骤六，融合处理全景投影面上所有坐标点的像素，并根据像素值输出全景视频图像。

Description

一种全景视频监控装置及处理方法
技术领域
本发明属于视频监控技术领域，特别涉及一种全景视频监控装置及处理方法。
背景技术
在监控系统高速发展的今天，高清摄像机的出现相比传统的摄像机具有很多优势，比如细腻的细节表现，较宽的镜头视野等。但是，现在对于监控，人们又有了新的需求，即更加宽广的全景式的视频监控，可以让监控人员在同一个场景中看到更多的内容。
目前，基于CMOS和CCD的摄像机具有不同的焦距，譬如2.8mm、3.6mm，或者带变焦的2.8-12mm，甚至更大倍数的焦距。不同的焦距将获取不同的视场角，但是这些视场角的大小都无法满足对水平180度范围的监控。因此，现有的做法是采用广角鱼眼镜头，可以获得接近180度的视场角，但是也存在着相应缺点：
1.周边的图像畸变严重；
2.视场角未能真实达到180度的全景覆盖。
这时，如果在一个区域部署多路摄像机，以求在后端实现全景监控，那么又面临着以下缺点：
1.不同路的图像会有重合部分，视觉感官效果较差；
2.不同路的图像可能会有间隙，未能覆盖全景；
3.重合部分的图像会浪费存储空间。
还有一种方案是，在一个区域部署快速球，让其来回巡航扫描。这种方案存在着某些视野内无法实现实时预览，记忆某些视野看不到的缺点。
发明内容
本发明提供一种全景视频监控装置，目的在于解决多路图像集成时出现冗余问题，实现多路视频做无缝拼接，以达到180度的全景预览，提升用户体验。
一种全景视频监控装置，该装置包括4个分别拍摄4个不同角度的定焦镜头，以及4个与所述定焦镜头配合的CMOS图像传感器，形成4路实时视频序列，
所述全景视频监控装置包括存储器；以及
耦合到所述存储器的处理器，该处理器被配置为执行存储在所述存储器中的指令，所述处理器执行以下操作：
步骤一，获取4路实时视频序列，确认每个序列中图像是否完整；
步骤二，判断任意两路视频序列中同时刻的视频图像是否满足图像拼接条件，确认其存在范围内的重叠区域；
步骤三，将4路实时视频序列裁剪成预设的形状；
步骤四，确定全景投影面，并将4路实时视频序列中的视频图像映射至全景投影面；
步骤五，建立视频图像上的像素点与全景投影的映射表，使视频图像的同一行数据的像素点分布于全景投影面的多行坐标点中，并根据视频图像至全景投影面的逆变换及映射表，计算实时全景投影面中所有坐标点的像素值；
步骤六，融合处理全景投影面上所有坐标点的像素，并根据像素值输出全景视频图像。
一种全景视频处理方法，采用4个分别拍摄4个不同角度的定焦镜头，以及4个与所述定焦镜头配合的CMOS图像传感器，形成4路实时视频序列，
全景视频处理方法包括以下步骤：
步骤一，获取4路实时视频序列，确认每个序列中图像是否完整；
步骤二，判断任意两路视频序列中同时刻的视频图像是否满足图像拼接条件，确认其存在范围内的重叠区域；
步骤三，将4路实时视频序列裁剪成预设的形状；
步骤四，确定全景投影面，并将4路实时视频序列中的视频图像映射至全景投影面；
步骤五，建立视频图像上的像素点与全景投影的映射表，使视频图像的同一行数据的像素点分布于全景投影面的多行坐标点中，并根据视频图像至全景投影面的逆变换及映射表，计算实时全景投影面中所有坐标点的像素值；
步骤六，融合处理全景投影面上所有坐标点的像素，并根据像素值输出全景视频图像。
本发明将多路摄像机集成到一路中，并利用视频拼接处理技术，将其处理成一路实时全景预览图像。用户安装起来方便快捷，并能获得高分辨率的全景视频预览体验，本系统处理快速、高效，有效降低了视频预览的延迟时间，有效实现多路视频的无缝拼接。
具体实施方式
本发明的全景视频监控装置，该装置包括4个分别拍摄4个不同角度的定焦镜头，以及4个与所述定焦镜头配合的CMOS图像传感器，形成4路实时视频序列。
所述全景视频监控装置包括存储器；以及
耦合到所述存储器的处理器，该处理器被配置为执行存储在所述存储器中的指令，所述处理器执行以下操作：
步骤一，获取4路实时视频序列，确认每个序列中图像是否完整；
步骤二，判断任意两路视频序列中同时刻的视频图像是否满足图像拼接条件，确认其存在范围内的重叠区域；
步骤三，将4路实时视频序列裁剪成预设的形状；
步骤四，确定全景投影面，并将4路实时视频序列中的视频图像映射至全景投影面；
步骤五，建立视频图像上的像素点与全景投影的映射表，使视频图像的同一行数据的像素点分布于全景投影面的多行坐标点中，并根据视频图像至全景投影面的逆变换及映射表，计算实时全景投影面中所有坐标点的像素值；
步骤六，融合处理全景投影面上所有坐标点的像素，并根据像素值输出全景视频图像。
本发明的全景视频处理方法，采用4个分别拍摄4个不同角度的定焦镜头，以及4个与所述定焦镜头配合的CMOS图像传感器，形成4路实时视频序列。
全景视频处理方法包括以下步骤：
步骤一，获取4路实时视频序列，确认每个序列中图像是否完整；
步骤二，判断任意两路视频序列中同时刻的视频图像是否满足图像拼接条件，确认其存在范围内的重叠区域；
步骤三，将4路实时视频序列裁剪成预设的形状；
步骤四，确定全景投影面，并将4路实时视频序列中的视频图像映射至全景投影面；
步骤五，建立视频图像上的像素点与全景投影的映射表，使视频图像的同一行数据的像素点分布于全景投影面的多行坐标点中，并根据视频图像至全景投影面的逆变换及映射表，计算实时全景投影面中所有坐标点的像素值；
步骤六，融合处理全景投影面上所有坐标点的像素，并根据像素值输出全景视频图像。
值得说明的是，虽然前述内容已经参考若干具体实施方式描述了本发明创造的精神和原理，但是应该理解，本发明并不限于所公开的具体实施方式，对各方面的划分也不意味着这些方面中的特征不能组合，这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (2)

1.一种全景视频监控装置，其特征在于，该装置包括4个分别拍摄4个不同角度的定焦镜头，以及4个与所述定焦镜头配合的CMOS图像传感器，形成4路实时视频序列，
所述全景视频监控装置包括存储器；以及
耦合到所述存储器的处理器，该处理器被配置为执行存储在所述存储器中的指令，所述处理器执行以下操作：
步骤一，获取4路实时视频序列，确认每个序列中图像是否完整；
步骤二，判断任意两路视频序列中同时刻的视频图像是否满足图像拼接条件，确认其存在范围内的重叠区域；
步骤三，将4路实时视频序列裁剪成预设的形状；
步骤四，确定全景投影面，并将4路实时视频序列中的视频图像映射至全景投影面；
步骤五，建立视频图像上的像素点与全景投影的映射表，使视频图像的同一行数据的像素点分布于全景投影面的多行坐标点中，并根据视频图像至全景投影面的逆变换及映射表，计算实时全景投影面中所有坐标点的像素值；
步骤六，融合处理全景投影面上所有坐标点的像素，并根据像素值输出全景视频图像。
2.一种全景视频处理方法，其特征在于，采用4个分别拍摄4个不同角度的定焦镜头，以及4个与所述定焦镜头配合的CMOS图像传感器，形成4路实时视频序列，
全景视频处理方法包括以下步骤：
步骤一，获取4路实时视频序列，确认每个序列中图像是否完整；
步骤二，判断任意两路视频序列中同时刻的视频图像是否满足图像拼接条件，确认其存在范围内的重叠区域；
步骤三，将4路实时视频序列裁剪成预设的形状；
步骤四，确定全景投影面，并将4路实时视频序列中的视频图像映射至全景投影面；
步骤五，建立视频图像上的像素点与全景投影的映射表，使视频图像的同一行数据的像素点分布于全景投影面的多行坐标点中，并根据视频图像至全景投影面的逆变换及映射表，计算实时全景投影面中所有坐标点的像素值；
步骤六，融合处理全景投影面上所有坐标点的像素，并根据像素值输出全景视频图像。
CN201710871677.6A 2017-09-25 2017-09-25 一种全景视频监控装置及处理方法 Pending CN107659786A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710871677.6A CN107659786A (zh) 2017-09-25 2017-09-25 一种全景视频监控装置及处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710871677.6A CN107659786A (zh) 2017-09-25 2017-09-25 一种全景视频监控装置及处理方法

Publications (1)

Publication Number Publication Date
CN107659786A true CN107659786A (zh) 2018-02-02

Family

ID=61131177

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710871677.6A Pending CN107659786A (zh) 2017-09-25 2017-09-25 一种全景视频监控装置及处理方法

Country Status (1)

Country Link
CN (1) CN107659786A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108495005A (zh) * 2018-04-11 2018-09-04 江苏安威士智能安防有限公司 多路高清摄像拼接的全景视频实时处理的系统和方法
CN112381713A (zh) * 2020-10-30 2021-02-19 地平线征程(杭州)人工智能科技有限公司 图像拼接方法和装置、计算机可读存储介质、电子设备
CN112637551A (zh) * 2020-11-18 2021-04-09 合肥市卓迩无人机科技服务有限责任公司 多路4k准实时拼接视频的全景数据管理软件系统
CN116309083A (zh) * 2021-12-17 2023-06-23 华为技术有限公司 全景视频的动态范围映射方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101895693A (zh) * 2010-06-07 2010-11-24 北京高森明晨信息科技有限公司 生成全景图像的方法及装置
CN103763479A (zh) * 2013-12-31 2014-04-30 深圳英飞拓科技股份有限公司 实时高速高清全景视频的拼接装置及其方法
CN105376530A (zh) * 2015-10-27 2016-03-02 南京泓众电子科技有限公司 一种基于固定位置的全景视频图像生成装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101895693A (zh) * 2010-06-07 2010-11-24 北京高森明晨信息科技有限公司 生成全景图像的方法及装置
CN103763479A (zh) * 2013-12-31 2014-04-30 深圳英飞拓科技股份有限公司 实时高速高清全景视频的拼接装置及其方法
CN105376530A (zh) * 2015-10-27 2016-03-02 南京泓众电子科技有限公司 一种基于固定位置的全景视频图像生成装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108495005A (zh) * 2018-04-11 2018-09-04 江苏安威士智能安防有限公司 多路高清摄像拼接的全景视频实时处理的系统和方法
CN112381713A (zh) * 2020-10-30 2021-02-19 地平线征程(杭州)人工智能科技有限公司 图像拼接方法和装置、计算机可读存储介质、电子设备
CN112381713B (zh) * 2020-10-30 2024-01-26 地平线征程(杭州)人工智能科技有限公司 图像拼接方法和装置、计算机可读存储介质、电子设备
CN112637551A (zh) * 2020-11-18 2021-04-09 合肥市卓迩无人机科技服务有限责任公司 多路4k准实时拼接视频的全景数据管理软件系统
CN116309083A (zh) * 2021-12-17 2023-06-23 华为技术有限公司 全景视频的动态范围映射方法及装置

Similar Documents

Publication Publication Date Title
CN107580178B (zh) 一种图像处理方法及装置
CN113382168B (zh) 用于存储成像数据的重叠区以产生优化拼接图像的设备及方法
US7015954B1 (en) Automatic video system using multiple cameras
CN104580882B (zh) 拍照的方法及其装置
US8004558B2 (en) Stereoscopic wide field of view imaging system
CN100524017C (zh) 凹形全景照相机系统
CN102959964B (zh) 多视点视频拍摄系统和方法
KR20150068299A (ko) 다면 영상 생성 방법 및 시스템
WO2011107448A2 (en) Object detection and rendering for wide field of view (wfov) image acquisition systems
JP2006039564A (ja) カメラシステム及びパノラマカメラシステム
SG176327A1 (en) A system and method of image processing
CN107659786A (zh) 一种全景视频监控装置及处理方法
KR102073206B1 (ko) 촬상 시스템, 방법, 및 용도
CN106603912A (zh) 一种视频直播控制方法及装置
US10057487B1 (en) Panoramic imaging systems based on normal-lens cameras
CN107623804A (zh) 一种终端设备及拍摄全景图像的方法
JP2010181826A (ja) 立体画像形成装置
CN106023073A (zh) 一种图像拼接系统
WO2017092261A1 (zh) 一种摄像头模组、移动终端及其拍摄图像的方法和装置
US9098910B2 (en) Method for generating video data stream
CN108234904B (zh) 一种多视频融合方法、装置与系统
US11838634B2 (en) Method of generating a digital video image using a wide-angle field of view lens
CN107450265A (zh) 光场全景相机
TWI504936B (zh) 影像處理裝置
CN116208851B (zh) 图像处理方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180202

RJ01 Rejection of invention patent application after publication