ISP工程师谈视频监控的图像处理和优化

视频监控会涉及多种技术,一个视频监控方案主要包括图像采集、图像预处理、图像处理与传输、图像显示及图像管理等。而在整个视频监控领域中,最难点在于图像的处理。图像处理对于整个视频监控方案来说是一项艰巨而又关键的任务,直接决定了后续图像分析的准确性和便捷性。

【安防在线 www.anfang.cn】
  随着人们对公共和个人安全需求的日益增长,视频监控越来越受到重视。据《中国安防行业“十二五”发展规划》报告,到2015年,安防产业规模总产值达到5000亿元,其中视频监控系统产值将达到1100亿元。另据Research and Markets最新报告显示,预计在2013年~2018年期间,复合年增长率将达到25%左右,到2018年底,全球视频监控的收入将会增长3倍左右,网络视频监控市场的收入将增长近4倍,这足可见视频监控在中国的市场前景广阔,国内视频监控市场蕴藏着巨大的商业机会。

  视频监控这个“蛋糕”看似很大,但要真正吃到却并不容易,特别是近几年来视频监控逐步在向高清化、智能化和网络化方向发展,这就需要企业更加重视技术和研发实力。随着视频监控应用范围的扩大,用户对视频监控平台的性能、寿命、可靠性和稳定性的要求也变得多元化和专业化,新产品的开发难度会进一步加大。而据参加本次技术沙龙的一位工程师介绍,他了解的情况是,国内目前做视频监控的企业大都不具备独立开发新产品的能力,技术部门一般都是调试和测试工程师,具备ISP工程师都很少。这样看来,要想在视频监控市场分一杯羹,国内的视频监控企业必须要考虑下如何提升自己的技术水平。

  视频监控会涉及多种技术,一个视频监控方案主要包括图像采集、图像预处理、图像处理与传输、图像显示及图像管理等。而在整个视频监控领域中,最难点在于图像的处理。图像处理对于整个视频监控方案来说是一项艰巨而又关键的任务,直接决定了后续图像分析的准确性和便捷性。

ISP工程师谈视频监控的图像处理和优化

  图像处理的一般步骤包括前处理和后处理。前处理需要有一个合适的曝光,这样会涉及到一个自动曝光算法。后处理的步骤比较多,有白平衡校正,插值,色再现,伽玛校正,降噪、边缘增强和伪彩色抑制。由于步骤比较多,数据计算量大,故图像处理的过程(ISP),一般由硬件模块完成,或者用FPGA实现。也有一些厂商用专用芯片的ISP来处理,比如TI的达芬奇,海思的Hi系列SoC等。各芯片厂家的ISP流程大致相同,ISP的几个环节(白平衡校正、色再现、伽玛校正、伪彩色抑制)都是简单而透明的。真正有技术难点的环节是CFA插值、宽动态、噪声滤波和边缘增强,这个才是各厂家技术实力的区别所在。

  CFA插值是把原始图像每个像素点单一的颜色都再增加另外两个颜色,形成一个包含有RGB颜色的像素点,数据量增至三倍。该方法的研究始于1976年,目前还在持续研究发展中。CFA插值的难点在于:保留图像的细节、正确还原色彩、不产生虚假色、不增加噪点、没有摩尔纹效应、运算量小且可以硬件实现。这些条件之间往往互相制约,实际的算法都是在满足应用的前提下作了折衷。

  噪声滤波是一种图像平滑技术,它抑制噪点的同时也会对细节造成损失。降噪算法就在于如何有效去除噪点而保留边缘。通常,会按不同的亮度等级,来检测噪点和使用不同降噪强度。一般地,一张图像在高亮度和低亮度的地方,可以进行高强度的滤波。

  由于原始图像的边缘和细节往往是不尽人意的,再加上降噪平滑,所以后端要有边缘增强的模块。边缘增强只对亮度分量进行增强。它的算法原理一般是用拉普拉斯算子提取出边缘信息来,然后根据边缘的大小和正负,来决定增加或减少多少亮度值,来达到增加细节的目的。

  以交通路口的测光举例来说,由于在交通路口我们需要知道到底是哪辆车违章了,所以会更加关注车辆本身及车牌号码,而路边的花草树木我们并不关心,要达到这个目的,我们就可以把车和显示车牌的路中间区域给较大的权重,使之亮度符合预期,而对道路边上的建筑物或树荫给比较小的权重。

  宽动态技术用于改善高反差场景下的图像视觉效果,使得高亮的地方不过曝,低亮的地方不过暗。目前分为前端校正和后端校正两种。前端校正,目前的一些CMOS可以通过控制感光度来抑制像素点的电荷饱和,以达到宽动态目的。还可以隔行或相邻像素单元进行长曝光和短曝光来提升动态范围(类似人眼感光细胞那样)。后端处理,有ISP处理芯片算法实现。只有前端校正的方法才是真正的宽动态方法,另为宽动态也是图像技术未来的发展趋势。

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 自然资源部:为数字中国建设打造统一时空基底

    从四个方面提出了测绘地理信息工作的目标方向和重点任务,即为数字中国建设打造统一的时空基底、为高质量发展提供丰富的数据要素保障、为地理信息产业发展营造优良环境、为构建新安全格局严守测绘地理信息管理底线。

    2024年3月4日
  • 全球首个绿色智慧工地落户长沙可实现全流程无人数字化闭环

    记者从湖南长沙湘江新区获悉,这里有了全球施工领域首个绿色智慧工地。该工地由中联重科股份有限公司(以下简称中联重科)打造,可实现全流程无人数字化闭环。

    2024年2月22日
  • 教育部发布预警加强校车安全管理 各地积极响应

    新学期伊始,中小学(幼儿园)陆续开学,校车将伴随部分学生(幼儿)往返于家校之间,运行安全管理进入高风险期。全国校车安全管理部际联席会议办公室特发布2019年第2号预警,要求各地教育主管部门要会同校车安全管理协调机制办公室各成员单位,加强校车安全管理,确保《校车安全管理条例》落实到位。

    2024年1月29日
  • 比特大陆孵化公司「库克智能」发布3D人脸识别智能终端新品

    “现在3D换2D就和5G换4G的道理一样。”CEO Roger认为。3D比2D多了一个量级的特征讯息,加上库克智能在3D图像处理, 深度学习3D算法以及芯片领域的基因,打造了价格亲民款的第二代MK1产品, 就是为了加速实现让3D在市场上普及,测底解决2D的误识别和非活体攻击两个问题,弥补原来的缺陷。

    2024年1月28日
  • 中瀛鑫推出500万高清360度全景网络摄像机

    为了实现大视野、高清晰的场景监控需要,近日深圳市中瀛鑫科技股份有限公司推出了500万高清360度全景网络摄像机,产品型号为WS-F8P31。

    资讯 2024年5月16日
  • 浙江湖州市公路养护工程实现视频监控全覆盖

    据了解,近年来,湖州市公路部门通过科技设备提升公路管养水平的力度不断加大。除了可移动视频监控外,依托市公路信息服务与应急指挥中心这个大平台,公路部门在路网监控、应急抢险指挥和信息化服务上基本实现了“智能化”和“大覆盖”。其中进路网监控一项,就有包括高速公路和国省道重要路段的224路监控线路接进指挥中心,提高了工作安全可靠性,为市民出行生活提供了便捷。

    2024年2月6日