IPCamera摄像头模组,ISP调试
IP网络摄像头广泛在手机,安防,医疗,汽车各个领域都广泛使用。本章节将对摄像头的基础知识进行分享,先从硬件认识,后续分享嵌入式软件中如何调试相关内容。
专用名词:
VCM (Voice Coil Moto): 音圈马达
CCM (Camera Compact Module): 摄像头模组
1. 引言
简要介绍摄像头模组(CCM)的基本概念。
CCM 摄像头模组全称(Camera Compact Module),摄像头模组在当前的嵌入式领域使用非常广泛,那么摄像头模组到底是什么样子的,看图1.1 ,大多数都采用了以一个模组的形式存在,大大减少了二次开发的工作,可以直接使用到嵌入式设备中。
摄像头模组
2. 嵌入式系统中的CCM应用
摄像头模组主要用于手机,汽车,物联网,工业,医疗等等领域,主要提供视觉的作用,不仅仅在视觉上展现,对于视觉相关使用的计算都算是提供基础设备。
-
移动设备:如智能手机和平板电脑中的摄像头应用。 -
汽车电子:如车载摄像头(ADAS系统中的应用)。 -
物联网(IoT)设备:如智能家居中的监控摄像头。 -
工业控制:如机器视觉系统中的应用。 -
医疗设备:如内窥镜、显微镜等嵌入式医疗设备中的应用。
3. 摄像头模组的基本组成
这里以一个小型手机摄像头为例子
摄像头一般分为三大部分:一个是镜头,Sensor,还有ISP.
-
镜头(Lens):镜头部分是模组的前端光学组件部分,将会把光线聚集到传感器上,镜头里又可以做得比较复杂,比如定焦,变焦,鱼眼睛,超广角视角等都需要依靠镜头部分。镜头部分有的会含有音圈马达(VCM),主要用来调焦,在上图中看到看到VCM部分,体积也比较大。当然VCM 在镜头模组并不是必须,有的没有,有的有或者用其他
-
图像传感器(Image Sensor):Sensor 作为感光元器件,是镜头最重要的部分。目前有两种常用的传感器,一种是CCD ,另外一种是CMOS。
CMOS:CMOS传感器利用半导体工艺,将光子转化为电子信号。每个像素点上都有独立的放大器和A/D转换器,能够实现高集成度和低功耗。
CCD:CCD传感器将光子转换为电荷,电荷再被传输到外围电路进行放大和A/D转换。CCD的结构使其具有较低的噪声和较高的图像质量。对于这两种传感器来说,都有优缺点,整体来说CCD 成像质量比CMOS更好,在低光照强度下表现更好,但是成本更高,功耗也更高,在手持设备CMOS多一些,CCD这种在专业摄影,医学,科学研究用得多一些。
图像信号处理器(ISP):ISP是图像信号处理的核心组件,负责将原始的传感器数据处理成可用的图像。它在镜头中占有很重要的地位,可以运行各种图像算法,比如对图像去除噪声,颜色插值,颜色矫正,白平衡调整等都是需要ISP做的工作;
4. 摄像头模组的封装工艺
关于摄像头模组的封装工艺一般有两种:
COB(Chip-on-Board):将图像传感器芯片直接安装在PCB上,适合高集成度应用。
CSP(Chip-Scale-Package):是一种半导体封装技术,其封装尺寸与裸片(裸芯片)尺寸非常接近,。这种封装技术通过减少封装材料和占用空间。
5. 摄像头的接口简述
对于目前摄像头接口使用率比较高的有两种,DVP 接口,MIPI 接口。
DVP 接口:是比较传统的接口,采用并行的方式,摄像头模块连接到处理器或图像处理单元,通常位宽有8bit、10bit、12bit、16bit 等。对于这种DVP 接口在单片机可以看到,一般用于要求不是很高的地方。
MIPI 接口:是一种标准的接口,不仅用于摄像头,在显示接口也会用上叫做MIPI DSI,在摄像头中使用的叫做MIPI CSI 接口,需要注意的是它是一种高速串行方式,速率达到Gbps 级别,功耗也低,但是距离比较短,一般用于手机消费电子;
为了更清晰地表达这一点,调整表格,并明确 MIPI CSI 与 DVP 的对比。以下是调整后的表格:
特性 | DVP(Digital Video Port) | MIPI CSI(Camera Serial Interface) |
---|---|---|
简介 | 传统并行视频接口 | 高性能串行接口标准,专用于摄像头 |
传输方式 | 并行传输 | 高速串行传输 |
数据传输速率 | 低速,通常较 MIPI CSI 慢 | 几 Gbps |
功耗 | 相对较高 | 低功耗 |
数据通道(Lanes) | 单通道或少数并行通道 | 支持多通道 |
设计复杂度 | 较低 | 高 |
成本 | 较低 | 较高 |
应用 | 低端消费电子、玩具、低分辨率监控设备 | 智能手机、平板电脑、笔记本、车载摄像头 |
接口标准化 | 非标准化,设计简单 | 标准化接口,广泛应用 |
适用设备 | 低端消费类电子、简单工业设备 | 高端移动设备、车载系统、监控设备 |
信号传输路径 | 相对较长 | 短 |
灵活性 | 低 | 高 |
抗干扰能力 | 较弱 | 强 |
支持的最大分辨率 | 通常支持到 1080p | 支持到 8K 及更高 |
数据传输速率 | 100 Mbps 到 200 Mbps | 1 Gbps 到几 Gbps |
6. 发展趋势
摄像头主要部分在于传感器,在国内的CMOS 公司也迅速发展,格科微电子,豪威,思特威等公司进步都非常大,但是对于高端CMOS 传感器主要被Sony, 三星占据。但是对于监控领域来说,这个行业已经是走在全球顶端。
以后发展趋势主要以下几点:
-
高分辨率与高帧率的发展:讨论超高清(4K/8K)视频与高速摄影在嵌入式领域的前景。 -
多摄像头系统:多模组协同工作(如手机中的多摄像头设计)。 -
AI与智能化:摄像头模组与人工智能的结合,如自动场景识别、目标检测等。 -
新型传感技术:如TOF(飞行时间)、深度传感器在嵌入式系统中的应用。
对摄像头模组主要组成部分,对封装工艺得到了解,了解摄像头的接口,对于当前使用高性能的摄像头,更多MIPI CSI的摄像头比较多。后续也将会对摄像头的一些知识进行一个分享,涉及Linux Video子系统,驱动移植,ISP 相关。
【支持红外夜视IRCUT的4G智能安全帽BW620Y,内部主板型号有,SAE01, W20, k61v1_32_bsp_1g, k62v1_64_bsp, soq_azw_05_Natv,soq_azw_01_Natv,AZW003,aqm6816,soq_azw_01_Natv,SC161, W25,比传统的白光照明灯效果要好很多,可以规避大的亮的光斑,可以在雾天使用。-哔哩哔哩】 https://b23.tv/C36wsnX
危险气体检测仪,通过4G/5G执法记录仪或者4G/5G智能安全帽上报到平台,https://www.besovideo.com/detail?t=1&i=273
智能安全帽~生命体征检测与危险气体检测一体化集成设计还是蓝牙无线外挂式方式好?https://www.besovideo.com/detail?t=1&i=279
智能安全帽~生命体征采集上报,https://www.besovideo.com/detail?t=2&i=506
智能安全帽,检测生命体征上报平台, https://v.douyin.com/e3oP4Yx/
AIoT万物智联,智能安全帽生产厂家,执法记录仪生产厂家,单北斗定位智能安全帽、智能头盔、头盔记录仪、执法记录仪、智能视频分析/边缘计算AI盒子、车载视频监控/车载DVR/NVR、布控球、智能眼镜、智能手电、智能电子工牌、无人机4G补传系统等统一接入大型统一视频平台~融合通信可视指挥调度平台VMS/smarteye 。
什么是智能安全帽,如何选购智能安全帽,智能安全帽的主要功能,https://www.besovideo.com/detail?t=1&i=109
目前支持的AI智能算法、视频智能分析算法有哪些,https://www.besovideo.com/detail?t=1&i=297
视频演示1~单独北斗定位智能安全帽助力光伏新能源, 视频演示2~石油石化
海康、大华等5000路固定点摄像头走国标GB28181接入统一视频平台smarteye,支持eHome,ISUP, SIP,萤石云,CMSV6等
电力施工作业现场安全生产风险管控应用方案,https://www.besovideo.com/detail?t=1&i=50
轻危大型厂矿可视化监管系统方案(有内部作业视频数据安全保密的需求),https://www.besovideo.com/detail?t=1&i=258
超薄款4G工牌视频记录仪BH128,https://www.besovideo.com/detail?t=2&i=1575
超小微型4G胸牌视频记录仪BZ223,全国产芯片,单独北斗定位, https://www.besovideo.com/detail?t=2&i=1542
防抖执法记录仪、智能安全帽、头盔记录仪大全,https://www.besovideo.com/detail?t=2&i=1692
可拆卸智能安全帽、分体式智能头盔记录仪大全,https://www.besovideo.com/detail?t=2&i=1697
北斗双频高精度定位智能工卡、电子工牌大全,https://www.besovideo.com/detail?t=2&i=1689
为什么武警、特警拉练演习的MESH自组网系统都不约而同的选择了smarteye平台?https://www.besovideo.com/detail?t=2&i=1215
百川汇流万物智联尽入优视融合通信~大型融合通信可视指挥调度平台smarteye
5G执法记录仪+5G智能安全帽/头盔摄像头+5G智能AI布控球+融合同学可视指挥调度平台smarteye
#物联网#IoT+5G互联+AI智能视频分析#边缘计算#+大数据+遥感+#GIS#,八仙过海齐汇聚,保障安全无所惧!
#智能安全帽#/#头盔摄像头#+#4G记录仪#+#智能布控球#+#无人机4G回传#,移动视频四剑客,天生绝配,联手打造立体化全方位安全生产可视监管系统。
万物智联AIoT+5G智能感知图传,一切尽在合肥优视大型可视指挥调度平台VMS/smarteye 。
安全生产可视化远程监理在大型厂矿(发电厂、钢厂、石油石化炼化、化工园区等有危险工种岗位等工矿企业)中的应用,各类防爆安全帽、工作记录仪等,图传加数,危险气体采集,工人心率等体征信息采集,与工单等信息结合,统一后台汇聚。https://www.besovideo.com/detail?t=1&i=29
智慧工地-远程可视监管,劳务用工实名制,工作票绑定,定位安全帽~人员定位-考勤、精细化管理 系统应用方案,
https://www.besovideo.com/detail?t=1&i=28
智慧工地-智能AI算法的实现机制,https://www.besovideo.com/detail?t=1&i=129
边缘计算AI盒子、执法记录仪、一体化布控球等目前支持的AI智能算法、视频智能分析算法有哪些,
https://www.besovideo.com/detail?t=1&i=297
边缘计算AI智能盒子的视频源必须是固定点监控摄像头吗?https://www.besovideo.com/detail?t=1&i=315
警用执法记录仪~城管+公安执法记录仪~交警执法记录仪-布控球等移动视频终端视音频一体化管理平台建设方案,https://www.besovideo.com/detail?t=1&i=188
移动执法视频取证标准配置(4G/5G执法记录仪+采集工作站+布控球+无人机4G回传+车载DVR+头盔摄像头,AR眼镜等统一接入大型可视指挥调度平台VMS/smarteye), https://www.besovideo.com/detail?t=1&i=2
公安交警空中巡视,无人机电力巡检巡线,通过便携式微型HDMI 4G DVR,将地面接收到的无人机视频图像走4G网络实时传送到电力公司中心机房,与4G工作记录仪、一体化4G布控球、4G图传头盔摄像头、4G图传巡检机器人等产品统一接入可视指挥调度平台SmartEye系统进行视音频指挥调度,亦可接入海康等任意的28181国标平台,可走运营商专网过边界-网闸进入公安专网。
微型4G无线HDMI高清4G/5G图传DVR在无人机航拍,地面接收4G5G补传系统中的应用方案
https://www.besovideo.com/detail?t=1&i=49
视频演示~无人机视频4G回传~微型小HDMI DVR装置,与单兵执法仪/头盔摄像头等统一接入可视指挥调度平台VMS/smarteye ,可升级到5G,
https://v.douyin.com/JhTQPNL/
无人机视频4G回传~微型HDMI 4G DVR用户手册,https://www.besovideo.com/detail?t=1&i=170
微型HDMI 4G DVR接入GB28181国标平台,https://www.besovideo.com/detail?t=1&i=216
(另外一种方案)无人机图传,通过5G执法记录仪USB传输到可视指挥调度平台VMS/smarteye,https://v.douyin.com/YnevTLD/
数字化煤场基于UWB的人员高精度定位系统方案,https://www.besovideo.com/detail?t=2&i=997
室内定位(UWB/蓝牙等)技术方案概述,https://www.besovideo.com/detail?t=1&i=205
室内定位之蓝牙信标配合安卓系统的智能安全帽、电力作业记录仪, https://www.besovideo.com/detail?t=1&i=267
内置RTK北斗高精度定位的智能安全帽测试报告(MQTT通信),https://www.besovideo.com/detail?t=1&i=132
内置UWB室内高精度定位的智能安全帽-软件说明, https://www.besovideo.com/detail?t=1&i=131
融合通信可视指挥调度平台smarteye与国标GB28181平台的异同与关联,https://www.besovideo.com/detail?t=1&i=287
电力专用指纹解锁5G执法记录仪BJ531~内置靠近高压电近电预警、登高预警,温度检测、生命体征检测上报平台smarteye,
https://www.besovideo.com/detail?t=2&i=1045
各类功能集大成者(跌落、撞击等各类报警、佩戴检测、危险气体采集&上报、生命体征采集上报、内置气压计+温度计实现登高检测,精度1-3米)超长待机4G智能安全帽BZ980, https://www.besovideo.com/product/detail?i=87
多源视频融合平台VMS/smarteye,免费的GB28181 server, 免费的RTMP推流server,RTSP server,车载机部标JT808,JT1078服务器、标准SIP服务器, https://www.besovideo.com/detail?t=2&i=1321
全面支持国产信创系统,在linux(麒麟、统信等信创系统)服务器上安装smarteye server的操作说明, https://www.besovideo.com/detail?t=1&i=248
关于融合通信~可视指挥调度平台VMS/smarteye的说明,https://www.besovideo.com/detail?t=1&i=304
消防智能头盔危险气体采集,红外热成像镜头感知等现场应用解决方案,https://www.besovideo.com/detail?t=1&i=117
消防~武警智能头盔、天眼摄像头、头盔记录仪、头盔摄像头、单兵执法记录仪等配合MESH自组网,COFDM在应急指挥调度中的应用,https://www.besovideo.com/detail?t=2&i=845, 视频演示, https://v.douyin.com/rqLFx6r/
消防、武警战术头盔天眼摄像头通过MESH自组网实现实时可视化指挥调度,https://v.douyin.com/rcCgr1a/
统一视频~融合通信指挥调度~安全生产可视化监管平台smarteye集成作业票、工作票、工单管理~任务派发系统,https://www.besovideo.com/detail?t=1&i=329
统一视频~融合通信指挥调度~安全生产可视化监管平台smarteye里针对执法记录仪、智能安全帽的人员考勤管理的功能使用说明,https://www.besovideo.com/detail?t=1&i=305