EDA365欢迎您登录!
您需要 登录 才可以下载或查看,没有帐号?注册
x
本帖最后由 Tronlong123 于 2025-3-27 09:52 编辑 4 T4 i/ C6 u5 C. M
5 ]3 v- [4 p/ s& ~8 G6 z/ H
今天为大家带来基于瑞芯微RK3562J工业平台的ISP图像处理方案,不仅低成本、低功耗,更能让图像清晰呈现!下面,一起来深入探究看它如何实现!
/ t, e' v+ j% D7 a4 G6 d( q) I+ L$ c5 N
ISP的作用与优势
& T$ h5 I3 [# K& U' o& c何为ISP?全称为Image Signal Processor(图像信号处理器),其主要作用是处理前端图像传感器输出的信号,主要功能有线性纠正、噪声消除、自动白平衡、自动曝光控制等,能在不同的光学条件下很好地还原现场细节。
; M( x' [2 @6 J1 Q9 N& \; F由于不同传感器的差异以及拍摄环境的多样性,传感器输出的原始数据和人们预期的图像有一定差距,因此ISP就起到了相当重要的作用。例如:夜间光照不足、大雾、沙尘等,均会使采集的图像造成影响,存在成像模糊、噪声污染及曝光不均等问题,而ISP的介入,能让这些问题迎刃而解,完美还原现场细节,让图像达到预期效果。
$ `7 q/ t1 I! d- F0 ~" X3 e; v8 T9 y6 h. {- }2 j t! d: t
ISP图像处理前后图像对比8 n" B k0 v- B0 g
下面,让一张图带你见证奇迹!
: ]5 j G. x- W' W9 b8 s* c我们可以看到图1,它是未经ISP处理的原始图像,偏绿且暗淡,细节模糊不清。而经过ISP图像处理的图2,色彩真实还原,细节毕现,仿佛将现场真实场景直接呈现在眼前。 图 1 原始图像显示效果 图 2 经ISP图像处理后显示效果 近期,瑞芯微在RK3562J处理器上正式开放NPU功能,使RK3562J的应用领域进一步拓展到机器视觉、工业相机、目标识别等领域,性价比得到进一步提升。
G6 _) N, P4 d% R3 k0 Z9 w8 G/ q$ G- ^$ s3 v0 q/ t
RK3562J 支持ISP图像处理" g d g Y6 w; a( e, U
RK3562J是瑞芯微最新推出的一款超高性价比工业处理器,四核Cortex-A53@1.8GHz + Cortex-M0@200MHz异构多核架构,不仅性能强劲,还支持十路UART、两路CAN、两路网口、三种显示、双路Camera等丰富的外设接口资源。( `6 U$ D# b5 `4 w' }% Y/ Z# V9 ~+ r% e1 j
更重要的是,RK3562J还支持ISP图像处理。此平台目前已被超过600家工业客户选用!% y; B* s6 f8 P" q
RK3562J的图像处理基于ISP图像参数调试工具RKISP2.x Tuner,通过对摄像头采集的图像进行标定,生成IQ参数文件,将图像优化处理后发送至显示设备。 图 3 0 q. y+ E& v/ W. n7 S# ^
RK3562J典型应用领域! g+ ^( s! `1 i2 u" P, w
图 4 ! g; @7 |& D/ g* }
9 Y( h) ^& Q5 A2 jISP图像处理开发案例
/ c( z! ~. }* E% A3 [% e0 J5 _: u9 }- {
本章节主要介绍瑞芯微RK3562J的ISP图像处理开发案例,使用的硬件平台为:创龙科技TL3562-EVM工业评估板。
+ u8 I# i$ m3 `2 P为了简化描述,正文仅摘录方案功能描述与测试结果。" d1 v x/ K( C( c8 i
功能说明, z8 B) K, ^2 _) r
本案例基于RKISP2.x Tuner工具对摄像头采集的图像进行标定得到IQ参数文件,通过IQ参数文件将摄像头采集的图像进行优化处理后发送至显示设备。
* O6 y& ^3 _( k# v! `硬件连接6 N0 @* Y1 f8 T. ?
评估板默认已支持HDMI OUT显示,请将评估板HDMI OUT接口连接至HDMI显示屏,使用FFC软排线将MIPI摄像头模块(创龙科技TL13850)连接至评估板MIPI CSI0接口,通过网线将评估板千兆网口ETH0 RGMII连接至路由器。硬件连接如下图所示。5 L {% L- Q6 {% }
图 5 原始图像演示
s/ ?0 S% }* m' a进入评估板文件系统,执行如下命令将摄像头采集的图像实时显示至HDMI显示屏,该画面是未经过ISP图像处理的原始画面,如下图所示。按"Ctrl + C"可退出程序。
% g+ E, r- t9 E6 a, ]4 e0 FTarget#/rockchip-test/camera/camera_rkisp_test.sh
: j6 q9 e; j, b. Z) Z; W图 6 图 7 原始图像显示效果 可以观察到,HDMI显示屏实时显示摄像头采集的原始图像偏绿色且暗淡。
1 h9 K+ m$ d$ r7 g. |工具调试演示1 ^7 k/ l9 n8 |0 X
以下主要介绍使用RKISP2.x Tuner工具进行标定处理。+ S( H3 _0 B4 p0 }
打开RKISP2.x Tuner工具,导入原始图像后,进入CCM标定界面,然后设置饱和度,点击"Calibrate"开始标定。 图 8 标定完成后,点击"Result"页面,可查看结果。
/ }& D5 [& J4 N, y- {. G4 T, \) ~2 v" I图 9 可点击"Save"将新标定数据保存至IQ参数文件ov13850_RK-CMK-8M-2-v1_CK8401.json中。
7 p7 P }$ t) \8 X备注:如需了解通过RKISP2.x Tuner工具创建及配置IQ参数文件的详细步骤,请参考我司提供的用户手册。
9 P1 P& O$ x8 I, aISP效果演示0 _# S) @4 g$ t/ _) z2 O
评估板上电启动,请将案例的IQ参数文件ov13850_RK-CMK-8M-2-v1_CK8401.json拷贝至评估板文件系统"/etc/iqfiles/"目录下,然后重新启动评估板。进入评估板文件系统,参考用户手册配置ISP为回读模式。, }: X. [6 Z0 E6 _ r, s4 P7 c
执行如下命令,将摄像头采集的图像实时显示至HDMI显示屏,该画面是经ISP图像处理的显示效果,如下图所示。按"Ctrl + C"可退出程序。
3 [. f1 g9 [4 x- z) p' @3 nTarget#/rockchip-test/camera/camera_rkisp_test.sh
' e' j1 x8 d% i8 l; \( C图 10 图 11 经ISP图像处理后显示效果 可以观察到,摄像头实时采集的图像经过ISP图像处理后,显示效果相比原始图像有明显的优化。需注意,显示效果会受到实际测试环境以及IQ参数文件配置的影响,测试结果仅供参考。 |