1、直播介绍
机器视觉是AI技术的主要研究和应用领域,不仅广泛应用于自动驾驶、智能制造和航空航天等高大尚领域,同样应用于你身边的身份确认、安全监控和物品识别,其影响已经渗透到我们生活的各个角落。如果您是一位传统的硬件工程师,又觉得AI技术离你太远,不知如何入手,似乎遥不可及,这门课就是为您准备的。我本人也是硬件工程师出身,以我的亲身经历,从零基础开始学起。这是本系列第三集进阶篇,学习视频处理工具GStreamer框架和参数、FPGA AI Python程序、yolov3改yolov3_tiny要点、KV260设置和使用。欢迎入群交流(QQ群号:435717099)
6 d/ O0 g7 S3 q! c' a2、讲师介绍
' W* B. W" }; g6 l3 F/ N" i
刘振宇博士
中国科学院工学博士
FPGA芯片中国区
技术支持经理/市场营销经理
资深电子系统研发背景,芯片供应链长期工作经验,长期担任FPGA芯片中国区技术支持经理/市场营销经理。拥有十余年FPGA及相关系统研发及实现经验,在传感器整合、视觉算法、AI算法加速及软硬件系统整合上拥有深厚背景。
王伟博士
华为光通信资深研发工程师、中兴光通信SDH大项目研发经理
国家深圳轨道交通实验室技术总监、美资Oplink通讯公司研发总监、特发信息公司研发总工、美资 Lumentum公司(原JDSU)高级研发经理、
中国高科技产业化研究会智能信息处理产业化分会理事
二十余年一流大企业一线研发和管理经验
近三年所带学生竞赛队伍均晋级国家级决赛
; t8 c6 {( F) _% u' _
3、直播要点
《基于FPGA的汽车AI设计》
直播内容:
本次主要向各位介绍各FPGA厂商针对汽车AI应用的最新动向(包括Xilinx, Intel,Lattice和各国产FPGA厂商),并针对FPGA的主要AI相关汽车应用领域做相关介绍。使各位对基于FPGA的汽车领域AI当前和未来趋势有一定的了解。
直播要点:- U# |; i! p4 l: l: n
1、基于FPGA的汽车领域AI应用
2、各FPGA厂商的努力:
a、Xilinx的汽车AI方案。
b、Intel PSG/ Lattice的汽车AI方案
c、国产FPGA的机遇
3、FPGA vs AI ASIC
a、FPGA的独特优势
b、有所为,有所不为
4、日新月异、快速迭代的汽车电子应用呼唤FPGA!
H- X/ y; h( D) _5 F《FPGA AI 进阶篇 GStreamer+Python+AI》
直播要点:
我们用FPGA AI + Python做的人体姿态识别,基于KV260开发板单板
单鞭
左移步
姿态识别可以用于安防、护理、医学、安全和体育等领域,FPGA具有最高的性价比。
1 K$ L9 m, W% I( w' c6 W8 ?7 q我们用FPGA AI + GStreamer分析各种参数带来的图像效果,基于KV260开发板单板。
实际用时兴趣区分辨率高,其余区域分辨率低,下面是为分析明显起见反其道而行之。
蓝框ROI兴趣区QP值高
蓝框ROI兴趣区QP值低
GStreamer框架安装、概念和使用
GStreamer的安装、管道和各种插件。
GStreamer测试、文件播放、转换和存贮例程。
FPGA 视频GSteamer专用套件VVAS
VVAS视频处理流程图和硬核加速原理
逐级展开解析VVAS功能图与对应管道程序
编解码重要参数码率控制control-rate、渐近刷新GDR 、假定参考解码器HRD等
7 I7 z( t. W& U3 ~ T* xFPGA AI Python程序重要调整参数
目标判断阈值nms_thresh
非最大值抑制score_thresh
, n! ?. M/ b, a2 s
通过yolov3改为yolov3_tiny来认识后处理程序要点
输入模型的分辨率
分类class文件
锚定anchor文件
DPU多线程处理
( o) s( D. T0 @1 F" b& b
4、适合对象
电子专业、信息专业、自动化专业、计算机专业大学生和研究生
直播主题:《从硬件走向人工智能Ⅲ FPGA 进阶篇》
直播老师:王伟博士 刘振宇博士
直播时间:4月28日晚20:00
回帖提出相关技术问题,老师将在直播中进行答疑~~~