8路GMSL视频注入回灌的自动驾驶半实物仿真平台

电子说

1.3w人已加入

描述

1

平台介绍

产品基于8路GMSL视频注入回灌的自动驾驶半实物仿真平台旨在提高实验室及研究生院师生在基础软件层开发、计算机视觉和深度学习方面的专业知识学习和实践能力,为师生提供一个稳定软件开发和多精度框架学习和训练平台,为后续相关专业技能培训提供提供全面的硬件加速支持和软件仿真模拟服务,完善相关行业中的应用并实现全面测试评估。

2

硬件介绍

产品有三块组成,高性能计算服务器、高性能GPU卡以及8 通道车载视频注入卡组成,下面分别对硬件进行介绍:

2.1高性能计算服务器

高性能计算服务器,配置清单:

类别品名规格说明数量
处理器Intel Xeon Platinum 8350C 2.6GHz 32C/64T2
内存三星32G DDR4 2666 R-ECC服务器内存2
SSD三星1T NVME M.2固态硬盘1
SSDWD 2T HDD 3.5寸 机械硬盘1
主板超微X12DAI-N6芯片组服务器主板1
电源长城1600W 2U 1+1冗余电源1
散热器定制温控散热器2
GPU辅助散热定制GPU辅助散热器2
机箱定制2U机箱 (含导轨)1

GMSL
GMSL

主板:X12DAI-N6介绍
GMSL

GMSL

GMSL

机架式服务器机箱,工作温度:工作时5℃~35℃,存储-40℃~60℃

2.2高性能GPU卡:深度计算处理器 DCU ZlOOL

GMSL
GMSL
GMSL

2.3 8通道视频图像采集卡:

8个GMSL摄像头输入,最大支持800万像素30fps;

Ø PCIe Gen3*8lane;

Ø 摄像头支持外触发同步;

Ø 支持GPS授时同步;

Ø 支持网络PTP授时同步;

Ø 支持视频同步在ms级别
GMSL

参数:

Ø 电压:12 V-14V,电流: 1 A

Ø 工作温度范围:-20°C to 70°C;

Ø 存储温度范围-40°C up to 80°C;

介绍原理框图介绍
GMSL

2.4 8 通道车载视频回灌卡:

GMSL
Ø 关键参数:

8 通道车载视频注入卡,是一款自动驾驶硬件在环仿真HIL 产品,只需要1 个PCIE 3.0X16 槽位,就可以实现8 通道视频数据、2 通道1000Mbase-T1
数据、8 路CAN/CAN-FD 数据对目标ECU 进行注入,并提供gPTP 时间戳同步功能,保证多通道数据的同步性,具有高集成度,高可靠性等特点,为客户节省使用空间,降低能耗,还可以降低整套设备的成本。

项目内容项目内容
串行器可模拟MAX96717 / MAX96717F /MAX9295A /
MAX96793对应解串器支持MAX96712 / MAX9296A /MAX96792等
CAN-FD8个CAN / CAN-FD接口通道数8通道视频输出
视频格式YUV422、RAW12PCIEPCI Express Gen 3 x16
输出分辨率最多支持8通道4096×2160@30fps输出FAKRA4合1 Amphenal Z code min-Fakra
车载3个1000M Base-T1接口线缆长度GMSL3模式下可达18米(12Gbps)GMSL2模式下可达20米(6Gbps)
以太网支持PTP授时时间戳,精度小于1ms操作系统Linux / Window
升级支持PC端固件升级存储温度-40℃~85℃
工作温度-40℃~70℃存储湿度0~90%
工作湿度10%~90%重量450g
供电PCIE供电/ 12V供电MTBF5年
尺寸长宽:111* 190(mm)

Ø 接口说明:

对外接口在挡板处共引出3 个1000BASE_T1 接口,其中一个用于gPTP 同步及板卡管理,2 个可以用于数据注入网口;2 个4 合1 Fakra 接口引出8 路视频注入接口;2 个航空插座引出8 路CAN_FD 接口。
GMSL

3

软件介绍

3.1车道图像预处理:

图像预处理主要是尽可能降低信息复杂程度、过滤筛除图像噪音,方便后续车道线识别工作。相比较原始采集图像,预处理后图像中信息耦合程度降低,感兴趣信息凸显,噪音等干扰信息最大程度被过滤,可提高后续识别算法处理速度、降低运算时间。主流预处理步骤包括:感兴趣区域选择、灰度化、图像滤波、二值化、边缘检测。本方案采样如下图:

GMSL

3.1软件界面介绍:

我公司在该套硬件开发了具有智能视觉分类,目标识别,图像分割算法库。

图像分割算法库大概介绍:

所属领域模型类别模型名称
智能视觉图像分类AlexNet
智能视觉图像分类DenseNet264
智能视觉图像分类DPN92
智能推荐召回Word2Vec
强化学习离散控制GA3C
强化学习机器人控制DDPG
强化学习游戏智能A2C
强化学习游戏智能DQN
强化学习电网控制L2RPN
智能调参网络搜索Darts

软件界面:

Ø
360度环绕感知

GMSL
GMSL
GMSL

4

应用领域:

视频注入回灌, 算法优化,将道路实际采集到的数据,注入回灌给ADCU / ECU,还原道路真实情况,优化算法,硬件在环仿真测试 (HIL),模拟车载摄像头,将软件仿真的场景数据通过注入卡发到ADCU/ ECU,虚拟车辆的道路等信息等。

审核编辑 黄宇

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分