×

Ultra96 CSI-2视频输出到Raspberry Pi摄像头输入

消耗积分:0 | 格式:zip | 大小:0.00 MB | 2023-07-04

李桂兰

分享资料个

该项目是专门为解决这一需求而设计的。Ultra96 评估板配备了原生支持 MIPI 电气标准的 ultrascale+ Zynq 芯片组。

数据以数据包的形式传输,这些数据包包含在传输开始 (SoT) 和传输结束 (EoT) 状态(在 PHY 中定义)中。然后将该模块的输出馈送到 CSI-TX-Subsystem IP,该 IP 处理将其转换为 CSI 信号所需的所有步骤。整体设计如下图所示:

poYBAGOFc1uAc7PaAAFrXlR9ij4200.png
 

此外,IP 配置如下:

 
 
 
poYBAGOYIIuARX9gAAAzWOHTfWQ267.png
 
1 / 4
 

根据 CSI 子系统的产品指南,应使用 csi_ts 块的输入 axi-stram 的 tusr 和 tdest 字段设置字数、数据类型和虚拟通道参数:

 
 
 
pYYBAGOYII-AckfBAADHyNwjgyE432.png
 
1 / 2
 

在本例中,data_type 已设置为 0x24,对应 RGB888 格式,WC 设置为 1280x3=3840。此外,这里我们使用虚拟通道零来传输数据。

综合设计并导出硬件后,我们应该配置和激活 Vitis 中的模块:

poYBAGOYIJSAQJFuAAEODsppHhU200.png
 

Raspberry Pi CSI 捕获应用程序

正如介绍中提到的,Raspberry Pi 使用 MMAL 库来定义图像管道。在这个项目中,使用了三个主要区块。

rawcam 组件接收 CSI 信号并提取 RGB 数据。然后,这些数据由 rawcam 组件的输出端口提供,该端口要么保存到文件中(在组件生成的回调中),要么链接到 ISP 以将其转换为适当的格式以发送到渲染器。ISP 还能够执行其他功能,例如白平衡和黑电平校正。最后,渲染器将图像显示在监视器上。此实现是基于 raspiraw 应用程序完成的。

最后,将 Ultra96 的正确引脚连接到 pi 上的相应引脚后,可以在监视器上看到测试模式,如下图所示:

 
 
 
poYBAGOYILCAPNrBAAUsLVz8Va4764.jpg
 
1 / 6
 

下一步

该项目是许多其他酷项目的基础。例如,我在这篇博客中连接到 Ultra96 的全局快门相机的图像可以在 FPGA 中处理,然后传输到 pi 以供上游应用程序使用。这可以减轻 Pi 的负担,也可以使用其他图像传感器甚至复合或 HDMI 输入。

另一方面,CSI 接口的 RAW8 格式可用于将自定义数据类型传输到可用于酷项目的 pi。例如,FPGA 可以读取一个非常快速的 ADC,将 pi 转换为功能强大的数字示波器和逻辑分析仪。

我希望这个项目可以让基于 MIPI 的系统的模糊世界更加清晰,并能激励人们制作很酷的项目,并可能在这里与我们分享。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

评论(0)
发评论

下载排行榜

全部0条评论

快来发表一下你的评论吧 !

'+ '

'+ '

'+ ''+ '
'+ ''+ ''+ '
'+ ''+ '' ); $.get('/article/vipdownload/aid/'+webid,function(data){ if(data.code ==5){ $(pop_this).attr('href',"/login/index.html"); return false } if(data.code == 2){ //跳转到VIP升级页面 window.location.href="//m.lene-v.com/vip/index?aid=" + webid return false } //是会员 if (data.code > 0) { $('body').append(htmlSetNormalDownload); var getWidth=$("#poplayer").width(); $("#poplayer").css("margin-left","-"+getWidth/2+"px"); $('#tips').html(data.msg) $('.download_confirm').click(function(){ $('#dialog').remove(); }) } else { var down_url = $('#vipdownload').attr('data-url'); isBindAnalysisForm(pop_this, down_url, 1) } }); }); //是否开通VIP $.get('/article/vipdownload/aid/'+webid,function(data){ if(data.code == 2 || data.code ==5){ //跳转到VIP升级页面 $('#vipdownload>span').text("开通VIP 免费下载") return false }else{ // 待续费 if(data.code == 3) { vipExpiredInfo.ifVipExpired = true vipExpiredInfo.vipExpiredDate = data.data.endoftime } $('#vipdownload .icon-vip-tips').remove() $('#vipdownload>span').text("VIP免积分下载") } }); }).on("click",".download_cancel",function(){ $('#dialog').remove(); }) var setWeixinShare={};//定义默认的微信分享信息,页面如果要自定义分享,直接更改此变量即可 if(window.navigator.userAgent.toLowerCase().match(/MicroMessenger/i) == 'micromessenger'){ var d={ title:'Ultra96 CSI-2视频输出到Raspberry Pi摄像头输入',//标题 desc:$('[name=description]').attr("content"), //描述 imgUrl:'https://'+location.host+'/static/images/ele-logo.png',// 分享图标,默认是logo link:'',//链接 type:'',// 分享类型,music、video或link,不填默认为link dataUrl:'',//如果type是music或video,则要提供数据链接,默认为空 success:'', // 用户确认分享后执行的回调函数 cancel:''// 用户取消分享后执行的回调函数 } setWeixinShare=$.extend(d,setWeixinShare); $.ajax({ url:"//www.lene-v.com/app/wechat/index.php?s=Home/ShareConfig/index", data:"share_url="+encodeURIComponent(location.href)+"&format=jsonp&domain=m", type:'get', dataType:'jsonp', success:function(res){ if(res.status!="successed"){ return false; } $.getScript('https://res.wx.qq.com/open/js/jweixin-1.0.0.js',function(result,status){ if(status!="success"){ return false; } var getWxCfg=res.data; wx.config({ //debug: true, // 开启调试模式,调用的所有api的返回值会在客户端alert出来,若要查看传入的参数,可以在pc端打开,参数信息会通过log打出,仅在pc端时才会打印。 appId:getWxCfg.appId, // 必填,公众号的唯一标识 timestamp:getWxCfg.timestamp, // 必填,生成签名的时间戳 nonceStr:getWxCfg.nonceStr, // 必填,生成签名的随机串 signature:getWxCfg.signature,// 必填,签名,见附录1 jsApiList:['onMenuShareTimeline','onMenuShareAppMessage','onMenuShareQQ','onMenuShareWeibo','onMenuShareQZone'] // 必填,需要使用的JS接口列表,所有JS接口列表见附录2 }); wx.ready(function(){ //获取“分享到朋友圈”按钮点击状态及自定义分享内容接口 wx.onMenuShareTimeline({ title: setWeixinShare.title, // 分享标题 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享给朋友”按钮点击状态及自定义分享内容接口 wx.onMenuShareAppMessage({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 type: setWeixinShare.type, // 分享类型,music、video或link,不填默认为link dataUrl: setWeixinShare.dataUrl, // 如果type是music或video,则要提供数据链接,默认为空 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到QQ”按钮点击状态及自定义分享内容接口 wx.onMenuShareQQ({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到腾讯微博”按钮点击状态及自定义分享内容接口 wx.onMenuShareWeibo({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); //获取“分享到QQ空间”按钮点击状态及自定义分享内容接口 wx.onMenuShareQZone({ title: setWeixinShare.title, // 分享标题 desc: setWeixinShare.desc, // 分享描述 link: setWeixinShare.link, // 分享链接 imgUrl: setWeixinShare.imgUrl, // 分享图标 success: function () { setWeixinShare.success; // 用户确认分享后执行的回调函数 }, cancel: function () { setWeixinShare.cancel; // 用户取消分享后执行的回调函数 } }); }); }); } }); } function openX_ad(posterid, htmlid, width, height) { if ($(htmlid).length > 0) { var randomnumber = Math.random(); var now_url = encodeURIComponent(window.location.href); var ga = document.createElement('iframe'); ga.src = 'https://www1.elecfans.com/www/delivery/myafr.php?target=_blank&cb=' + randomnumber + '&zoneid=' + posterid+'&prefer='+now_url; ga.width = width; ga.height = height; ga.frameBorder = 0; ga.scrolling = 'no'; var s = $(htmlid).append(ga); } } openX_ad(828, '#berry-300', 300, 250);