一种USB3.0接口多传感器数据同步采集的工业相机的制作方法
本发明涉及工业相机,具体涉及一种usb3.0接口多传感器数据同步采集的工业相机。
背景技术:
1、根据机器视觉联盟的数据,3d成像是视觉领域增长最快的应用。结构光3d在一些测量精度、实现原理、现场部署等都有比较好的特性,而且相应的dlp投影机、emes微振镜、散斑激光等相应配件也都开始齐全。3d是多目相机典型的应用场景,对相机采集部分有着高度集成与同步拍摄的需求,现有方案若通过pc端驱动发命令进行同步控制,精度和稳定性不够,若通过外接io线进行硬同步控制则会导致线材繁多,对一些走线要求苛刻的场景无法适应。另外在航拍、城市测绘等无人机应用场景,由于使用电池,对功耗、重量非常敏感,目前现有多目相机总体上很难满足要求。除此之外,目前各个行业每个机台都需要组成多个工业相机同步拍摄使用场景,比如一个产品需要拍摄多个角度、或配合多种不同光源拍摄,对多相机的需求暴增,而且自动化设备对多目相机集成度、体积、数据传输速度、同步性要求非常苛刻。
2、现存一些多目相机架构,或多图像传感器采集装置系统,是将多个独立工业相机或模块捆绑在一起,其中有种方式是每台工业相机需要一根线缆接入pc,其中另外一种方式是通过集线器转接成1根线缆接入pc,若数据接口类型是usb的,则通过usb hub转接,若数据接口类型是网络接口的,则通过网络集线器或交换机转接。集线器和工业相机部件是由不同供应商提供,将其组合起来,不仅无法保证其品质的统一性和兼容性,导致整个系统的稳定性受到影响,而且复杂的组成会导致成本和功耗等都比较高。
技术实现思路
1、本发明的目的是针对上述不足,提出了一种将物理usb设备通过多个逻辑接口虚拟成多个usb工业相机,实现一个硬件平台解决多方面的应用场景的usb3.0接口多传感器数据同步采集的工业相机。
2、本发明具体采用如下技术方案:
3、一种usb3.0接口多传感器数据同步采集的工业相机,包括主机端和相机端,相机端包括相机主控核心模块和图像传感器模块,相机主控核心模块包括集成mcu、usb3.0接口芯片、fpga和ddr;mcu通过转换命令码到fpga,命令和数据通过usb3.0接口传输到主机端,ddr用于做图像缓存,由fpga通过多通道控制器控制对ddr的读写,图像传感器模块与相机主控核心模块之间通过连接线进行数据传输;usb3.0模块中设置4套接口,其每套接口由控制通道和数据流通道组成,每套接口在主机端映射出对应的设备。
4、优选的,主机端的驱动软件和相机端建立有命令控制链路和数据流传输链路;
5、命令控制链路由用户调用sdk api配置参数和控制,传递到驱动端的配置下发&启停控制模块,通过驱动转换成相机端的命令格式数据,通过控制管道传递到相机主控核心模块,经过mcu的功能控制模块进一步转化分解处理,然后将转化后的控制操作指令数据分别传递到fpga和图像传感器模块,实现工业相机的传感器采集解码、功能参数控制、isp处理、图像传输;
6、数据流传输链路:图像传感器模块通过初始化启动输出数据后,由fpga的多通道采集解码模块解码对应接口协议数据,接着由帧控制模块进行工业端数据处理和isp子模块进行图像处理,然后对目标数据进行打包放入图像缓存,即通过多通道控制器模块对ddr建立了一个异步fifo,用于缓存图像数据;
7、从图像缓存子模块中取出数据包后,通过数据发送子模块进行发送,图像数据进入到usb3.0接口的芯片,由usb3.0接口芯片映射的dma通道传输到usb3.0 phy的端点缓存,然后通过usb线传输到主机端的usb控制器底层,最后再由主机端的相机驱动中的图像接收组帧模块对数据通道收集图像数据块,对数据块进行解析重组为目标数据,得到完整数据帧后提交到用户。
8、优选的,fpga中的多通道控制器实现高速异步读写ddr的机制,所有要传输的数据都经过数据打包模块进行打包处理,打包成所指定数据包的格式;写入和读取ddr都会校验打包的crc错误和包id的正确性,以便监控ddr读写的误码情况;从ddr读出数据包会去除掉包含校验信息的包头,重新拼接为连续的图像数据,然后存入图像发送子模块的fifo中;多通道控制器为每路工业相机构建了独立的数据通道,ddr也为每路数据通道划分了独立的缓存地址范围,构建了4个异步fifo。
9、优选的,fpga与mcu和usb3.0接口芯片之间实现多通道协同控制,usb3.0接口芯片为每个数据通道映射了一个唯一的dma fifo地址,每个地址都对应有一个独立的busy信号,fpga的图像发送子模块判断dma fifo地址的busy信号,busy状态代表该通道没法接收新数据包,则该不能往通道发送数据;图像发送子模块每次发完一个包以后,依次切换usbdma fifo地址查询4个通道的busy信号,当查询到任意一个dma通道 fifo不busy,则优先发一个对应通道的数据包。
10、优选的,多通道协同控制采用的多通道数据传输协议以图像数据以帧为单位,其包含了头包、payload数据包、尾包;头包和尾包含了当前帧的目高度、高度、横纵偏移、图像格式、时间戳等关键信息,payload数据包是包含了所有有效数据,不存在协议包头;数据通过usb bulk端点构建的管道以固定包大小往pc端发送,称之为全包,小于固定包大小的数据包为短包,主机端采集数据底层会将多个全包合成1个大数据块往上层进行传递,当遇到短包,则认为当次传输完成,立马提交以短包为止的前面所有传输的数据包;usb物理底层是按照严格的顺序发包,因此驱动只需要收到头包和尾包,就能确认完整收完了一帧数据,驱动接收完头包、数据包、尾包后,会校验传输一帧实际数据量是否符合目标数据量,目标数据量由头包中的宽、高、格式信息与尾包中实际高度信息计算而来,若检测到数据量不匹配,则会丢弃该帧,并反馈给用户丢帧的计数。
11、本发明具有如下有益效果:
12、采用一个物理usb设备通过多个逻辑接口虚拟成多个usb工业相机的方法,减少多个相机数据采集和传输所需芯片数量的情况下,实现了现有多相机在相同应用场景下相同的控制与数据采集效果。同等应用场景下,该方案所实现的多目工业相机结构体积更轻巧微型,重量更小,功耗更低,集成度更高,稳定性更好。
13、采用多sensor + fpga + ddr + mcu + 数据接口的采集架构方案;“fpga+ddr+mcu+数据接口”包含所有芯片组合的物理形态,该方案实现分体式设计可搭配灵活不同数量与类型的图像传感器,使得前端的传感器模块尺寸更小(20mmx20mmx19.5mm),比市面上通用微型工业相机尺寸(29mmx29mmx29mm)更小,更适应对重量与体积要求苛刻的应用场景。
14、多传感器之间无需外部io线互联,通过内部时序实现高精度的同步触发与序列联动触发,相机端就可实现内部高精度硬同步控制,不管接入多少个传感器工作,整个工业相机拍摄模块只需要一根usb3.0线,可选择外供电或usb供电。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com