0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

视频桥接解决方案,实现传统图像传感器与MIPI应用处理器的互连

YCqV_FPGA_EETre 来源:未知 作者:佚名 2017-11-17 06:04 次阅读

几十年前当嵌入式系统设计工程师们想要降低成本时,他们会使用那个年代规模化生产的PC架构。通过采用原先为PC架构开发的硬件和软件,嵌入式系统设计工程师能够在降低开发成本的同时,获得经过上千万消费电子应用验证的高可靠性元器件。PC总线为专用的嵌入式应用提供了极具吸引力的低成本替代方案。除了以上优势之外,嵌入式开发工程师还能充分利用易于使用的设计工具和基于熟知的架构之上的开源操作系统。通过将设计迁移到PC架构,使得设计工程师能够将低成本传递给终端消费者,并且缩短开发周期。

PC时代已经一去不返。PC架构已不再能够提供如同以往的规模化生产优势。现在的嵌入式系统开发工程师在考虑如何利用消费电子市场上规模化生产带来成本优势时,智能手机市场变成了首选。全球范围内每年卖出的智能手机数量高达数十亿部,各个领域的设计工程师都在尝试如何充分利用当今移动解决方案中关键元器件提供的高性能和低成本优势。就像二十年前PC架构所扮演的角色一样,移动市场提供了工程师熟悉的硬件架构和应用,其性能已经在竞争激烈的消费电子市场中得到验证。

核心标准

推动当前便携式设备设计发展的是由MIPI联盟定义的接口和总线。MIPI联盟成立于2003年,旨在为移动和移动相关设备制定一整套全面的规范。联盟的目标是提供设备供应商创建创新移动产品时所需的硬件和软件接口规范,同时加速产品上市进程并降低成本。通过制定一整套核心标准,MIPI联盟使得移动设备制造商能够从不同的供应商处获取元器件,并轻松优化设计的性能。

图1. MIPI联盟已经制定推出了一套核心标准,以简化移动系统设计并确保互操作性(图片来自MIPI联盟

该组织已经从最初的四个成员发展到现在的成百上千个成员,其在智能手机行业的声誉不言而喻。所有主要芯片厂商都使用MIPI联盟制定的规范,每一部智能手机至少使用一个MIPI规范。

广泛的影响

事实上,MIPI联盟的影响力已经远远超出了移动行业的范畴。随着移动互连融入到人们生活中的方方面面,越来越多不同行业中的设计工程师正在尝试为他们的设计采用移动技术。但是在这个过程中,他们也面临着重重障碍。许多嵌入式系统中使用的摄像头和显示屏与当今移动应用处理器(AP)上的接口类型或数量不匹配。

应用处理器、图像传感器和显示屏可能是嵌入式系统设计者们能够从移动市场中获益最多的MIPI标准元器件。如今的移动系统设计常常包含采用MIPI显示屏串行接口(DSI)的显示屏和采用MIPI摄像头串行接口(CSI-2)的图像传感器。DSI和CSI-2接口均基于D-PHY物理层总线协议。D-PHY采用一个差分时钟和1-4对差分数据线来传输数据,D-PHY是一种中心对齐的源同步接口,在时钟的上下边沿都有数据传输。D-PHY的独家特性之一是能够“即时”将差分信号转换为单端信号。

当设计中采用传统或专用显示屏以及传统或专用图像传感器时,嵌入式设计工程师该如何利用MIPI市场提供的众多优势呢? 以工业市场为例。一直以来,嵌入式应用设计工程师都依赖于采用LVDS、RGB或SPI接口的显示屏。但是大多数嵌入式处理器都不具备DSI接口。想要利用MIPI处理器和应用优势的工业应用设计工程师在保留传统LVDS显示屏时,需要实现LVDS显示屏与符合MIPI标准的应用处理器之间的桥接。解决这个问题的一个方法是构建从OpenDSI、LVDS或专用接口到MIPI DSI的视频桥接解决方案(见图2)。

图2. 视频桥接解决方案使得设计工程师能够实现传统显示屏与MIPI应用处理器的互连

同样,工业领域中的许多设计工程师也想在设计中采用最新一代移动处理器和应用时保留CMOS摄像头。图3(下图)说明了如何实现传统CMOS并行输出与MIPI应用处理器CSI-2输入之间的桥接。

图3. 在此示例中,视频桥接解决方案使得开发工程师能够实现传统图像传感器与MIPI应用处理器的互连

在汽车行业,符合MIPI标准的应用处理器和元器件的使用量也在增加。随着汽车设计中像高级驾驶辅助系统(ADAS)和车载信息娱乐系统等应用需要显示的内容以及使用的摄像头数量不断增加,对于视频桥接解决方案的需求也在不断增长。在摄像头的帮助下,驾驶员不仅可以在倒车时看到后方车辆,它们还可以替代两侧后视镜以提供360度视野,并支持各类应用,例如车道变更跟踪和盲点减少。在现在的汽车中,设计工程师可以聚合来自多个图像传感器的视频数据,将其拼接在一起,通过单个CSI-2接口传输到应用处理器。

设计工程师在游戏应用中聚合来自多个摄像头的数据或将其分开输出到多个显示屏,这样的视频桥接解决方案经过验证是非常有用的。举个例子,快速发展的虚拟现实(VR)市场的最新趋势之一是从单个显示屏转为各使用一半带宽的双显示屏头盔,为用户提供立体图像。但是如果应用处理器只有一个DSI接口,设计工程师该如何拆分视频输出到两个显示屏?图4(下图)说明了如何使用视频桥接解决方案将来自应用处理器的单个DSI视频数据输出拆分为两路输出,分别用于左眼和右眼显示屏。该桥接可支持两个HD或一个QHD显示屏,I/O速率高达1.5 Gbps/通道。

图4. 该桥接解决方案将视频数据拆分为两路DSI输出,实现支持立体图像的VR头盔

另一个潜在的桥接应用是将数据聚合为单个CSI-2输出。图5(下图)说明了无人机或VR开发工程师如何使用全新的桥接器件将多个图像传感器视频输出聚合为满足应用处理器接口要求的单个输入。该桥接可用于设计中的应用处理器无法提供足够的接口以支持图像传感器输入或图像传感器和成像数据之间存在处理延迟的情况。 在这种情况中,处理器必须以最小的延迟同时接收多个CSI-2输出。多个合并的视频流还必须共享公共时钟,并且在某些情况下还需要单独的上电时序。

图5. 无人机和其他系统制造商在设计中集成多个CSI-2摄像头,因此可能需要将视频内容进行合并以交付应用处理器进行处理

选择合适的解决方案

为了满足全新视频应用的需求,今天的嵌入式视频应用设计工程师需要高性能、低功耗、小尺寸的桥接解决方案。理想的桥接解决方案要能够为摄像头、显示屏和应用处理器转换不兼容的接口,将多个视频流合并为单个输出,或者将单个视频输出拆分为多个。

解决这个问题的一种方法是使用通用的多通道无源开关将信号传送到电路板上的多个位置。然而,大多数多路复用/解复用解决方案不能为设计工程师提供所需的高性能或高度的设计灵活性。另一个选项是投资基于特定应用标准产品(ASSP)或专用集成电路ASIC)的桥接解决方案。大多数桥接解决方案的应用面都很窄,高昂的一次性工程成本(NRE)以及超长开发周期让这种方式得不偿失。

莱迪思半导体的CrossLink FPGA已上市一年多了,可为设计工程师提供设计灵活性并加速产品上市进程,它是业界超快的MIPI D-PHY桥接器件,能够以12 Gbps带宽传输分辨率高达4K超高清的视频。CrossLink器件设计用于解决应用处理器、图像传感器和显示屏之间的接口不匹配问题,能够实现支持各种领先和现有协议的低成本、高度紧凑的桥接解决方案。

CrossLink桥接器件包含两个MIPI D-PHY硬核以及支持多种视频功能的面向移动应用的FPGA架构,能够实现复用、合并、解复用、仲裁、拆分和数据转换功能。器件中的每个MIPI D-PHY块最高支持四条数据通道和一条时钟通道用于发送和接收(Tx和Rx)数据。两个可编程I/O bank支持多种接口,包括MIPI D-PHY、MIPI CSI-2、MIPI DSI、CMOS、RGB、SubLVDS、SLVS、LVDS以及Open LDI。

器件中的FPGA架构拥有5936个4输入LUT、180 kbit RAM块和47 kbit分布式RAM。这些LUT分布在可编程功能单元(PFU)中专用寄存器的旁边,可用作逻辑运算、RAM和ROM功能的基本功能块。可编程互连网络连接各PFU块。可编程I/O bank、嵌入式I2C和嵌入式MIPI D-PHY以及嵌入式RAM(EBR)块分布在PFU之间。设计工程师可使用莱迪思Diamond设计软件来配置PFU模块并实现设计。

典型的开发流程

基于CrossLink器件的接口桥接解决方案的开发流程相对来说比较简单。开发人员首先从莱迪思Diamond FPGA设计软件的IP配置工具Clarity Designer中选择要使用或生成的IP。Clarity Designer支持配置多个IP,构建IP之间的互连以及规划设计中IP所使用的资源。

一旦生成IP,开发工程师就可以使用Aldec仿真器进行仿真。开发工程师只需打开Aldec仿真器,打开工具并点击执行即可。仿真完成后,开发工程师可以查看仿真结果。使用莱迪思Reveal片上调试工具可以进行设计硬件调试。Reveal工具集成在莱迪思Diamond FPGA设计软件中,具备一键操作、高级触发功能、简单的流程、支持修改原始设计以及增强的逻辑分析仪波形显示功能。

为了加速系统开发,莱迪思还提供CrossLink LIF-MD6000主控连接评估板。该评估板包括一片采用81-ball csfBGA封装的CrossLink-MD6000器件。除此之外,该评估板还具备Mini USB Type-B连接器到FTDI以及通过SPI接口将FTDI连至CrossLink的电路。该套件还包括两个接口板。

总结

二十年前,处于市场主导地位的PC架构推动了各类市场的发展。今天,高速发展的移动市场对工业、汽车和医疗等领域也产生了类似的影响。随着移动技术不断扩展到全新的应用领域,移动相关产品的设计工程师可在桥接解决方案的帮助下充分利用移动市场的规模化生产优势以及移动处理器、显示屏和图像处理器的成本和性能优势。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像传感器
    +关注

    关注

    68

    文章

    1893

    浏览量

    129519
  • 应用处理器
    +关注

    关注

    0

    文章

    180

    浏览量

    28300
  • 嵌入式开发
    +关注

    关注

    18

    文章

    1028

    浏览量

    47554
  • 视频桥接
    +关注

    关注

    0

    文章

    17

    浏览量

    2765
  • mipi应用处理器

    关注

    0

    文章

    1

    浏览量

    1168

原文标题:全新的桥接解决方案可满足移动相关市场的需求

文章出处:【微信号:FPGA-EETrend,微信公众号:FPGA开发圈】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    Microchip PolarFire® FPGA以太网传感器与NVIDIA Holoscan传感器处理平台兼容的人工智能(AI)驱动的传感器处理系统

    系统。 PolarFire FPGA使得多种协议能够协同工作。基于Microchip平台的第一个解决方案MIPI® CSI-2®传感器MIPI D-PHY物理层兼容。未来的
    的头像 发表于 11-19 09:29 488次阅读

    NPU与传统处理器的区别是什么

    和GPU相比,NPU在处理深度学习任务时展现出了显著的优势。 1. 设计目的 传统处理器: CPU(中央处理单元): CPU是通用处理器,设
    的头像 发表于 11-15 09:29 354次阅读

    CMOS与传统传感器的成本比较

    图像传感器,它将图像捕捉和信号处理集成在同一芯片上。 优势 :包括低功耗、低成本、集成度高、速度快等。 传统
    的头像 发表于 11-14 10:05 292次阅读

    产品合二为一,传统LED视频处理器厂家何去何从

    控制系统制造商,如Nova、Colorlight和Onbon等,也推出了类似的产品。毫无疑问,这些产品的推出对传统LED视频处理器制造商造成了重大冲击。" LED视频处理器,又称为图像
    的头像 发表于 11-07 09:18 225次阅读

    LED视频处理器对显示质量的影响

    LED视频处理器的作用在于将外部来源的图像信号转换为LED显示屏兼容的信号,LED视频处理器的品质直接影响LED屏幕的显示性能。 LED视频处理器如何在LED屏幕上
    的头像 发表于 10-16 15:57 290次阅读
    LED<b class='flag-5'>视频处理器</b>对显示质量的影响

    图像传感器的探测能力与帧频有关吗

    光线照射到光敏元件时,会产生光生电荷,这些电荷随后被收集并转换成电压或电流信号。这些信号经过放大、滤波、模数转换等处理后,最终形成数字图像数据。 图像传感器的工作原理可以分为以下几个步
    的头像 发表于 10-12 11:29 349次阅读

    图像传感器的原理是什么?

    图像传感器是一种将光信号转换为电信号的设备,广泛应用于摄影、视频监控、医学成像、天文观测等领域。图像传感器的原理涉及到光电效应、电荷存储、信
    的头像 发表于 10-12 10:48 447次阅读

    图像传感器是依靠什么感光的

    图像传感器是一种将光学图像转换成电子信号的设备,广泛应用于数字摄影、视频监控、医学成像、天文观测等领域。图像
    的头像 发表于 10-12 10:46 383次阅读

    盛显科技:投影融合处理器如何实现图像处理和融合?

    处理器如何实现图像处理和融合吗?下面盛显科技小编为您介绍: 投影融合处理器通过以下步骤实现
    的头像 发表于 09-26 18:14 340次阅读
    盛显科技:投影融合<b class='flag-5'>处理器</b>如何<b class='flag-5'>实现</b><b class='flag-5'>图像</b>的<b class='flag-5'>处理</b>和融合?

    图像处理器是什么意思

    质量、提取有用信息或实现特定应用需求的目的。图像处理器在现代科技领域具有广泛的应用,包括但不限于数字摄影、电视、监控系统、医学影像、计算机视觉等,为用户提供了丰富的视觉体验和应用功能。
    的头像 发表于 08-14 09:28 813次阅读

    视频处理器的作用 视频处理器的功能有哪些

    任务。下面是视频处理器的一些常见功能: 图像增强:视频处理器可以通过增加图像的对比度、亮度和饱和度来改善图像质量。它还可以去除
    的头像 发表于 02-01 17:23 3305次阅读

    多镜头多传感器图像视频处理器应用

    满足各种需求。以下是一些常见的应用场合:安防监控系统:MESS在安防领域得到广泛应用,能够提供全方位的监控和覆盖,增强监测的准确性和范围。多传感器系统可以整合视频
    的头像 发表于 01-26 08:31 665次阅读
    多镜头多<b class='flag-5'>传感器</b><b class='flag-5'>图像</b><b class='flag-5'>视频处理器</b>应用

    莱迪思半导体推出全新传感器参考设计

    近日,莱迪思半导体公司宣布推出全新的传感器参考设计,旨在加速NVIDIA Jetson Orin和IGX Orin平台的网络边缘AI应用开发。这一创新设计结合了莱迪思的低功耗、低延迟FPGA与英伟达的Orin平台,为
    的头像 发表于 01-04 15:31 822次阅读

    Vivado HLS的图像传感器FPN噪声去除算法设计

    ,表现为明暗不均匀的条带噪声。同时,为了满足图像传感器的实时摄像要求,算法的处理延时要低[3]。基于以上原因,本设计提出一种适用于图像传感器
    的头像 发表于 01-02 11:10 1600次阅读
    Vivado HLS的<b class='flag-5'>图像</b><b class='flag-5'>传感器</b>FPN噪声去除算法设计

    传感器坏了,信号线可以短吗?

    传感器坏了,信号线可以短吗? 当传感器损坏时,信号线短可能是一种临时解决方法,但并不是长久的解决方案。在这篇文章中,我们将探讨
    的头像 发表于 12-26 16:01 1918次阅读