0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

不只是高性能DSP,软件定义SoC给音频汽车工业等应用带来多通道和AI等丰富功能

马华1 来源:马华1 作者:马华1 2024-08-14 16:16 次阅读

作者:牟涛, XMOS亚太区市场和销售负责人

XMOS推出的基于其第三代xcore架构的xcore.ai系列可编程SoC芯片,在一颗器件里面集成了边缘AI、DSP、控制单元和I/O等功能,因而可以针对应用利用软件将其定义为不同的器件系统,在保持灵活性和可编程性的同时提供优异的性能,从而可以有更快的速度和更低的成本完成全新器件系统的开发。

wKgZoma8ZteAKEvjAANvOt4UMXI495.png

本文将介绍如何利用xcore.ai芯片开发DSP系统,并以XMOS与DSP Concepts近期宣布的合作协议为例,展示音频开发人员如何将 XMOS的高度确定性、低延迟的 xcore.ai平台与 DSP Concepts的 Audio Weaver软件相结合,使用户能够利用多核架构并采用图形化方式去设计和调试音频和语音解决方案。

灵活地构建DSP系统

xcore能够以最低的系统物料清单成本来构建整个 DSP系统,可支持包括定点和浮点格式的主要DSP工作负载。xcore平台的灵活性还使解决方案能够集成其他关键组件,例如 IO协议、控制算法甚至人工智能组件。xcore的独特之处在于,整个 DSP系统可以仅使用软件构建。

wKgaoma8ZtiAJsZEABJk2BO6GDc960.png

独特的硬件可编程性

凭借其独特的多线程、多核微架构,xcore.ai提供了世界领先的具有可预测性的可编程能力,这对于需要极高实时性的 DSP应用来说至关重要。xcore的独特架构可确保系统的不同部分互不干扰,从而提供 DSP系统(尤其是支持多采样率的系统)所需的稳健性、低延迟和可确保的执行时间。

提供丰富的功能

xcore.ai是一种独特的可编程处理器阵列——每个xcore.ai具有16个硬件线程(HART),它们分属2个独立多线程处理器“单元”,其中每个单元配备512kB的SRAM存储空间,以及一个能够完成高效块浮点运算的整数矢量单元,使每个 HART都能执行一套通用的控制、DSP、AI和 IO指令。强大的处理器间专用通信链路可在任意数量的xcore.ai芯片之间进行高速通信,并将这些器件变成一颗更大的器件。所有这一切都在同一个、同质和强大的开发环境中实现。

嵌入式 DSP

xcore.ai提供的多线程简化了将具有硬件实时特性的DSP功能集成到单芯片嵌入式解决方案中的过程。

除了提供基本的DSP构建模块库,XMOS还提供了一整套高级功能,例如 PDM接口、声学回声消除、噪声抑制、异步采样率转换、自动增益控制等。这些功能被封装为参考应用,可以随时进行修改和扩展,以满足特定应用独特的系统功能和接口要求,所有这些功能都被集成在一个高性价比的器件中。

主频为800MHz的xcore.ai的高性能

800 MFLOPS的持续处理能力

1,600 MFLOPS的峰值处理能力

98,561 FFT/s

11,300浮点FFT/s

1,024-Pt复杂 FFT(Radix 2)/s

957M FIR filter taps/s

251M IIR filter (per biquad)/s

另外值得关注的是xcore.ai的可扩展性——XMOS在片上设计提供专用的XMOS互联链路,支持用户将多颗xcore.ai芯片连接在一起形成更大的系统并无缝扩展性能。

wKgZoma8ZtaAGtSNAAApzB3Qw8E061.png

使用合作伙伴的技术来打造各种解决方案,如构建DSP系统

XMOS的xcore系列芯片已经建立了完善而丰富的生态系统,开发者可以利用这些生态伙伴的技术快速甚至是低代码实现应用。例如,使用DSP Concepts公司提供的Audio Weaver工具,就可以跳过撰写源代码并设计音频DSP系统。这个功能齐全的开发工具是业界的黄金标准,它支持工程师通过调用和刷新xcore可执行项,就能在一块开发板上进行完整音频系统的设计、部署、调节和控制。

现场例证:观看XMOS与DSP Concepts联合举办的网络研讨会

该网络研讨会由XMOS与DSP Concepts联合举办,在这个简短的网络研讨会中,双方深入探讨了合作背后的细节,并探讨了XMOS高确定性、低延迟的xcore.ai平台与DSP Concepts的Audio Weaver软件工具配合,正在彻底改变音频和语音产品的开发过程。

xcore.ai多通道音频开发板可支持全高速USB操作、USBAudio Class 2.0和1.0、MIDI、HID和DFU等音频格式和版本。

该开发板集成了四个立体声音频DAC和两个四通道音频ADC,可同时支持8个双向音频流。它还包括用于S/PDIF和MIDI输入和输出端口的电信号和光信号接口。将以下链接复制到浏览器,即可登录或者注册下载该网络研讨会:

https://www.xmos.com/develop/dsp#

DSP工具库

lib_dsp

lib_xcore_math——一个完整的数学函数库

lib_src——采样率转换工具库

用于语音应用的DSP

双麦克风前端

音频流水线功能包括回声消除、干扰消除和噪声抑制

I2S到USB接口,支持的异步采样率介于44.1 kHz – 192 kHz

双向信号路径

更多信息,请参见xcore-voice平台介绍https://www.xmos.com/develop/xcore-voice;点击或复制以下链接到浏览器也可以了解详情:https://www.xmos.com/xcore-voice

购买该开发套件或者索取xcore.ai样片

欢迎购买xcore-voice开发套件,仅需几个步骤几个搭建好自己的智能音频系统并开始应用的开发。购买或者进一步了解,请发邮件给:thomasmu@xmos.com

开发者资源

资源库

XMOS的资源库提供可重用的软件,并且可作为通用功能的源文件。

完整的数学模型和DSP函数库,包括整数、浮点数、矢量化和复杂运算。

采样率转换(SRC)工具库提供同步和异步音频采样率转换功能。

定点数字信号处理软件库,它实现了一套整常用的信号处理功能。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • dsp
    dsp
    +关注

    关注

    553

    文章

    7998

    浏览量

    348822
  • 芯片
    +关注

    关注

    455

    文章

    50756

    浏览量

    423341
  • 音频
    +关注

    关注

    29

    文章

    2870

    浏览量

    81509
  • XMOS
    +关注

    关注

    6

    文章

    55

    浏览量

    43341
收藏 人收藏

    评论

    相关推荐

    华为乾崑智驾荣获2024汽车工业巅峰奖

    近日,2024汽车工业巅峰奖发布,华为乾崑智驾ADS凭借高安全、高可靠、高用户体验,及行业领先的技术获得最佳品质创新技术奖项。同时,国际汽车质量标准化协会(IAQSA)宣布中国汽车软件
    的头像 发表于 12-23 14:08 131次阅读

    芯旺微电子荣获2024汽车工业巅峰奖最佳品质创新技术

    发展新质生产力,助推产业链升级。近日,2024(第二届)中国汽车工业质量大会在上海嘉定开幕,同期举行2024汽车工业新质生产力成果展并颁发2024汽车工业巅峰奖(Disciplined
    的头像 发表于 12-19 10:39 173次阅读

    5nm制程,16核心?高性能汽车MCU发展趋势

    重力模式、多种按摩模式,座椅上越来越多的电机带来更高的性能需求,将压力到了MCU。   因此各家厂商的产品规划中,更高性能的MCU都是重
    的头像 发表于 12-13 09:10 1355次阅读
    5nm制程,16核心?<b class='flag-5'>高性能</b><b class='flag-5'>汽车</b>MCU发展趋势

    迅为RK3576开发板满足了4G/5G、wifi6、网口、NPU扩展需求

    典型应用方向 iFPD、工业控制及网关、云终端、人脸识别设备、车载中控、商显 主要特性 · ARM 64位高性能八核通用处理器,丰富的PCIE/USB3.0/SATA/GMAC各类高
    发表于 12-09 14:36

    比亚迪签约深汕特别合作区,建设汽车工业园四期

    近日,比亚迪与深汕特别合作区正式签约,宣布将建设深汕比亚迪汽车工业园四期项目。 据了解,比亚迪一直以来都在加大在深圳的投资力度,此次签约建设深汕比亚迪汽车工业园四期,无疑是其进一步拓展产能、提升
    的头像 发表于 11-20 11:08 794次阅读

    通道负载测试和性能评估?

    通道负载测试和性能评估是软件质量保证的重要组成部分,它们可以帮助我们发现和解决系统的性能瓶颈,提高系统的可用性和稳定性。
    发表于 11-11 16:44

    VOC在汽车工业中的应用

    随着汽车工业的快速发展,人们对汽车的舒适性和环保性要求越来越高。挥发性有机化合物(VOC)是影响汽车内部空气质量和环保性能的重要因素之一。 一、VOC在
    的头像 发表于 11-01 15:01 232次阅读

    软件定义汽车AI驱动的车载技术革新

    在当今汽车产业中,软件定义汽车(SDV)与人工智能(AI)的深度融合正引领着车载技术的飞速发展。众多汽车
    的头像 发表于 09-26 15:08 1632次阅读

    韩国汽车工业的绿色革命:古瑞瓦特光伏逆变器助力能源转型与可持续发展

    韩国汽车工业的绿色革命:古瑞瓦特光伏逆变器助力能源转型与可持续发展 汉江奇迹 带来韩国的工业化和现代化 能源的可持续供给 逐步成为韩国工业发展的关键议题为此,韩国颁布了「国家能源基本计
    的头像 发表于 09-11 11:25 329次阅读

    中国汽车工业协会到访罗森伯格德国总部

    近日,我们非常荣幸地邀请到中国汽车工业协会(简称“中汽协会”)的一行贵宾莅临罗森伯格集团位于德国巴伐利亚州弗里尔芬的总部。此次参访旨在深化中德汽车产业合作与交流,共同推进下一代汽车
    的头像 发表于 08-19 14:49 423次阅读

    不只是前端,后端、产品和测试也需要了解的浏览器知识(二)

    继上篇《 不只是前端,后端、产品和测试也需要了解的浏览器知识(一)》介绍了浏览器的基本情况、发展历史以及市场占有率。 本篇文章将介绍浏览器基本原理。 在掌握基本原理后,通过技术深入,在研发
    的头像 发表于 08-12 14:32 336次阅读
    <b class='flag-5'>不只是</b>前端,后端、产品和测试也需要了解的浏览器知识(二)

    米尔T527系列加推工控板和工控机,更多工业场景DEMO

    是全志科技在智能工控领域和汽车领域的一款高性能嵌入式处理器,可选AI功能。T527系列处理器配备8*Cortex-A55、HiFi4 DSP
    发表于 06-21 17:54

    XCORE®.AI音频制造业带来的无限希望

    在我们导航复杂的音频制造世界时,DSP和xcore.ai的融合成为一股变革力量。这不仅仅是将模拟转为数字;而是重新定义我们对音频处理的方式。
    的头像 发表于 06-19 16:04 378次阅读
    XCORE®.<b class='flag-5'>AI</b><b class='flag-5'>给</b><b class='flag-5'>音频</b>制造业<b class='flag-5'>带来</b>的无限希望

    新迪数字陈志杨博士受聘为首批中国汽车工业协会工业软件标准专家

    日前,由中国汽车工业协会主办的第13届中国汽车论坛在上海圆满落幕。会上举行中国汽车工业协会软件分会工业
    的头像 发表于 01-08 13:07 463次阅读

    小米汽车发布会直播地址 小米要造一辆什么样的车

     小米汽车将全面重新定义汽车工业的技术栈,将是汽车工业技术范畴的一次重大跨越,值得期待。
    的头像 发表于 12-28 14:01 2161次阅读
    小米<b class='flag-5'>汽车</b>发布会直播地址 小米要造一辆什么样的车