0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

TS高速数字化仪板卡数据采集与存储的优化策略

Sophia_wff 来源:Sophia_wff 作者:Sophia_wff 2024-07-19 10:56 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

板卡式数字化仪,也成为ADC板卡,目前广泛应用于科研、工业、医疗等领域的数据采集设备。它的工作就是将模拟信号转换为数字信号,供计算机进行处理和分析。而在使用这些数字化仪板卡的过程中,我们的用户可能会遇到一些疑问,例如:

“如何处理多张数字化仪板卡上多通道同步采回来的大量数据?”

“我想使用连续高速的流模式进行采集,但我不太确定我是否应该把所有的原始数据都保存到硬盘,以及我需要什么样的电脑配置才能完成这个保存?”

“数字化仪是如何将采集到的数据直接高速传输到PC环境中?”

本文将针对以上这类问题进行解答,以帮助用户更好地理解和使用数字化仪。

一、问题背景

首先,我们需要明确一点,这些疑问并不是没有理由的。我们的高速采集卡在连续采集的过程中,确实会产生的非常大的数据量,尤其当用户使用多张采集卡同步采集时,这个数据量还会进一步翻倍。

举例来说,250 MS/s采样率、16 bit分辨率的4通道板卡,1秒钟就会生成2 GB的数据量,再增加一张相同的卡就会变成4 GB的数据量。顺带一提,我们单张采集卡最高使用PCIe Gen2 x8接口,能做到3.4 GB/s的持续数据流速度。

下面,我们会针对这个问题分情况进行讨论。

(一)总数据量较少

如果需要持续采集时间较短,总数据量能控制在工控机系统内存(RAM)容量大小范围内,那确实可以不执行额外的优化动作,以最大化节省测试程序的开发时间。

在这种条件下,不管是先运算处理后保存,还是直接保存,由于有充足内存空间作为缓冲,对CPU和硬盘速度的要求都较低,主流PC级别的性能即可满足需求。

(二)总数据量较多

而如果是更长时间的采集,我们一般推荐两种优化处理方式:第一种是快速处理,并少量存储;第二种是少量处理,并快速存储。

wKgaomaZ1dCAPrTdAAILLvaxGdM558.png


1.快速处理,少量存储

整体实现思路如下:尽可能立即把生成的数据进行分析,然后仅保留核心结果数据进行存储,大量的原始数据在处理完后直接丢弃以释放内存空间,并降低存储性能的要求。

由于分析处理涉及到的处理算法可能较为复杂,对于CPU而言,大概率会存在并行处理的能力瓶颈,因此我们更加推荐用CUDA专业卡进行高速的并行运算。在专业计算卡RDMA特性的帮助下,CUDA GPU可以不经过CPU直接从数字化仪板卡中获取数据并处理,最后把关键结果返回到CPU和内存中,CPU再进一步将结果保存到硬盘或转发至其他需要的位置即可。

使用这种优化方式的一类典型用户就是射电天文学课题组,他们希望能够不断采集最新的,来自太空的无线电波。他们就会倾向于直接将数据流式传输到GPU,并通过GPU完成滤波、高速的FFT以及分析处理,找到关键的频域信息结果再保存。

此外,在用户想要持续扫描和分析类似信号(比如信号监视,雷达等)的其他应用,这个思路也同样适用。典型的应用还包括处理激光雷达系统、扫描声学显微镜和医学成像系统(核磁共振、超声、PET扫描仪、OCT等)收集的大量数据。


2.少量处理,快速存储

整体实现思路如下:尽可能减少处理甚至不作不处理,直接存储归档,供日后分析处理。

这种方式对存储容量和速度有很高的要求,即使是最新的nvme固态也无法承受长时间大量数据的持续写入,因此一般需要使用RAID阵列进行存储。针对容量要求更大的场景,可能还会需要通过高速以太网,传输至专门的存储服务器进行保存。

核心的注意事项有两点:

(1)保证存储速度能赶上数据生成速度

(2)保证可用存储空间能存下预计生成的数据

使用这种优化方法的客户通常是专注于某个细分领域的研发工程团队,整个测试过程产生的数据量可以高达几十个TB。

根据我们的统计,比较常见的场景包括质量控制(他们希望长时间监控某些参数以验证系统是否始终符合要求)、航空航天和国防工业(监视、跟踪和分析物体或系统的变化)和通信等领域。此外,我们也见过有一些客户需求是想要连续存储扫描系统中的原始超声信号。在完成存储后,用户就会先后使用不同的算法来处理数据,然后从中提取特定信息,并试着寻找其他潜在内容。


三、TS高速数字化仪

TS数字化仪采样率高达5GS/s,可支持128个通道同步采集,具有8/12/14/16位模拟分辨率,符合目前最常用的行业标准,包含LXI、PCIe、PXIe,配套软件可以使用产品示波器、数据记录仪、数据采集系统、频谱分析仪、逻辑分析仪、码型发生器、数据流系统(FIFO)和瞬态记录仪等多种仪器功能。

wKgZomaZ1dGAZSIIAAPOW_-Yado785.png


四、结论

总的来说,数字化仪作为一种强大的数据采集设备,能够帮助用户高效地处理和分析大量数据。若想要发挥它的最大作用,用户需要选择恰当的数据处理和存储方式,而这具体取决于用户的实际项目需要,以及被采集信号的特性。希望本文能够帮助用户更好地理解和使用数字化仪,提高数据采集和处理的效率。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • adc
    adc
    +关注

    关注

    100

    文章

    7950

    浏览量

    557018
  • 数据采集
    +关注

    关注

    42

    文章

    8341

    浏览量

    121279
  • 数字化
    +关注

    关注

    8

    文章

    10862

    浏览量

    67447
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    数据采集网关的“工业性能”如何体现

    适配、易部署、强安全为设计理念,成为工业现场数据采集与传输的“硬核担当”,为企业数字化底座保驾护航。   稳定,是工业数采的底线。网关采用工业级芯片与模块结构设计,通过严格的高低温、振动、老化测试,具备超强
    的头像 发表于 03-13 15:01 323次阅读
    <b class='flag-5'>数据采集</b>网关的“工业性能”如何体现

    充电桩数据采集设备有哪些?有什么功能?

    充电桩数据采集设备是连接物理充电桩与云端管理平台的关键组件,它们通过采集、传输和处理充电桩的各类数据,实现充电桩的智能管理、优化运营和提升
    的头像 发表于 02-27 14:51 407次阅读
    充电桩<b class='flag-5'>数据采集</b>设备有哪些?有什么功能?

    PCIe数据采集卡设计原理图:138-1路1Gsps AD 1路1Gsps DA高速采集存储回放设备

    高速信号处理, 数据采集卡, DA高速采集存储, PCIe固态盘, 采集
    的头像 发表于 02-11 09:14 743次阅读
    PCIe<b class='flag-5'>数据采集</b>卡设计原理图:138-1路1Gsps AD 1路1Gsps DA<b class='flag-5'>高速</b><b class='flag-5'>采集</b><b class='flag-5'>存储</b>回放设备

    数字化的基础是什么

    数字化的基础是多个关键要素的有机结合,这些要素共同构成了数字化技术、应用和生态的底层支撑。其核心基础可归纳为以下五个层面: 1. 数据数字化的核心资产
    的头像 发表于 02-04 17:53 1326次阅读

    PCIe接口-高速模拟采集—高性能-高精度-高品质- 青翼凌云军工级数据采集

    2路16bit、160MSPS采样率的数据采集板卡支持12路LVDS的数据采集,同时,板卡还有2路SFP+光纤接口。
    的头像 发表于 01-30 14:19 244次阅读
    PCIe接口-<b class='flag-5'>高速</b>模拟<b class='flag-5'>采集</b>—高性能-高精度-高品质- 青翼凌云军工级<b class='flag-5'>数据采集</b>板

    深控技术工业数据采集装置——赋能钢铁/铝加工行业数字化转型

    钢铁冶炼、铝加工深井铸造等重工业场景中,生产环境恶劣、设备类型繁杂、数据孤岛林立等问题,严重制约了企业数字化升级进程。深控技术工业网关/工业数据采集装置,专为工业复杂场景设计,可精准对接企业现场DCS、MES、PLC等自控系统,
    的头像 发表于 01-07 11:32 324次阅读

    单片机多路数据采集系统的设计

    明确数据资源的采集系统原理,是保证数据的采 集渠道得到进一步拓展的关键。从多路数据采集系统建设的角度,制订单片机的优化设计
    发表于 01-07 06:44

    科技推出JY-9819 PXI Express高速数字化

    JY-9819 PXI Express 高速数字化具备高速度、高质量的数据采集能力。其 4 个输入通道均支持高达 250 MS/s 的采样
    的头像 发表于 11-19 09:17 1050次阅读

    高速分切机PLC数据采集远程监控系统方案

    某包装印刷企业为提升生产精度、优化生产流程、降低人工运维成本,推进智能化工厂建设,需对车间多台高速分切机实现实时数据采集、远程监控与集中管理。 现场高速分切机涵盖不同品牌、不同使用年限
    的头像 发表于 11-06 15:41 757次阅读
    <b class='flag-5'>高速</b>分切机PLC<b class='flag-5'>数据采集</b>远程监控系统方案

    设计资料:基于PCIe3.0X16的的100G光纤采集存储设备

    光纤数据采集存储板, 光纤采集存储设备, 医疗影像, VU3P板卡, 高速光纤
    的头像 发表于 10-28 10:06 694次阅读
    设计资料:基于PCIe3.0X16的的100G光纤<b class='flag-5'>采集</b><b class='flag-5'>存储</b>设备

    坤驰科技——双通道3GS/s高速数据采集

    、模拟带宽10M至8GHz、14bit垂直分辨率以及8GB板载内存 上位机支持 上位机可提供板卡的 控制、数据采集数据上传与存储功能 ,具备专业可视
    的头像 发表于 09-18 16:07 679次阅读
    坤驰科技——双通道3GS/s<b class='flag-5'>高速</b><b class='flag-5'>数据采集</b>卡

    Spectrum推出多通道GHz数字化,最高支持12通道

    Spectrum仪器今日宣布推出全新旗舰数字化产品。该系列设备具备12位分辨率,最高可支持6通道10 GS/s或12通道5 GS/s的高速数据采集。新型DN6.33x
    的头像 发表于 09-17 17:35 1027次阅读

    白城LP-SCADA工业产线高密度数据采集 实时响应无滞后

    感器2000次/秒的超高速采样,支持多台设备同时接入。 实时性、低延时:平台数据采集、分析、控制实时性。实现采样数据无卡顿、无丢失,微秒级转发、既时存储、实时呈现。 高密度
    发表于 06-19 14:51

    Modbus转Profinet赋予数据采集高效通信的超能力

    态监视,便于及时发现和解决问题。 应用场景 Modbus转Profinet网关连接数据采集的方案适用于各种工业自动场景,如制造业、能源管理、智能建筑等。在制造业中,可用于采集生产线
    发表于 05-20 16:46

    破解设备数据孤岛:盘古信息MOM系统驱动工业数字化转型

    盘古信息MOM不仅解决设备数据采集的技术难题,更构建了从数据采集到价值转化的完整闭环。通过四大核心能力,助力工业企业打破“经验驱动”的传统模式,真正实现数据定义生产、智能优化决策的
    的头像 发表于 05-12 17:41 875次阅读
    破解设备<b class='flag-5'>数据</b>孤岛:盘古信息MOM系统驱动工业<b class='flag-5'>数字化</b>转型