重要消息
节后开工第一天,灵汐科技团队联合类脑技术社区(“脑启社区“)的开发者,仅用半天时间就完成了DeepSeek-R1系列模型在灵汐KA200芯片及相关智算卡的适配,助力国产大模型与类脑智能硬件系统的深度融合。据“脑启社区“的开发者反馈,在DeepSeek-R1-Distill-Qwen的1.5B、7B等系列模型测试中,模型在4K上下文情形下体验顺畅,具备交付客户使用的能力。后续,灵汐科技也将联合产业生态伙伴及脑启社区,适时发布云上服务。
灵汐科技的类脑芯片领启KA200(-S) 基于全新的存算一体、众核并行、异构融合架构,能高效支持深度学习神经网络、生物神经网络和大规模脑仿真。单芯片集成 25 万神经元和 2500 万突触(稠密模式),可扩展支持 200 万神经元和 20 亿突触的集成计算(稀疏模式),支持混合精度计算(48TOPS@INT8 和 24TFLOPS@FP16)。不仅有强大的视频图像处理和算法支持能力,也具有对各类LLM语言大模型及多模态模型的支撑能力。基于灵汐科技KA200的产品系列,已经具备了“云、边、端“全覆盖的大模型部署和高性能、低功耗的推理部署能力。灵汐的相关产品已在电力能源、交通、城市治理、低空智能装备等领域形成了规模化商用。
近期DeepSeek大模型引发了业界的广泛讨论,有相关评论方认为DeepSeek的大模型技术路线创新有较大影响,而未来国产化、支撑大模型的新型架构芯片则会对产业形成更具颠覆性的效应。2024年初开始,类似存算一体架构芯片及其对大模型推理的提升效果,也引发了众多研究讨论。灵汐科技“存算一体、众核并行、 异构融合”的芯片架构及其应用不断迭代,将为业内带来新的潜在突破。
-
芯片
+关注
关注
463文章
54411浏览量
469151 -
神经网络
+关注
关注
42文章
4842浏览量
108150 -
大模型
+关注
关注
2文章
3764浏览量
5269 -
DeepSeek
+关注
关注
2文章
837浏览量
3396
原文标题:灵汐芯片快速实现DeepSeek 适配,助力国产大模型与类脑智能硬件融合
文章出处:【微信号:北京灵汐科技有限公司,微信公众号:北京灵汐科技有限公司】欢迎添加关注!文章转载请注明出处。
发布评论请先 登录
百度腾讯抢滩布局!DeepSeek-R1升级和开源背后,国产AI的逆袭之路
灵汐杭州电信类脑智算集群正式发布
DeepSeek R1 MTP在TensorRT-LLM中的实现与优化
杭州灵汐类脑智算集群实现大模型快速推理
速看!EASY-EAI教你离线部署Deepseek R1大模型
【「DeepSeek 核心技术揭秘」阅读体验】+混合专家
【「DeepSeek 核心技术揭秘」阅读体验】--全书概览
【「DeepSeek 核心技术揭秘」阅读体验】书籍介绍+第一章读后心得
Arm Neoverse N2平台实现DeepSeek-R1满血版部署
NVIDIA Blackwell GPU优化DeepSeek-R1性能 打破DeepSeek-R1在最小延迟场景中的性能纪录
灵汐KA200芯片完成DeepSeek-R1系列模型适配
评论