完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>
标签 > transformer
文章:135个 浏览:6017次 帖子:3个
2022年,我们打赌说transformer会统治世界。 我们花了两年时间打造Sohu,这是世界上第一个用于transformer(ChatGPT中的“...
2025-01-06 标签:芯片asicTransformer 67 0
生成式预训练Transformer(GPT)被吹捧为将彻底改变机器人技术。但实际应用中,GPT需要庞大且昂贵的计算资源、冗长的训练时间以及(通常)非机载...
2024-12-05 标签:机器人TransformerLLM 252 0
自动驾驶中一直说的BEV+Transformer到底是个啥?
在很多车企的自动驾驶介绍中,都会听到一个关键技术,那就是BEV+Transformer,那BEV+Transformer到底是个啥?为什么很多车企在自动...
2024-11-07 标签:自动驾驶Transformer 435 0
英伟达推出归一化Transformer,革命性提升LLM训练速度
英伟达团队近日在AI领域投下了一枚震撼弹,他们提出了一种全新的神经网络架构——归一化Transformer(nGPT)。这一创新架构基于超球面(hype...
2024-10-23 标签:神经网络英伟达Transformer 393 0
电子发烧友网报道(文/周凯扬)近日,一家由哈佛辍学生成立的初创公司Etched,宣布了他们在打造的一款“专用”AI芯片Sohu。据其声称该芯片的速度将是...
2024-07-01 标签:TransformerAI芯片 1415 0
Adobe提出DMV3D:3D生成只需30秒!让文本、图像都动起来的新方法!
因此,本文研究者的目标是实现快速、逼真和通用的 3D 生成。为此,他们提出了 DMV3D。DMV3D 是一种全新的单阶段的全类别扩散模型,能直接根据模型...
2024-01-30 标签:编码器3DTransformer 877 0
大语言模型背后的Transformer,与CNN和RNN有何不同
电子发烧友网报道(文/李弯弯)近年来,随着大语言模型的不断出圈,Transformer这一概念也走进了大众视野。Transformer是一种非常流行...
2023-12-25 标签:cnnTransformerrnn 4182 0
Quadric是一家机器学习推理IP公司,Untether AI则将其硬件宣传为是“通用推理加速器”,这两家公司都在兜售可处理transformer的技...
2023-08-30 标签:机器学习深度学习Transformer 955 0
英伟达h800和h100的区别 其实大白话就是,A100、H100是原版,特供中国市场的减配版是A800、H800。A100、H100是价格更便宜,性能...
2023-08-08 标签:英伟达TransformerAI芯片 4.6万 0
首个线性注意力Transformer大模型!1750亿参数,速度和精度更优
即便如此,传统的 Transformer 依然存在局限。首要的一点,它们有着对于序列长度的二次时间复杂度,这会限制它们的可扩展性并拖累训练和推理阶段的计...
2023-07-31 标签:线性语言模型Transformer 1120 0
在X3派上玩转一亿参数量超大Transformer,DIY专属你的离线语音识别
Transformer模型在自然语言领域被提出后,目前已经扩展到了计算机视觉、语音等诸多领域。然而,虽然Transformer模型在语音识别领域有着更好...
视海芯图Transformer加速SoC助力AR/VR设备性能升级
5月12日,第十三届松山湖中国IC创新高峰论坛在广东东莞松山湖凯酒店举行,本届活动继续由中国半导体行业协会IC设计分会(ICCAD)、芯原微电子、松山湖...
2023-05-12 标签:ArTransformer视海芯图 3243 0
ConvNeXt 架构的出现使传统的 ConvNet 更加现代化,证明了纯卷积模型也可以适应模型和数据集的规模变化。然而,要想对神经网络架构的设计空间进...
2023-01-12 标签:解码器编码器Transformer 1177 0
然而,transformer的原始公式在输入令牌(token)数量方面具有二次计算复杂度。鉴于这个数字通常从图像分类的14^2到图像去噪的128^2 =...
2023-01-10 标签:编码Transformer自然语言处理 1373 0
谷歌新作Muse:通过掩码生成Transformer进行文本到图像生成
与建立在级联像素空间(pixel-space)扩散模型上的 Imagen (Saharia et al., 2022) 或 Dall-E2 (Rames...
2023-01-09 标签:模型图像生成Transformer 974 0
既然都叫 EfficientFormerV2,那必然是在上一版的基础上改进了,如图(a)所示。没什么特别新奇的,一个很常规的 ViT 型架构。下面的图表...
2022-12-19 标签:计算机视觉Transformer 1291 0
编辑推荐厂商产品技术软件/工具OS/语言教程专题
电机控制 | DSP | 氮化镓 | 功率放大器 | ChatGPT | 自动驾驶 | TI | 瑞萨电子 |
BLDC | PLC | 碳化硅 | 二极管 | OpenAI | 元宇宙 | 安森美 | ADI |
无刷电机 | FOC | IGBT | 逆变器 | 文心一言 | 5G | 英飞凌 | 罗姆 |
直流电机 | PID | MOSFET | 传感器 | 人工智能 | 物联网 | NXP | 赛灵思 |
步进电机 | SPWM | 充电桩 | IPM | 机器视觉 | 无人机 | 三菱电机 | ST |
伺服电机 | SVPWM | 光伏发电 | UPS | AR | 智能电网 | 国民技术 | Microchip |
开关电源 | 步进电机 | 无线充电 | LabVIEW | EMC | PLC | OLED | 单片机 |
5G | m2m | DSP | MCU | ASIC | CPU | ROM | DRAM |
NB-IoT | LoRa | Zigbee | NFC | 蓝牙 | RFID | Wi-Fi | SIGFOX |
Type-C | USB | 以太网 | 仿真器 | RISC | RAM | 寄存器 | GPU |
语音识别 | 万用表 | CPLD | 耦合 | 电路仿真 | 电容滤波 | 保护电路 | 看门狗 |
CAN | CSI | DSI | DVI | Ethernet | HDMI | I2C | RS-485 |
SDI | nas | DMA | HomeKit | 阈值电压 | UART | 机器学习 | TensorFlow |
Arduino | BeagleBone | 树莓派 | STM32 | MSP430 | EFM32 | ARM mbed | EDA |
示波器 | LPC | imx8 | PSoC | Altium Designer | Allegro | Mentor | Pads |
OrCAD | Cadence | AutoCAD | 华秋DFM | Keil | MATLAB | MPLAB | Quartus |
C++ | Java | Python | JavaScript | node.js | RISC-V | verilog | Tensorflow |
Android | iOS | linux | RTOS | FreeRTOS | LiteOS | RT-THread | uCOS |
DuerOS | Brillo | Windows11 | HarmonyOS |