标签　>　llm

llm

+关注0人关注

在人工智能领域，LLM代表“大型语言模型”。在人工智能（AI）领域自然语言处理（NLP）是一个快速进展的领域。NLP中最重要是大语言模型（LLM）。大语言模型（英文：Large Language Model，缩写LLM），也称大型语言模型，是一种基于机器学习和自然语言处理技术的模型。

文章：245个浏览：278次帖子：3个

全部技术资讯资料帖子视频产品方案企业

llm技术

OpenAI新研究：指令层次结构防御LLM攻击策略

为了解决这个问题，这篇研究提出了一种指令层次结构（instruction hierarchy）。它明确定义了不同指令的优先级，以及当不同优先级的指令发生...

2024-04-28 标签：指令 AI GPT 201 0

主流GPU/TPU集群组网方案深度解析

用于连接 GPU 服务器中的 8 个 GPU 的 NVLink 交换机也可以用于构建连接 GPU 服务器之间的交换网络。Nvidia 在 2022 年的...

2024-04-24 标签：gpu 服务器 InfiniBand 633 0

MOE与MOT：提升LLM效能的关键策略比较

MoE 与 MoT：在专家混合中（左），每个令牌都被路由到不同的专家前馈层。在令牌混合（右）中，每组内的令牌被混合，并且混合令牌由专家前馈层处理。

2024-04-15 标签：控制器机器学习 LLM 539 0

自然语言处理应用LLM推理优化综述

当前，业界在将传统优化技术引入 LLM 推理的同时，同时也在探索从大模型自回归解码特点出发，通过调整推理过程和引入新的模型结构来进一步提升推理性能。

2024-04-10 标签：人工智能自然语言处理调度器 439 0

深度剖析Sora技术的核心原理与应用

从Sora技术报告来看，时空patches或借鉴谷歌ViViT操作。ViViT借鉴ViT在图片分割上的思路，把输入的视频划分成若干个tuplet,每个t...

2024-04-08 标签：LLM Sora 358 0

LLM推理任务中GPU的选择策略

在Roofline模型可以直观展示一张曲线图，其中x轴表示AI（Arithmetic Intensity），即每个内存操作对应的浮点运算次数；y轴表示性...

2024-04-07 标签：NVIDIA gpu LLM 757 0

OpenVINO™ C# API部署YOLOv9目标检测和实例分割模型

YOLOv9模型是YOLO系列实时目标检测算法中的最新版本，代表着该系列在准确性、速度和效率方面的又一次重大飞跃。

2024-04-03 标签：英特尔计算机视觉深度学习 612 0

OpenVINO™协同Semantic Kernel：优化大模型应用性能新路径

作为主要面向 RAG 任务方向的框架，Semantic Kernel 可以简化大模型应用开发过程，而在 RAG 任务中最常用的深度学习模型就是 Embe...

2024-03-08 标签：JAVA OpenAI 大模型 478 0

利用知识图谱与Llama-Index技术构建大模型驱动的RAG系统（下）

对于语言模型（LLM）幻觉，知识图谱被证明优于向量数据库。知识图谱提供更准确、多样化、有趣、逻辑和一致的信息，减少了LLM中出现幻觉的可能性。

2024-02-22 标签：数据库语言模型知识图谱 929 0

快速全面了解大模型长文本能力

那关于LLM的长文本能力，目前业界通常都是怎么做的？有哪些技术点或者方向？今天我们就来总结一波，供大家快速全面了解。

2024-02-22 标签：GPT 位置编码器大模型 697 0

开发RAG管道过程中的12个痛点

准确解释用户查询以检索相关的结构化数据是困难的，特别是在面对复杂或模糊的查询、不灵活的文本到SQL转换方面

2024-02-21 标签：SQL 数据源 OpenAI 525 0

如何在TorchServe上提供LLMs的分布式推理

你可以看到我们在这里使用了张量并行和并行预填充。它实际上帮助大大加快了推理速度。与等效的GPU相比，它使得Inferentia 2的成本大幅降低了。我们...

2024-01-31 标签：gpu 内存并行处理 621 0

小红书搜索团队研究新框架：负样本在大模型蒸馏中的重要性

在思维链（CoT）提示的帮助下，大语言模型（LLMs）展现出强大的推理能力。然而，思维链已被证明是千亿级参数模型才具有的涌现能力。

2024-01-30 标签：算法 OpenAI 大模型 902 0

探索LangChain：构建专属LLM应用的基石

LangChain通过Loader加载外部的文档，转化为标准的Document类型。Document类型主要包含两个属性：page_content 包含...

2024-01-30 标签：ChatGPT LLM 508 0

LLM推理加速新范式！推测解码（Speculative Decoding）最新综述

这个问题随着LLM规模的增大愈发严重。并且，如下左图所示，目前LLM常用的自回归解码（autoregressive decoding）在每个解码步只能生...

2024-01-29 标签：解码模型 LLM 1911 0

浅析流行的LLM推理堆栈和设置

还有一个与批次大小有关的数量，它们在一个有趣的点上相交。这个点不取决于硬件之外的任何因素。举例来说，在 A10G 和 A100 上，硬件可以实现的总浮点...

2024-01-29 标签：神经网络 gpu AI 294 0

使用基于Transformers的API在CPU上实现LLM高效推理

英特尔 Extension for Transformers是英特尔推出的一个创新工具包，可基于英特尔架构平台，尤其是第四代英特尔至强可扩展处理器...

2024-01-22 标签：处理器英特尔 cpu 2306 0

大语言模型事实性幻象的实验性分析

尽管大语言模型能力不断提升，但一个持续存在的挑战是它们具有产生幻象的倾向。本文构建了幻象评测基准HaluEval 2.0，并基于该评测框架从预训练/有监...

2024-01-19 标签：开源语言模型自然语言处理 377 0

一种基于自然语言的轨迹修正方法

本研究提出了ExTraCT框架，利用自然语言进行轨迹校正。该框架结合了大型语言模型（LLMs）用于自然语言理解和轨迹变形函数。ExTraCT能够根据场景...

2024-01-19 标签：函数模型自然语言 329 0

教您如何精调出自己的领域大模型

BERT和 GPT-3 等语言模型针对语言任务进行了预训练。微调使它们适应特定领域，如营销、医疗保健、金融。在本指南中，您将了解 LLM 架构、微调过程...

2024-01-19 标签：神经网络 nlp ChatGPT 915 0

相关话题

换一批

电子发烧友网

电子发烧友网

+关注

电子发烧友网于2006年10月成立，是一个以电子技术知识为核心，以工程师为主导的平台。致立于为中国电子工程师的电子产品设计等做出最大贡献，促进中国电子科技的稳步发展。
无人驾驶

无人驾驶

+关注

提供全球最前沿无人驾驶科技趋势，中国无人驾驶开发者社区
1024

1024

+关注
京瓷

京瓷

+关注

京瓷株式会社成立于1959年4月1日。川村诚为现任代表取缔役社长。资本金为1，157亿332万日元。截至2006年3月31日为止的年度销售额达到1，181，489百万日元，集团公司包括关联公司在内共计183家，员工61，468名。
emmc

emmc

+关注

eMMC （Embedded Multi Media Card）是MMC协会订立、主要针对手机或平板电脑等产品的内嵌式存储器标准规格。
过压保护电路

过压保护电路

+关注
6G

6G

+关注

6G网络将是一个地面无线与卫星通信集成的全连接世界。6G，即第六代移动通信标准，也被称为第六代移动通信技术。主要促进的就是物联网的发展。截至2019年11月，6G仍在开发阶段。6G的传输能力可能比5G提升100倍，网络延迟也可能从毫秒降到微秒级。
华强pcb线路板打样

华强pcb线路板打样

+关注
高频电容

高频电容

+关注
COB

COB

+关注
dcdc转换器

dcdc转换器

+关注

DC/DC转换器为转变输入电压后有效输出固定电压的电压转换器。DC/DC转换器分为三类：升压型DC/DC转换器、降压型DC/DC转换器以及升降压型DC/DC转换器。
wifi6

wifi6

+关注

WiFi6主要使用了OFDMA、MU-MIMO等技术，MU-MIMO（多用户多入多出）技术允许路由器同时与多个设备通信，而不是依次进行通信。MU-MIMO允许路由器一次与四个设备通信，WiFi6将允许与多达8个设备通信。WiFi6还利用其他技术，如OFDMA（正交频分多址）和发射波束成形，两者的作用分别提高效率和网络容量。WiFi6最高速率可达9.6Gbps。
汽车

汽车

+关注
检测电路图

检测电路图

+关注
Zynq-7000

Zynq-7000

+关注

　　赛灵思公司（Xilinx）推出的行业第一个可扩展处理平台Zynq系列。旨在为视频监视、汽车驾驶员辅助以及工厂自动化等高端嵌入式应用提供所需的处理与计算性能水平。
CD4069

CD4069

+关注
过流保护电路

过流保护电路

+关注

电路过电流过电压保护是为防止主回路短路或直流牵引电动机发生环火造成主回路电流过大而损坏同步牵引发电机、主整流柜等电气设备，机车在牵引、电阻制动或自负载工况下，对主电路的过电流和过电压均进行保护。
过零检测电路

过零检测电路

+关注

过零检测指的是在交流系统中，当波形从正半周向负半周转换时，经过零位时，系统作出的检测。可作开关电路或者频率检测。漏电开关的漏电检测是检测零序电流。
特斯拉线圈

特斯拉线圈

+关注

特斯拉线圈又叫泰斯拉线圈，因为这是从“Tesla”这个英文名直接音译过来的。这是一种分布参数高频串联谐振变压器，可以获得上百万伏的高频电压。
VHF

VHF

+关注
逆变器电路图

逆变器电路图

+关注
慕尼黑上海电子展

慕尼黑上海电子展

+关注
VDD

VDD

+关注

　Vcc和Vdd是器件的电源端。Vcc是双极器件的正，Vdd多半是单极器件的正。下标可以理解为NPN晶体管的集电极C，和PMOS or NMOS场效应管的漏极D。同样你可在电路图中看见Vee和Vss，含义一样。因为主流芯片结构是硅NPN所以Vcc通常是正。如果用PNP结构Vcc就为负了。建议选用芯片时一定要看清电气参数
测试电路

测试电路

+关注
AIoT

AIoT

+关注

AIoT（人工智能物联网）=AI（人工智能）+IoT（物联网）。 AIoT融合AI技术和IoT技术，通过物联网产生、收集海量的数据存储于云端、边缘端，再通过大数据分析，以及更高形式的人工智能，实现万物数据化、万物智联化，物联网技术与人工智能追求的是一个智能化生态体系，除了技术上需要不断革新，技术的落地与应用更是现阶段物联网与人工智能领域亟待突破的核心问题。
HarmonyOS

HarmonyOS

+关注

HarmonyOS最新信息分享，我们将为大家带来HarmonyOS是什么意思的深度解读，HarmonyOS官网地址、HarmonyOS开源相关技术解读与设计应用案例，HarmonyOS系统官网信息，华为harmonyOS最新资讯动态分析等。
功放板

功放板

+关注
ELMOS

ELMOS

+关注
功放制作

功放制作

+关注

功率放大器（英文名称：power amplifier），简称“功放”，是指在给定失真率条件下，能产生最大功率输出以驱动某一负载（例如扬声器）的放大器。
科创板

科创板

+关注

拟订科创板股票上市审核规则、科创板上市公司并购重组审核规则、上市委员会及科技创新咨询委员会相关规则；负责科创板股票发行上市审核和科创板上市公司并购重组审核工作，拟订审核标准、审核程序等；对发行人、科创板上市公司及中介机构进行自律监管等。

换一批

电机控制	DSP	氮化镓	功率放大器	ChatGPT	自动驾驶	TI	瑞萨电子
BLDC	PLC	碳化硅	二极管	OpenAI	元宇宙	安森美	ADI
无刷电机	FOC	IGBT	逆变器	文心一言	5G	英飞凌	罗姆
直流电机	PID	MOSFET	传感器	人工智能	物联网	NXP	赛灵思
步进电机	SPWM	充电桩	IPM	机器视觉	无人机	三菱电机	ST
伺服电机	SVPWM	光伏发电	UPS	AR	智能电网	国民技术	Microchip

瑞萨	沁恒股份	全志	国民技术	瑞芯微	兆易创新	芯海科技	Altium
德州仪器	Vishay	Micron	Skyworks	AMS	TAIYOYUDEN	纳芯微	HARTING
adi	Cypress	Littelfuse	Avago	FTDI	Cirrus LogIC	Intersil	Qualcomm
st	Murata	Panasonic	Altera	Bourns	矽力杰	Samtec	扬兴科技
microchip	TDK	Rohm	Silicon Labs	圣邦微电子	安费诺工业	ixys	Isocom Compo
安森美	DIODES	Nidec	Intel	EPSON	乐鑫	Realtek	ERNI电子
TE Connectivity	Toshiba	OMRON	Sensirion	Broadcom	Semtech	旺宏	英飞凌
Nexperia	Lattice	KEMET	顺络电子	霍尼韦尔	pulse	ISSI	NXP
Xilinx	广濑电机	金升阳	君耀电子	聚洵	Liteon	新洁能	Maxim
MPS	亿光	Exar	菲尼克斯	CUI	WIZnet	Molex	Yageo
Samsung	风华高科	WINBOND	长晶科技	晶导微电子	上海贝岭	KOA	Echelon
Coilcraft	LRC	trinamic

放大器	运算放大器	差动放大器	电流感应放大器	比较器	仪表放大器	可变增益放大器	隔离放大器
时钟	时钟振荡器	时钟发生器	时钟缓冲器	定时器	寄存器	实时时钟	PWM 调制器
视频放大器	功率放大器	频率转换器	扬声器放大器	音频转换器	音频开关	音频接口	音频编解码器
模数转换器	数模转换器	数字电位器	触摸屏控制器	AFE	ADC	DAC	电源管理
线性稳压器	LDO	开关稳压器	DC/DC	降压转换器	电源模块	MOSFET	IGBT
振荡器	谐振器	滤波器	电容器	电感器	电阻器	二极管	晶体管
变送器	传感器	解析器	编码器	陀螺仪	加速计	温度传感器	压力传感器
电机驱动器	步进驱动器	TWS	BLDC	无刷直流驱动器	湿度传感器	光学传感器	图像传感器
数字隔离器	ESD 保护	收发器	桥接器	多路复用器	氮化镓	PFC	数字电源

开关电源	步进电机	无线充电	LabVIEW	EMC	PLC	OLED	单片机
5G	m2m	DSP	MCU	ASIC	CPU	ROM	DRAM
NB-IoT	LoRa	Zigbee	NFC	蓝牙	RFID	Wi-Fi	SIGFOX
Type-C	USB	以太网	仿真器	RISC	RAM	寄存器	GPU
语音识别	万用表	CPLD	耦合	电路仿真	电容滤波	保护电路	看门狗
CAN	CSI	DSI	DVI	Ethernet	HDMI	I2C	RS-485
SDI	nas	DMA	HomeKit	阈值电压	UART	机器学习	TensorFlow

Arduino	BeagleBone	树莓派	STM32	MSP430	EFM32	ARM mbed	EDA
示波器	LPC	imx8	PSoC	Altium Designer	Allegro	Mentor	Pads
OrCAD	Cadence	AutoCAD	华秋DFM	Keil	MATLAB	MPLAB	Quartus

搜索历史

llm

llm技术

相关标签

相关话题

关注此标签的用户(0人)

C++	Java	Python	JavaScript	node.js	RISC-V	verilog	Tensorflow
Android	iOS	linux	RTOS	FreeRTOS	LiteOS	RT-THread	uCOS
DuerOS	Brillo	Windows11	HarmonyOS

林超文PCB设计：PADS教程，PADS视频教程	郑振宇老师：Altium Designer教程，Altium Designer视频教程
张飞实战电子视频教程	朱有鹏老师：海思HI3518e教程，HI3518e视频教程
李增老师：信号完整性教程，高速电路仿真教程	华为鸿蒙系统教程，HarmonyOS视频教程
赛盛：EMC设计教程，EMC视频教程	杜洋老师：STM32教程，STM32视频教程
唐佐林：c语言基础教程，c语言基础视频教程	张飞：BUCK电源教程，BUCK电源视频教程
正点原子：FPGA教程，FPGA视频教程	韦东山老师：嵌入式教程，嵌入式视频教程
张先凤老师：C语言基础视频教程	许孝刚老师：Modbus通讯视频教程
王振涛老师：NB-IoT开发视频教程	Mill老师：FPGA教程，Zynq视频教程
C语言视频教程	RK3566芯片资料合集
朱有鹏老师：U-Boot源码分析视频教程	开源硬件专题