0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

整理了一波关于医疗NLP的数据集

深度学习自然语言处理 来源:python遇见NLP 作者:python遇见NLP 2020-10-10 10:36 次阅读

在Github上搜索整理了一波关于医疗NLP的数据集:

1

中文评测数据集

1. Yidu-S4K:医渡云结构化4K数据集

2.瑞金医院糖尿病数据集

3.Yidu-N7K:医渡云标准化7K数据集

4.中文医学问答数据集

5.平安医疗科技疾病问答迁移学习比赛

6.天池新冠肺炎问句匹配比赛

7.中文医患问答对话数据

8.中文医学问答数据

9.CHIP2020各项评测已开放

10.医学数据挖掘与算法评测大赛

中文医学知识图谱

CMeKG

英文数据集

PubMedQA: A Dataset for Biomedical Research Question Answering

中文医疗领域语料

医学教材 培训考试

哈工大《大词林》开放75万核心实体词及相关概念、关系列表(包含中药/医院/生物 类别)

医学embedding

开源英文医学embedding

链接:https://github.com/lrs1353281004/Chinese_medical_NLP

2

医疗行业专业词汇语料

说明 数量 文件
口腔科病历词汇 11,170 stomatology.txt
国际疾病分类ICD全库 54,304 ICD.csv
疾病诊断编码库ICD-10 12109 ICD-code-10.csv
医院固定资产词汇 471 properties.txt
药品名称词汇 37,308 medicine.txt
电子病历常见词汇 1985 emr.txt

链接:https://github.com/xtea/chinese_medical_words

3

中文医学NLP公开资源整理:术语集/语料库/词向量/预训练模型/知识图谱/命名实体识别/QA/信息抽取/etc

术语集/语料库

medical-news中文医学新闻爬虫

medical-books中文LaTex开源医学书籍

THUOCL清华大学thunlp组医学词汇

ICD-10-CNICD-10中文对应

OMAHA七巧板医学术语集样例数据

中文糖尿病标注数据集包含实体标注和关系标注

词向量/预训练模型

ChineseEHRBert 中文电子病历预训练Bert;用Bert测试命名实体识别,问答模型,关系提取任务

分词

PKUSEGPKUSEG分词工具,模型支持选择医学

知识图谱 / 关系提取

cMeKGChinese Medical Knowledge Graph

瑞金医院人工智能辅助构建知识图谱大赛糖尿病相关的学术论文以及糖尿病临床指南的实体标注和抽取实体关系任务

OMAHA知识图谱(药品适应症)开放医疗与健康联盟(Open Medical and Healthcare Alliance,OMAHA)构建的药品与药品适应证的知识图谱数据

医疗知识图谱数据医疗知识图谱数据(ownthink)

病人事件图谱数据集病人事件图谱是一种新的基于RDF的医疗观察性数据表示模型,可以清晰地表示临床检查、诊断、治疗等多种事件类型以及事件的时序关系。使用三家上海三甲医院的电子病历数据,构建了包括3个专科、173395个医疗事件、501335个事件时序关系以及与5313个知识库概念链接的医疗数据集。

中文症状库这是一个包含症状实体和症状相关三元组的数据集。中文症状库的数据来自8个主流的健康咨询网站、3个中文百科网站和电子病历。它还包含了中文症状与UMLS中概念的链接结果。

中医医案知识图谱从医案中抽取临床知识构建知识图谱,帮助用户了解中医特色疗法,以及疾病(如“慢性胃炎”)的临床表现、相关疗法、相关养生保健方法等

herbnet 面向中药研究,根据中药领域模型的特点,构建了一个包括中医疾病,方剂,中药, 中药化学成分,药理作用,中药实验,化学实验方法在内的中药本体。进而,基于本体实现了一系列数据库的集成,从而构建了一个中药知识图谱。

CHIP2020中文医学文本实体关系抽取

命名实体识别

CCKS2017面向中文电子病历的医疗实体识别及属性抽取数据集

CCKS2018面向中文电子病历的医疗实体识别及属性抽取数据集

CCKS2019数据下载面向中文电子病历的医疗实体识别及属性抽取数据集

CHIP2020中文医学文本命名实体识别

CHIP2020中药说明书实体识别

QA

CCIR2019CCIR 2019 基于电子病历的数据查询类问答

cMedQA中文医学QA数据集

cMedQA2中文医学QA数据集

CMID中文医学QA意图理解数据集

KGQA基于医药知识图谱的智能问答系统

chatbot-base-on-Knowledge-Graph使用深度学习方法解析问题 知识图谱存储 查询知识点 基于医疗垂直领域的对话系统

中文医疗对话数据集Chinese medical dialogue data 中文医疗对话数据集

webMedQAwebMedQA

MedDialogThe MedDialog dataset contains conversations (in Chinese) between doctors and patients. It has 1.1 million dialogues and 4 million utterances.

CHIP2020中医文献问题生成

术语标准化

CHIP2019临床术语标准化任务:医渡云标准化7K数据集

CHIP2020临床术语标准化任务

相似句对判断

“公益AI之星”挑战赛-新冠疫情相似句对判定大赛比赛整理近万条真实语境下疫情相关的肺炎、支原体肺炎、支气管炎、上呼吸道感染、肺结核、哮喘、胸膜炎、肺气肿、感冒、咳血等患者提问句对,要求选手通过自然语言处理技术识别相似的患者问题。

其他

CHIP2018针对中文的真实患者健康咨询语料,进行问句意图匹配

CHIP2019平安医疗科技疾病问答迁移学习比赛

链接:https://github.com/GanjinZero/awesome_Chinese_medical_NLP

4

Data_数据中有6个文件夹分别是:

94596个问答对220606个问答对183751个问答对75553个问答对101602个问答对115991个问答对 总计 792099个问答对

每个文件夹下有一个csv文件,其中的数据格式为:

department title ask answer
心血管科 高血压患者能吃党参吗? 我有高血压这两天女婿来的时候给我拿了些党参泡水喝,您好高血压可以吃党参吗? 高血压病人可以口服党参的。党参有降血脂,降血压的作用,可以彻底消除血液中的垃圾,从而对冠心病以及心血管疾病的患者都有一定的稳定预防工作作用,因此平时口服党参能远离三高的危害。另外党参除了益气养血,降低中枢神经作用,调整消化系统功能,健脾补肺的功能。感谢您的进行咨询,期望我的解释对你有所帮助。
消化科 哪家医院能治胃反流 烧心,打隔,咳嗽低烧,以有4年多 建议你用奥美拉唑同时,加用吗丁啉或莫沙必利或援生力维,另外还可以加用达喜片

链接:https://github.com/Toyhom/Chinese-medical-dialogue-data

5

This dataset is used for Chinese medical QA intent understanding task.

Dataset format:

All the data is stored in a JSON file. There are 5 fields in the file. An example as follows:

{ "originalText": "间质性肺炎的症状?", "entities": [{"label_type": "疾病和诊断", "start_pos": 0, "end_pos": 5}], "seg_result": ["间质性肺炎", "的", "症状", "?"], "label_4class": ["病症"], "label_36class": ["临床表现"] }

链接:https://github.com/liutongyang/CMID

6

This is the dataset for Chinese community medical question answering. The dataset is in version 1.0 and is available for non-commercial research. We will update and expand the database from time to time. In order to protect the privacy, the data is anonymized and no personal information is included.

链接:https://github.com/zhangsheng93/cMedQA

7

COVID19 Language Resources: Datasets

链接:https://github.com/lwgkzl/Covid19-NLP

8

Datasets

BioCreative V chemical-disease relation (CDR) corpus (in short, BC5CDR corpus) (13, 14, 16, 34): It consists of 1,500 PubMed articles with 4,409 annotated chemicals, 5,818 diseases, and 3,116 chemical-disease interactions. The relation task data is publicly available through BioCreative V athttps://biocreative.bioinformatics.udel.edu/resources/corpora/biocreative-v-cdr-corpus/.

Traditional Chinese medicine (TCM) literature corpus (in short, TCM corpus) (32): The abstracts of all 106,150 papers published in the 114 most popular Chinese TCM journals between 2011 to 2016 are collected. 3024 herbs, 4957 formulae, 1126 syndromes, and 1650 diseases are found. 5 types of relations are annotated. The entire dataset is available online athttp://arnetminer.org/TCMRelExtr.

The 2012 informatics for integrating biology and the bedside (i2b2) project temporal relations challenge corpus (in short, i2b2 temporal corpus) (29, 30): It contains 310 de-identified discharge summaries of more than 178,000 tokens, with annotations of clinically significant events, temporal expressions and temporal relations in clinical narratives. On average, each discharge summary in the corpus contains 86.6 events, 12.4 temporal expressions, and 176 raw temporal relations. In this corpus, 8 kinds of temporal relations between events and temporal expressions are defined: BEFORE, AFTER, SIMULTANEOUS, OVERLAP, BEGUN_BY, ENDED_BY, DURING, BEFORE_OVERLAP. The entire annotations are available athttp://i2b2.org/NLP/DataSets.

链接:https://github.com/chentao1999/MedicalRelationExtraction

责任编辑:lq
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 医疗
    +关注

    关注

    8

    文章

    1801

    浏览量

    58662
  • 数据集
    +关注

    关注

    4

    文章

    1205

    浏览量

    24648
  • nlp
    nlp
    +关注

    关注

    1

    文章

    487

    浏览量

    22015

原文标题:医疗NLP相关数据集整理

文章出处:【微信号:zenRRan,微信公众号:深度学习自然语言处理】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    调试ESP8266成LWIP协议栈用UDP方式发送数据时,无法正常发送数据是哪里的问题?

    我在调试8266成LWIP协议栈用UDP方式发送数据时,参考别的环境的UDP例程,发现无法正常发送数据,反复检查了,并确认8266已经通过WIFI连上网了,但是使用LWIP协议栈的UDP相关函数发送
    发表于 07-12 07:44

    nlp逻辑层次模型的特点

    NLP(自然语言处理)逻辑层次模型是种用于理解和生成自然语言文本的计算模型。它将自然语言文本分解为不同的层次,以便于计算机更好地处理和理解。以下是对NLP逻辑层次模型特点的分析: 词汇层次 词汇
    的头像 发表于 07-09 10:39 329次阅读

    nlp神经语言和NLP自然语言的区别和联系

    神经语言(Neuro-Linguistic Programming,NLP) 神经语言是种心理学方法,它研究人类思维、语言和行为之间的关系。NLP的核心理念是,我们可以通过改变我们的思维方式和语言
    的头像 发表于 07-09 10:35 713次阅读

    nlp自然语言处理框架有哪些

    自然语言处理(Natural Language Processing,简称NLP)是计算机科学和人工智能领域的个重要分支,它致力于使计算机能够理解和处理人类语言。随着技术的发展,NLP领域出现了
    的头像 发表于 07-09 10:28 504次阅读

    nlp自然语言处理的主要任务及技术方法

    自然语言处理(Natural Language Processing,简称NLP)是人工智能和语言学领域的个分支,它研究如何让计算机能够理解、生成和处理人类语言。NLP技术在许多领域都有广泛
    的头像 发表于 07-09 10:26 874次阅读

    nlp自然语言处理模型怎么做

    的进展。本文将详细介绍NLP模型的构建过程,包括数据预处理、模型选择、训练与优化等方面。 数据预处理 数据预处理是NLP模型构建的第
    的头像 发表于 07-05 09:59 538次阅读

    nlp自然语言处理的应用有哪些

    自然语言处理(Natural Language Processing,简称NLP)是人工智能领域的个分支,它致力于使计算机能够理解和生成自然语言。随着技术的发展,NLP已经在许多领域得到了广泛
    的头像 发表于 07-05 09:55 2469次阅读

    深度学习与nlp的区别在哪

    深度学习和自然语言处理(NLP)是计算机科学领域中两个非常重要的研究方向。它们之间既有联系,也有区别。本文将介绍深度学习与NLP的区别。 深度学习简介 深度学习是种基于人工神经网络的机器学习方法
    的头像 发表于 07-05 09:47 821次阅读

    NLP技术在机器人中的应用

    在人工智能的广阔领域中,自然语言处理(NLP)技术作为连接人类语言与机器智能的桥梁,正逐渐渗透到我们日常生活的方方面面,其中机器人技术便是个尤为突出的应用领域。NLP技术不仅赋予了机器人理解
    的头像 发表于 07-04 16:04 426次阅读

    NLP模型中RNN与CNN的选择

    NLP中的应用场景、工作原理、优缺点,以及在选择时应考虑的关键因素,以期为读者提供个全面而深入的理解。
    的头像 发表于 07-03 15:59 438次阅读

    什么是自然语言处理 (NLP)

    自然语言处理(Natural Language Processing, NLP)是人工智能领域中的个重要分支,它专注于构建能够理解和生成人类语言的计算机系统。NLP的目标是使计算机能够像人类
    的头像 发表于 07-02 18:16 1052次阅读

    PyTorch如何训练自己的数据

    PyTorch是个广泛使用的深度学习框架,它以其灵活性、易用性和强大的动态图特性而闻名。在训练深度学习模型时,数据是不可或缺的组成部分。然而,很多时候,我们可能需要使用自己的数据
    的头像 发表于 07-02 14:09 1356次阅读

    智能语音助手在医疗行业的应用与挑战

    、引言 随着人工智能技术的不断发展,智能语音助手在医疗行业的应用越来越广泛。语音数据医疗智能语音助手中发挥着重要作用,为系统提供了丰富
    的头像 发表于 01-19 17:37 620次阅读

    智能语音助手在医疗行业的应用与挑战

    、引言 随着人工智能技术的不断发展,智能语音助手在医疗行业的应用越来越广泛。语音数据医疗智能语音助手中发挥着重要作用,为系统提供了丰富
    的头像 发表于 01-18 16:41 498次阅读

    语音数据在智能医疗中的应用与挑战

    随着医疗技术的不断发展和人工智能的广泛应用,智能医疗已经成为现代医疗领域的重要方向。语音数据在智能医疗
    的头像 发表于 12-25 09:49 628次阅读