Home

Awesome

NLPer-Arsenal

NLP人军火库，主要收录NLP竞赛策略实现、各任务教程、经验贴、学习资料以及会议时间等，如果对你有帮助，请给我们一个star。

本项目主要包含以下内容：

项目正在不断完善，如果您有什么建议，欢迎到issue 留言，或者通过邮箱（hello@arsenal-ai.cn）联系我们。

所有内容均由我们从网络公开资料中收集整理得到，版权归原作者所有，如有侵权请立即与我们联系，我们将及时处理。

整理不易，转载时请务必备注本项目github链接，感谢您为维护良好的开源环境出一份力。

目录

当前赛事

重点赛

记录当前正在进行的竞赛，奖金丰厚，适合有一定基础的NLPer；结束时间为官网标准时间或会议召开时间。

领域/会议竞赛报名时间结束时间
大模型基于通用大模型的知识库问答 <br />面向大语言模型的提示注入攻防竞赛 <br />基于大模型的开源软件安全应用情报员应用开发2023.08.23-10.24<br>2023.8.14-9.28<br>同上2023.11.03-11.05<br>2023.11<br>同上
CAIL20231. 司法考试 <br />2. 对话式类案检索 <br />3. 类案检索 <br />4. 事实认定 <br />5. 论辩理解 <br />6. 信息抽取 <br />7. 司法大模型2023.8-11，具体时间详见各赛事安排2023.12
CHIP2023评测一: CHIP-PromptCBLUE医疗大模型评测任务 （不微调 、参数微调 ） <br />评测二: 中文医学文本小样本命名实体识别评测任务 <br />评测三:药品纸质文档识别与实体关系抽取任务2023.8.1-9.272023.10.27-10.29
SMP2023ChatGLM 金融大模型挑战赛2023.7.19-8.162023.9
AI开发者大赛中文语义病句识别与纠正挑战赛 <br />多语言机器翻译挑战赛 <br />人岗匹配挑战赛2.0 <br />汽车领域文本规X则泛化性增强挑战赛 <br />基于论文摘要的文本分类与关键词抽取挑战赛 <br />机器翻译质量评估挑战赛2023 <br />校招简历应聘岗位与项目技能匹配检测挑战赛 <br />校招简历信息完整性检测挑战赛 <br />方面情感三元组提取的跨领域迁移挑战赛 <br />微博评论机器人 <br />ChatGPT生成文本检测器 <br />标书实体抽取挑战赛 <br />基于自然语言的软件任务执行挑战赛 <br />学术文档篇章级结构恢复挑战赛 <br />学术文档要素分类挑战赛2023.5-9，具体实践详见各赛事2023.10.24
DSTC11Track 4：Robust and Multilingual Automatic Evaluation Metrics for Open-Domain Dialogue Systems <br />Track 5：Task-oriented Conversational Modeling with Subjective Knowledge-2023.32023.8-9
CCMT2023CCMT与WMT2023合作组织的汉英、英汉新闻领域的翻译评测<br />维汉、蒙汉、藏汉的翻译评测<br />翻译质量估计评测<br />自动译后编辑评测<br />一带一路”低资源语言机器翻译任务<br />以中文为中心的多语言机器翻译任务<br />中英零指代机器翻译任务-2023.5.102023.10
千言数据集文本生成、情感分析、阅读理解、中文对话、文本相似度、语义解析、机器同传、信息抽取、实体链指、低资源语言翻译、自然语言推理、事实核查、可解释评测、段落检索、视频语义理解等15个任务60个数据集现在暂无
中文医疗信息处理挑战榜CBLUE目前任务包括医学文本信息抽取（实体识别、关系抽取）、医学术语归一化、医学文本分类、医学句子关系判定和医学QA共5大类任务8个子任务，-> 官网现在暂无

训练赛

记录长期进行的训练赛，有排行榜，方便刚入门的NLPer练手

领域竞赛报名时间结束时间
文本分类WEBSHELL文本检测学习赛 <br /> 医疗诊疗对话意图识别挑战赛 <br />知乎问题自动标注 （有数据）<br /> 数据分析达人赛1：用户情感可视化分析 <br> 中文新闻文本标题分类 <br>金融用户评论分类 <br /> 中文对话情感分析 <br /> 新闻文本分类 <br> 文本分类对抗攻击 <br> 虚假职位招聘预测 <br> 疫情期间互联网虚假新闻检测 <br> 疫情期间网民情绪识别 <br> O2O商铺食品安全相关评论发现 <br> 互联网新闻情感分析 <br> 汽车行业用户观点主题及情感识别 <br> 影评文本情感分析 <br> 垃圾邮件分类 <br> 短文本分类大赛-图灵联邦 <br> 情感分类大赛-图灵联邦 <br> 医疗文本分类 - FlyAI <br> 中文垃圾短信识别 - FlyAI <br> 英文垃圾信息分类 <br /> 社交网站消息内容分类 - FlyAI <br> 用户商场评价情感分析 - FlyAI <br> Stanford-Sentiment-Treebank 情感分析 - FlyAI <br> COLA 英文句子可理解性分类 - FlyAI <br> 今日头条新闻分类 - FlyAI <br> 美国点评网站Yelp评价预测赛 - FlyAI <br> 千言数据集：情感分析 - 百度AI Studio <br> Kaggle-Contradictory, My Dear Watson <br> Kaggle-Natural Language Processing with Disaster Tweets <br> CLEF 2019 Lab ProtestNews (Document、Sentence、Token)-<br>-<br>已结束<br />- <br>-<br>-<br>-<br>- <br> - <br> - <br> -<br> - <br> -<br> - <br> - <br> - <br> - <br> 每月1号<br> 每月1号<br>- <br/> - <br/> -<br> - <br/> - <br/> - <br/> - <br/> - <br/> - <br/> -<br> -<br> - <br> -2024.02<br>2024.02<br>已结束<br />2022.4.30 <br>2023.01<br>-<br>-<br>- <br>2021.12.31<br> - <br> - <br/> - <br/> - <br/> - <br/> -<br/> - <br/> - <br/> 每月27号<br> 每月27号<br/> - <br/> - <br/> - <br/> -<br>- <br/> - <br/> - <br/> - <br/> - <br/> 2023.1<br> -<br> - <br> -
文本匹配医学搜索Query相关性判断 <br>Quora-检测两个问题是否重复 - FlyAI <br> 千言数据集：文本相似度 <br />千言数据集：问题匹配鲁棒性 <br /> 英文文本语义相似度 <br /> IMDB评论剧透检测 <br />医学搜索Query相关性判断 <br />CCKS2021中文NLP地址相关性任务 （数据集 ）-<br>- <br/> -<br>-<br /> -<br> -<br />-2022.9.30<br />-2024.02<br>- <br/> 2023.1<br> 2023.1<br />-<br> -<br />2022.10.7<br />-
文本蕴含Contradictory, My Dear Watson--
推荐系统阿里移动推荐算法挑战赛 <br>零基础入门推荐系统 - 新闻推荐 <br> 天池新人挑战赛之阿里移动推荐算法 <br> 电商用户购买行为预测 <br> 图书推荐系统-<br>-<br> - <br> -<br> -2024.02<br>- <br> -<br> -<br>-
问答疫情政务问答助手 <br> 医疗智能问答 - FlyAI <br> 2021心理对话问答挑战赛 <br> CommonsenseQA Dataset <br> OpenBookQA Dataset- <br> - <br> - <br> -<br>-- <br> -<br> - <br> 2026.4.15 <br> 2026.4.15
语义解析千言数据集：语义解析-2023.1
摘要媒体文章自动摘要 <br /> 知乎文本摘要 <br /> 新闻摘要自动生成 <br /> 问答摘要与推理 （end: 2023.1）--
语音生活场景汉语语音识别--
信息抽取CCKS2021中文NLP地址要素解析 <br>CCF BDCI 文本实体识别及关系抽取 <br /> 千言数据集：信息抽取 <br /> 英文文本实体关系抽取 <br /> 法律领域篇章级多事件检测-<br>-<br /> -<br> -<br> -2024.02<br>-<br /> 2023.1.1<br> -<br> -
实体链指千言数据集：实体链指-2023.1.1
机器翻译千言数据集：低资源语言翻译 <br /> 机器翻译领域适应-<br> -2023.1.1<br> -
实体识别中文的命名实体识别 - FlyAI--
关系抽取英文文本实体关系抽取 （有数据）已结束已结束
立场检测中文微博的立场检测 - FlyAI <br /> 微博立场检测-<br> --<br> -
对话MuTual Dataset <br /> 千言数据集：开放域对话 <br /> 对话系统中的口语理解-<br /> -<br> -2026.4.15<br> 2023.1.1<br> -
Text2SQL耶鲁文本转SQL--
阅读理解千言数据集：阅读理解 <br> 中文阅读理解练习赛 - FlyAI <br> RACE Dataset <br> RACE-C Dataset <br> Dream Dataset <br> C3 Dataset <br> SciQ Dataset <br> LogiQA Dataset <br> MCTest Dataset <br />OpenBookQA Dataset-<br> -<br> -<br> -<br>-<br> -<br> -<br> -<br> -<br />-2023.1.1<br> - <br> 2026.4.15 <br> 2026.4.15 <br>2026.4.15 <br>2026.4.15 <br>2026.4.15 <br>2026.4.15 <br>2026.4.15<br />2026.4.15
GraphHGB-Node Classification <br /> HGB-Link Prediction <br /> HGB-Knowledge-aware Recommendation2021.6.28-2030.6
其它评论情感词提取 （含数据）已结束已结束

往期竞赛

这里记录整理好的竞赛，包含数据下载以及竞赛方案

目录赛事
文本分类2018法研杯-罪名预测 <br /> 2018法研杯-法条推荐 <br /> 2019法研杯-要素识别 <br /> 2019CHIP-临床试验筛选标准短文本分类 <br> 2019“技术需求”与“技术成果”项目之间关联度计算模型 <br> 2020smp微博情绪分析评测 <br> 2020百度人工智能开源大赛-观点阅读理解任务 <br> 2020CCKS新冠知识图谱构建与问答评测-子任务1：新冠百科知识图谱类型推断 <br /> 2020CCKS新冠知识图谱构建与问答评测-子任务2：新冠概念图谱的上下位关系预测 <br/> 2021SMP-ECISA中文隐式情感分析评测 <br /> 2021DIGIX-基于多模型迁移预训练文章质量判别 <br /> 2021试题标签预测挑战赛 <br /> 2021非标准化疾病诉求的简单分诊挑战赛 <br /> 2021CHIP-医学对话临床发现阴阳性判别任务 <br /> 2021CCL-中文空间语义理解评测 <br /> 2021CCL-“小牛杯”图文多模态幽默识别评测 <br />2022疫情微博情绪识别挑战赛 <br />2022非标准化疾病诉求的简单分诊挑战赛2.0 <br />2022机器翻译质量评估挑战赛 <br />2022基于论文摘要的文本分类与查询性问答 <br />2022应用类型识别挑战赛 <br /> 2022 Amazon KDD Cup (task2 Multi-class Product Classification, task3 Product Substitute Identification) <br>2022医疗搜索意图识别挑战赛 <br />[2022CCF BDCI小样本数据分类任务](./往期竞赛/文本分类/2022CCF BDCI小样本数据分类任务.md) <br />2023CCL电信网络诈骗案件分类评测
实体链指2019CCKS中文短文本实体链指 <br> 2020CCKS面向中文短文本的实体链指任务 <br> 2020CCKS基于标题的大规模商品实体检索 <br> 2020千言数据集：面向中文短文本的实体链指任务 <br /> 2021SDU@AAAI-Task2-Acronym Disambiguation
实体识别2019互联网金融新实体发现 <br> 2020CHIP-中药说明书实体识别挑战 <br> 2020CHIP-中文医学文本命名实体识别 <br> 2020CCKS面向试验鉴定的命名实体识别 <br> 2020CCKS面向中文电子病历的医疗实体及事件抽取-子任务1：医疗命名实体识别 <br> 2021智能医疗决策 <br> 2021互联网舆情企业风险事件的识别和预警 <br> 2021海通&工商-2021互联网舆情企业风险事件的识别和预警
问题生成2020CHIP-中医文献问题生成挑战
摘要生成2020法研杯-司法摘要 <br />2021MEDIQA-Summarization of Consumer Health Questions <br> 2021MEDIQA-Summarization of Multiple Answers <br> 2021MEDIQA-Summarization of Radiology Reports
句法分析2021CCL-跨领域句法分析评测 <br /> 2021CCL-中译语通-Nihao无监督汉语分词评测
阅读理解2018机器阅读理解技术竞赛 <br/> 2019法研杯-阅读理解 <br /> 2020法研杯-阅读理解 <br /> 2020语言与智能技术竞赛：机器阅读理解任务 <br> 2021海华AI挑战赛·中文阅读理解（技术组） <br> 2021语言与智能技术竞赛：机器阅读理解任务 <br /> 2021NLPCC-AIDebater
文本匹配2019大数据挑战赛 <br> 2019金融信息负面及主体判定 <br> 2019CHIP-疾病问答迁移学习比赛 <br /> 2019CHIP-临床术语标准化任务 <br /> 2019法研杯-相似案例匹配 <br /> 2020“公益AI之星”挑战赛-新冠疫情相似句对判定大赛 <br> 2020房产行业聊天匹配问答 <br> 2020CHIP-临床术语标准化任务 <br /> 2020法研杯-论辩挖掘 <br /> 2021搜狐校园文本匹配算法大赛 <br> 2021小布助手对话短文本语义匹配 <br /> 2021CHIP-临床术语标准化任务
对话2019SMP中文人机对话技术评测 <br> 2020千言：多技能对话 <br> 2020语言与智能技术竞赛：面向推荐的对话任务 <br> 2021SMP对话式AI算法技术评测（小样本对话式意图识别与槽位提取、对话式指代消解与省略恢复 ）<br>2021CCL-智能对话诊疗评测比赛 <br />2021DSTC10
Text2SQL2019中文NL2SQL挑战赛 <br/> 2020语言与智能技术竞赛：语义解析任务
问答2020CCKS新冠知识图谱构建与问答评测-子任务4：新冠百科知识图谱问答评测 <br /> 2020法研杯-司法考试
信息抽取2020科大讯飞事件抽取挑战赛 <br> 2020语言与智能技术竞赛：关系抽取任务 <br> 2020语言与智能技术竞赛：事件抽取任务 <br> 2020-SemEval Task 6: Definition Extraction from Free Text with the DEFT Corpus <br> 2020CCKS面向中文电子病历的医疗实体及事件抽取-子任务2：医疗事件抽取 <br> 2020CCKS面向金融领域的小样本跨类迁移事件抽取 <br> 2020CCKS面向金融领域的篇章级事件主体与要素抽取 <br> 2020CHIP-中文医学文本实体关系抽取 <br /> 2021语言与智能技术竞赛：多形态信息抽取任务 <br /> 2021医疗实体与关系识别挑战赛 <br /> 2021NLPCC-AutoIE 2 <br /> 2021CHIP-临床发现事件抽取任务 <br /> 2021SDU@AAAI-Task1-Acronym Identification
机器翻译2020CCMT-双语、多语、语音、质量评估、语料过滤 <br> 2021NAACL同传Workshop：千言 - 机器同传 <br> 2021低资源多语种文本翻译挑战赛 <br> 2021领域迁移机器翻译挑战赛 <br /> 2021CCMT-双语、多语、低资源、自动译后编辑、质量评估、语料过滤
其它2018法研杯-刑期预测 <br />2020NLP中文预训练模型泛化能力挑战赛 <br>2020CCKS新冠知识图谱构建与问答评测-子任务3：新冠科研抗病毒药物图谱的链接预测 <br />2021未来杯-探索科技未来 (论文推荐) <br />2021NLPCC-FewCLUE

自媒体推荐

NLP相关的学界、业界、理论、实践以及时事动态

平台主要领域自媒体
微信公众号技术Coggle数据科学、DataFunTalk（偏向业界方案）
行业信息机器之心、机器之能、AI报道、AI前线、AI科技评论、机器学习研究组订阅
学术科学空间、PaperWeekly、智源社区、人工智能前沿讲习、专知、AINLP、AI TIME 论道、夕小瑶的卖萌屋、机器学习算法与自然语言处理（MLNLP）
BiliBili前沿论坛智源社区、AITIME论道
基础跟李沐学AI
网站竞赛Coggle数据科学 、CompHub
学术Paper With Code 、AMiner学术头条 、科学空间

算力推荐

warning: 请仔细评估第三方平台信誉，警惕代码、数据等重要信息泄露

平台算力价格说明
featurize2080Ti、30902080Ti（￥2/h）、3090（￥3.6/h）镜像环境，使用灵活，可以通过jupyter_lab、vscode、pycharm远程连接
AutoDLrtx a5000、3090、A100￥0.6/h~￥8.5/h单机ssh连接，存储空间不大，不过很便宜
智星云1080Ti、3080、3090、V/A100等￥2.1/h~￥11/h整机，可远程连接（pycharm/vs code）
沣云平台ML270￥2.8/h一站式AI计算平台，CPU可以增量配置，按运行时间收取费用
恒源云2080Ti、3060、3090、V100等￥1.25/h~￥5.5/h可以搭配完整的CPU和硬盘，相比bithub有更高的自由度，目前处于推广期，有很多优惠
并行云V100、2080Ti、P100等不明计算节点来自超算，可个性化定制CPU核数、GPU、存储空间，有非常简便的操作界面，并且提供远程linux桌面，灵活度优于以上三个平台。目前处于推广期，有很多优惠
AI StudioV100基本免费由百度开发, 偶尔申请不到V100，最高可免费8卡。主要使用飞桨PaddlePaddle框架，其它框架需自行折腾，也可用X2Paddle一键转为飞桨的代码和模型，大部分比赛参与即送算力卡。
天池DSWp100免费，单次限时8小时，不限次数阿里的一个在线平台，运行时不能关闭
天池实验室V100免费，60h/年相比于AI Studio不限制深度学习框架，就是时间比较短
Kagglek80免费，每周限时30小时外网访问
Google Colabk80、T4、P4、P100免费，单次限时12小时外网访问，无法指定具体GPU，未订阅Colab Pro用户多数时间下估计会被分配k80

竞赛平台

会议时间

中国计算机学会推荐国际学术会议和期刊目录-2022
中国计算机学会推荐中文科技期刊目录
dblp：计算机科学文献库
AI会议deadline ：会议倒计时
会议时间记录表 ：Updated by Jackie Tseng, Tsinghua Computer Vision and Intelligent Learning Lab
note：以下时间为官网默认时间，暂未换算成北京时间

会议级别摘要截稿原文截稿审稿通知开会时间说明
ICLR(官网、dblp)*2023.9.212023.9.282023.11.10(review)、2024.1.15(final)2024.5.7-5.11Vienna
ACL(官网、dblp)CCF-A2023.1.13(direct submission)2023.1.20(direct submission)、2022.12.15（ARR）2023.2.15（review）、2023.5.1（final）2023.7.9-7.14Toronto，Canada
NeurIPS(官网、dblp)CCF-A2023.5.112023.5.172023.9.212023.12.10-12.16New Orleans Ernest N. Morial Convention Center
ICML(官网、dblp)CCF-A*??2024.7.21-7.27Messe Wien Exhibition Congress Center
SIGIR(官网、dblp)CCF-A2023.1.242023.1.312023.4.42023.7.23-7.27Taipei, Taiwan
WWW(官网、dblp)CCF-A2023.10.52023.10.122023.12.1-12.14（rebuttal）<br>2024.2.1（final）2024.5.13-5.17Singapore
AAAI(官网、dblp)CCF-A2023.8.82023.8.152023.9.27(phase 1 rejections)、2023.12.19(final)2024.2.20-2.27VANCOUVER, CANADA
IJCAI(官网、dblp)CCF-A2023.1.112023.1.182023.2.24（summary reject notification）、2023.4.19（paper notification）2023.8.19-8.25Cape Town, South Africa
EMNLP(官网、dblp)CCF-B2022.6.162023.6.23(Direct)、2023.7.21(ARR)2023.8.22~8.28（rebuttal）、2023.10.62023.12.6-12.10Singapore
NAACL(官网、dblp)CCF-B*2023.12.15(ARR)、2024.2.20(Commitment)2024.3.152024.6.16-6.21Mexico City, Mexico
COLING(官网、dblp)CCF-B*2022.5.172022.8.152022.10.12~10.17Gyeongju, Korea
CoNLL(官网、dblp)CCF-C*2023.6.302023.10.62023.12.6-12.7colocated with emnlp2023
NLPCC(官网、dblp)CCF-C*2023.5.182023.7.172023.10.12-10.15佛山
IJCNN(官网 、dblp )CCF-C*2023.1.312023.4.72023.6.18-6.23Queensland, Australia
ICONIP(官网)CCF-C*2022.6.152022.8.152022.11.22~11.26New Delhi, India
ACML(官网)CCF-C*2023.6.23（会议）<br />2023.5.26（期刊）2023.8.11-8.18（rebuttal）、9.8 (final)；<br />2023.7.7（初审）、9.8（final）2023.11.11-11.14İstanbul, Turkey
AACL(官网)**2023.5.23(direct submission)、2023.8.15(ARR)2023.8.2-8.9(rebuttal)、9.4(final)2023.11.1-11.4Bali, Indonesia
EACL(官网、dblp)**2022.10.20(direct submission)、2023.1.8 (ARR)2023.1.202023.5.2-5.6Kiev, Ukraine、online
CCL(官网、dblp)**2023.4.152023.5.202023.8.3-8.5哈尔滨
CCKS(官网、dblp)**2023.5.192023.6.302023.8.24~8.27沈阳
SMP(官网、dblp)**2023.5.152023.7.12023.11.24-11.26北京
CCMT(官网)**2023.7.102023.8.152023.10.19-10.21山东济南