Skip to content

个人所需整理的自然语言处理资源集合

Notifications You must be signed in to change notification settings

Rocksnake/nlp_resource

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

91 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

自然语言处理相关资源合集

本仓库用于存放我个人所需要的和收集的自然语言处理以及部分其他领域的资源合集。

书籍、课程与笔记

代码、工具与项目

入门教程

通用深度学习自然语言处理框架与工具

  • AllenNLP - Allen团队开发的基于PyTorch的NLP框架,其中有包括ELMo等多种模型实现
  • fastNLP - 复旦大学深度学习自然语言处理框架
  • flair - 轻量级NLP框架
  • Jiagu - 基于BiLSTM实现的中文深度学习自然语言处理工具,提供多种中文信息处理基本功能
  • Kashgari - 基于Keras的精简自然语言处理框架,可用于文本标注与文本分类任务,值得一试
  • PyText - Facebook开源的基于PyTorch的自然语言处理框架
  • StanfordNLP - 斯坦福大学基于PyTorch开发的自然语言处理工具,可用于分词、序列标注等任务,Stanford CoreNLP的深度学习版替代品
  • tensor2tensor - Google研究团队深度学习模型和相关数据集的集中代码仓库,包含多种NLP模型
  • tensorflow models - Google模型存放仓库
  • TorchNLP - 基于PyTorch和TorchText实现的深度学习自然语言处理库

预训练语言模型与Transformer

相关内容已另行整理至ATPapers

机器翻译

相关内容已另行整理至MTPapers

命名实体识别

相关内容已另行整理至NERPapers

机器阅读理解

相关内容已另行整理至MRCPapers

方面级情感分析

相关内容已另行整理至ABSAPapers

文本匹配

相关内容已另行整理至MatchPapers

文本分类

相关内容已另行整理至TCPapers

文本纠错

聊天机器人、对话系统与问答系统

  • BertQA - 斯坦福大学BertQA实现
  • ChatBotCourse - 自己动手做聊天机器人教程
  • kbqa - 基于知识库的问答系统实现

关系抽取

  • OpenNRE - 清华开源的关系抽取框架(原基于TensorFlow,2.0版本已迁移到PyTorch)
  • OpenNRE-PyTorch - 上一项目的PyTorch版本
  • CasRel - A Novel Cascade Binary Tagging Framework for Relational Triple Extraction. Accepted by ACL 2020.

知识图谱

  • lightKG - 他人基于PyTorch和TorchText实现的知识图谱技术框架

关键词抽取

依存句法分析

正则表达式

  • RegExr - 正则表达式在线学习、测试与分析网站
  • Regex Golf - 非常好用的经典正则表达式练习网站

统计自然语言处理工具包

  • Apache OpenNLP - Apache开源的Java统计自然语言处理工具包
  • FudanNLP - 复旦大学开源的统计自然语言处理工具包
  • HTK - 基于马尔可夫模型开发的语音识别工具包
  • Jieba - 结巴分词是Python最常用中文分词
  • KenLM - 统计语言模型工具
  • LTP - 哈工大社会计算与信息检索研究中心开源的统计自然语言处理工具包ji
  • MALLET - 马萨诸塞大学开源的Java统计自然语言处理工具包
  • NLTK - 针对英文的工具包
  • Pan Gu Segment - 盘古开源中文分词
  • Stanford CoreNLP - 斯坦福大学开源的统计自然语言处理工具包

其他常用工具

网站与博客

此处仅提供NLP相关站点,优秀博客请链接blog.md

相关团队与实验室

资源集

竞赛集

数据集、语料与常用处理工具资源建设

相关内容已另行整理至nlp_corpus.md

About

个人所需整理的自然语言处理资源集合

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published