項目地址：https://github.com/liuhuanyong/LanguageResources
致力于利用web公開信息,采用爬蟲腳本,加工處理形成語言資源包括詞匯知識庫,領域語料等語言資源,該資源可用于自然語言處理任務.
1、　corpus_resources.py:詞庫，包括：

name:人民日報語料link:https://pan.baidu.com/s/1_E2YA7u61s_ZSSFV0IrHJApwd:ux12desc:人民日報199801語料name:領域小說文本語料link:https://pan.baidu.com/s/1JC3UyOu8PuJrnn_JUyF9UQpwd:bgufdesc:13個領域的小說文本集合，5000+小說文本name:字幕文本語料link:https://pan.baidu.com/s/19BI81W7rFwvLKEjVBPXaUApwd:mpfzdesc:基于字幕網抓取，70W字幕文本語料name:段子文本語料link:https://pan.baidu.com/s/1go84Pt8O-AHJJOgJhkG89Qpwd:eju6desc:基于內涵段子等短文本網站抓取，約50Wname:歌詞文本語料link:https://pan.baidu.com/s/1IOCH9EfZInTdI_GvnuedJApwd:nq69desc:基于歌詞網站抓取，歌詞數量約20W

2 word_resources.py:領域語料
包括：

name:語義詞庫link:https://pan.baidu.com/s/1b663-MVQ2UG69wvmKg912gpwd:flg8desc:語法信息詞典，知網義原、程度副詞、現代漢語詞典、否定詞、同義詞詞林等name:領域詞庫link:https://pan.baidu.com/s/1fzwE94sC77PDo-36IKCkWgpwd:x57tdesc:33個領域詞詞庫name:情感詞庫link:https://pan.baidu.com/s/10KECT0kxiRDt43vuSBOdeApwd:mn5udesc:通用、微博、食物、財經等領域情感詞，以及公開情感詞（清華、臺灣大學、大連理工等）name:敏感詞詞庫link:https://pan.baidu.com/s/1DIkV-RyiEVaNMPNYiiKVsApwd:asoldesc:敏感詞詞庫，可用于敏感信息檢測name:搜狗輸入法詞庫link:https://pan.baidu.com/s/11H8L0021TgnWEs8p4cjGkQpwd:wpr8desc:基于搜狗輸入法抓取與轉換生成，1W+個詞庫文本

3 wordvector_resource.py:預訓練詞向量文件

name:多領域詞向量link:https://pan.baidu.com/s/10j2Ozt9rOspVDsn_UNIfdwpwd:cw04desc:基于騰訊歷時滾動新聞訓練的多領域詞向量，包括財經、軍事、體育、科技等領域***********name:中文字向量link:https://pan.baidu.com/s/1m7E86igkOglQsl7hwn0QVwpwd:b2mgdesc:基于維基百科生成的字向量

資源已經共享至百度網盤,詳細見相應的.py文件
If any question about the project or me ,see https://liuhuanyong.github.io/
項目地址：https://github.com/liuhuanyong/LanguageResources

總結

以上是生活随笔為你收集整理的自然语言处理语言资源项目的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。