nltk安装与使用

wenjunna

已于 2024-06-04 16:14:48 修改

阅读量792

点赞数 7

CC 4.0 BY-SA版权

分类专栏： NLP 文章标签： nlp

于 2024-06-04 15:21:35 首次发布

本文链接：https://blog.csdn.net/weixin_40566713/article/details/139444203

Natural Language Toolkit，自然语言处理工具包，在NLP领域中，最常使用的一个Python库。

1、安装nltk

pip install -upgrade nltk

2、安装nltk_data

import nltk
nltk.download('punkt')  # 英文且此、词根、切句等方法
nltk.download('stopwords')  # 英文停用词库

我是用上面python代码下载相关数据集，一直报错

[nltk_data] Error loading punkt: <urlopen error [Errno 8] nodename nor
[nltk_data]     servname provided, or not known>
[nltk_data] Error loading stopwords: <urlopen error [Errno 8] nodename
[nltk_data]     nor servname provided, or not known>

最后去github手动下载，下载packages中的所有内容
在这里插入图片描述
下载后放到本地文件夹，我放在了/Users/sunwenjun/anaconda3/envs/python310/nltk_data/，注意有些压缩包要解压。

from nltk.data import find
print(find('punkt')) # /Users/sunwenjun/anaconda3/envs/python310/nltk_data/punkt
print(find('

最低0.47元/天解锁文章

200万优质内容无限畅学