温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

关于遇到NLTK下载路径的一个小问题。

发布时间:2020-07-07 18:16:37 来源:网络 阅读:1667 作者:805488816 栏目:编程语言

最为小菜,最近初次了解NLTK,因此想学一下代码如下

nltk.tokenize import sent_tokenize
mytext = "Hello Mr. Adam, how are you? I hope everything is going well. Today is a good day, see you dude."
sent_tokenize(mytext)

出现报错,
Resource punkt not found.
Please use the NLTK Downloader to obtain the resource:

import nltk
nltk.download('punkt')

但实际上是存在的
关于遇到NLTK下载路径的一个小问题。

仔细一看,
错误中Search在C盘下C:\Users\Hu/nltk_data

Searched in:

  • 'C:\Users\Hu/nltk_data'
  • 'D:\ProgramData\Miniconda3\envs\tensorflow\nltk_data'
  • 'D:\ProgramData\Miniconda3\envs\tensorflow\share\nltk_data'
  • 'D:\ProgramData\Miniconda3\envs\tensorflow\lib\nltk_data'
  • 'C:\Users\Hu\AppData\Roaming\nltk_data'
  • 'C:\nltk_data'
  • 'D:\nltk_data'
  • 'E:\nltk_data'
  • ''

查看源码可以看见

tokenizer=load('tokenizers/punkt/{0}.pickle'.format(language))

在看load来自nltk下的data

def load(
resource_url,
format='auto',
cache=True,
verbose=False,
logic_parser=None,
fstruct_reader=None,
encoding=None,

从这里,我的第一反应是resource_url,因此迅速找到下文发现

resource_url = normalize_resource_url(resource_url)
resource_url = add_py3_data(resource_url)

先看到被屏蔽的说明文字windows = sys.platform.startswith('win')
于是我找到前文

path += [
os.path.join(sys.prefix, str('nltk_data')),
os.path.join(sys.prefix, str('share'), str('nltk_data')),
os.path.join(sys.prefix, str('lib'), str('nltk_data')),
os.path.join(os.environ.get(str('APPDATA'), str('C:\')), str('nltk_data')),
str(r'C:\nltk_data'),
str(r'D:\nltk_data'),
str(r'E:\nltk_data'),

所以我改了nltk.data.path = ['D:\Users/Hu/AppData/Roaming/nltk_data']
OK运行成功

['Hello Mr. Adam, how are you?', 'I hope everything is going well.', 'Today is a good day, see you dude.']

Process finished with exit code 0

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI