衡水网站托管,企业二级网站怎么做,天河岗顶棠下上社网站建设开发,如何用记事本做网站一、说明 NLTK是个啥#xff1f;它是个复杂的应用库#xff0c;可以实现基本预料库操作#xff0c;比如#xff0c;、将文章分词成独立token#xff0c;等操作。从词统计、标记化、词干提取、词性标记#xff0c;停用词收集#xff0c;包括语义索引和依赖关系解析等。
…一、说明 NLTK是个啥它是个复杂的应用库可以实现基本预料库操作比如、将文章分词成独立token等操作。从词统计、标记化、词干提取、词性标记停用词收集包括语义索引和依赖关系解析等。
二、NLTK是个啥 NLTK是构建Python程序以处理人类语言数据的领先平台。 它为50多个语料库和词汇提供了易于使用的界面 资源如WordNet 以及一套用于分类、标记化、词干提取、标记、解析和语义推理的文本处理库 用于工业级 NLP 库的包装器 以及一个活跃的讨论论坛。 得益于介绍编程基础知识以及计算语言学主题的实践指南以及全面的 API 文档 NLTK 适用于语言学家、工程师、学生、教育工作者、研究人员和行业用户。 NLTK可用于WindowsMac OS X和Linux。最重要的是NLTK是一个免费的开源的社区驱动的项目。 NLTK被称为“使用Python进行计算语言学教学和工作的绝佳工具”。 和“一个使用自然语言的惊人图书馆”。 使用Python进行自然语言处理提供了实用的 语言处理编程简介。 由NLTK的创建者撰写它指导读者了解基础知识 编写Python程序使用语料库对文本进行分类分析语言结构 等等。 本书的在线版本已针对Python 3和NLTK 3进行了更新。 原始的Python 2版本仍然在 https://www.nltk.org/book_1ed 提供。
三、您可以使用NLTK执行的一些简单操作 标记和标记一些文本 import nltksentence At eight oclock on Thursday morning
... Arthur didnt feel very good.tokens nltk.word_tokenize(sentence)tokens
[At, eight, oclock, on, Thursday, morning,
Arthur, did, nt, feel, very, good, .]tagged nltk.pos_tag(tokens)tagged[0:6]
[(At, IN), (eight, CD), (oclock, JJ), (on, IN),
(Thursday, NNP), (morning, NN)]标识命名实体 entities nltk.chunk.ne_chunk(tagged)entities
Tree(S, [(At, IN), (eight, CD), (oclock, JJ),(on, IN), (Thursday, NNP), (morning, NN),Tree(PERSON, [(Arthur, NNP)]),(did, VBD), (nt, RB), (feel, VB),(very, RB), (good, JJ), (., .)])显示解析树 from nltk.corpus import treebankt treebank.parsed_sents(wsj_0001.mrg)[0]t.draw()如果您发表使用NLTK的作品请引用NLTK书籍 遵循BirdStevenEdward Loper和Ewan Klein2009使用Python进行自然语言处理。奥莱利媒体公司 参考文章
NLTK :: Natural Language Toolkit
