天涯论坛

 找回密码
 立即注册
搜索
查看: 82|回复: 6

Python 最强自然语言处理工具,比NLTK强一百倍!

[复制链接]

3028

主题

210

回帖

9777万

积分

论坛元老

Rank: 8Rank: 8

积分
97779018
发表于 2024-8-17 08:13:02 | 显示全部楼层 |阅读模式

Stanza 是一款由斯坦福大学 NLP 组研发的自然语言处理库,旨在为科研人员和研发供给有效、准确的多语言 NLP 工具。其设计注重速度和准确性,并支持多种语言,如英语、中文、法语和德语等。Stanza 供给了一系列功能,包含分词、词性标注、命名实体识别和依存句法分析等。与其他 NLP 库相比,Stanza 运用预训练的神经网络模型进行各样任务,供给了高度可配置的模型和流水线,以满足区别的需求。

安装:

pip install stanza

中文处理实例:

import stanza import os nlp = stanza.Pipeline(lang=zh, processors=tokenize,lemma,pos,download_method=None) text = "在爱情的世界里,每一个眼神都是一首深情的诗,每一个微笑都是一幅温馨的画,而每一次相遇都是命运的安排。" doc = nlp(text) for sentence in doc.sentences: for word in sentence.words: print(f"{word.text} {word.lemma} {word.pos}")

输出:

2024-06-09 20:38:07 INFO: Using device: cpu 2024-06-09 20:38:07 INFO: Loading: tokenize 2024-06-09 20:38:07 INFO: Loading: pos 2024-06-09 20:38:07 INFO: Loading: lemma 2024-06-09 20:38:07 INFO: Done loading processors! 在 在 ADP 爱情 爱情 NOUN 的 的 PART 世界 世界 NOUN 里 里 ADP , , PUNCT 每 每 DET 一 一 NUM 个 个 NOUN 眼神 眼神 NOUN 都是 是 AUX 一 一 NUM 首 首 NOUN 深情 深情 ADJ 的 的 PART 诗 诗 NOUN , , PUNCT 每 每 DET 一 一 NUM 个 个 NOUN 微笑 微笑 NOUN 都是 是 AUX 一 一 NUM 幅 幅 NOUN 温馨 温馨 ADJ 的 的 PART 画 画 NOUN , , PUNCT 而 而 ADV 每 每 DET 一 一 NUM 次 次 NOUN 相遇 相遇 NOUN 都是 是 AUX 命运 命运 NOUN 的 的 PART 安排 安排 NOUN 。。PUNCT

英文翻译:

ADP: 介词 PART: 介词或小品词 NOUN: 名词 PUNCT: 标点 DET: 限定词 NUM: 数词 AUX: 助动词 ADJ: 形容词 ADV: 副词

可能显现问题:

下载模型文件失败能够手动下载模型文件和json文件到复制到stanza_resources目录里:

json文件:

https://gitee.com/pingyuanyi/stanza-resources

模型文件:

https://gitee.com/modelee/stanza-zh-hans

返回外链论坛:www.fok120.com,查看更加多

责任编辑:网友投稿





上一篇:Python是脚本语言还是研发语言?
下一篇:Python是什么?编程语言是什么?编译型语言和解释型语言的区别
回复

使用道具 举报

3138

主题

3万

回帖

9996万

积分

论坛元老

Rank: 8Rank: 8

积分
99968624
发表于 2024-9-29 07:29:21 | 显示全部楼层
真情实感,其含义为认真了、走心了的意思,是如今的饭圈常用语。
回复

使用道具 举报

3070

主题

3万

回帖

9913万

积分

论坛元老

Rank: 8Rank: 8

积分
99138950
发表于 2024-10-9 21:31:37 | 显示全部楼层
百度seo优化论坛 http://www.fok120.com/
回复

使用道具 举报

3070

主题

3万

回帖

9915万

积分

论坛元老

Rank: 8Rank: 8

积分
99158931
发表于 2024-10-15 19:50:50 | 显示全部楼层
交流如星光璀璨,点亮思想夜空。
回复

使用道具 举报

3070

主题

3万

回帖

9913万

积分

论坛元老

Rank: 8Rank: 8

积分
99138950
发表于 2024-10-18 03:38:22 | 显示全部楼层
论坛的成功是建立在我们诚恳、务实、高效、创新和团结合作基础上,我们要把这种精神传递下去。
回复

使用道具 举报

3048

主题

3万

回帖

9910万

积分

论坛元老

Rank: 8Rank: 8

积分
99109040
发表于 2024-10-18 09:33:20 | 显示全部楼层
你的话语真是温暖如春,让我心生感激。
回复

使用道具 举报

3070

主题

3万

回帖

9913万

积分

论坛元老

Rank: 8Rank: 8

积分
99138950
发表于 2024-10-24 10:02:30 | 显示全部楼层
感谢楼主分享,祝愿外链论坛越办越好!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

站点统计|Archiver|手机版|小黑屋|天涯论坛 ( 非经营性网站 )|网站地图

GMT+8, 2024-11-23 11:01 , Processed in 0.110417 second(s), 22 queries .

Powered by Discuz! X3.4

Copyright © 2001-2023, Tencent Cloud.