单模型可完成6项NLP任务,哈工大SCIR LTP再度升级,4.0版本面世
机器之心编辑部
迄今为止,这一 NLP 开源基础技术平台在 GitHub 上共获得了 2.5k 的 Star 量,760 多个 Fork 数量,被包括清华大学、北京大学、CMU 等国内外众多大学及科研机构在内的 600 余家研究单位签署协议使用。
基于多任务学习框架进行统一学习,使得全部六项任务可以共享语义信息,达到了知识迁移的效果。既有效提升了系统的运行效率,又极大缩小了模型的占用空间
基于预训练模型进行统一的表示 ,有效提升了各项任务的准确率
基于教师退火模型蒸馏出单一的多任务模型,进一步提高了系统的准确率
基于 PyTorch 框架开发,提供了原生的 Python 调用接口,通过 pip 包管理系统一键安装,极大提高了系统的易用性。
Python 3.7
LTP 4.0 Batch Size = 1
CentOS 3.10.0-1062.9.1.el7.x86_64
Intel(R) Xeon(R) CPU E5-2640 v4 @ 2.40GHz
from ltp import LTP
ltp = LTP() # 默认自动下载并加载 Small 模型
segment, hidden = ltp.seg(["他叫汤姆去拿外衣。"])
pos = ltp.pos(hidden)
ner = ltp.ner(hidden)
srl = ltp.srl(hidden)
dep = ltp.dep(hidden)
sdp = ltp.sdp(hidden)
关注公众号:拾黑(shiheibook)了解更多
[广告]赞助链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
让资讯触达的更精准有趣:https://www.0xu.cn/
关注网络尖刀微信公众号
随时掌握互联网精彩
随时掌握互联网精彩
赞助链接
排名
热点
搜索指数
- 1 奋力谱写西部大开发新篇章 4952921
- 2 贪官靳东受贿100万现金藏床底 4914933
- 3 女子体验荷兰200元一晚的民宿 4807157
- 4 星火成炬|宇宙级别的浪漫 4746497
- 5 国企干部沉迷当“榜一大哥” 4677458
- 6 唐家三少宣布停更 4553442
- 7 人参泡酒15年后竟“复活” 4493536
- 8 00后女孩当穿版模特:几秒换一套 4393845
- 9 学生跳楼并给教师留信?谣言 4239745
- 10 未成年被妈妈前男友性侵案宣判 4132906