Facebook开源新NLP框架:简化部署流程,大规模应用也OK
原标题:Facebook开源新NLP框架:简化部署流程,大规模应用也OK
铜灵 编译整理
今天,Facebook开源了一个基于PyTorch的深度学习库PyText,想容易地构建和部署NLP系统。
Facebook在博客中介绍说,新框架具有多个特性,不仅能简化流程更快部署,还能调取众多预构建模型和程序方便大规模部署。
PyText开源的消息经Yann LeCun转推后,短时间引发了高额的点赞转发,一些网友称这是个“鹅妹子嘤”的项目。在Github今日热榜上,PyText排名第四。
核心功能
构建PyText的初衷,是想解决当前NLP任务中时间紧且需要大规模部署之间的矛盾。研究人员的大致思路分两步。
一是通过为模型组件提供简单可扩展的接口,二是导出模型用于推理。目前,PyText的核心功能有以下几点:
- 内含各种为NLP/NLU任务准备的模型
(如文本分类、序列标注、连接意图-槽位模型和上下文意图-槽位模型等。)
- 支持基于PyTorch 1.0中新的C10d后端构建的分布式训练
- 可以轻松创建新模型和任务的可扩展组件
- 支持整体训练
为了适应研究和生产的需要,Facebook还强调了框架的稳健性和低延迟性,目前,PyText已经应用于Facebook网站上,你和朋友视频/音频中的字幕生成功能就是它的功劳。每天可执行超过10亿次预测。
可以看出,模块化也是PyText的一大亮点,不仅支持从头创建新的pipeline,还可以修改现有的工作流程。除了分布式训练外,还支持一次训练多个模型。
传送门
官方博客地址:
https://code.fb.com/ai-research/pytext-open-source-nlp-framework/
GitHub代码:
https://github.com/facebookresearch/pytext
在论文PyText: A seamless path from NLP research to production中,研究人员详细介绍了PyText的原理:
https://research.fb.com/wp-content/uploads/2018/12/PyText-A-seamless-path-from-NLP-research-to-production-using-PyTorch3.pdf?
不花一分钱,你也能拥有Facebook同款框架了~
— 完—
相关文章
-
网易云音乐“造村”,社区正重塑音乐市场
-
36氪独家|瞄准8亿人口的基层医疗市场,「云呼科技」获得2.2亿元Pre-B轮融资
-
支付宝15亿红包正式开奖,网友:分了30块!你呢?
-
高通在ITC告苹果6个专利侵权大多已经不再有效
-
为对标支付宝?微信又添一项新功能,网友表示支付宝对不起再见
-
我的智能手表怎么充不进去电了
-
大陆ASA广告一周实战分析!你想知道的都在这儿了!
-
反复调整,苹果的价格策略还奏效吗?
-
富士康取消原定2月10日复工计划
-
从优青到杰青:优秀青年科技人才成长典型特征
-
西班牙对外银行与保时捷公司利用区块链技术完成一笔定向贷款
-
36氪首发|定位数据中台服务商,「袋鼠云」获数亿元B轮融资,国投创业领投
-
雷军卖力摇旗呐喊黑鲨2当得起这份沉甸甸的爱吗?
-
2019“马云乡村人才计划”20日起接受申报三项目均有变化
-
[金桔兔]抖音转让账号被封
-
好食期雷勇:从小程序获得流量用价值获得用户
-
中国第一、全球前四,李彦宏要靠人工智能,“再造”百度?
-
为何智能计算业务要战略升级? 华为中国区总裁鲁勇谈两大目的和变化
-
手机掉水里放大米里要多久
-
不疯狂的外星人,已疯狂的资本
-
【产业互联网周报】阿里宣布新一轮组织升级,程立担任阿里巴巴集团CTO;腾讯云2019年营收破100亿;柳传志正式卸任联想控股
-
win10刻录光盘格式化失败
-
连获15轮融资,“网约车第一股”要来了
-
产品观察丨为让“土豪”花更多,拼多多做了个福利小程序
-
融资中bp的意思是什么
-
消费互联网裁员潮还在继续,失业的程序员不妨看看工业互联网
-
苹果重新生产iPhone X,宜家裁员涉及中国区 | 天下网事 11.2
-
刘强东卸任京东法定代表人官方称:这是很正常的管理动作
-
股票解除质押的意思是什么