一款轻量级的自然语言处理(NLP)工具包

一款轻量级的自然语言处理(NLP)工具包

2022-09-02 0 441
资源编号 37496 最近更新 2022-09-02
¥ 0人民币 升级VIP
立即下载 注意事项
下载不了?请联系网站客服提交链接错误!
增值服务: 安装指导 环境配置 二次开发 模板修改 源码安装

本期推荐的是一款轻量级的自然语言处理(NLP)工具包——fastNLP。

一款轻量级的自然语言处理(NLP)工具包

fastNLP是一款由复旦大学自然语言处理团队发起的国产自然语言处理开源项目,面向自然语言处理(NLP)的轻量级框架,目标是快速实现NLP任务以及构建复杂模型。

fastNLP具有如下的特性:

  • 统一的Tabular式数据容器,简化数据预处理过程;
  • 内置多种数据集的Loader和Pipe,省去预处理代码;
  • 各种方便的NLP工具,例如Embedding加载(包括ELMo和BERT)、中间数据cache等;
  • 部分数据集与预训练模型的自动下载;
  • 提供多种神经网络组件以及复现模型(涵盖中文分词、命名实体识别、句法分析、文本分类、文本匹配、指代消解、摘要等任务);
  • Trainer提供多种内置Callback函数,方便实验记录、异常捕获等。

安装:

fastNLP 依赖如下包:

numpy>=1.14.2torch>=1.0.0tqdm>=4.28.1nltk>=3.4.1requestsspacyprettytable>=0.7.2

其中torch的安装可能与操作系统及 CUDA 的版本相关,请参见 PyTorch 官网 。 在依赖包安装完成的情况,您可以在命令行执行如下指令完成安装

>>> pip install fastNLP>>> python -m spacy download en

详细教程:

  • 使用DataSet预处理文本

fastNLP中的DataSet — fastNLP 0.6.0 文档

  • 使用Vocabulary转换文本与index

fastNLP中的Vocabulary — fastNLP 0.6.0 文档

  • 使用Embedding模块将文本转成向量

使用Embedding模块将文本转成向量 — fastNLP 0.6.0 文档

  • 使用Loader和Pipe加载并处理数据集

使用Loader和Pipe加载并处理数据集 — fastNLP 0.6.0 文档

  • 使用Trainer和Tester快速训练和测试

使用Loader和Pipe加载并处理数据集 — fastNLP 0.6.0 文档

  • 使用DataSetIter实现自定义训练过程

使用DataSetIter实现自定义训练过程 — fastNLP 0.6.0 文档

  • 使用Metric快速评测你的模型

使用Metric快速评测你的模型 — fastNLP 0.6.0 文档

  • 使用Modules和Models快速搭建自定义模型

使用Modules和Models快速搭建自定义模型 — fastNLP 0.6.0 文档

  • 使用Callback自定义你的训练过程

使用 Callback 自定义你的训练过程 — fastNLP 0.6.0 文档

  • 拓展阅读1:BertEmbedding的各种用法

BertEmbedding的各种用法 — fastNLP 0.6.0 文档

  • 拓展阅读2:分布式训练简介

Distributed Parallel Training — fastNLP 0.6.0 文档

  • 拓展阅读3:使用fitlog 辅助 fastNLP 进行科研

使用fitlog 辅助 fastNLP 进行科研 — fastNLP 0.6.0 文档

更多内容大家可自行前往阅读。

开源地址:点击下载

资源下载此资源为免费资源立即下载

申明:本文由第三方发布,内容仅代表作者观点,与本网站无关。对本文以及其中全部或者部分内容的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。本网发布或转载文章出于传递更多信息之目的,并不意味着赞同其观点或证实其描述,也不代表本网对其真实性负责。

七爪网 免费源码 一款轻量级的自然语言处理(NLP)工具包 https://www.7claw.com/37496.html

分享免费的开源源码

常见问题
  • 1、自动:拍下后,点击(下载)链接即可下载;2、手动:拍下后,联系卖家发放即可或者联系官方找开发者发货。
查看详情
  • 1、源码默认交易周期:手动发货商品为1-3天,并且用户付款金额将会进入平台担保直到交易完成或者3-7天即可发放,如遇纠纷无限期延长收款金额直至纠纷解决或者退款!;
查看详情
  • 1、七爪会对双方交易的过程及交易商品的快照进行永久存档,以确保交易的真实、有效、安全! 2、七爪无法对如“永久包更新”、“永久技术支持”等类似交易之后的商家承诺做担保,请买家自行鉴别; 3、在源码同时有网站演示与图片演示,且站演与图演不一致时,默认按图演作为纠纷评判依据(特别声明或有商定除外); 4、在没有”无任何正当退款依据”的前提下,商品写有”一旦售出,概不支持退款”等类似的声明,视为无效声明; 5、在未拍下前,双方在QQ上所商定的交易内容,亦可成为纠纷评判依据(商定与描述冲突时,商定为准); 6、因聊天记录可作为纠纷评判依据,故双方联系时,只与对方在七爪上所留的QQ、手机号沟通,以防对方不承认自我承诺。 7、虽然交易产生纠纷的几率很小,但一定要保留如聊天记录、手机短信等这样的重要信息,以防产生纠纷时便于七爪介入快速处理。
查看详情
  • 1、七爪作为第三方中介平台,依据交易合同(商品描述、交易前商定的内容)来保障交易的安全及买卖双方的权益; 2、非平台线上交易的项目,出现任何后果均与互站无关;无论卖家以何理由要求线下交易的,请联系管理举报。
查看详情

相关文章

发表评论
暂无评论
官方客服团队

为您解决烦忧 - 24小时在线 专业服务