Transformers 模型上传和共享 | 五

栏目: IT技术 · 发布时间: 5年前

内容简介:作者|huggingface编译|VK来源|Github

作者|huggingface

编译|VK

来源|Github

v2.2.2 开始,你可以使用库中内置的CLI上传与社区共享你的微调模型。

首先,在以下网址上创建一个帐户。

https://huggingface.co/join

然后:

transformers-cli login
# 使用与huggingface.co上相同的凭据登录

上传你的模型:

transformers-cli upload ./path/to/pretrained_model/

# 上传一个文件夹包含weights/tokenizer/config
# 通过`.save_pretrained()`保存

transformers-cli upload ./config.json [--filename folder/foobar.json]

# 上传单个文件
# (你可以选择覆盖其文件名,该文件名可以嵌套在文件夹中)

然后,可以通过其标识符,用户名和上面的文件夹名称的组合来访问模型:

"username/pretrained_model"

请在 model_cards/ 文件夹下添加README.md到仓库中,其中 model_cards/ 包括:模型描述,训练参数(数据集,预处理,超参数),评估结果,预期用途和限制等。

现在你的模型现在在havingface.co/models上有一个页面:fire:

任何人都可以从代码中加载它:

tokenizer = AutoTokenizer.from_pretrained("username/pretrained_model")
model = AutoModel.from_pretrained("username/pretrained_model")

列出你在S3上的所有文件:

transformers-cli s3 ls

你还可以删除不需要的文件:

transformers-cli s3 rm …

原文链接: https://huggingface.co/transf...

欢迎关注磐创AI博客站:

http://panchuang.net/

OpenCV中文官方文档:

http://woshicver.com/

欢迎关注磐创博客资源汇总站:

http://docs.panchuang.net/

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

掘金大数据

掘金大数据

程新洲、朱常波、晁昆 / 机械工业出版社 / 2019-1 / 59.00元

在数据横向融合的时代,充分挖掘数据金矿及盘活数据资产,是企业发展和转型的关键所在。电信运营商以其数据特殊性,必将成为大数据领域的领航者、生力军。各行业的大数据从业者要如何从电信业的大数据中挖掘价值呢? 本书彻底揭开电信运营商数据的神秘面纱,系统介绍了大数据的发展历程,主要的数据挖掘方法,电信运营商在网络运行及业务运营方面的数据资源特征,基于用户、业务、网络、终端及内在联系的电信运营商大数据分......一起来看看 《掘金大数据》 这本书的介绍吧!

URL 编码/解码
URL 编码/解码

URL 编码/解码

html转js在线工具
html转js在线工具

html转js在线工具

UNIX 时间戳转换
UNIX 时间戳转换

UNIX 时间戳转换