大家好,欢迎来到IT知识分享网。
DVC 的基本使用
DVC (Data Version Control) 数据版本管理工具。DVC 类似于常用到的git代码管理工具。但 git 在工程中往往只是针对代码进行管理,换句话说就是对小文件进行管理,而 DVC 则解决了 git 的这个短板,它可以对工程中的大文件,数据进行管理。DVC 与 git 的结合使用,是目前工程中最具效率的搭档组合。DVC 官网
1. DVC 安装
pip install dvc pip install dvc[s3]
2. 基本用法(结合git)
# 再某一空的文件夹下面初始化 git init dvc init # 添加文件或者文件夹到dvc dvc add file # dvc 会自动修改gitignore文件 # 设置远程存储位置 dvc remote add -d myremote s3://dvc dvc remote modify myremote endpointurl http://cepth01 # 设置环境变量 export AWS_ACCESS_KEY_ID="<my-access-key>" export AWS_SECRET_ACCESS_KEY="<my-secret-key>" # 上传 dvc push # 下拉 dvc pull # 更新 dvc update
免责声明:本站所有文章内容,图片,视频等均是来源于用户投稿和互联网及文摘转载整编而成,不代表本站观点,不承担相关法律责任。其著作权各归其原作者或其出版社所有。如发现本站有涉嫌抄袭侵权/违法违规的内容,侵犯到您的权益,请在线联系站长,一经查实,本站将立刻删除。 本文来自网络,若有侵权,请联系删除,如若转载,请注明出处:https://haidsoft.com/147844.html