Ray:Environment Dependencies Remote URIs

runtime_env

Ray在提交job时,可以配置runtime_env。

runtime_env中包括一个配置项working_dir。

working_dir

woring_dir: local directory

可以指定为本地文件目录,Ray提交job时会自动把本地目录下的文件推送到Ray Cluster,然后在Ray worker里就可以直接用了

woring_dir: remote uri

也可以指定一个远程的uri,这个uri是一个zip压缩文件的地址。

提交作业后,Ray会自动从该地址下载zip文件,并解压,然后在解压后的目录内执行task。

remote uri的三种形式

  1. HTTPS:不能是http
    1. 示例:https://github.com/example_username/example_respository/archive/HEAD.zip
  2. S3:适用于AWS S3(并不兼容其他的s3存储,例如MinIO
    1. 示例:s3://example_bucket/example_file.zip
  3. GS:适用于Google Cloud Storage
    1. 示例:gs://example_bucket/example_file.zip
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Hugo Lei

赏你了,我的一点心意

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值