如题,vps是buyvm的最低配+256的存储块,当我从别人的onedrive下载一部电视剧时,包含几十个直链,通常下载速度远大于上传速度(世纪互联单个文件上传速度限制100Mbs)。于是就出现问题了,vps本地有多少文件,脚本就会生成多少个并行的rclone任务。cpu和内存在相当长的一段时间内都几乎处于满载状态,并行数高于5个大概率会崩溃 所以我想问问大佬们能不能给上传脚本的上传并行数加一个限制 。rclone的–transfers(控制最大同时传输任务数量)貌似没用?改为3之后,cpu和内存依旧几乎占满。。。。。。 |
各路大神的回复:
倚剑听枫: 我上传到sharepoint用的,用rsync?
qianmianyao: 你可以考虑写一个队列脚本,aria2的进入队列池,然后队列池单独维护一个worker操作rclone 超级简单版: aria2 完成时队列脚本生成 1.txt 2.txt …… 队列池 master 监控 1.txt 2.txt …… 发现则启动worker操作rclone,上传完成就删除对应txt
Syc: 我要是会就不来问大家了。。。。。。
damoo: 这个支持上传到世纪互联的sharepoint?
倚剑听枫: 超级简单版: aria2 完成时队列脚本生成 1.txt 2.txt …… 队列池 master 监控 1.txt 2.txt …… 发现则启动worker操作rclone,上传完成就删除对应txt
yanaxiao: 上传脚本和上传到哪无关,只要你能挂载上,它就能上传
Syc: 这个transfer是单次rclone是控制的同时任务数 aria2每完成一个任务就会启动一个rclone 可以考虑上传脚本加个判断现在进程里rclone的个数,大于三个就等待多少秒在检测 或者楼上说的列队
qianmianyao: 没用过,你限制不了上传,你可以限制下载并行啊。
主机参考zhujicankao.com_收集国内外VPS,VPS测评,主机测评,云服务器,虚拟主机,独立服务器,国内外服务器,高性价比建站主机相关优惠信息
详细介绍和测评国外VPS主机,云服务器,国外服务器,国外主机的相关优惠信息,商家背景,网络带宽等等,也是目前国内最好的主机云服务器VPS参考测评资讯优惠信息分享平台
本文由主机参考刊发,转载请注明:便宜国外vps论坛_关于用aria2上传脚本调用rclone并发数的问题 https://zhujicankao.com/44097.html
主机参考仅做资料收集,不对商家任何信息及交易做信用担保,购买前请注意风险,有交易纠纷请自行解决!请查阅:特别声明 |
评论前必须登录!
注册