开发者社区> 问答> 正文

传比较大的数据量到oss

如果数据量比较大,比如有几十个g,如果要传到oss要很久啊,大佬们怎么解决这个问题. 还有有没有办法直接在oss里面解压数据? 是否能将网上的数据(如ftp上的)直接传到oss中,而不先下载,然后再上传?

展开
收起
hkhuihui 2017-11-02 19:52:59 2571 0
4 条回答
写回答
取消 提交回答
  • 几十个g的一个大文件还是多个文件?多文件的话分批次并发上传,大文件的话手动切片并发上传,核心都是提高并发性

    2019-07-17 21:42:10
    赞同 展开评论 打赏
  • 可以利用集群分片上传,再用oss的分片合并功能

    2019-07-17 21:42:09
    赞同 展开评论 打赏
  • 大文件上传建议使用分片方式,可以使用ossutil等工具,一般工具都会将大文件自动切分,然后将分片并发上传,只要客户端的网络不是瓶颈,上传不会要太长时间

    2019-07-17 21:42:09
    赞同 展开评论 打赏
  • 旺旺:nectar2。

    题主您好,

    如果您能直接访问ftp里的数据,如可以通过远程桌面连接,

    或许可以在FTP服务器的系统上运行如OSS客户端的软件,直接将文件上传到OSS桶中。

    2019-07-17 21:42:09
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
阿里云 JindoFS+OSS 数据上云实战 立即下载
百问百答-OSS (下) 立即下载
百问百答-OSS (上) 立即下载