分片上传

上传失败率高,往往不是网络的问题,而是失败粒度的问题:一次失败意味着整个文件重来,成本太高。分片上传把大文件拆成多个可重试的小任务,让失败成本从「整个文件」降到「一个分片」。

本章会建立任务模型——上传任务和分片两张表,加上任务初始化、分片传输、合并、完成的四步流程。合并不是简单拼接:合并前必须证明所有分片都在、都对,合并本身常常需要异步化,临时分片的清理也要一并处理。

并发分片时容易走过头。并发数不是越大越好,过大会带来三个代价;动态并发控制和服务端限流是配套手段,而失败重试的策略决定弱网下的真实成功率。读完本章,你应能设计出一套可用的分片上传协议。

章节

发现内容有问题?

告诉我们哪里需要改进。