大数据传输优化
- 高清视频资源
- 电影、电视剧数字拷贝
- 海量数据库备份文件
- 大型游戏安装包
- 工程制图设计文档
- 海量非结构化数据
文件分片技术
对于大容量的数据,传输完整的文件需要一个相当漫长的过程,而在此过程中,由于网络状态的不稳定,非常容易发生中断和错误,反复重传将大幅降低数据传输效率。为此,Ftrans首先对大容量文件进行分片处理,根据不同的网络环境,用户可以控制数据分片的粒度,以适应各种带宽条件。经过分片处理后的数据片段,在传输过程中将大幅提高成功率,并使得并行传输和P2P对等传输成为可能。
断点续传技术
在大数据传输过程中,随时可能出现异常情况,由于网络故障或者用户主动控制的需要,传输任务可能发生主动或被动的中断。当传输任务重新恢复时,断点续传技术可以保护之前已经传输成功的数据内容,并进行合理的接续,直至将所有数据传输完毕。
并行传输技术
为了应对大数据传输的时间压力,Ftrans在整套数据传输解决方案中广泛使用了并行传输技术,包括多个文件片段的并行传输、不同任务之间的并行传输以及多个节点之间的并行传输等。并行传输可以充分地利用带宽资源,大幅提高数据传输效能,为企业节省网络资源投入和时间人力成本。