某知名银行系基金公司:实现多台服务器之间 数据高可靠、自动化传输调度
建设背景与需求
随着该公司业务不断扩大发展,数据传输和汇集已成为其业务链中的一个重要环节。在公司内部,存在多台文件存储服务器,服务器上的文件均以日期命名,而基于业务开展需要,需将不同服务器上的不同数据文件同步到同一台文件存储服务器上。
公司拟在内部建立一套数据自动化同步系统,通过安全策略部署后实现多台服务器对一台服务器的数据汇总传输,用户可将同步过来的数据进行下载二次加工处理,但原同步过来的文件依然留存于服务器上,用户无法进行删除、修改。
建设方案
该公司需求涉及到数据中心内部多台服务器之间业务数据的同步调度,建设应用Ftrans Console文件传输调度管控平台满足该公司的数据传输及业务管理需求。
在中心节点服务器上部署一套文件大数据传输管控系统Ftrans Web.Console进行统一的调度管理。
在需要进行数据同步的业务服务器上部署传输引擎Ftrans Engine,形成传输节点。
管理员登录Ftrans Web.Console,通过管理策略配置实现一对一、一对多、多对一等多种业务服务器之间的数据同步调度应用。
网络意外中断后,Ftrans系统自动执行传输任务恢复操作指令,内置的断点续传技术可以保护之前已经传输成功的数据内容并进行合理的接续,直至将所有数据传输完毕,有效保障了数据传输的可靠性。
管理员在中心建立自动化传输任务,可按照业务的应用定制不同的传输任务项。系统可自动执行该传输任务,全过程均有详细的日志记录,管理员可通过登录后端控制平台进行全局的数据同步传输调度监控。
建设亮点
内部数据传输,灵活调度管理
在对内部数据传输就行调度管理时,可以选择手动任务、周期任务、实时任务等不同模式的传输触发机制,灵活配置源节点与目标节点之间的单向和双向的传输任务。对于某节点的传输任务,可以查看进度和状态,动态控制任务的启动、停止。管理员可根据业务上的需要对不同的传输任务进行优先级的配置,也可以通过策略配置同时启动多个传输任务。
安全加密传输和存储
系统提供数据传输加密配置,管理员可进行策略的配置和修订,不同传输任务可配置不同的安全策略。此外,系统提供数据落盘存储加密安全策略,加密密钥支持定期更新,区域内部的数据一旦离开系统后无法被外部非授权用户有效识别。
高性能数据传输,更高效稳定
平台使用私有的CUTP文件传输协议,带宽的有效使用效率可以稳定达到有效物理带宽的85%以上,大幅提升传输效率。对大文件使用文件智能分段技术、海量小文件采用虚拟拼接技术,保障稳定的综合传输性能。此外,平台的智能文件内容识别机制,可以自动识别相同文件,实现文件秒传和增量内容传输。
详细日志记录,满足审计需求
系统对所有传输任务整个生命周期中所发生的关键事件都进行记录,形成完整的数据传输日志,公司管理员可以便捷地进行查询和审计。传输日志类型包括任务创建、传输中、停止传输、传输错误、传输完成等全流程记录;管理员通过登录管理平台对传输任务进行状态查询即可实现对全局传输的掌握。
建设价值
Ftrans Console文件传输调度管控平台的应用,解决了该公司内部数据自动同步的需求,自有的高性能传输协议和全面的传输日志记录,保证了传输效果和审计基础,为公司日常业务的开展和管理提供了保障。作为基金管理公司,数据的重要性不言而喻,数据自动化同步系统建设后,该基金公司的运营效率得到提升,为该公司实现更卓越的业绩和社会影响打下了坚实的基础。