[00116205]大数据下的云数据保护关键技术的研究与应用

一、项目简介 该项目采用弹性可扩展的多租户技术、磁盘到云（D2C）、磁盘到磁盘到云（D2D2C）、大数据去重、云平台容灾备份等技术,实现了弹性可扩展的多租户备份安全管理、高效的大数据存储、虚拟化数据容灾等功能。降低了企事业单位用户数据存储备份的成本,提高了数据保护安全等级,支持多操作系统（Linux、Windows和中标麒麟等）、多数据库（Oracle、SQLServer、DB2、MySQL、Sybase、Infomix、MongoDB、达梦数据库、人大金仓数据库和神州通用数据库等）、多虚拟化平台（VMware、Hyper-V、XenServer、FusionSphere和HUAWEI CLOUD Stack等）。 二、项目创新性 （1）自适应块大小的重复数据删除：集成定长块重删 、变长块重删和可变的定长分块（也称对齐的变长分块）,根据不同的数据类型,智能的选择不同分块算法,在平衡重删速度的前提下,实现最大化重删率; （2）通过解析开源数据库的数据文件和事务日志文件格式,实现了高效的物理增量备份功能; （3）连续日志备份：通过解析事务日志文件格式,从而实时监控事务日志的变化,将新写入的事务日志数据块连续复制至备份存储中,将RPO降低到秒级,无需任何软硬驱动,提高系统兼容性和稳定性。 三、与国内外技术相比 在备份产品方面,国内外很多企业和单位（比如银行、证券交易所、等等）已经使用传统的数据备份和恢复软件来保护其核心业务数据。这些软件包括EMC的Mozy、HP的Data Protector、Symantec 的Norton Online Backup、eXpresso、微软Skydrive、腾讯网盘、中备华信、爱数AnyVault 远程数据灾备平台等。然而这些软件无法满足大数据备份的海量存储空间和可扩展性等需求。云存储技术是实现海量数据备份的核心技术,下面分析一下国内外关于云存储的研究动态。云存储是在云计算概念上延伸和发展而来的。与云计算类似,它是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过云平台软件集合起来协同工作,共同对外提供数据存储和业务访问功能。云存储概念一经提出,就得到了众多厂商的关注和支持。 Amazon 推出Elastic Compute Cloud（EC2：弹性计算云）云存储产品,为用户提供互联网服务同时提供更强的存储和计算功能。内容分发网络服务提供商CD Networks 和云存储平台服务商Nirvanix发布了一项新的合作,并宣布结成战略伙伴,以提供云存储和内容传送服务集成平台。微软推出了提供网络移动硬盘服务的Windows Live SkyDrive Beta 测试版。近期,EMC 宣布加入道里可信基础架构项目,致力于云计算环境下的信任和可靠度保证的研究,IBM 也将云计算标准作为全球数据备份中心的3 亿美元扩展方案的一部分。 目前国内外在海量数据存储和大数据备份方面的研究还处于初步阶段,当前的备份系统存在资源利用率低、安全性、可扩展性差等方面问题,还需要深入研究。而且数据备份安全不仅仅是技术问题,还是涉及国家信息安全等,因此,为了国家安全信息考虑,必须打断国外IT巨头在该技术领域的垄断,研发我国自主知识产权的数据备份技术与国产数据备份产品。