科创中国

电子信息技术

本发明公开的企业云存储分块对象重复数据删除方法，将文件输入到分块对象重复数据删除模块；确定用户上传文件的类型；在文件类型表里查找当前文件类型的最优分块大小；若文件的大小小于确定的分块大小，则不进行分块而对文件计算指纹并标记该文件不可再分块后进入查询指纹步骤；若文件能分块则进入下一步骤；对文件的分块和重复数据删除。本发明还公开了企业云存储分块对象重组版本控制方法，用户使用云存储平台时由对象重组文件版本控制模块确定用户请求，根据用户的请求执行重组文件版本。本发明的对象重复数据删除及重组版本控制方法创建文件的对象重组版本索引，解决企业云存储平台中大量用户对同一文档操作导致的文档版本问题。

随着信息技术的不断发展，使得产生数据的方式也不断变化，需要存储的数据量也不断地增加。不断积累的大数据带来了新的机遇，大数据中包含了许多传统数据无法体现的深层次的价值，对大数据进行分析和挖掘将带来巨大的商业价值。与此同时，大数据也带来了巨大的挑战，大数据的量远远超过传统的计算技术的处理能力。 与此同时，海量数据催生了一种具有安全性高、收费廉价、处理速度快等优势的存储方式————云存储。研究发现，无论是云存储系统，还是传统的数据存储系统，都存在有这大量的冗余数据，有的系统中数据重复率高达70%~90%，因此对存储系统进行重复数据删除是非常迫切的也是非常必要的。去重技术可以对存储系统中冗余数据进行删除，节省存储空间的使用量，节约网络带宽，同时减少数据中心的存储花费和日常能耗。但是传统的重复数据删除技术在云储存系统进行大数据重复数据删除时面临着巨大的挑战，一是云存储中存储的数据结构更为复杂，体量更大，数据类型更加多样，二是需要合理权衡重复数据删除吞吐量和重复消除率这两个冲突目标。

刘军，男，1975年9月出生，讲师，中山大学通信与信息系统博士，温州大学物理与电子信息工程学院专任教师。 担任“计算机网络”、“路由与交换”、IP统一通信技术”以及“物联网技术导论”等本科课程和“高级计算机网络”等研究生课程的教学，指导本科生专业实习、毕业设计多人次。 近三年讲授本课程情况 1. 《计算机网络（基础）》，专业选修课，16周，每周3学时。1届，学生共计45人次。

点击查看