国家科技成果网
热门搜索:  激光   高分子   石油   并网   纳米   太阳能光伏
扫描二维码关注国科网

国家科技成果网 首页 成果 查看内容

云存储下海量数据的生命周期管理

2016年 应用技术  初期阶段
  • 成果简介
  1)基于MD5的重复数据删除。上传文件时,客户端计算其MD5值。然后遍历数据库中的文档记录,检查记录中存储文件的MD5值是否和要上传文件的MD5值相同。如果不同,上传该文件,并计数为1。如果相同,则为设置文件关联,为重复文件的计数增加1,取消文件上传。
  2)基于二维装箱的HDFS小文件存储。针对基于HDFS的云存储系统中小文件存储效率不高的问题,提出基于二维装箱的算法。该算法管...
相关成果

标签云

相关机构

Copyright 2001-2020 All Rights Reserved© 国科网 版权所有
国家科技成果信息服务平台 主管单位:科学技术部火炬高技术产业开发中心
京ICP备09035943号-33 京公网安备110401400097
在线客服系统