杭州玳数科技有限公司 访客留言 申请认证

信用网址: 54478388.11315.com   

有限责任公司(港澳台投资、非独资) 成立历史第10 

一种分布式小文件的治理方法、装置、设备及存储介质【异议或纠错】

档案编号: CQ-234-6079-2989
档案文号:
专利权人: 申请人 
发布时间: 发布时间 
档案分类: 专利权 
分 类 号: 第G06F16/13;G06F16/14;G06F16/182类
授权状态: 已授权
档案内容: 本申请公开了一种分布式小文件的治理方法、装置、设备及存储介质,涉及大数据技术领域,包括:将各个分区中的全部待治理小文件分组得到N个文件组;基于各个分区的目录路径和文件组构建哈希表;将每个分区对应的所有文件组分别读到内存中得到若干原始数据集,并在每个原始数据集中新增字段名为组号的列;合并同一分区对应的所有原始数据集得到合并数据集,并将每个合并数据集中具有同一组号的数据写到同一文件中得到合并文件;用合并文件替换对应分区中的全部待治理小文件,并根据替换结果确定是否进行数据回滚。本申请针对小文件治理失败的情况,提供了备份和回滚机制,保证即使治理失败,也可以恢复数据,不会影响原有的数据文件。
附件下载:  (原始资料备查)

相关专利信息信息

评论

您需要登录后才可以发表评论,请 登录注册

打分

说明:
一、所有信息力求客观、真实:以上信息由全国各级政府职能部门、各行业协会(社团组织)、金融机构、主流媒体、信息主体或实名制下的广大消费者(包括交易对方、员工等)客观提供,不含有本征信平台的任何主观评价;
二、信息异议机制:欢迎大家对有异议的信息及时提出,我们将按照《绿盾全国企业征信管理办法》规定对异议进行核实、修正,确保客观、公平;
三、尊重发布者权益,永不"删贴":对于符合国家法律、法规和本征信平台规定的每一条信息,都将客观记录于企业信用档案,参与信用分值计算,并长期保存。

分享到:
绿盾在线
×
=合作留言=
绿盾业务合作
×
  • 马先生
    15652211315
  • 黄先生
    15652011315