基于堆结构的SequenceFile存储优化方法、装置、设备及存储介质(高校公示15天)(不包年费滞纳金)(需要二变)
本发明公开了基于堆结构的SequenceFile存储优化方法、装置、设备及存储介质,其方法包括:基于小文件分配算法将待合并的小文件分配到待合并队列全集中的待合并队列中;创建相应的堆以及堆全集并为每个堆初始化文件列表和索引列表;为每个待合并的小文件创建单个文件索引;将待合并队列中的小文件存储在相应的堆的文件列表中,同时将每个堆中所有小文件的文件索引存放于相应的索引列表中;基于压缩策略将每个堆中的小文件合并为一个SequenceFile文件;创建一个全局索引文件,使用追加写操作将每个堆对应的索引列表中的内容写入全局索引文件;将所有的SequenceFile文件和全局索引文件上传至HDFS完成优化。本发明能够提高了文件存储和访问效率,改进了HDFS对于海量小文件的存取性能。
《基于堆结构的SequenceFile存储优化方法、装置、设备及存储介质(高校公示15天)(不包年费滞纳金)(需要二变)》是一发明专利,专利号为 2021106991347,当前法律状态为已下证,由河海大学提出申请,发明人为武文静;刘惠义,申请日期为2021-06-23,公开(公告)日期为2023-10-27,国际专利分类号(IPC)为 G06F 16/174 (2019.01),高新资质:未报高企。该专利已下发证书,权利稳定,适合直接办理转让过户,是企业申报高企、项目招投标、质押融资的优质标的。赋翼网提供从选品、尽调、合同签订到官方著录项目变更(过户)的一站式专利转让服务,专业顾问全程协助,确保交易合规、安全、高效。专利摘要:本发明公开了基于堆结构的SequenceFile存储优化方法、装置、设备及存储介质,其方法包括:基于小文件分配算法将待合并的小文件分配到待合并队列全集中的待合并队列中;创建相应的堆以及堆全集并为每个堆初始化文件列表和索引列表;为每个待合并的小文件创建单个文件索引;将待合并队列中的小文件存储在相应的堆的文件列表中,同时将每个堆中所有小文件的文件索引存放于相应的索引列表中;基于压缩策略将每个堆中的小文件合并为一个SequenceFile文件;创建一个全局索引文件,使用追加写操作将每个堆对应的索引列表中的内容写入全局索引文件;将所有的SequenceFile文件和全局索引文件上传至HDFS完成优化。本发明能够提高了文件存储和访问效率,改进了HDFS对于海量小文件的存取性能。
海量优质专利即买即用,四大核心优势助您弯道超车:
🏆 拿资质,享红利:高企认定、专精特新必备!轻松获取政府补贴、税收减免,招投标直接加分!
💎 增信誉,融资金:支持实缴注册资金,彰显企业硬实力;支持专利质押贷款,盘活现金流,扩张不缺钱!
🔥 强背书,防抄袭:印上“专利产品”,客户更信赖!构建技术壁垒,把竞争对手挡在门外,稳占市场份额!
🚀 省时间,快变现:告别漫长研发与高风险!优质专利即买即用,让技术立刻变成真金白银的利润!
