在数据格式上,传统的记录型数据仍然是主要的信息数据组织格式,如关系 型数据库数据,半结构化的 JSON 数据格式和 XML 格式。但大数据背景下,这 些传统格式在数据存储时,存在着存储开销大的问题。这对这一问题,提出了一 种记录型数据去重、压缩和恢复系统。通过归并与哈希的方法,实现记录数据的 去重与字典压缩,通过优化的无符号整数编码方法来提高无符号整数序列的存储 效率。