基于文件访问频次的混合云存储方法

摘要

本发明实施例公开了一种基于文件访问频次的混合云存储方法，包括以下步骤：新文件上传文件系统时，对文件采用多副本方式存储策略；文件上传文件系统完毕后，对文件采用纠删码编码方式存储策略；周期性统计文件系统中每个文件访问频次，将文件划分为三类，分别为高频文件、中频文件、低频文件；系统对不同类型的数据不同类型的文件采用不同的存储策略；系统根据文件访问频次的变化动态调整文件的存储策略。本发明通过周期性统计文件系统中每个文件访问频次将文件分类，对不同类型的文件采用不同的存储策略，而且根据文件访问频次的变化动态调整文件的存储策略，使整个文件系统整体上在保证数据可靠性和访问速度的前提下提高了系统存储资源利用率。

主权项

基于文件访问频次的混合云存储方法，其特征在于，包括以下步骤， 1) 新文件上传文件系统时，对文件采用多副本方式存储策略，在文件上传时把文件划分为若干数据块，为每个数据块根据系统配置产生N个副本，将所述N个副本存储在不同的存储节点上；2) 文件上传文件系统完毕后，对文件采用纠删码编码方式存储策略，将文件的所有数据块加入一个转换队列，系统对转换队列中的所有数据块进行纠删编码产生校验块，然后将文件的所有数据块和校验块分布存储在不同的存储节点上并删除多余的副本；3) 周期性统计文件系统中每个文件每小时内访问频次，将所有文件按照1:2:7的访问频次比例划分为三类，分别为高频文件、中频文件和低频文件；4) 系统对不同类型的文件采用不同的存储策略进行存储，对高频文件使用多副本方式存储策略，对中频文件使用纠删码编码和多副本混合方式存储策略，对低频文件使用纠删码编码方式存储策略；5) 系统周期性统计文件的最近访问频率并进行分类，如果每个文件的读取频次发生变化，系统根据文件访问频次的变化动态调整文件的存储策略，根据现在的读取频次将文件采用对应的存储策略。