一种冷热数据分片挖掘存储方法

摘要

本发明公开了一种冷热数据分片挖掘存储方法。本方法为：1）从数据库中获取一组待分离的数据记录，并将其提交给冷热数据分离模块；2）对于每一数据记录，冷热数据分离模块计算单位时间段内该数据记录中每一字段的热度值P，如果该字段的热度值大于该字段对应的热度阈值，则将该字段放入设定的热数据区，否则将该字段放入设定的冷数据区；3）将热数据区和冷数据区的数据提交给数据分片模块，将热数据区和冷数据区的数据分别映射至对应的存储器。本发明将热数据保存在等级最高的存储资源上，以保证最高的性能、可用性和安全性；而对冷数据（不重要的数据）放在代价较小的存储资源上，减轻主存的容量压力，提升系统性能，节省数据存储成本。

主权项

一种冷热数据分片挖掘存储方法，其步骤为：1）从数据库中获取一组待分离的数据记录，并将其提交给冷热数据分离模块；2）对于每一数据记录，冷热数据分离模块计算单位时间段内该数据记录中每一字段的热度值P，如果该字段的热度值大于该字段对应的热度阈值，则将该字段放入设定的热数据区，否则将该字段放入设定的冷数据区；3）将热数据区和冷数据区的数据提交给数据分片模块，数据分片模块将热数据区和冷数据区的数据分别映射至对应的存储器。