基于时间序列的流式数据分布式元数据管理方法

摘要

本发明公开了基于时间序列的流式数据分布式元数据管理方法。包括以下步骤：A、元数据服务器基于对象维度和时间维度，记录和管理元数据；B、元数据服务器记录和管理视频流的元数据，包括每个视频流的摄像头位置信息、当前副本定位信息、基于时间序列记录的视频流历史数据的存储位置；同时，元数据服务器基于对象维度，记录所有数据存储节点的元数据；C、数据存储节点基于对象维度记录视频流数据在磁盘具体位置的元数据信息；同时记录该数据存储节点上所有磁盘的元数据信息；D、数据存储节点中的所有元数据持久化并集中存储在某块磁盘的固定位置。本发明保证了视频回放请求能够快速定位到所需读取的数据和故障后的高效正确恢复。

主权项

基于时间序列的流式数据分布式元数据管理方法，其特征在于，包括如下步骤：A、元数据服务器基于对象维度和时间维度，记录和管理元数据；B、元数据服务器记录和管理视频流的元数据，包括每个视频流的摄像头位置信息、当前副本定位信息、基于时间序列记录的视频流历史数据的存储位置；同时，元数据服务器基于对象维度，记录所有数据存储节点的元数据，包括每台数据存储节点的位置信息、负载情况；C、数据存储节点基于对象维度，记录视频流数据在磁盘具体位置的元数据信息；同时记录该数据存储节点上所有磁盘的元数据信息，包括每块磁盘所存储数据的过期时间和每块磁盘正在写的具体位置信息；D、数据存储节点中的所有元数据持久化并集中存储在某块磁盘的固定位置。