发明名称 大数据处理中的数据优化方法和装置
摘要 本发明公开了一种大数据处理中的数据优化方法和装置,包括:分析多个任务的数据处理逻辑;根据所述多个任务的数据处理逻辑确定多个任务之间产生的中间数据;分析所述中间数据的使用状态以确定所述中间数据是否需要继续被保存;当所述中间数据不需要被保存时,删除所述中间数据。清除了不必要的中间数据,从而节省了数据仓库的存储空间。
申请公布号 CN105975577A 申请公布日期 2016.09.28
申请号 CN201610290381.0 申请日期 2016.05.04
申请人 乐视控股(北京)有限公司;乐视网信息技术(北京)股份有限公司 发明人 刘宏斌;国铁龙;杨海乐
分类号 G06F17/30(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 北京国昊天诚知识产权代理有限公司 11315 代理人 刘戈
主权项 一种大数据处理中的数据优化方法,其特征在于,包括:分析多个任务的数据处理逻辑;根据所述多个任务的数据处理逻辑确定多个任务之间产生的中间数据;分析所述中间数据的使用状态以确定所述中间数据是否需要继续被保存;当所述中间数据不需要被保存时,删除所述中间数据。
地址 100025 北京市朝阳区姚家园105号3号楼10层1102