发明名称 ETL模块自动维护方法及系统
摘要 本发明提出了一种ETL模块自动维护方法及系统,通过在数据库内设置两维表,其第一维表用以保存每一ETL模块的运行情况,该运行情况至少需要包括每一出错ETL模块的出错信息及出错时间;其第二维表用以保存能够运行ETL模块所必需的运行数据。申请人定期检测第一维表,找出当前最早出错的ETL模块,并利用第二维表内的运行数据重新运行该ETL模块来完成自动维护ETL模块。本发明能够自动并及时维护ETL模块,不仅节省了人力资源,降低了维护成本,而且也使得技术人员减轻了维护的压力。
申请公布号 CN101587477B 申请公布日期 2012.10.31
申请号 CN200810098452.2 申请日期 2008.05.23
申请人 阿里巴巴集团控股有限公司 发明人 林正华
分类号 G06F17/30(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 上海开祺知识产权代理有限公司 31114 代理人 费开逵
主权项 一种ETL模块自动维护方法,其特征在于,包括以下步骤:(1)预先设定将每一ETL模块运行情况保存在第一维表中,所述第一维表用于保存每一ETL模块的运行情况,其至少包括每一出错ETL模块的出错信息和出错时间;(2)每一ETL模块在运行之前,将至少包括模块名、运行参数和用户名的ETL模块运行数据保存在第二维表中,所述第二维表用于保存能够运行ETL模块所必需的运行数据;(3)在预先设定的时间周期内检测所述第一维表,找到当前最早出错的ETL模块;(4)如果该当前最早出错的ETL模块的出错信息属于预先设定的非逻辑错误中的一种错误,则进行步骤(5);(5)在第二维表中找到该当前最早出错的ETL模块对应的运行数据,通过用户名和模块名在数据库层找到预先存储的对应的模块,利用运行参数重新启动该当前最早出错的ETL模块进行运行。
地址 英属开曼群岛大开曼岛资本大厦一座四层847号邮箱