发明名称 | ETL模块自动维护方法及系统 | ||
摘要 | 本发明提出了一种ETL模块自动维护方法及系统,通过在数据库内设置两维表,其第一维表用以保存每一ETL模块的运行情况,该运行情况至少需要包括每一出错ETL模块的出错信息及出错时间;其第二维表用以保存能够运行ETL模块所必需的运行数据。申请人定期检测第一维表,找出当前最早出错的ETL模块,并利用第二维表内的运行数据重新运行该ETL模块来完成自动维护ETL模块。本发明能够自动并及时维护ETL模块,不仅节省了人力资源,降低了维护成本,而且也使得技术人员减轻了维护的压力。 | ||
申请公布号 | CN101587477B | 申请公布日期 | 2012.10.31 |
申请号 | CN200810098452.2 | 申请日期 | 2008.05.23 |
申请人 | 阿里巴巴集团控股有限公司 | 发明人 | 林正华 |
分类号 | G06F17/30(2006.01)I | 主分类号 | G06F17/30(2006.01)I |
代理机构 | 上海开祺知识产权代理有限公司 31114 | 代理人 | 费开逵 |
主权项 | 一种ETL模块自动维护方法,其特征在于,包括以下步骤:(1)预先设定将每一ETL模块运行情况保存在第一维表中,所述第一维表用于保存每一ETL模块的运行情况,其至少包括每一出错ETL模块的出错信息和出错时间;(2)每一ETL模块在运行之前,将至少包括模块名、运行参数和用户名的ETL模块运行数据保存在第二维表中,所述第二维表用于保存能够运行ETL模块所必需的运行数据;(3)在预先设定的时间周期内检测所述第一维表,找到当前最早出错的ETL模块;(4)如果该当前最早出错的ETL模块的出错信息属于预先设定的非逻辑错误中的一种错误,则进行步骤(5);(5)在第二维表中找到该当前最早出错的ETL模块对应的运行数据,通过用户名和模块名在数据库层找到预先存储的对应的模块,利用运行参数重新启动该当前最早出错的ETL模块进行运行。 | ||
地址 | 英属开曼群岛大开曼岛资本大厦一座四层847号邮箱 |