顶点ETL系统
北京顶点时代软件技术有限公司 顶点ETL系统是由顶点自主研发的一整套数据处理工具,其中包括数据集成方案编辑工具(ETLEditor)、集成方案执行器(ETLDispatcher)、数据处理作业执行器等。 ETL三个字母分别代表Extract、Transform、Load,即抽取、转换、加载。 1.数据抽取:从源数据源系统抽取目的数据源系统需要的数据; 2.数据转换:将从源数据源获取的数据按照业务需求,转换成目的数据源要求的形式,并对错误、不一致的数据进行清洗和加工。 3.数据加载:将转换后的数据装载到目的数据源。 1.2 介绍 ETL工具实质上仍为一类数据转换器,提供一种从源到目标系统转换数据的方法。即从操作型系统提取、清洗并转换数据,然后将数据载入决策支持系统的操作型 数据存储、数据仓库或数据集市中。具体功能针对不同的数据源编写不同的数据抽取、转换和加载程序处理,这完成了数据集成的大部分工作。总的来说,ETL工具提供了一种数据处理的通用解决方案。 对经过需求分析而设计的完整数据库中的数据进行相应的ETL操作,接下来进行数据挖掘或者知识发现的 数据管理处理,由此得到对数据集成了的数据仓库。同时,接收新的数据再进行相应的处理。