01
产品概述

数据治理组件实现将业务系统的数据经过抽取、清洗转换之后加载到指定目标数据源的过程,目的是将企事业单位中的分散、零乱、标准不统一的数据整合到一起,为企事业单位的决策提供分析依据。

数据治理组件包括数据转换设计器(Transformation Designer)和数据转换调度器(Job Designer)。数据转换设计器用于对各种数据源(oracle、sql server、mysql、txt、excel、xml等)的数据进行过滤、抽取、转换,并转换到目标数据源。

02
产品特点
适应性
适应各种数据源,可抽取各种类型的数据源数据,并且转换到各种不同的目标数据源。
封装性
封装了各种常见的过滤、抽取、转换方式(如:过滤、行转列、列转行、字段拆分等)。方便数据转换的定制,提高工作效率。
可视化
可视化图形配置界面,可清楚地掌握转换过程,提高定制效率,便于维护。
可调度性
定制数据转换的时间和频率,自动循环调度,减少人工干预,提高工作效率。
技术参数
Wit Compass ETL
基本功能
OS平台(WINDOWS/LINUX /HP-UX/SOLARIS/AIX)
支持
数据源,常见数据源:oracle/sqlserver/mysql/ODBC/txt/xls/xml
支持
数据目标(同上)
支持
多数据源抽取
支持
外部调用(shell、bat、exe)
支持,并具备二次开发
支持SQL执行
支持
支持存储过程
支持
支持循环执行
支持
全局变量/局部变量的参数
支持
数据转换功能
字段映射
支持
字段、记录拆分/合并
支持
行列转换
支持
多字段的混合运算
支持
UNION
支持
JOIN
支持
调试功能
任务调度计划
支持
基于时间/事件的调度
支持
并发任务调度
支持
调度任务的监控
通过日志查看方式支持
日志功能
支持
调试功能
通过单步运行方式支持
其他
产品软件技术架构
J2EE
集中的管理控制台
支持
产品易用性
易用
可管理性
易管理
实施的效率
较高
多用户的ETL开发环境
支持
版本升级是否向下平滑兼容
支持
维护的难度、客户移交的难度
易维护、易移交
03
功能介绍
04
数据转换设计器

数据转换设计器主要是定义数据源、传送和通知规则、商业规则等各类型事务以及执行时间、触发条件、输入输出及先后顺序,将各项数据转换工作有机组合在一起,主要功能有:

  • 设置数据源,用于定义要抽取的数据源,抽取的SQL语句;
  • 设置目标数据源,用于定义数据存放的数据仓库或数据集市;
  • 设置过滤器,定义抽取结果的过滤条件;
  • 设置清洗与转换规则,定义抽取数据类型的转换和清洗策略;
  • 执行转换。
05
数据转换调度器

定义各种类型的事务的执行时间、触发条件等,可按年、季、月、旬、日等时间频率来执行事务:

  • 开始计划:创建一个作业和一个触发器,然后注册作业,使用调度器触发执行;
  • 中止计划:中止一个指定的正在运行的作业。一旦作业被中止,再次启动它的唯一方式是使用一个恢复作业;
  • 恢复计划:恢复一个指定的被暂停作业;
  • 删除计划:删除一个指定的作业,作业被立即删除。如果目前一个作业正在一个调度器线程中运行,那么它将持续运行;
  • 邮件通知转换结果:将转换结果通过发送邮件方式通知指定管理人员。