书中文学网

手机浏览器扫描二维码访问

第384章 安心（第4页）

push机制通常采用在线方式工作y可以把数据变化传播到目标数据存储

结构。

数据转换

包括数据重构和整合数据内容清洗或集成

数据加载

对整个目标数据存储结构进行刷新y或者只是对目标数据存储进行增量更

新。

早期的etl解决方案通常以固定的周期运行批处理工作y从平面文件和

关系数据库中捕捉数据y并把这些数据整合到数据仓库中最近这几年y

商业etl工具供应商已经对产品做了很大的改进y对产品功能进行了扩

展y具体如下x

1额外的数据源

2额外的目标

3改进的数据转换功能

4更好的管理

5更好的性能

6改进的可用性

7增强的安全性

8支持基于数据联邦的数据集成方法

数据抽取模块的功能x

1确定数据源y即从哪些源系统进行数据抽取。

2定义数据接口y对每个源文件及系统的每个字段进行详细说明。

3确定数据抽取的方式x是主动抽取还是由源系统推送y是增量抽取。

还是全量抽取y是每日抽取还是每月抽取。

数据清洗与切换

数据清洗与转换x

数据清洗主要是对不完整数据错误数据重复数据进行处理

数据转换包括如下操作

武侠游戏：只有我知道剧情  凛冬末日：全民避难所求生  逼我做妾？真太子为我入赘将军府  我手握无限物资，砸出末世安全区  新来的转校生竟比校霸还野  穿越明朝之我救了马皇后  京港月光  空间通末世，我带飞全家很合理吧  小马宝莉：星空之下  七零大厂美人，改造反派崽暴富  我在无限游戏中永生  穿成花瓶美人，反派老公破产了  跌落山崖的我，习得神级功法  七零娇美人，甩掉知青当首富  医林萧韵  快穿：盘古居然是我哥  都市神医，开局扇醒拜金女  八零守寡小娇娇，冷面糙汉被钓疯  沙雕攻以为他虐了白月光  我在修仙游戏世界中浑水摸鱼