ETL详解.docx

1 ETL是什么 3 2 ETL和大数据有什么关联 3 3 ETL有哪些过程，要进行哪些操作 3 3.1 抽取作业 4 3.1.1 手工开发抽取作业时候的常用方法 4 3.1.2 更新数据的时间和数量的问题 5 3.2 转换作业 8 3.2.1 数据清洗 8 3.2.2 数据转换 9 3.3 加载作业 11 3.4 流程控制 11 3.4.1 流程步骤控制能力 12 3.4.2 系统的划分和前后流程的依赖 12 3.4.3 合理的调度算法 12 3.4.4 日志和警告系统 12 3.4.5 较高可靠性 13 3.5 常用商业ETL工具 13 4 总结 14