大数据处理与存储技术

本书归纳和总结了主流数据库软件和常用数据处理工具的常见问题与应用技巧，为大数据技术与传
统数据存储和转换技术相结合提供了技术参考，为促进大数据技术的发展，为数据库和ETL开发人员、
运维人员提供了技术支撑。

本书分为3篇，共5章，主要内容包括Oracle数据库应用、MySQL数据库应用、Informatica PowerCenter
工具应用、Kettle工具应用、数据库调优与ETL工具应用技巧。本书分别从数据存储软件、数据抽取与
清洗软件等方面，向读者展示了Oracle、MySQL、Informatica和Kettle的常见问题、优化与提升的技巧。

本书所涉及的内容均为生产实践中必要的过程和阶段，讲解由浅入深、通俗易懂，适合从事数据库
开发、维护、管理、优化任务和高可用设计的工程技术人员及从事ETL开发、优化的工程技术人员使用
或参考。

篇 数据库软件篇
章 Oracle数据库应用
1.1 Oracle简介
1.1.1 产品历史
1.1.2 支撑的平台
1.1.3 数据库特点
1.2 安装配置
l.2.1 安装环境
1.2.2 系统配置
1.2.3 0racle安装
1.3 数据库函数
1.3.1 常用函数
1.3.2 数字函数
1.3.3 预定义函数
1.3.4 字符函数
1.3.5 日期函数
1.4 常用查询命令
1.5 常见问题参考
1.5.1 事务处理
1.5.2 索引
1.5.3 触发器
1.5.4 存储过程
1.5.5 参数设置
1.5.6 消息号
1.5.7 表级操作
1.5.8 锁操作
1.5.9 归档的开启与关闭
1.5.10 数据的导入与导出
1.5.11 其他
第2章 MySQL数据库应用
2.1 MySQL简介
2.1.1 产品历史
2.1.2 应用环境
2.1.3 数据库特点
2.2 安装配置
2.3 数据库函数
2.3.1 数学函数
2.3.2 字符串函数
2.3.3 日期函数
2.3.4 条件判断函数
2.3.5 系统信息函数
2.3.6 加密函数
2.3.7 其他函数
2.4 常见问题参考
2.4.1 数据库创建
2.4.2 数据库删除
2.4.3 数据库连接
2.4.4 数据表操作
2.4.5 索引操作
2.4.6 其他
第二篇 ETL工具篇
第3章 lnformatica PowerCenter工具应用
3.1 lnformatica简介
3.2 安装配置
3.2.1 准备安装环境
3.2.2 Informatica软件安装
3.3 常见问题参考
3.3.1 软件安装
3.3.2 软件启动
3.3.3 目标库表
3.3.4 数据库连接
3.3.5 组件应用
3.3.6 其他
第4章 KettIe工具应用
4.1 KettIe简介
4.2 安装配置
4.3 常见问题
4.3.1 连接资源库报错
4.3.2 日志级别设置
4.3.3 时间格式问题
4.3.4 打开资源库后页面空白
4.3.5 Kettle连接0mcle报错
第三篇 高级调优篇
第5章 数据库调优与ETL工具应用技巧
5.1 Oracle调优
5.1.1 最大限度使用索引
5.1.2 SQL优化
5.1.3 hint用法
5.2 MySQL调优
5.2.1 最大限度使用索引
5.2.2 优化提升
5.3 lnformatIca应用技巧
5.3.1 元数据解析
5.3.2 资料库操作
附录A Oracle错误信息表
附录B MySQL错误信息表
附录C PowerCenter错误信息表