电子书《clouderahadoop大数据平台实战指南》_宋立桓等_2019-01-01《clouderahadoop大数据平台实战指南》_宋立桓等_20190101
111
内容简介：
vill cloudera hadoop大数据平台实战指南第3章 cloudera manager及cdh离线安装部署3.1安装前的准备工作55032 cloudera manager及cdh安装第4章分布式文件系统hdfs4. i hdfs简介4.2hdfs体系结构4.2.1hdfs架构概述…42.2hdfs命名空间管理4.23 name node4.3hdfs20新特性4.3.1 hdfs ha44hdfs操作常用 shell命令4.4.1hdfs目录操作和文件处理命令42hdfs的web管理界面443 dfsadmin管理维护命令44.4 namenode命令4.5java编程操作hdfs实践4.6hdfs的参数配置和规划4.7使用 cloudera manager启用 hdes ha4.7.1 hdes ha高可用配置4.7.2 hdes ha高可用功能测试第5章分布式计算框架 mapreduce1 mapreduce概述52.1工作流程概述522 mapreduce框架的优势523 mapreduce执行过程53 mapreduce编程——单词示例解析4 mapreduce应用开发54.1配置 mapreduce开发环境54.2编写和运行 mapreduce程序第6章资源管理调度框架yarn61yarn产生背景62yarn框架介绍
目录ⅸ6.3y工作原理4yarn框架和 mapreduce.0框架对比6.5cdh集群的yarn参数调整第7章数据仓库hⅳvehive简介72hive体系架构和应用场景600223347.2.1hive体系架构7.22hive应用场景73hive的数据模型7.3.1内部表3.2外部表.3分区表7.3.4桶74hive实战操作741hive内部表操作74.2hive外部表操作74.3hive分区表操作744桶表56779827.4.5hive应用实例 wordcount7.4.6 udf75基于hive的应用案例第8章数据迁移工具sqop…sqop概述snoop工作原理8.3sqop版本和架构84 scoop实战操作9章分布式数据库 hbase9.1 hbase概述92 hbase数据模型93 hbase生态地位和系统架构93.1 hbase的生态地位解析base系统架构94 hbase运行机制9. 4. 1 region942 region server工作原理943 store工作原理0344hbase操作实战
x| cloudera hadoop大数据平台实战指南951 hbase常用shel命令9.52 hbase编程实践9.53 hbase参数调优的案例分享10910.1 zookeeper的特点02 zookeeper的工作原理10.2.1基本架构022 zookeeper实现分布式 leader节点选举2.3 zookeeper配置文件重点参数详解10.3zo0 seeper典型应用场景0.3.1 zookeeper实现hdfs的 name node高可用hazookeeper实现10.3.3z00 keeper在stom集群中的协调者作用11章准实时分析系统mpaa11 impala概述1.2mpla组件构成14 impala的查询处理流程115 impala和hive的关系和对比1.6 impala安装117 impala入门实战操作第12章ri志采集工具fume121 flume概述122fume体系结构12.2.1 flume外部结构12.2.2 flume的 event事件概念1223fume的 agent123fume安装和集成1323.1搭建 flume环境12.32 kafka与 flume集成124fume操作实例介绍41例子概述42第一步:配置数撂流向43第二步:启动服务12.4.4第三步:新建空数据文件4.5第四步:运行 flume-ng命令133124.6第五步:运行命令脚本
目录x24.7最后一步:测试结果134第13章分布式消息系统kaka13.1 kafka架构设计13.1.1基本架构13.1.2基本概念13.1.3 kafka主要特点13.2 kafka原理解析13.2.1主要的设计理念13.2.2z0 keeper在kaka的作用13.23kaka在 zookeeper的执行流程33 kafka安装和部署33.1cdh5完美集成 kafka13.32kaka部署模式和配置34java操作 kafka消息处理实例13.4.1例子概述13.4.2第一步:新建工程89444434.3第二步:編写代码13.4.4第三步:运行发送数据程序13.4.5最后一步:运行接收数据程序14313.5 kafka与hdfs的集成13.5.1与hdfs集成介绍.14313.52与hdfs集成实例…13.53第一步:编写代码—一发送数据13.5.4第二步:编写代码——接收数据.13.5.5第三步:导出文件13.5.6第四步:上传文件13.5.7第五步:运行程序——发送数据14613.5.8第六步:运行程序——接收数据13.5.9最后一步:查看执行结果第14章大数据etl工具kete14.1etl原理141.1etl简介41.2etl在数据仓库中的作用14.2 kettle简介149143 kettle完整案例实战43.1案例介绍14.3.2最终效果14.3.3表说明
#############################################
