电子书：《hadoop2.xhdfs源码剖析》《hadoop2.xhdfs源码剖析》
111
内容简介：
徐鹏2005-2012年在北京邮电大学完成本科以及硕士的学习.目前就职于今ri头条担任基础架构研发工程师。长期关注大数据处理、分布式系统的研究以及 hadoop相关技术的应用与开发
hadoop 2xhdfs源码剖析徐鹏著電子工業出版料publishing house of electronics industry北京 beljing
本书以hp260吗为基础.深入剖析了hdfs2x中各个模块的实现细节.包括.r.p.c.框架实现namenode实现、 datanode实现以及hdfs客.户.端实现等。本书一共有5章.其中第1章从总体上介绍了hdfs时详细介绍了hdfs各个组件间.r.p.c.接口的定义。第2章介绍了 hadoop .r.p.c.框架的实现. hadoop .r.p.c.是hdfs各个组件间通信所依赖的底层框架.可以理解为hdfs的神经系统第3-5章分别介绍了 namenode、 datanode以及hdfs客.户.端这三个组件的实现细节.同时穿插介绍了hdfs2x的新特性.例如 namenode ha、 federation namenode等阅读本书可以帮助读者从架构设计与源码实现角度了解hdfs2x.同时还能学习hdfs2x框架中优秀的设计思想、设计模式、java语言技巧以及编程规范等。这些对于读者全面提高自己的技术水平有很大的帮助未经许可.不得以任何方式复制或抄袭本书之部分或全部内容。版权所有.侵权必究roh图书在版编目(cp)数据hadoop2 x hdes源码剖析/徐鹏著.一北京:电子工业出版社.2016.3isbn978-7-121-28155-6i.①h…ⅱ.①徐…ⅲ.①分布式文件系统一研究ⅳ.①tp316中guo版本图书馆cp数据核字(2016)第027311号策划编辑:张春雨责任编辑:葛娜印刷:三河市双峰印刷装订有限公司装订:三河市双峰印刷装订有限公司出版发行:电子工业出版社北京市海淀区万寿路173信箱邮编:100036开本:787×9801/16印张:3525字数:879千字版次:2016年3月第1版印次:2016年3月第1次印刷定价:10800元凡所购买电子工业出版社图书有缺损问题.请向购买书店调换。若书店售缺.请与本社发行部联系.联系及邮购电话010)88254888质量投诉请发邮件至ats@phei盗版侵权举报请发邮件至dbqqaphei.com.cn服务热线010)88258888
献给远老师.愿正年轻的你.永远保持一颗对世界好奇的心献给我的父母、妹妹.我无法用语言表达对你们的爱.以及你们对这个家庭默默付出的感恩
前言今天 hadoop经成为大数据处理中十分重要的平台.一个以hadp为基础的活跃的开源生态圈已经逐步形成. hadoop的应用也由最初的互联网行业发展到金融行业、电信行业it设备商以及数以万计的中小企业。 hadoop的hdfs组件(hado分布式文件系统)以及mapreduce组件分别为上层框架提供了分布式存储和计算的能力hdfs作为 hadoop中解决分布式存储的基础组件.最早是根据gfs( google file system)论文的概念模型来设计实现的。然而.随着hdfs上层框架的丰富以及应用场景的扩展.用户对hdfs的功能、性能、稳定性、扩展性以及可靠性的要求越来越高.hdfs2x版本也就应运而生.相对于hdfs1x.hdfs2x版本提出了很多振奋人心的新特性.如 namenode hafederation namenode、集中式缓存、快照等。但令人惋惜的是.至今还没有一本能够深入剖析hdfs2x内部实现细节.以及介绍hdfs2x新特性的书籍。本书的出现填补了上述空白它是guo内第一本深入剖析hdfs2x源码实现的书籍b.书以hdop260源码为基础.深入剖析了hds2x中各个模块的实现细节.包括datanode实现以及hdfs客.户.端实现等。阅读本书可以帮助读者从架构设计与源码实现角度了解hdfs2x.同时还能学习hdfs2x框架中优秀的设计思想、设计模式、java语言技巧以及编程规范等。这些对于读者全面提高自己的技术水平有很大的帮助如何阅读本书由于篇幅原因.本书并没有介绍hdfs实现中的一些基础知识.例如 java nic、动态代理、 protobuf等。而是直接切入源码分析hdfs的设计与实现.同时介绍了一些经典的设计模式、java语言技巧在hdfs实现中的应用。希望读者在阅读本书之前.先搭建好源码环境」并了解相应的基础知识.这样学习效果会更好。本书一共有5章.相互之间的联系比较紧密.有联系的小节都有注释标注.读者可以根据注释跳跃阅读。第1章是hdfs概述.从总体上介绍了hdfs的组件、概念以及典型的流程.同时详细介绍了hdfs各个组件间.r.p.c.接口的定义。由于hdfs流程大都比较复杂.往往涉及多个组件的配合.读者在阅读后续的具体章节时.可以查阅本章内容获取某个流程的总体描述.以
#############################################
