Hadoop技术内幕（深入解析YARN架构设计与实现原理）

Hadoop技术内幕深入解析YARN架构设计与实现原理注：原文档电子版（非扫描），需要的请下载本文档后留言谢谢。目录TOC\h\h第一部分准备篇\h第1章环境准备\h1.1准备学习环境\h1.2获取Hadoop源代码\h1.3搭建Hadoop源代码阅读环境\h1.4Hadoop源代码组织结构\h1.5Hadoop初体验\h1.6编译及调试Hadoop源代码\h1.7小结\h第2章YARN设计理念与基本架构\h2.1YARN产生背景\h2.2Hadoop基础知识\h2.3YARN基本设计思想\h2.4YARN基本架构\h2.5YARN工作流程\h2.6多角度理解YARN\h2.7本书涉及内容\h2.8小结\h第二部分YARN核心设计篇\h第3章YARN基础库\h3.1概述\h3.2第三方开源库\h3.3底层通信库\h3.4服务库与事件库\h3.5状态机库\h3.6源代码阅读引导\h3.7小结\h3.8问题讨论\h第4章YARN应用程序设计方法\h4.1概述\h4.2客户端设计\h4.3ApplicationMaster设计\h4.4YARN应用程序实例\h4.5源代码阅读引导\h4.6小结\h4.7问题讨论\h第5章ResourceManager剖析\h5.1概述\h5.2用户交互模块\h5.3ApplicationMaster管理\h5.4NodeManager管理\h5.5Application管理\h5.6状态机管理\h5.7几个常见行为分析\h5.8安全管理\h5.9容错机制\h5.10源代码阅读引导\h5.11小结\h5.12问题讨论\h第6章资源调度器\h6.1资源调度器背景\h6.2HOD调度器\h6.3YARN资源调度器的基本架构\h6.4YARN层级队列管理机制\h6.5CapacityScheduler\h6.6FairScheduler\h6.7其他资源调度器介绍\h6.8源代码阅读引导\h6.9小结\h6.10问题讨论\h第7章NodeManager剖析\h7.1概述\h7.2节点健康状况检测\h7.3分布式缓存机制\h7.4目录结构管理\h7.5状态机管理\h7.6Container生命周期剖析\h7.7资源隔离\h7.8源代码阅读引导\h7.9小结\h7.10问题讨论\h第三部分计算框架篇\h第8章离线计算框架MapReduce\h8.1概述\h8.2MapReduce客户端\h8.3MRAppMaster工作流程\h8.4MR作业生命周期及相关状态机\h8.5资源申请与再分配\h8.6Container启动与释放\h8.7推测执行机制\h8.8作业恢复\h8.9数据处理引擎\h8.10历史作业管理器\h8.11MRv1与MRv2对比\h8.12源代码阅读引导\h8.13小结\h8.14问题讨论\h第9章DAG计算框架Tez\h9.1背景\h9.2Tez数据处理引擎\h9.3DAGMaster实现\h9.4优化机制\h9.5Tez应用场景\h9.6与其他系统比较\h9.7小结\h第10章实时/内存计算框架Storm/Spark\h10.1HadoopMapReduce的短板\h10.2实时计算框架Storm\h10.3内存计算框架Spark\h10.4小结\h第四部分高级篇\h第11章FacebookCorona剖析\h11.1概述\h11.2Corona设计特点\h11.3工作流程介绍\h11.4主要模块介绍\h11.5小结\h第12章ApacheMesos剖析\h12.1概述\h12.2底层网络通信库\h12.3Mesos服务\h12.4Mesos工作流程\h12.5Mesos资源分配策略\h12.6Mesos容错机制\h12.7Mesos应用实例\h12.8Mesos与YARN对比\h12.9小结\h第13章YARN总结与发展趋势\h13.1资源管理系统设计