Hadoop技术内幕:深入解析HadoopCommon和HD
2019-10-10 09:33:47 0 举报
AI智能生成
Hadoop技术内幕:深入解析HadoopCommon和HDFS架构设计与实现原理
作者其他创作
大纲/内容
第一部分 环境准备
1 源代码环境准备
1.1 什么是Hadoop
1.2 准备源代码阅读环境
1.3 准备Hadoop源代码
1.4 小结
第二部分 Common的实现
2 Hadoop配置信息处理
2.1 配置文件简介
2.2 Hadoop Configuration详解
2.3 Configurable接口
2.4 小结
3 序列化与压缩
3.1 序列化
3.2 压缩
3.3 小结
4 Hadoop远程过程调用
4.1 远程过程调用基础知识
4.2 Java动态代理
4.3 Java NIO
4.4 Hadoop中的远程过程调用
4.5 Hadoop IPC连接相关过程
4.6 Hadoop IPC方法调用相关过程
4.7 Hadoop IPC上的其他辅助过程
4.8 小结
5 Hadoop文件系统
5.1 文件系统
5.2 Linux文件系统
5.3 分布式文件系统
5.4 Java文件系统
5.5 Hadoop抽象文件系统
5.6 Hadoop具体文件系统
5.7 小结
第三部分 Hadoop分布式文件系统
6 HDFS概述
6.1 初识HDFS
6.2 基于远程过程调用的接口
6.3 非远程过程调用接口
6.4 HDFS主要流程
6.5 小结
7 数据节点实现
7.1 数据块存储
7.2 流式接口的实现
7.3 作为整体的数据节点
7.4 小结
8 名字节点实现
8.1 文件系统的目录树
8.2 数据块和数据节点管理
8.3 远程接口ClientProtocol的实现
8.4 名字节点的启动和停止
8.5 小结
9 HDFS客户端
9.1 认识DFSClient
9.2 输入流
9.3 输出流
9.4 DistributedFileSystem的实现
9.5 HDFS常用工具
9.6 小结
0 条评论
下一页