深入理解Spark核心思想与源码分析-so88
深入理解Spark核心思想与源码分析 pdf epub mobi txt 电子书 下载 2022
图书介绍
☆☆☆☆☆
||
店铺: 华心图书专营店 出版社: 机械工业出版社 ISBN:9787111522348 商品编码:26851029570
前言
准 备 篇
dy 章 环境准备2
1.1 运行环境准备2
1.1.1 安装JDK3
1.1.2 安装Scala3
1.1.3 安装Spark4
1.2 Spark初体验4
1.2.1 运行spark-shell4
1.2.2 执行word count5
1.2.3 剖析spark-shell7
1.3 阅读环境准备11
1.4 Spark源码编译与调试13
1.5 小结17
第2章 Spark设计理念与基本架构18
2.1 初识Spark18
2.1.1 Hadoop MRv1的局限18
2.1.2 Spark使用场景20
2.1.3 Spark的特点20
2.2 Spark基础知识20
2.3 Spark基本设计思想22
2.3.1 Spark模块设计22
2.3.2 Spark模型设计24
2.4 Spark基本架构25
2.5 小结26
核心设计篇
第3章 SparkContext的初始化28
3.1 SparkContext概述28
3.2 创建执行环境SparkEnv30
3.2.1 安全管理器SecurityManager31
3.2.2 基于Akka的分布式消息系统ActorSystem31
3.2.3 map任务输出跟踪器mapOutputTracker32
3.2.4 实例化ShuffleManager34
3.2.5 shuffle线程内存管理器ShuffleMemoryManager34
3.2.6 块传输服务BlockTransferService35
3.2.7 BlockManagerMaster介绍35
3.2.8 创建块管理器BlockManager36
3.2.9 创建广播管理器Broadcast-Manager36
3.2.10 创建缓存管理器CacheManager37
3.2.11 HTTP文件服务器HttpFile-Server37
3.2.12 创建测量系统MetricsSystem39
电子书下载地址:
相关电子书推荐:
- 文件名
- BF-分子-牛津通识读本-菲利普·鲍尔 译林出版社 9787544765473
- 新学伪经考(套装上下册)/清末民初文献丛刊
- 阿波罗登月舱-太空大冒险-3D益智手工-附赠精美全彩图册
- 小企业融资创新研究
- 正版新书--全民阅读-世界未解之谜(精装) 出版社:中国华侨出版社 中国华侨出版社
- 南聊-南柏智慧箴言 哲学/宗教 书籍
- 自然的故事 科学出版社
- 探索奇迹 (俄)彼得.邬斯宾斯基编译出版社 图书书籍
- 正版刚可畏的对称:探寻现代物理学的美丽9787302331681[美] 徐一鸿,张礼
- 现货 战略学札记 张文木教授 海洋出版社 中国哲学 哲学书籍战略思想人生心得治学
- 你不是病人—— 来自癌症哲学门诊的处方笺
- FOF投资手册
- 正版书籍 科学探索与发现:人体的奥秘
- 早知道就这样管钱:做有钱又有闲的上班族
- 恐龙灭绝未解之谜(彩图珍藏版)