深入理解Spark核心思想与源码分析-so88
深入理解Spark核心思想与源码分析 pdf epub mobi txt 电子书 下载 2022
图书介绍
☆☆☆☆☆
||
店铺: 华心图书专营店 出版社: 机械工业出版社 ISBN:9787111522348 商品编码:26851029570
前言
准 备 篇
dy 章 环境准备2
1.1 运行环境准备2
1.1.1 安装JDK3
1.1.2 安装Scala3
1.1.3 安装Spark4
1.2 Spark初体验4
1.2.1 运行spark-shell4
1.2.2 执行word count5
1.2.3 剖析spark-shell7
1.3 阅读环境准备11
1.4 Spark源码编译与调试13
1.5 小结17
第2章 Spark设计理念与基本架构18
2.1 初识Spark18
2.1.1 Hadoop MRv1的局限18
2.1.2 Spark使用场景20
2.1.3 Spark的特点20
2.2 Spark基础知识20
2.3 Spark基本设计思想22
2.3.1 Spark模块设计22
2.3.2 Spark模型设计24
2.4 Spark基本架构25
2.5 小结26
核心设计篇
第3章 SparkContext的初始化28
3.1 SparkContext概述28
3.2 创建执行环境SparkEnv30
3.2.1 安全管理器SecurityManager31
3.2.2 基于Akka的分布式消息系统ActorSystem31
3.2.3 map任务输出跟踪器mapOutputTracker32
3.2.4 实例化ShuffleManager34
3.2.5 shuffle线程内存管理器ShuffleMemoryManager34
3.2.6 块传输服务BlockTransferService35
3.2.7 BlockManagerMaster介绍35
3.2.8 创建块管理器BlockManager36
3.2.9 创建广播管理器Broadcast-Manager36
3.2.10 创建缓存管理器CacheManager37
3.2.11 HTTP文件服务器HttpFile-Server37
3.2.12 创建测量系统MetricsSystem39
电子书下载地址:
相关电子书推荐:
- 文件名
- 科学探索系列 大自然的礼物 关于空气和水的科学之旅 (法)勒内·莫罗著;王晓东
- 【新华书店旗舰店官网正版】白话史记上中下套装共三册 台湾十四院校六十教授编译 白话文全译
- 带领孩子走向何方-中国文化下的教育
- 女人的修养与处世智慧全集
- 嗨!元素 奇幻旅程
- 准爸爸睡前胎教故事+孕妈妈睡前胎教故事+怀孕分娩坐月子全程指导+0-3岁实用育儿全程指导全4册
- 黄河口观鸟指南 9787504677648
- 协和专家协和妈妈圈干货分享产后恢复 乳房子宫骨盆护理 产后抑郁常见月子病书籍 饮食调养书 产妇身材护
- 中国湖泊趣谈 9787305195617 中国科学院南京地理与湖泊研究所-RT
- 风流南宋/易中天中华史
- 超霸舰艇-兵器帝国大揭秘-儿童视觉大系
- 识人 凝望苏州 才子佳人
- 水文学(第五版)/普通高等教育土建学科专业“十二五”规划教材
- 产后护理与新生儿养育同步指导全书: 孕产/胎教 书籍
- 儿童百科全书(千奇百怪的动植物学生版)/探索天下