深入理解Spark核心思想与源码分析-so88
深入理解Spark核心思想与源码分析 pdf epub mobi txt 电子书 下载 2022
图书介绍
☆☆☆☆☆
||
店铺: 华心图书专营店 出版社: 机械工业出版社 ISBN:9787111522348 商品编码:26851029570
前言
准 备 篇
dy 章 环境准备2
1.1 运行环境准备2
1.1.1 安装JDK3
1.1.2 安装Scala3
1.1.3 安装Spark4
1.2 Spark初体验4
1.2.1 运行spark-shell4
1.2.2 执行word count5
1.2.3 剖析spark-shell7
1.3 阅读环境准备11
1.4 Spark源码编译与调试13
1.5 小结17
第2章 Spark设计理念与基本架构18
2.1 初识Spark18
2.1.1 Hadoop MRv1的局限18
2.1.2 Spark使用场景20
2.1.3 Spark的特点20
2.2 Spark基础知识20
2.3 Spark基本设计思想22
2.3.1 Spark模块设计22
2.3.2 Spark模型设计24
2.4 Spark基本架构25
2.5 小结26
核心设计篇
第3章 SparkContext的初始化28
3.1 SparkContext概述28
3.2 创建执行环境SparkEnv30
3.2.1 安全管理器SecurityManager31
3.2.2 基于Akka的分布式消息系统ActorSystem31
3.2.3 map任务输出跟踪器mapOutputTracker32
3.2.4 实例化ShuffleManager34
3.2.5 shuffle线程内存管理器ShuffleMemoryManager34
3.2.6 块传输服务BlockTransferService35
3.2.7 BlockManagerMaster介绍35
3.2.8 创建块管理器BlockManager36
3.2.9 创建广播管理器Broadcast-Manager36
3.2.10 创建缓存管理器CacheManager37
3.2.11 HTTP文件服务器HttpFile-Server37
3.2.12 创建测量系统MetricsSystem39
电子书下载地址:
相关电子书推荐:
- 文件名
- 水知道答案
- 18秋 二年级上册 实验班提优训练英语 YL译林版 练习类 春雨教育 2年级上册 小学生教辅练习册
- 芝麻大问号?-2-芝麻的科学书
- 写中学:让学习更有效的学科写作教学
- {RT}昆虫博物馆-李湘涛 时事出版社 9787800099472
- 基于学习分析的在线学生支持/中国远程教育学者文库
- 走出地球村系列:山沟升起美国星 李鸣生
- 告别理想
- “人与地球的明天”科普书系 大地之美:千姿百态的地貌 北京出版集团公司,北京出版社
- 液压阀原理.使用与维护(第3版)
- 水 4.0 戴维塞德拉克
- 正版 狄更斯的圣诞故事(5本套装)(圣诞颂歌+教堂钟声+炉边蟋蟀+人生的战斗+着魔的人)[
- 你该怎么办—校园生活与日常安全(护眼大字版) 9787500269397 李澍晔 刘燕华-
- 走向合作的社会(国家治理研究书系)
- 力学故事 昂热桥惨案