当前位置： 首页 > 教育学习 > spark编程指南

spark编程指南

软件分类:免费软件 / 电子图书 版本: 大小:30.1M 下载量:5366 更新:2021-11-02 开发者:暂无认领 系统平台:WinAll, WinXP, Win7, Win8, Win10 软件官网:
本地下载
高速下载
官网评测
54
软件热度
5
官网评分
7
用户评分
spark编程指南图片
  • spark编程指南截图
  • spark编程指南截图
spark编程指南介绍
软件标签: spark编程指南spark教程

spark编程指南 pdf是一部非常实用的spark教程，这部电子书详细讲解了spark编程方法以及技巧，能够让你快速入门，需要的朋友欢迎来劲途游戏网免费下载！

Spark编程指南电子书介绍

总体上来说，每个Spark应用都包含一个驱动器（driver）程序，驱动器运行用户的main函数，并在集群上执行各种并行操作。

Spark最重要的一个抽象概念就是弹性分布式数据集（resilient distributed dataset – RDD），RDD是一个可分区的元素集合，其包含的元素可以分布在集群各个节点上，并且可以执行一些分布式并行操作。RDD通常是通过，HDFS（或者其他Hadoop支持的文件系统）上的文件，或者驱动器中的Scala集合对象，来创建或转换得到；其次，用户也可以请求Spark将RDD持久化到内存里，以便在不同的并行操作里复用之；最后，RDD具备容错性，可以从节点失败中自动恢复数据。

Spark第二个重要抽象概念是共享变量，共享变量是一种可以在并行操作之间共享使用的变量。默认情况下，当Spark把一系列任务调度到不同节点上运行时，Spark会同时把每个变量的副本和任务代码一起发送给各个节点。但有时候，我们需要在任务之间，或者任务和驱动器之间共享一些变量。Spark提供了两种类型的共享变量：广播变量和累加器，广播变量可以用来在各个节点上缓存数据，而累加器则是用来执行跨节点的“累加”操作，例如：计数和求和。

Spark编程指南pdf目录

1. Introduction

2. 快速上手

i. SparkShell

ii. 独立应用程序

iii. 开始翻滚吧!

3. 编程指南

i. 引入Spark

ii. 初始化Spark

iii. SparkRDDs

i. 并行集合

ii. 外部数据集

iii. RDD操作

i. 传递函数到Spark

ii. 使用键值对

iii. Transformations

iv. Actions

iv. RDD持久化

iv. 共享变量

v. 从这里开始

4. SparkStre

i. 一个快速的例子

ii. 基本概念

i. 关联

ii. 初始化StreamingContext

iii. 离散流

iv. 输入DStreams

v. DStream中的转换

vi. DStream的输出操作

vii. 缓存或持久化

viii. Checkpointing

ix. 部署应用程序

x. 监控应用程序

iii. 性能调优

i. 减少批数据的执行时间

ii. 设置正确的批容量

iii. 内存调优

iv. 容错语义

5. SparkSQL

i. 开始

ii. 数据源

i. RDDs

ii. parquet文件

iii. JSON数据集

iv. Hive表

iii. 性能调优

iv. 其它SQL接口

v. 编写语言集成(Language-Integrated)的相关查询

vi. SparkSQL数据类型

6. GraphX编程指南

i. 开始

ii. 属性图

iii. 图操作符

TableofContentsiv. PregelAPI

v. 图构造者

vi. 顶点和边RDDs

vii. 图算法

viii. 例子

7. 部署

i. 提交应用程序

ii. 独立运行Spark

iii. 在yarn上运行Spark

8. 更多文档

i. Spark配置

spark编程指南下载地址
本地下载通道
其他下载通道
高速下载通道
spark编程指南相关软件
  • spark编程指南

    软件标签: spark编程指南spark教程 spark编程指南 pdf是一部非常实用的spark教程，这部电子书详细讲解了spark编程方法以及技巧，能够让你快速入门，需要的朋友欢迎来劲途游戏网免费下载！Spark编程指南电子书介绍 总体上来说，每个Spark应用都包含一个驱动器（driver）程序...

Bamboo SparkBamboo Spark sparklesparkle SparkSpark Spark PostSpark Post Sparkle Camera安卓版Sparkle Camera安卓版 SparkHubSparkHub LesParkLesPark Java编程狮Java编程狮 小火箭编程小火箭编程 手机编程王手机编程王 核桃少儿编程家长端核桃少儿编程家长端 猿编程hd猿编程hd Fa快捷助手编程工具手机版下载 v2.1Fa快捷助手编程工具手机版下载 v2.1 饥人谷编程饥人谷编程 c语言学习编程宝典c语言学习编程宝典 高度海拔GPS指南针高度海拔GPS指南针 地图导航指南针地图导航指南针 多多指南针手机版多多指南针手机版 指南针法考指南针法考 罗盘指南针罗盘指南针 地图导航指南针地图导航指南针 指南针app指南针app 指南针指南针 中文语音充电警报中文语音充电警报 wombo dream AI绘画中文版安卓app下载 v1.2.1wombo dream AI绘画中文版安卓app下载 v1.2.1 discord中文discord中文 kakaotalk中文版kakaotalk中文版 FanFiction小说中文版安卓 v1.0FanFiction小说中文版安卓 v1.0 Super Status Bar中文版下载Super Status Bar中文版下载 3d Scanner3D模型中文安卓版app下载 v1.13d Scanner3D模型中文安卓版app下载 v1.1 TouchRetouch安卓中文版TouchRetouch安卓中文版 Netsparker(web应用漏洞扫描工具)Netsparker(web应用漏洞扫描工具) SparkSpark ShapesparkShapespark sparkspark 未科编程未科编程 mDesigner(图形编程软件)mDesigner(图形编程软件) 编程小将编程小将 编程猫海龟编辑器编程猫海龟编辑器 三菱编程软件三菱编程软件 KidsProgram(励码图形化编程工具)KidsProgram(励码图形化编程工具) 动手客图形化编程软件动手客图形化编程软件 frmEprom(EPROM编程器)frmEprom(EPROM编程器) python程序员指南python程序员指南 人像摄影师的摆姿指南人像摄影师的摆姿指南 僵尸生存指南僵尸生存指南 hadoop权威指南hadoop权威指南 jquery ui开发指南jquery ui开发指南 jquery easyui开发指南jquery easyui开发指南 区块链技术指南区块链技术指南 Figma中文插件Figma中文插件 植物大战僵尸修改器中文版植物大战僵尸修改器中文版 Win11中文包Win11中文包 CS1.6中文版作弊器CS1.6中文版作弊器 全球中文学习平台全球中文学习平台 哥特式中文字体哥特式中文字体 FMRTE2022中文修改器FMRTE2022中文修改器 仙剑奇侠传5简体中文存档修改器仙剑奇侠传5简体中文存档修改器
spark编程指南相关资讯
spark编程指南软件评分
7 分


同类软件
推荐下载
二师兄下载底部logo

关于我们| 联系我们| 加入我们| 版权声明| 投诉删除

访问移动版spark编程指南
Copyright © 2019-2022. 二师兄下载 www.esxxz.com 网站备案：京ICP备11025099号 二师兄下载分享手机软件下载,电脑软件下载，手机游戏下载和软件游戏攻略等内容