ssydxa219
- 浏览: 601203 次
- 性别:
- 来自: 杭州
社区版块
- ( 0)
- ( 0)
- ( 0)
最新评论
-
ssydxa219:
vim /etc/security/limits.confvi ...
ekl -
gamehu520:
table中无数据
hbase 出现的问题 -
xleer0102:
为什么都是只有问没有答,哭晕在厕所
hbase 出现的问题 -
jiajiao_5413:
-
coderdream:
不完整,缺com.tcs.org.demostic.pub.u ...
struts2.3.1.1 hibernate3.6.9final spring3.1.0 proxool maven annotation
文章列表
- 博客分类:
- spark
spark 生态及运行原理
spark 特点
运行速度快 => spark拥有dag执行引擎,支持在内存中对数据进行迭代计算。官方提供的数据表明,如果数据由磁盘读取,速度是hadoop mapreduce的10倍以上,如果数据从内存中读取,速度可以高达100多倍。
适用场景广泛 => 大数据分析统计,实时数据处理,图计算及机器学习
易用性 => 编写简单,支持80种以上的高级算子,支持多种语言,数据源丰富,可部署在多种集群中
容错性高。spark引进了弹性分布式数据集rdd (resilient distributed dataset) ...
- 2019-04-16 10:19
- 浏览 354
- 分类:企业架构