欢迎大家赞助一杯啤酒🍺 我们准备了下酒菜:Formal mathematics/Isabelle/ML, Formal verification/Coq/Agda, C++/Erlang/Lisp
Apache Spark
来自开放百科 - 灰狐
(版本间的差异)
小 (→链接) |
小 (→链接) |
||
第14行: | 第14行: | ||
*[http://huihoo.100hg.com/product/wx_book_1200884555.html 《Spark快速数据处理》]作者 Holden Karau 曾就职于谷歌、亚马逊、微软和Foursquare等公司,对开源情有独钟,参与了许多开源项目,如Linux内核无线驱动、Android程序监控、搜索引擎等,对存储系统、推荐系统、搜索分类等都有深入研究。 | *[http://huihoo.100hg.com/product/wx_book_1200884555.html 《Spark快速数据处理》]作者 Holden Karau 曾就职于谷歌、亚马逊、微软和Foursquare等公司,对开源情有独钟,参与了许多开源项目,如Linux内核无线驱动、Android程序监控、搜索引擎等,对存储系统、推荐系统、搜索分类等都有深入研究。 | ||
*[http://spark.csdn.net/ CSDN.NET Spark技术社区] | *[http://spark.csdn.net/ CSDN.NET Spark技术社区] | ||
+ | *[http://www.infoq.com/cn/articles/spark-core-rdd 理解Spark的核心Resilient Distributed Datasets(RDD)] | ||
[[category:apache]] | [[category:apache]] | ||
[[category:big data]] | [[category:big data]] | ||
[[category:hadoop]] | [[category:hadoop]] |
2014年10月4日 (六) 13:08的版本
Apache Spark:新一代数据解决方案
Spark 是用Scala语言编写的一套分布式内存计算系统,它的核心抽象模型是 RDD (Resilient Distributed Dataset,弹性分布式数据集),围绕 RDD 构建了一系列分布式 API,可以直接对数据集进行分布式处理。
Spark在广告领域有很多的成功应用。
相对于 MapReduce 上的批量计算、迭代计算,以及基于 Apache Hive 的 SQL 查询,Spark 可以带来一到两个数量级的性能提升。
链接
- Apache Spark官网
- Spark开放文档
- Spark Summit
- 腾讯大数据之计算新贵Spark,广点通是最早使用Spark的应用之一
- 《Spark快速数据处理》作者 Holden Karau 曾就职于谷歌、亚马逊、微软和Foursquare等公司,对开源情有独钟,参与了许多开源项目,如Linux内核无线驱动、Android程序监控、搜索引擎等,对存储系统、推荐系统、搜索分类等都有深入研究。
- CSDN.NET Spark技术社区
- 理解Spark的核心Resilient Distributed Datasets(RDD)
分享您的观点