Apache Spark

来自开放百科 - 灰狐
(版本间的差异)
跳转到: 导航, 搜索
(链接)
第13行: 第13行:
 
*[http://mp.weixin.qq.com/s?__biz=MzA3MDQ4MzQzMg==&mid=205137135&idx=1&sn=24de5f0a11d8a4f3bb40854717c1fa42&scene=4&uin=MTEyNDM1NzgxMA%3D%3D&key=88c7ba82076acca7edd27801f1257cdb75ade13b909dd6ed6c053bc893f6cc1ca31174495f0c63c423df1953fbdbadd7&devicetype=android-17&version=25030050&lang=zh_CN 腾讯大数据之计算新贵Spark,广点通是最早使用Spark的应用之一]
 
*[http://mp.weixin.qq.com/s?__biz=MzA3MDQ4MzQzMg==&mid=205137135&idx=1&sn=24de5f0a11d8a4f3bb40854717c1fa42&scene=4&uin=MTEyNDM1NzgxMA%3D%3D&key=88c7ba82076acca7edd27801f1257cdb75ade13b909dd6ed6c053bc893f6cc1ca31174495f0c63c423df1953fbdbadd7&devicetype=android-17&version=25030050&lang=zh_CN 腾讯大数据之计算新贵Spark,广点通是最早使用Spark的应用之一]
 
*[http://huihoo.100hg.com/product/wx_book_1200884555.html 《Spark快速数据处理》]作者 Holden Karau 曾就职于谷歌、亚马逊、微软和Foursquare等公司,对开源情有独钟,参与了许多开源项目,如Linux内核无线驱动、Android程序监控、搜索引擎等,对存储系统、推荐系统、搜索分类等都有深入研究。
 
*[http://huihoo.100hg.com/product/wx_book_1200884555.html 《Spark快速数据处理》]作者 Holden Karau 曾就职于谷歌、亚马逊、微软和Foursquare等公司,对开源情有独钟,参与了许多开源项目,如Linux内核无线驱动、Android程序监控、搜索引擎等,对存储系统、推荐系统、搜索分类等都有深入研究。
 +
*[http://spark.csdn.net/ CSDN.NET Spark技术社区]
  
 
[[category:apache]]
 
[[category:apache]]
 
[[category:big data]]
 
[[category:big data]]
 
[[category:hadoop]]
 
[[category:hadoop]]

2014年10月2日 (四) 11:54的版本

Apache Spark:新一代数据解决方案

Spark 是用Scala语言编写的一套分布式内存计算系统,它的核心抽象模型是 RDD (Resilient Distributed Dataset,弹性分布式数据集),围绕 RDD 构建了一系列分布式 API,可以直接对数据集进行分布式处理。

Spark在广告领域有很多的成功应用。

相对于 MapReduce 上的批量计算、迭代计算,以及基于 Apache Hive 的 SQL 查询,Spark 可以带来一到两个数量级的性能提升。

链接

分享您的观点
个人工具
名字空间

变换
操作
导航
工具箱