Apache Spark

来自开放百科 - 灰狐
(版本间的差异)
跳转到: 导航, 搜索
(项目)
(Cassandra)
第19行: 第19行:
 
*[http://www.datastax.com/dev/blog/zen-art-spark-maintenance Zen and the Art of Spark Maintenance]
 
*[http://www.datastax.com/dev/blog/zen-art-spark-maintenance Zen and the Art of Spark Maintenance]
 
*[https://github.com/datastax/spark-cassandra-connector DataStax Spark Cassandra Connector]
 
*[https://github.com/datastax/spark-cassandra-connector DataStax Spark Cassandra Connector]
 +
 +
==[[elasticsearch]]==
 +
*[https://www.elastic.co/guide/en/elasticsearch/hadoop/master/spark.html ElasticSearch Spark Integration]
  
 
==项目==
 
==项目==

2016年4月24日 (日) 07:38的版本

Apache Spark:新一代大数据解决方案

Spark 是用Scala语言编写的一套分布式内存计算系统,它的核心抽象模型是 RDD (Resilient Distributed Dataset,弹性分布式数据集),围绕 RDD 构建了一系列分布式 API,可以直接对数据集进行分布式处理。

相对于 MapReduce 上的批量计算、迭代计算,以及基于 Apache Hive 的 SQL 查询,Spark 可以带来一到两个数量级的性能提升。

Spark在广告领域有很多的成功应用。

目录

Apache Hive

Hive on Spark

Spark on HBase

Spark SQL on HBase: Spark SQL/DataFrame access to NoSQL data in Apache HBase

Spark on YARN

通过Spark on YARN的方式与Apache Hadoop方便地共享集群的存储功能和计算资源。

Cassandra

elasticsearch

项目

Spark的相关项目和生态系统: Supplemental Spark Projects

课程

文档

图集

链接

分享您的观点
个人工具
名字空间

变换
操作
导航
工具箱