[spark] SparkSql技术

说明： 目录 一：为什么sparkSQL？ 3 1.1：sparkSQL的发展历程 3 1.1.1：hive and shark 3 1.1.2：Shark和sparkSQL 4 1.2：sparkSQL的性能 5 1.2.1：内存列存储（In-Memory Columnar Storage） 6 1.2.2：字节码生成技术（bytecode generation，即CG） 6 1.2.3：scala代码优化 7 二：sparkSQL运行架构 8 2.1：Tree和Rule 9 2.1.1：Tree
<silentwolfyh> 上传 | 大小：5mb

[spark] hadoop-Apache2.7.3+Spark2.0集群搭建

说明： 包括了:Hadoop2.7.3、Spark2.0、Zookeeper3.4.8、Hive、Hbase、Kafka2.10、Flume的环境搭建
<silentwolfyh> 上传 | 大小：2mb

[spark] Scala Design Patterns

说明：
<weixin_37638836> 上传 | 大小：10mb

[spark] spark性能调优参数总结

说明： 详细讲解了创建spark应用的参数含义以及出现问题对应的调优策略
<fly964747264> 上传 | 大小：198kb

[spark] spark讲义总结1

说明： 用scala编写 底层是基于actor模式的akka框架 代码结构简洁 基于DAG(有向无环图)的执行引擎 减少了计算时数据频繁读写到磁盘的开销 **DAG有向无环图 ： spark设计之初就考虑了 大量连续计算的需求 允许在对数据处理时 经由许多步算子 按序计算来实现处理 这些处理 是一个图的结构 但是要注意的是 图有向但是不能形成环 防止死循环 这样的有向无环的处理过程就称之为Spark的DAG有向无环图。
<aaron_peter> 上传 | 大小：34kb

[spark] spark-2.1.0-bin-2.6.0-cdh5.7.0.tgz

说明： spark源码在hadoop-cdh5.7.0编译生成，用于学习hadoop和spark课程 spark源码在hadoop-cdh5.7.0编译生成，用于学习hadoop和spark课程
<qq_42821520> 上传 | 大小：182mb

[spark] spark-assembly-1.5.2-hadoop2.6.0jar包

说明： 使用scala开发spark应用时用到的jar包：spark-assembly-1.5.2-hadoop2.6.0jar包
<fly964747264> 上传 | 大小：156mb

[spark] Scala并发编程

说明： Scala并发编程 Scala并发编程 Scala并发编程 Scala并发编程
<sinat_36306474> 上传 | 大小：28mb

[spark] spark-hive_2.11-2.1.4-SNAPSHOT.jar

说明： HiveHBaseTableOutputFormat cannot be cast to org.apache.hadoop.hive.ql.io.HiveOutputFormat 问题的补丁，替换jars文件夹下的对应jar包即可，版本spark2.1
<fuhtead> 上传 | 大小：1mb

[spark] 从入门到深入学习ES最全笔记

说明： 从学习到项目实践中关于ES的操作和问题解决,尽管这章不是必读的——你在使用Elasticsearch的时候可以长时间甚至永远都不必担心分片、复制和故障转移——但 是它会帮助你理解Elasticsearch内部的工作流程
<u014792534> 上传 | 大小：1mb

[spark] Spark python API 函数调用学习

说明： 关于Spark Python API函数调用学习的一些资料，内含代码；对于正在用python做大数据分布式的小伙伴会有帮助。
<qq_35996035> 上传 | 大小：2mb

[spark] spark-assembly-1.5.0-hadoop2.6.0jar包

说明： spark-assembly-1.5.0-hadoop2.6.0jar包，本地开发Spark应用 必须要用到的jar包
<fly964747264> 上传 | 大小：171mb