注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. sparkStreaming实战学习资料

  2. Spark核心概念简介: Spark使用maven进行打包(减少jar包大小): Spark中的(弹性分布式数据集)简称RDD: Spark中的Transformation操作之Value数据类型的算子: Spark中的Transformation操作之Key-Value数据类型的算子: Spark中的Action操作: Transformation->map算子: Transformation->flatMap算子: FaltMap算子与Map算子的区别 Action->r

  3. 所属分类：spark

    • 发布日期：2018-02-02
    • 文件大小：287kb
    • 提供者：qq_34936033

  1. 用于SparkStreaming的数据挖掘streamDM.zip

  2. streamDM，是由华为诺亚方舟实验室开源的使用 Spark Streaming 挖掘大数据的开源软件。大数据流学习大数据流学习（Big Data stream learning）比批量或离线学习更富有挑战性，因为数据在流动的过程中不太可能保持同一种分布。而且，数据流中的每一个样本只能被处理一次，否则它们就需要占用内存进行总结，同时该学习算法也必须非常高效。Spark StreamingSpark Streaming 是核心 Spark API 的一个扩展，它能让多个源的数据流处理成为可能。

  3. 所属分类：其它

  1. Spark核心之弹性分布式数据集RDD

  2. 1.1什么是RDD(1)RDD（ResilientDistributedDataset）弹性分布式数据集，它是Spark的基本数据抽象，它代表一个不可变、可分区、里面的元素可并行计算的集合。(2)具有数据流模型的特点：自动容错、位置感知性调度、可伸缩性。(3)查询速度快：在执行多个查询时，可以显示的将工作集缓存到内存中，后续的查询能够重用缓存的工作集。1.2RDD的属性打开Spark源代码，源码的注释中对RDD的描述如下图。(1)Alistofpartitions一系列的分区(2)Afuncti

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：235kb
    • 提供者：weixin_38598703

  1. Python学习笔记——大数据之SPARK核心

  2. 本文来自于csdn，文章讲解RDD的特点，RDD操作函数相关，穿插案例辣酱得段子，带大家理解MapReduce，通过哈姆雷特单词分析案例进行深度剖析。RDD（ResilientDistributedDatasets弹性分布式数据集），是spark中最重要的概念，可以简单的把RDD理解成一个提供了许多操作接口的数据集合，和一般数据集不同的是，其实际数据分布存储于一批机器中（内存或磁盘中），RDD混合了各种计算模型，使得Spark可以应用于各种大数据处理场景当然，RDD肯定不会这么简单，它的功能还包

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：426kb
    • 提供者：weixin_38627213

  1. Python学习笔记——大数据之SPARK核心

  2. 本文来自于csdn，文章讲解RDD的特点，RDD操作函数相关，穿插案例辣酱得段子，带大家理解MapReduce，通过哈姆雷特单词分析案例进行深度剖析。RDD（ResilientDistributedDatasets弹性分布式数据集），是spark中最重要的概念，可以简单的把RDD理解成一个提供了许多操作接口的数据集合，和一般数据集不同的是，其实际数据分布存储于一批机器中（内存或磁盘中），RDD混合了各种计算模型，使得Spark可以应用于各种大数据处理场景当然，RDD肯定不会这么简单，它的功能还包

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：423kb
    • 提供者：weixin_38678022

  1. Spark核心之弹性分布式数据集RDD

  2. 1.1什么是RDD (1)RDD（ResilientDistributedDataset）弹性分布式数据集，它是Spark的基本数据抽象，它代表一个不可变、可分区、里面的元素可并行计算的集合。 (2)具有数据流模型的特点：自动容错、位置感知性调度、可伸缩性。 (3)查询速度快：在执行多个查询时，可以显示的将工作集缓存到内存中，后续的查询能够重

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：235kb
    • 提供者：weixin_38592455