注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. Spark实战高手之路（2）：如何构建真正的Hadoop分布式集群环境

  2. 【Spark实战高手之路】第一章第二步主要内容： 这一讲我们将讲解如何构建真正的Hadoop分布式集群环境： 1、在VMWare 中准备第二、第三台运行Ubuntu系统的机器； 2、按照配置伪分布式模式的方式配置新创建运行3、Ubuntu系统的机器； 3、配置Hadoop分布式集群环境； 4、测试Hadoop分布式集群环境； 本资料共包含以下附件： Spark实战高手之路-1章-2步.pdf

  3. 所属分类：群集服务

  1. Spark 实战开发教程

  2. 最近在学习Apache Spark，搜集些资料（共5个文档），供大家分享。 1、《Spark实战高手之路-从零开始》 2、《Spark开发环境配置及流程(Intellij_IDEA)》 3、《spark官方文档中文版》 4、《Spark 入门之 Scala 语言解释及示例讲解》 5、《Scala编码规范》 总结： Hadoop MapReduce会被新一代的大数据处理平台替代是技术发展的趋势，而在新一代的大数据处理平台中，Spark目前得到了最广泛的认可和支持。

  3. 所属分类：其它

    • 发布日期：2016-03-29
    • 文件大小：21mb
    • 提供者：itlhb

  1. 大数据环境搭建（Spark+Storm+Kafka+Redis+MongoDB+Flume+HBase+Mysql集群）

  2. 压缩包有8个文档，详细介绍Spark、Storm、Kafka、Redis、MongoDB、Flume、HBase、Mysql集群在linux系统下的安装

  3. 所属分类：Java

    • 发布日期：2016-10-25
    • 文件大小：1mb
    • 提供者：xiao33749905

  1. Spark学习笔记

  2. spark 可以很容易和yarn结合，直接调用HDFS、Hbase上面的数据，和hadoop结合。配置很容易。 spark发展迅猛，框架比hadoop更加灵活实用。减少了延时处理，提高性能效率实用灵活性。也可以与hadoop切实相互结合。 spark核心部分分为RDD。Spark SQL、Spark Streaming、MLlib、GraphX、Spark R等核心组件解决了很多的大数据问题，其完美的框架日受欢迎。其相应的生态环境包括zepplin等可视化方面，正日益壮大。大型公司争相实用sp

  3. 所属分类：spark

    • 发布日期：2017-11-06
    • 文件大小：33mb
    • 提供者：mr_liyang

  1. Spark大数据处理 技术、应用与性能优化

  2. Spark大数据处理 技术、应用与性能优化 2014年11月 第1版 第1章 Spark简介 第2章 Spark集群的安装与部署 第3章 Spark计算模型 第4章 Spark工作机制详解 第5章 Spark开发环境配置及流程 第6章 Spark编程实战 第7章 Benchmark使用详解 第8章 BDAS简介 第9章 Spark性能调优

  3. 所属分类：spark

    • 发布日期：2017-12-21
    • 文件大小：51mb
    • 提供者：chowmin3410

  1. Spark简单测试案例

  2. Spark自带案例、代码案例测试! 环境： Hadoop1.2集群和Spark1.0集群 3个节点的Ubuntu12.1系统机器

  3. 所属分类：spark

    • 发布日期：2018-01-09
    • 文件大小：608kb
    • 提供者：gyqiang_it

  1. Spark技术内幕-深入解析Spark内核架构设计与实现原理（高清书签版）

  2. Spark是不断壮大的大数据分析解决方案家族中备受关注的新增成员。它不仅为分布式数据集的处理提供一个有效框架，而且以高效的方式处理分布式数据集。它支持实时处理、流处理和批处理，提供了AllinOne的统一解决方案，使得Spark极具竞争力。《Spark技术内幕：深入解析Spark内核架构设计与实现原理》以源码为基础，深入分析Spark内核的设计理念和架构实现，系统讲解各个核心模块的实现，为性能调优、二次开发和系统运维提供理论支持；本文最后以项目实战的方式，系统讲解生产环境下Spark应用的开发

  3. 所属分类：spark

    • 发布日期：2018-03-23
    • 文件大小：21mb
    • 提供者：qq_28178971

  1. Spark & SparkSql编程学习资料

  2. Spark编程学习资料 、 SparkSql Python 编程实例 第1章 Spark编程模型 第2章 构建Spark分布式集群 第3章 Spark开发环境及其测试 第4章 Spark RDD与编程API实战 第5章 Spark运行模式深入解析 第6章 Spark内核解析 第7章 GraphX大规模图计算与图挖掘实战 第8章 Spark SQL原理与实战 第9章 Machine Learning on Spark 第10章 Tachyon文件系统 第11章 Spark Streaming原理

  3. 所属分类：spark

    • 发布日期：2018-03-28
    • 文件大小：47mb
    • 提供者：ao1682012

  1. Apache Spark.pdf

  2. 该书详细介绍了Spark的核心知识点、技术原理、环境搭建等等。

  3. 所属分类：spark

    • 发布日期：2018-04-14
    • 文件大小：6mb
    • 提供者：onianshao

  1. spark以及大数据在windows下搭建环境的完全文档

  2. Java、scala、maven、idea、spark、以及python环境的搭建文档

  3. 所属分类：其它

    • 发布日期：2018-04-19
    • 文件大小：169kb
    • 提供者：weixin_38411472

  1. 深入理解Spark 核心思想与源码分析

  2. 深入理解Spark 核心思想与源码分析 ,耿嘉安完整版，大数据spark开发必备，你值得拥有。清晰完整版 《深入理解SPARK：核心思想与源码分析》结合大量图和示例，对Spark的架构、部署模式和工作模块的设计理念、实现源码与使用技巧进行了深入的剖析与解读。, 《深入理解SPARK：核心思想与源码分析》一书对Spark1.2.0版本的源代码进行了全面而深入的分析，旨在为Spark的优化、定制和扩展提供原理性的指导。*集团专家鼎力推荐、*资深Java开发和大数据专家撰写。, 本书分为

  3. 所属分类：spark

    • 发布日期：2018-05-22
    • 文件大小：38mb
    • 提供者：jyh2005

  1. 深入理解Spark 核心思想与源码分析

  2. 在深入了解一个系统的原理、实现细节之前，应当先准备好它的源码编译环境、运行环境。如果能在实际环境安装和运行Spark，显然能够提升读者对于Spark的一些感受，对系统能有个大体的印象，有经验的技术人员甚至能够猜出一些Spark采用的编程模型、部署模式等。当你通过一些途径知道了系统的原理之后，难道不会问问自己？这是怎么做到的。如果只是游走于系统使用、原理了解的层面，是永远不可能真正理解整个系统的。很多IDE本身带有调试的功能，每当你阅读源码，陷入重围时，调试能让我们更加理解运行期的系统。如果没有

  3. 所属分类：spark

    • 发布日期：2018-10-06
    • 文件大小：41mb
    • 提供者：kuigoutang2400

  1. Windows开发Spark程序环境配置说明.pdf

  2. 介绍机器学习Windows环境下开发Spark程序的配置方法，包含Java配置、Spark配置、系统环境配置，方便爱好者调试机器学习程序。

  3. 所属分类：spark

    • 发布日期：2020-09-09
    • 文件大小：674kb
    • 提供者：wwyymmddbb

  1. 大数据环境下该如何优雅地设计数据分层

  2. 最近出现了好几次同样的对话场景：问：你是做什么的？答：最近在搞数据仓库。问：哦，你是传统行业的吧，我是搞大数据的。答：......发个牢骚，搞大数据的也得建设数据仓库吧。而且不管是传统行业还是现在的互联网公司，都需要对数据仓库有一定的重视，而不是谈一句自己是搞大数据的就很厉害了。数据仓库更多代表的是一种对数据的管理和使用的方式，它是一整套包括了etl、调度、建模在内的完整的理论体系。现在所谓的大数据更多的是一种数据量级的增大和工具的上的更新。两者并无冲突，相反，而是一种更好的结合。话说，单纯用用

  3. 所属分类：其它

    • 发布日期：2021-03-01
    • 文件大小：716kb
    • 提供者：weixin_38623919

  1. MapReduce、Spark、Phoenix、Disco、Mars浅析及性能测试

  2. 当使用Hadoop技术架构集群，集群内新增、删除节点，或者某个节点机器内硬盘存储达到饱和值时，都会造成集群内数据分布不均匀、数据丢失风险增加等问题出现。本文对HDFS内部的数据平衡方式做了介绍，通过实验案例的方式向读者解释内部数据平衡的解决办法。目前开源社区有许多并行计算模型和框架可供选择，按照实现方式、运行机制、依附的产品生态圈等可以被划分为几个类型，每个类型各有优缺点，如果能够对各类型的并行计算框架都进行深入研究及适当的缺点修复，就可以为不同硬件环境下的海量数据分析需求提供不同的软件层面的解

  3. 所属分类：其它

    • 发布日期：2021-02-26
    • 文件大小：585kb
    • 提供者：weixin_38614377

  1. MapReduce、Spark、Phoenix、Disco、Mars浅析及性能测试

  2. 当使用Hadoop技术架构集群，集群内新增、删除节点，或者某个节点机器内硬盘存储达到饱和值时，都会造成集群内数据分布不均匀、数据丢失风险增加等问题出现。本文对HDFS内部的数据平衡方式做了介绍，通过实验案例的方式向读者解释内部数据平衡的解决办法。目前开源社区有许多并行计算模型和框架可供选择，按照实现方式、运行机制、依附的产品生态圈等可以被划分为几个类型，每个类型各有优缺点，如果能够对各类型的并行计算框架都进行深入研究及适当的缺点修复，就可以为不同硬件环境下的海量数据分析需求提供不同的软件层面的解

  3. 所属分类：其它

    • 发布日期：2021-01-30
    • 文件大小：535kb
    • 提供者：weixin_38735782

  1. 基于Docker快速部署多需求Spark自动化测试环境

  2. 本文来自于CSDN，文章主要介绍基于Spark Cluster环境以及相应的Client端测试环境的部署进而实现快速自动化测试等香菇那内容。 在进行数据分析时，Spark越来越广泛的被使用。在测试需求越来越多、测试用例数量越来越大的情况下，能够根据需求快速自动化部署 Spark环境、快速完成所有测试越来越重要。本文基于Docker、Jenkins、ApacheAnt、Apache

  3. 所属分类：其它

  1. Spark三种属性配置方式详解

  2. 随着Spark项目的逐渐成熟, 越来越多的可配置参数被添加到Spark中来。在Spark中提供了三个地方用于配置： 　　1、Spark properties：这个可以控制应用程序的绝大部分属性。并且可以通过 SparkConf对象或者Java 系统属性进行设置； 　　2、环境变量(Environment variables)：这个可以分别对每台机器进行相应的设置，比如IP。这个可以在每台机器的$SPARK_HOME/ conf/spark-env.sh脚本中进行设置； 　　3、日志：所有的日志

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：68kb
    • 提供者：weixin_38688097

  1. Windows下安装spark-hadoop步骤

  2. 前言 本章将介绍如何在Windows下实现spark环境搭建。 本章概要 1、版本说明 2、环境准备： jdk配置； spark安装与配置； hadoop安装与配置； IDEA的安装与配置 版本说明 jdk：1.8 spark：2.4.5 hadoop：2.7.1 我把的安装软件的放到云盘了，链接：https://pan.baidu.com/s/1SLdfe40SZx9FjRl_09_beQ  提取码：tp7p  环境准备 A、JDK1.8 1.下载jdk,官网地址:https://w

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：311kb
    • 提供者：weixin_38659646

  1. 数据流计算环境下的集群资源管理技术

  2. 以集群为基础的高性能计算的发展经历了3个阶段的演化，即计算子系统与存储子系统的分离、计算子系统与存储子系统的融合以及以数据并行为基础的dataflow编程模型。随着Spark、Flink等数据流编程模型在大数据计算领域的广泛使用，计算作业类型千变万化，如何保证各种数据流计算作业对集群资源的共享使用是集群资源管理的核心，也是降低基础设施成本的主要手段。分析集群资源管理的历史变化，从数据流编程模型的角度出发，对HoD、集中式、双层调度、分布式以及混合式管理展开了深入的探索，介绍了其各自的优缺点以及应

  3. 所属分类：其它

« 12 3 4 5 6 7 »