您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. Hadoop源码剖析

  2. Hadoop源码剖析,Mapper、 Reducer、JobTracker等类分析。
  3. 所属分类:Java

    • 发布日期:2009-12-01
    • 文件大小:178kb
    • 提供者:kinghongen
  1. Apress - Pro Hadoop

  2. Hadoop 项目主页:http://hadoop.apache.org   一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。 起源:Google的集群系统   Google的数据中心使用廉价的Linux PC机组成集群,在上面运行各种应用。即使是分布式开发的新手也可以迅速使用Google的基础设施。核心组件是3个:   1、GFS(Google File System)。一个分布式文件系统,隐藏下层负
  3. 所属分类:Linux

    • 发布日期:2010-01-06
    • 文件大小:4mb
    • 提供者:lele1230
  1. hadoop安装与配置及mapreduce测试网站

  2. hadoop安装与配置及mapreduce测试网站
  3. 所属分类:Java

    • 发布日期:2010-11-08
    • 文件大小:49kb
    • 提供者:delolo
  1. 四台机器配置Hadoop集群的被指文件,范例,

  2. 这个是我做实验时候用的配置文件,和大家共享了 这个是我做实验时候用的配置文件,和大家共享了 工4台机器,一台当NameNode和JobTracker ,另外3台当tasktracker 和 datanode.
  3. 所属分类:专业指导

    • 发布日期:2010-11-30
    • 文件大小:12kb
    • 提供者:wang382758656
  1. pig-0.9.1.tar.gz

  2. Pig是yahoo捐献给apache的一个项目,它是SQL-like语言,是在MapReduce上构建的一种高级查询语言,把一些运算编译进MapReduce模型的Map和Reduce中,并且用户可以定义自己的功能。这是Yahoo开发的又一个克隆Google的项目:Sawzall。 Pig是一个客户端应用程序,就算你要在Hadoop集群上运行Pig,也不需要在集群上装额外的东西。Pig的安装是灰常的简单的: 1、安装JAVA6(在Windows的话要装Cygwin),设置好JAVA_HOME。
  3. 所属分类:其它

    • 发布日期:2011-12-24
    • 文件大小:40mb
    • 提供者:yousteely
  1. Hadoop技术内幕:深入解析MapReduce架构设计i与实现原理 迷你书

  2. “Hadoop技术内幕”共两册,分别从源代码的角度对“Common+HDFS”和“MapReduce的架构设计和实现原理”进行了极为详细的分析。《Hadoop技术内幕:深入解析MapReduce架构设计与实现原理》由Hadoop领域资深的实践者亲自执笔,首先介绍了MapReduce的设计理念和编程模型,然后从源代码的角度深入分析了RPC框架、客户端、JobTracker、TaskTracker和Task等MapReduce运行时环境的架构设计与实现原理,最后从实际应用的角度深入讲解了Hadoo
  3. 所属分类:Java

    • 发布日期:2013-05-17
    • 文件大小:10mb
    • 提供者:wangliliuban
  1. EasyHadoop部署实战手册_VM测试版本

  2. 文档概述   本文档是Hadoop部署文档,提供了Hadoop单机安装和Hadoop集群安装的方法和步骤,本文档希望让Hadoop安装部署更简单(Easy)。   本安装文档适用于 centos 5 /red hat 5.2 32位,64位版本,ubuntu 等操作系统 需要做部分修改。 EasyHadoop集群部署入门 修订记录 日期 修改原因 描述 作者 2012/02/14 初稿 Hadoop部署文档 向磊 2012/07/14 完善细节 新基础环境配置,修改配置文件,修改架构图。 童小
  3. 所属分类:其它

    • 发布日期:2013-07-15
    • 文件大小:1mb
    • 提供者:simplty
  1. Hadoop入门实战手册

  2. 1 概述 1.1  什么是Hadoop? 1.2  为什么要选择Hadoop? 1.2.1  系统特点 1.2.2  使用场景 2 术语 3 Hadoop的单机部署 3.1  目的 3.2  先决条件 3.2.1  支持平台 3.2.2  所需软件 3.2.3  安装软件 3.3  下载 3.4  运行Hadoop集群的准备工作 3.5  单机模式的操作方法 3.6  伪分布式模式的操作方法 3.6.1  配置 3.6.2  免密码ssh设置 3.6.3  执行 4 Hadoop集群搭建过程手
  3. 所属分类:其它

    • 发布日期:2013-08-20
    • 文件大小:881kb
    • 提供者:jsntghf
  1. hadoop0.23.9离线api

  2. hadoop0.23.9离线api,解压后进入 doc 目录 ,双击 index.html 和javaapi一样 All Classes Packages org.apache.hadoop org.apache.hadoop.classification org.apache.hadoop.conf org.apache.hadoop.contrib.utils.join org.apache.hadoop.examples org.apache.hadoop.examples.dancin
  3. 所属分类:Java

    • 发布日期:2013-08-28
    • 文件大小:9mb
    • 提供者:younglibin
  1. hadoop 1.2.1 api 最新chm 伪中文版

  2. hadoop 1.2 api 伪中文版。支持即时查询,高级查询。方便编码学习。 大数据炙手可热!hadoop是一个大数据分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有着高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上。而且它提供高传输率(high through
  3. 所属分类:Java

    • 发布日期:2013-10-25
    • 文件大小:5mb
    • 提供者:u012260637
  1. hadoop mapreduce api 中文版 2013年最新1.2.1

  2. 深圳电信培训中心徐海蛟博士 hadoop map/reduce教学用的hadoop 最新1.2 map/reduce api 中文版。支持即时查询,高级查询。方便编码学习。 大数据炙手可热!hadoop是一个大数据分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有着高容错性的特点,并
  3. 所属分类:其它

    • 发布日期:2013-10-25
    • 文件大小:5mb
    • 提供者:helloabc99
  1. mapreduce报错解决办法总结

  2. Jobtracker启动报错:解决方法:导入guava-r09-jarjar.jar org/apache/hadoop/thirdparty/guava/common/collect/LinkedListMultimap错误分析及解决方法: Intel版本hadoop因为缺少license,启动jobtracker报错:
  3. 所属分类:Java

    • 发布日期:2013-10-30
    • 文件大小:28kb
    • 提供者:u012625224
  1. Hadoop 入门pdf文档

  2. Hadoop 入门文档 Hadoop 的系统中,会有一台Master,主要负责NameNode 的工作以及JobTracker 的工 作。JobTracker 的主要职责 就是启动、跟踪和调度各个Slave 的任务执行。还会有多台Sl ave,每一台Slave 通常具有DataNode 的功能并负责TaskTracker 的 工作。TaskTracker 根据应用要求来结合本地数据执行Map 任务以及Reduce 任务。 说到这里,就要提到分布式计算最重要的一个设计点:Moving Compu
  3. 所属分类:其它

    • 发布日期:2013-12-04
    • 文件大小:294kb
    • 提供者:kingjin55
  1. 2013中国大数据技术大会PPT——腾讯大规模Hadoop集群实践

  2. 【大数据架构与系统】腾讯数据中心资深专家翟艳堂分享了腾讯建立大规模Hadoop集群的过程,首先要解决单点问题,将JobTracker分散化,做NameNode高可用。在业务选型方面,选择了成熟度更高的Facebook开源的Corona。
  3. 所属分类:群集服务

    • 发布日期:2013-12-12
    • 文件大小:656kb
    • 提供者:makuiyu
  1. 《Hadoop技术内幕:深入解析MapReduce架构设计i与实现原理》迷你书_1分.pdf )

  2. 《Hadoop技术内幕:深入解析MapReduce架构设计i与实现原理》迷你书_1分.pdf ) Hadoop 技术内幕 JobTracker TaskTracker RPC框架
  3. 所属分类:Web开发

    • 发布日期:2015-10-28
    • 文件大小:10mb
    • 提供者:celestialtao
  1. MapReduceV1:JobTracker处理Heartbeat流程分析

  2. 我们基于Hadoop1.2.1源码分析MapReduceV1的处理流程。这篇文章的内容,更多地主要是描述处理/交互流程性的东西,大部分流程图都是经过我梳理后画出来的(开始我打算使用序列图来描述流程,但是发现很多流程在单个对象内部都已经非常复杂,想要通过序列图表达有点担心描述不清,所以选择最基本的程序流程图),可能看起来比较枯燥,重点还是关注主要的处理流程要点,特别的地方我会刻意标示出来,便于理解。JobTracker与TaskTracker之间通过org.apache.hadoop.mapred
  3. 所属分类:其它

    • 发布日期:2021-02-26
    • 文件大小:154kb
    • 提供者:weixin_38739837
  1. MapReduceV1:Job提交流程之JobTracker端分析

  2. 我们基于Hadoop1.2.1源码分析MapReduceV1的处理流程。MapReduceV1实现中,主要存在3个主要的分布式进程(角色):JobClient、JobTracker和TaskTracker,我们主要是以这三个角色的实际处理活动为主线,并结合源码,分析实际处理流程。上一篇我们分析了Job提交过程中JobClient端的处理流程(详见文章MapReduceV1:Job提交流程之JobClient端分析),这里我们继续详细分析Job提交在JobTracker端的具体流程。通过阅读源码可
  3. 所属分类:其它

    • 发布日期:2021-02-26
    • 文件大小:151kb
    • 提供者:weixin_38543293
  1. MapReduceV1:JobTracker端Job/Task数据结构

  2. 我们基于Hadoop1.2.1源码分析MapReduceV1的处理流程。在MapReduce程序运行的过程中,JobTracker端会在内存中维护一些与Job/Task运行相关的信息,了解这些内容对分析MapReduce程序执行流程的源码会非常有帮助。在编写MapReduce程序时,我们是以Job为单位进行编程处理,一个应用程序可能由一组Job组成,而MapReduce框架给我们暴露的只是一些Map和Reduce的函数接口,在运行期它会构建对应MapTask和ReduceTask,所以我们知道一
  3. 所属分类:其它

  1. MapReduceV1:JobTracker处理Heartbeat流程分析

  2. 我们基于Hadoop1.2.1源码分析MapReduceV1的处理流程。这篇文章的内容,更多地主要是描述处理/交互流程性的东西,大部分流程图都是经过我梳理后画出来的(开始我打算使用序列图来描述流程,但是发现很多流程在单个对象内部都已经非常复杂,想要通过序列图表达有点担心描述不清,所以选择最基本的程序流程图),可能看起来比较枯燥,重点还是关注主要的处理流程要点,特别的地方我会刻意标示出来,便于理解。JobTracker与TaskTracker之间通过org.apache.hadoop.mapred
  3. 所属分类:其它

    • 发布日期:2021-02-20
    • 文件大小:154kb
    • 提供者:weixin_38521169
  1. MapReduceV1:JobTracker端Job/Task数据结构

  2. 我们基于Hadoop1.2.1源码分析MapReduceV1的处理流程。在MapReduce程序运行的过程中,JobTracker端会在内存中维护一些与Job/Task运行相关的信息,了解这些内容对分析MapReduce程序执行流程的源码会非常有帮助。在编写MapReduce程序时,我们是以Job为单位进行编程处理,一个应用程序可能由一组Job组成,而MapReduce框架给我们暴露的只是一些Map和Reduce的函数接口,在运行期它会构建对应MapTask和ReduceTask,所以我们知道一
  3. 所属分类:其它

« 12 3 4 5 »