您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. Hadoop技术内幕 深入解析Hadoop Common和HDFS架构设计与实现原理.pdf

  2. 前 言 第一部分 环境准备 第1章 源代码环境准备 1.1 什么是Hadoop 1.1.1 Hadoop简史 1.1.2 Hadoop的优势 1.1.3 Hadoop生态系统 1.2 准备源代码阅读环境 1.2.1 安装与配置JDK 1.2.2 安装Eclipse 1.2.3 安装辅助工具Ant 1.2.4 安装类UNIX Shell环境Cygwin 1.3 准备Hadoop源代码 1.3.1 下载Hadoop 1.3.2 创建Eclipse项目 1.3.3 Hadoop源代码组织 1.4 小
  3. 所属分类:Java

    • 发布日期:2015-11-24
    • 文件大小:57mb
    • 提供者:yuan_xw
  1. java API 操作HDFS

  2. javaAPI操作HDFS,测试可用 window环境需要下载hadoop客户端
  3. 所属分类:Hadoop

    • 发布日期:2018-05-08
    • 文件大小:4kb
    • 提供者:qq421153173
  1. hbase应用架构指南

  2. Hbase全称为Hadoop Database,即Hbase是Hadoop的数据库,是一个分布式的存储系统。Hbase利用Hadoop的HDFS作为其文件存储系统,利用Hadoop的MapReduce来处理Hbase中的海量数据。利用zookeeper作为其协调工具。 本篇文章将重点介绍Hbase三个方面的内容:Hbase体系结构(架构)的介绍、Hbase shell的操作、Hbase的Java api的客户端操作
  3. 所属分类:其它

    • 发布日期:2019-02-14
    • 文件大小:137mb
    • 提供者:weixin_33522267
  1. hadoop-2.6.5-win10x64-1809.tar.gz

  2. windows系统HDFS,能够使用java客户端操作HDFS(开发工具有IDEA,Eclipse插件)
  3. 所属分类:Hadoop

    • 发布日期:2020-02-26
    • 文件大小:174mb
    • 提供者:qq_42859864
  1. HDFS Comics HDFS 漫画

  2. HDFS是Hadoop分布式计算的存储基础。HDFS具有高容错性,可以部署在通用硬件设备上,适合数据密集型应用,并且提供对数据读写的高吞 吐量。HDFS能 够提供对数据的可扩展访问,通过简单地往集群里添加节点就可以解决大量客户端同时访问的问题。HDFS支持传统的层次文件组织结构,同现 有的一些文件系 统类似,如可以对文件进行创建、删除、重命名等操作。FAULT TOLERANCE IN HDFS. PART I: TYPES OF FAULTS AND THEIR DETECTION FAULT
  3. 所属分类:Hadoop

    • 发布日期:2019-07-02
    • 文件大小:3mb
    • 提供者:abacaba
  1. HDFS的Trash回收站功能的配置和使用

  2. HDFS是Hadoop分布式计算的存储基础。HDFS具有高容错性,可以部署在通用硬件设备上,适合数据密集型应用,并且提供对数据读写的高吞 吐量。HDFS能 够提供对数据的可扩展访问,通过简单地往集群里添加节点就可以解决大量客户端同时访问的问题。HDFS支持传统的层次文件组织结构,同现 有的一些文件系 统类似,如可以对文件进行创建、删除、重命名等操作。
  3. 所属分类:Hadoop

    • 发布日期:2019-07-02
    • 文件大小:412kb
    • 提供者:abacaba
  1. HDFS集群搭建

  2. HDFS是Hadoop分布式计算的存储基础。HDFS具有高容错性,可以部署在通用硬件设备上,适合数据密集型应用,并且提供对数据读写的高吞 吐量。HDFS能 够提供对数据的可扩展访问,通过简单地往集群里添加节点就可以解决大量客户端同时访问的问题。HDFS支持传统的层次文件组织结构,同现 有的一些文件系 统类似,如可以对文件进行创建、删除、重命名等操作。 cname>hadoop. proxyuser. htpfs hosts</name: * /property> hadoo
  3. 所属分类:Hadoop

    • 发布日期:2019-07-02
    • 文件大小:515kb
    • 提供者:abacaba
  1. hdfs源码.zip

  2. 第1章 HDFS 1 1.1 HDFS概述 1 1.1.1 HDFS体系结构 1 1.1.2 HDFS基本概念 2 1.2 HDFS通信协议 4 1.2.1 Hadoop RPC接口 4 1.2.2 流式接口 20 1.3 HDFS主要流程 22 1.3.1 HDFS客户端读流程 22 1.3.2 HDFS客户端写流程 24 1.3.3 HDFS客户端追加写流程 25 1.3.4 Datanode启动、心跳以及执行名字节点指令流程 26 1.3.5 HA切换流程 27 第2章 Hadoop RP
  3. 所属分类:互联网

    • 发布日期:2020-07-14
    • 文件大小:157mb
    • 提供者:m0_46190977
  1. Hadoop02---HDFS基础(HDFS原理 java客户端).md

  2. 自己的笔记,仅供参考,包含HDFS的启动停止,HDFS基本原理(上传文件、连接校验,下载文件,数据存储位置,通信机制,namenode和DataNode职责,元数据工作机制),java端操作HDFS的基本方法
  3. 所属分类:Hadoop

    • 发布日期:2020-11-27
    • 文件大小:11kb
    • 提供者:lb634774742
  1. Hadoop学习笔记(二)Hadoop 分布式文件系统 HDFS:1.HDFS基础

  2. HDFS客户端操作(开发重点) 1. HDFS客户端环境准备 1.1、请参考文章: Windows10下搭建eclipse开发hadoop的开发环境 其中的第一至四步骤。 1.2、请参考文章: maven的安装、路径配置、修改库文件路径和eclipse中的配置,解决Eclipse使用Maven下载慢的问题 1.3、创建一个maven工程HDFS 1.4、 导入相应的依赖坐标加日志添加 junit junit RELEASE org.apache.logging.log4j l
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:89kb
    • 提供者:weixin_38703895
  1. Hadoop之HDFS的数据流

  2. Hadoop之HDFS概述 :https://blog.csdn.net/weixin_45102492/article/details/104369155 Hadoop之HDFS的shell操作: https://blog.csdn.net/weixin_45102492/article/details/104372580 HDFS的java客户端操作:https://blog.csdn.net/weixin_45102492/article/details/104378020 NameNod
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:122kb
    • 提供者:weixin_38745925
  1. HDFS操作流程+代码操作HDFS

  2. 读流程 客户端发起RPC请求访问NameNode namenode会查询元数据,找到这个文件的存储位置对应的数据块信息 namenode将文件对应的数据块的节点地址全部或者部分放入一个队列中然后返回 client收到这个数据块对应的节点地址 client会从队列中取第一个数据块的对应的节点地址,会从这些节点地址中选择一个最近的节点进行读取 将block读取之后,对block进行checksum验证,如果验证失败,说明数据块产生损,那么client会向namenode发送信息说明该节点上的数据块
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:113kb
    • 提供者:weixin_38707342
  1. Hadoop之HDFS的shell操作

  2. Hadoop之HDFS概述 :https://blog.csdn.net/weixin_45102492/article/details/104369155 HDFS的java客户端操作:https://blog.csdn.net/weixin_45102492/article/details/104378020 Hadoop之HDFS的数据流:https://blog.csdn.net/weixin_45102492/article/details/104384789 NameNode和Sec
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:53kb
    • 提供者:weixin_38682242
  1. 快速学习-HDFS客户端操作

  2. 第3章 HDFS客户端操作(开发重点) 3.1 HDFS客户端环境准备 根据自己电脑的操作系统拷贝对应的编译后的hadoop jar包到非中文路径(例如:D:\Develop\hadoop-2.7.2),如图3-4所示。 配置HADOOP_HOME环境变量,如图3-5所示。 配置Path环境变量,如图3-6所示。 创建一个Maven工程HdfsClientDemo junit junit RELEASE org.apache.logging.log4j lo
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:229kb
    • 提供者:weixin_38537968
  1. HDFS读取和写入数据简介

  2. HDFS 的文件访问机制为流式访问机制,即通过 API 打开文件的某个数据块之后,可以顺序读取或者写入某个文件。由于 HDFS 中存在多个角色,且对应的应用场景主要为一次写入、多次读取的场景,因此其读和写的方式有较大不同。读/写操作都由客户端发起,并且由客户端进行整个流程的控制,NameNode 和 DataNode 都是被动式响应。 读取流程 客户端发起读取请求时,首先与 NameNode 进行连接。 连接建立完成后,客户端会请求读取某个文件的某一个数据块。NameNode 在内存中进行检索
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:105kb
    • 提供者:weixin_38705873
  1. HDFS全面详解

  2. HadoopHDFS分布式文件系统DFS简介HDFS的系统组成介绍HDFS的组成部分详解副本存放策略及路由规则命令行接口Java接口客户端与HDFS的数据流讲解掌握hdfs的shell操作掌握hdfs的javaapi操作理解hdfs的工作原理设计思想分而治之:将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析;在大数据系统中作用:为各类分布式运算框架(如:mapreduce,spark,tez,……)提供数据存储服务重点概念:文件切块,副本存放,元数据
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:430kb
    • 提供者:weixin_38518668
  1. 深入理解HDFS:Hadoop分布式文件系统

  2. 在现代的企业环境中,单机容量往往无法存储大量数据,需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统。而一旦在系统中,引入网络,就不可避免地引入了所有网络编程的复杂性,例如挑战之一是如果保证在节点不可用的时候数据不丢失。传统的网络文件系统(NFS)虽然也称为分布式文件系统,但是其存在一些限制。由于NFS中,文件是存储在单机上,因此无法提供可靠性保证,当很多客户端同时访问NFSServer时,很容易造成服务器压力,造成性能瓶颈。另外如果要对NFS中的文件中进行操作,需要首先同步到本地
  3. 所属分类:其它

  1. HDFS可视化远程连接工具.zip

  2. 远程连接hdfs的客户端工具可以新建修改删除目录及文件,操作方便快捷。可以查询到里面存储的文件,也可以通过拖拽,选择等方式直接上传,避免了使用命令去上传下载的复杂操作
  3. 所属分类:FTP

    • 发布日期:2021-02-22
    • 文件大小:1mb
    • 提供者:LiDadaBiubiu
  1. HDFS的java客户端操作

  2. Hadoop之HDFS概述 :https://blog.csdn.net/weixin_45102492/article/details/104369155 Hadoop之HDFS的shell操作: https://blog.csdn.net/weixin_45102492/article/details/104372580 Hadoop之HDFS的数据流:https://blog.csdn.net/weixin_45102492/article/details/104384789 NameNo
  3. 所属分类:其它

    • 发布日期:2021-01-20
    • 文件大小:207kb
    • 提供者:weixin_38680506
  1. HDFS客户端操作

  2. 1. HDFS客户端环境搭建 1.1 安装hadoop 1.安装对应的编译后的hadoop包到非中文路径下 1.1 这里简单阐述一下在搭建环境时为什么hadoop需要重新编译源码 答: hadoop是用java写的,但是某些操作不适合用java实现,所以用的是c/c++的动态库(本地库),所以需要根据不同的处理器架构,重新编译,他们以库的形式提供接口供上层调用。 2.配置HADOOP_HOME相关环境变量(如何配置hadoop环境变量笔者就不在赘述,跟Java同理) 1.2 创建Mave
  3. 所属分类:其它

    • 发布日期:2021-01-20
    • 文件大小:57kb
    • 提供者:weixin_38706007
« 12 3 »