注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. Hadoop HDFS系统双机热备方案

  2. 方案1 drbd+heartbeat 采用drbd实现共享存储，采用heartbeat实现心跳监控，所有服务器都配有双网卡，其中一个网卡专门用于建立心跳网络连接。 方案2磁盘阵列或SAN+ heartbeat 名字节点负责整个文件系统目录结构、文档权限和文档的扩展属性连同维护整个文档系统的数据一致性和响应客户端的请求。HDFS能够配置两个名字节点服务器，采用active/passive模式，两个服务器采用共享存储的方式来存放元数据。当某个名字节点出现故障后，备份服务器能够接管其服务，确保系统的

  3. 所属分类：系统集成

    • 发布日期：2013-02-21
    • 文件大小：214kb
    • 提供者：gjd8798

  1. 高可用性的HDFS-Hadoop分布式文件系统深度实践.part1.rar

  2. 《高可用性的HDFS——Hadoop分布式文件系统深度实践》专注于Hadoop分布式文件系统（hdfs）的主流ha解决方案，内容包括：hdfs元数据解析、hadoop元数据备份方案、hadoop backup node方案、avatarnode解决方案以及最新的ha解决方案cloudrea ha name node等。其中有关backup node方案及avatarnode方案的内容是本书重点，尤其是对avatarnode方案从运行机制到异常处理方案的步骤进行了详尽介绍，同时还总结了各种异常情

  3. 所属分类：其它

    • 发布日期：2013-10-18
    • 文件大小：28mb
    • 提供者：jmlplayer

  1. 高可用性的HDFS-Hadoop分布式文件系统深度实践.part2.rar

  2. 《高可用性的HDFS——Hadoop分布式文件系统深度实践》专注于Hadoop分布式文件系统（hdfs）的主流ha解决方案，内容包括：hdfs元数据解析、hadoop元数据备份方案、hadoop backup node方案、avatarnode解决方案以及最新的ha解决方案cloudrea ha name node等。其中有关backup node方案及avatarnode方案的内容是本书重点，尤其是对avatarnode方案从运行机制到异常处理方案的步骤进行了详尽介绍，同时还总结了各种异常情

  3. 所属分类：其它

    • 发布日期：2013-10-18
    • 文件大小：28mb
    • 提供者：jmlplayer

  1. 高可用性的HDFS-Hadoop分布式文件系统深度实践.part3.rar

  2. 《高可用性的HDFS——Hadoop分布式文件系统深度实践》专注于Hadoop分布式文件系统（hdfs）的主流ha解决方案，内容包括：hdfs元数据解析、hadoop元数据备份方案、hadoop backup node方案、avatarnode解决方案以及最新的ha解决方案cloudrea ha name node等。其中有关backup node方案及avatarnode方案的内容是本书重点，尤其是对avatarnode方案从运行机制到异常处理方案的步骤进行了详尽介绍，同时还总结了各种异常情

  3. 所属分类：其它

    • 发布日期：2013-10-18
    • 文件大小：28mb
    • 提供者：jmlplayer

  1. 高可用性的HDFS-Hadoop分布式文件系统深度实践.part4.rar

  2. 《高可用性的HDFS——Hadoop分布式文件系统深度实践》专注于Hadoop分布式文件系统（hdfs）的主流ha解决方案，内容包括：hdfs元数据解析、hadoop元数据备份方案、hadoop backup node方案、avatarnode解决方案以及最新的ha解决方案cloudrea ha name node等。其中有关backup node方案及avatarnode方案的内容是本书重点，尤其是对avatarnode方案从运行机制到异常处理方案的步骤进行了详尽介绍，同时还总结了各种异常情

  3. 所属分类：其它

    • 发布日期：2013-10-18
    • 文件大小：13mb
    • 提供者：jmlplayer

  1. 高可用性的HDFS:Hadoop分布式文件系统深度实践

  2. 本书专注于Hadoop 分布式文件系统（HDFS）的主流HA 解决方案，内容包括：HDFS 元数据解析、Hadoop 元数据备份方案、Hadoop Backup Node 方案、AvatarNode 解决方案以及最新的HA 解决方案Cloudrea HA Name Node 等。其中有关Backup Node 方案及AvatarNode 方案的内容是本书重点，尤其是对AvatarNode 方案从运行机制到异常处理方案的步骤进行了详尽介绍，同时还总结了各种异常情况下AvatarNode 的各种处

  3. 所属分类：Java

    • 发布日期：2013-11-29
    • 文件大小：7mb
    • 提供者：w397090770

  1. hdfs-元数据测试

  2. 本文重在探索hdfs分布式文件系统的元数据合并及更新原理。

  3. 所属分类：Hadoop

    • 发布日期：2017-10-23
    • 文件大小：730kb
    • 提供者：yangguowucao

  1. 基于大数据平台构建数据仓库的研究与实践.pdf

  2. 数据仓库设计文档，帮助大家理解及如何设计数据仓库，很不错的一篇论文。专题 lTo 学习体系,能从海量数据中提炼高价值信息,构建自主 (1)源系统结构化数据:源系统按大数据平合的 训练与反馈、可不断从最新数据中调整演化的智能业务供数规范要求提供表数据文本和标志文件。 模型体系。 (2)文件交换区FSA:文件的交换中枢,含源系 以 Hadoop^ Spark为代表的大规模数据处理技术为统结构化数据和半结构化、非结构化数据(主要是外部 超越传统数据库的处理局限性提供了先进的并行计算和数据)。 资源调度

  3. 所属分类：其它

    • 发布日期：2019-07-16
    • 文件大小：1mb
    • 提供者：bucaixia08

  1. 大数据.pdf

  2. 大数据理论知识讲解，及Hadoop的配置，4V属性讲解，Nosql2、搭建 Hadoop集群环境 21安装DK 见附件:《DK环境搭建.md》 22搭建z0 keeper集群 见附件:《乙K环境搭建.md》 23搭建 hadoop集群 见巛 hadoop集群搭建md》 六、 Hadoop-HDFS 1、简介 Hadoop Distributed File Systen Hadoop的分布式文件系统,是GFs( Google File System)的克隆 分布式 分别部署,将一个系统划分为多个子

  3. 所属分类：Hadoop

    • 发布日期：2019-08-17
    • 文件大小：698kb
    • 提供者：longhhao

  1. Vertica实时数据分析平台

  2. 深度介绍Vertica产品总体架构、核心优势、集群能力、Vertica与Hadoop的数据交换、SQL高级分析、与分布式R无缝集成、灾备能力等等，是不可多得的了解Vertica的好资料。数据分析平台演进阶段及挑战 事件触发,全量数据实时分析频 价值实 业务相关性分析 繁访问 产品分析、用户行为分析客客户活动预测,客户流失预测,直接提升业务 户分析等灵活直询和数据分析产品盈利预测 面向大量业务人员 MOLAP CUBE生成 面向少量管理者的机器学习和 现整合层行业模型批量加工 预测 监管报送等数据

  3. 所属分类：Hadoop

    • 发布日期：2019-04-20
    • 文件大小：4mb
    • 提供者：skyon

  1. Hadoop02---HDFS基础(HDFS原理 java客户端).md

  2. 自己的笔记，仅供参考，包含HDFS的启动停止，HDFS基本原理（上传文件、连接校验，下载文件，数据存储位置，通信机制，namenode和DataNode职责，元数据工作机制），java端操作HDFS的基本方法

  3. 所属分类：Hadoop

    • 发布日期：2020-11-27
    • 文件大小：11kb
    • 提供者：lb634774742

  1. 大数据框架整理

  2. 大数据离线部分 　　一、HDFS 　　1：HDFS的架构部分及工作原理 　　NameNode：负责管理元素据，将信息保存在内存中 　　DataNode：保存数据，以块的形式保存。启动后需要定时的向NameNode发送心跳，报告自身存储的块信息 　　2：HDFS的上传过程 　　3：HDFS的下载 　　4：NameNode的元数据安全机制 　　以记日志的形式将每一个操作写在磁盘的日志文件中，然后借助Secondary NameNode的checkpoint功能将fsImage和日志进

  3. 所属分类：其它

    • 发布日期：2020-12-22
    • 文件大小：101kb
    • 提供者：weixin_38592134

  1. 【大数据入门笔记系列】第三节 Hdfs读、写数据处理流程

  2. 【大数据入门笔记系列】第三节 Hdfs读、写数据处理流程Hdfs简介写数据处理流程读数据处理流程后记跳转 Hdfs简介 一般而言，Hdfs是由一个NameNode节点和若干个DataNode节点组成（非高可用，高可用还有一个SecondNameNode）。 NameNode：管理分布式文件系统的元数据，这些元数据是一些诸如描述文件的存储路径以及block具体在哪些DataNode上的具体位置等； DataNode：DataNode节点用来保存文件数据块（block），它只负责接受存储、查询发送

  3. 所属分类：其它

    • 发布日期：2021-01-07
    • 文件大小：712kb
    • 提供者：weixin_38678550

  1. HDFS原理、架构与特性介绍

  2. 本文主要讲述HDFS原理-架构、副本机制、HDFS负载均衡、机架感知、健壮性、文件删除恢复机制1、NameNode2、DataNode3、SencondaryNameNodeNamenode的目录结构：dfs.name.dir是hdfs-site.xml里配置的若干个目录组成的列表。Namenode上保存着HDFS的名字空间。对于任何对文件系统元数据产生修改的操作，Namenode都会使用一种称为EditLog的事务日志记录下来。例如，在HDFS中创建一个文件，Namenode就会在Editlo

  3. 所属分类：其它

    • 发布日期：2021-03-02
    • 文件大小：536kb
    • 提供者：weixin_38652636

  1. 常见分布式系统数据分布解析

  2. 研究分布式文件系统时间也不短了，接触过的文件系统也不少，趁着这2014到来之际，花点时间用来总结总结。接触过的文件系统有glusterfs、moosefs、lustre及hdfs等，其架构简单顺带解说一点，总体来说分为元数据中心式及去中心式。其实除了glusterfs，其他的都是元数据中心式的分布式文件系统。对于文件系统的架构只进行简单的解说，现在主要对以上各种文件系统的数据分布方式进行总结分析，顺便从其数据分布方式中分析其性能，可用性，适用性等等。Lustre是个人最早接触的一个分布式文件系统

  3. 所属分类：其它

    • 发布日期：2021-02-26
    • 文件大小：705kb
    • 提供者：weixin_38645862

  1. Ambari接管线上Hadoop游戏数据集群实践

  2. 本文来自于infoq.com，介绍生产环境中Hadoop集群现状、Ambari的关键技术，Ambari管理监控线上Hadoop集群的技术方案，线上接管过程中的问题和解决方式。首先介绍我们生产环境中Hadoop集群的现状，Hadoop集群主要承担了数据接入存储、离线计算的职责，同时提供其上数据调度等自研系统的基础服务。生产环境中Hadoop使用的版本是v2.7.3，下面介绍其主要组件。首先HDFS采用了HAwithQJM的高可用架构，即采用StandbyNamenode热备、多节点协同同步Acti

  3. 所属分类：其它

    • 发布日期：2021-02-25
    • 文件大小：622kb
    • 提供者：weixin_38563871

  1. HDFS全面详解

  2. HadoopHDFS分布式文件系统DFS简介HDFS的系统组成介绍HDFS的组成部分详解副本存放策略及路由规则命令行接口Java接口客户端与HDFS的数据流讲解掌握hdfs的shell操作掌握hdfs的javaapi操作理解hdfs的工作原理设计思想分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析；在大数据系统中作用：为各类分布式运算框架（如：mapreduce，spark，tez，……）提供数据存储服务重点概念：文件切块，副本存放，元数据

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：430kb
    • 提供者：weixin_38518668

  1. HDFS原理、架构与特性介绍

  2. 本文主要讲述HDFS原理-架构、副本机制、HDFS负载均衡、机架感知、健壮性、文件删除恢复机制1、NameNode2、DataNode3、SencondaryNameNodeNamenode的目录结构：dfs.name.dir是hdfs-site.xml里配置的若干个目录组成的列表。Namenode上保存着HDFS的名字空间。对于任何对文件系统元数据产生修改的操作，Namenode都会使用一种称为EditLog的事务日志记录下来。例如，在HDFS中创建一个文件，Namenode就会在Editlo

  3. 所属分类：其它

    • 发布日期：2021-02-03
    • 文件大小：536kb
    • 提供者：weixin_38592256

  1. 常见分布式系统数据分布解析

  2. 研究分布式文件系统时间也不短了，接触过的文件系统也不少，趁着这2014到来之际，花点时间用来总结总结。接触过的文件系统有glusterfs、moosefs、lustre及hdfs等，其架构简单顺带解说一点，总体来说分为元数据中心式及去中心式。其实除了glusterfs，其他的都是元数据中心式的分布式文件系统。对于文件系统的架构只进行简单的解说，现在主要对以上各种文件系统的数据分布方式进行总结分析，顺便从其数据分布方式中分析其性能，可用性，适用性等等。Lustre是个人最早接触的一个分布式文件系统

  3. 所属分类：其它

    • 发布日期：2021-01-30
    • 文件大小：705kb
    • 提供者：weixin_38502292

  1. 基于虚拟数据库的电网通信元数据模型构建

  2. 针对电网通信共享性较低的问题，提出了基于虚拟数据库的电网通信元数据模型设计，并制定基于HDFS的元数据管理准则、基于“发布-订阅”的电网通信元数据分发方案、基于HBase的电网通信元数据共享运作方案、虚拟数据库中电网通信表的构建方案，以此实现电网通信元数据高效管理。经实验验证，当某智能配电网数据通信系统应用所构建模型后，智能配电网数据通信系统实时性、通信网路服务质量、用户吞吐量与数据吞吐量、丢包率、响应效率均符合标准，且可为10 000个账户提供同时应用，共享性极高。

  3. 所属分类：其它

« 12 3 »