注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. 大数据分析——RDBMS与MapReduce的竞争与共生

  2. 在科学研究、计算机仿真、互联网应用、电子商务等诸多应用领域,数据量正在以极快的速度增长,为了分析和利用这些庞大的数据资源,必须依赖有效的数据分析技术.传统的关系数据管理技术(并行数据库)经过了将近40 年的发展,在扩展性方面遇到了巨大的障碍,无法胜任大数据分析的任务;而以MapReduce 为代表的非关系数据管理和分析技术异军突起,以其良好的扩展性、容错性和大规模并行处理的优势,从互联网信息搜索领域开始,进而在数据分析的诸多领域和关系数据管理技术展开了竞争.关系数据管理技术阵营在丧失搜索这个阵

  3. 所属分类：专业指导

    • 发布日期：2012-04-08
    • 文件大小：409kb
    • 提供者：frogprinceliu

  1. 基于并行的大数据统计分析探讨

  2. 当前 ,企业有着对海量信息奴磊进行统计分析的迫切需求。面对海量 的数据 ,如何高效地得 到统计结果,是分析过程中一个很重要的环节，本文档在分析了当前 出现的大数据量处理方法的基础上 ,进行了比较。得到了并行计算架构的数据库是解决此问题的最佳手段 ,并且进行了性能测试 ,得到 了对比结果 ,相信对从事相关研究的同行有着一定的参考价值。

  3. 所属分类：金融

    • 发布日期：2014-08-27
    • 文件大小：313kb
    • 提供者：confessor

  1. 华为大数据

  2. 详细介绍了各行业大数据需求、解决方案，华为大数据架构和具体实践，非常值得学习

  3. 所属分类：咨询

    • 发布日期：2015-10-25
    • 文件大小：13mb
    • 提供者：alite

  1. 大数据测试简述

  2. 什么是大数据？ 3 大数据测试类型 3 大数据测试步骤 3 Step 1：数据阶段验证 3 Step 2："MapReduce"验证 4 Step 3：输出阶段验证 4 架构测试 4 性能测试 4 性能测试方法 4 性能测试参数化 5 大数据测试 VS 传统数据库测试 5 测试环境需求 6 大数据场景使用的工具 6 大数据测试挑战 6 自动化 6 虚拟化 6 大数据集 6 大数据性能测试挑战 6 大数据测试总结 7

  3. 所属分类：群集服务

    • 发布日期：2017-02-07
    • 文件大小：521kb
    • 提供者：henni_719

  1. 大数据平台培训.

  2. 采用混搭的架构，构建获取层、计算与存储能力、基础工具能力、统一运维、数据治理、应用组件/产品等能力，形成一个开放、可靠、易维护的大数据平台；以数据为基础，以需求为导向，通过持续的模型、业务研究，构建对内、对外应用，支撑电信运营商/金融等各领域大数据战略的实现。

  3. 所属分类：Hadoop

    • 发布日期：2017-12-27
    • 文件大小：13mb
    • 提供者：ml365252702

  1. NIST 大数据参考架构（草案）

  2. 《NIST大数据互操作性框架草案》主要包括 7卷内容： 第 1卷：定义 第 2卷：分类 第 3卷：案例和总体需求 第 4卷：安全和隐私 第 5卷：架构白皮书调查 第 6卷：参考架构 第 7卷：标准路线图

  3. 所属分类：Hadoop

    • 发布日期：2018-11-02
    • 文件大小：1mb
    • 提供者：boss_ch

  1. 基于大数据平台构建数据仓库的研究与实践.pdf

  2. 数据仓库设计文档，帮助大家理解及如何设计数据仓库，很不错的一篇论文。专题 lTo 学习体系,能从海量数据中提炼高价值信息,构建自主 (1)源系统结构化数据:源系统按大数据平合的 训练与反馈、可不断从最新数据中调整演化的智能业务供数规范要求提供表数据文本和标志文件。 模型体系。 (2)文件交换区FSA:文件的交换中枢,含源系 以 Hadoop^ Spark为代表的大规模数据处理技术为统结构化数据和半结构化、非结构化数据(主要是外部 超越传统数据库的处理局限性提供了先进的并行计算和数据)。 资源调度

  3. 所属分类：其它

    • 发布日期：2019-07-16
    • 文件大小：1mb
    • 提供者：bucaixia08

  1. 煤炭大数据平台建设的关键技术及管理协同架构

  2. 分析了煤炭大数据平台应用的现状及需求;从细粒度、广范围的数据获取、灵活可扩展的数据存储、多模态的数据处理、专业的数据可视化、高质量的数据管理5个方面详细阐述了煤炭大数据平台建设的关键技术,为煤炭大数据的采集、存储、分析、管理提供基础;提出了煤炭大数据管理协同架构,主要从技术和管理2个层面为煤炭大数据平台的建设提供参考,为大数据管理的顶层设计提供了思路。

  3. 所属分类：其它

    • 发布日期：2020-05-16
    • 文件大小：796kb
    • 提供者：weixin_38572979

  1. 基于Hadoop的煤矿数据中心架构设计

  2. 根据煤矿安全生产业务需求及智慧矿山发展要求，新型的煤矿数据中心需满足对同一时空坐标体系下煤矿海量、多元数据的高效处理、缓存、计算、存储与发布。针对传统煤矿数据中心各类数据离散存储，数据集成、业务应用及数据分析难度大等问题，设计了一种基于Hadoop的煤矿数据中心架构。采用Storm实时数据流引擎进行数据实时计算，并应用MapReduce、Spark实现批处理计算和内存计算，解决高频时序数据存储与海量数据计算问题；采用Hadoop分布式文件系统（HDFS）实现文件的可靠存储，并采用HBase分布式

  3. 所属分类：其它

    • 发布日期：2020-04-18
    • 文件大小：743kb
    • 提供者：weixin_38571603

  1. 京东金融大数据分析平台总体架构.pptx

  2. 京东金融大数据分析平台架构ppt 随着互联网、移动互联网和物联网的发展，谁也无法否认，我们已经切实地迎来了一个海量数据的时代，数据调查公司IDC预计2011年的数据总量将达到1.8万亿GB，对这些海量数据的分析已经成为一个非常重要且紧迫的需求。

  3. 所属分类：算法与数据结构

    • 发布日期：2020-01-27
    • 文件大小：3mb
    • 提供者：sunjian286

  1. 大数据.pdf

  2. 大数据理论知识讲解，及Hadoop的配置，4V属性讲解，Nosql2、搭建 Hadoop集群环境 21安装DK 见附件:《DK环境搭建.md》 22搭建z0 keeper集群 见附件:《乙K环境搭建.md》 23搭建 hadoop集群 见巛 hadoop集群搭建md》 六、 Hadoop-HDFS 1、简介 Hadoop Distributed File Systen Hadoop的分布式文件系统,是GFs( Google File System)的克隆 分布式 分别部署,将一个系统划分为多个子

  3. 所属分类：Hadoop

    • 发布日期：2019-08-17
    • 文件大小：698kb
    • 提供者：longhhao

  1. 我国大数据产业前景趋势与投资规划分析简报.pdf

  2. 我国大数据产业前景趋势与投资规划分析简报.pdf●中国大数据产业发展现状与前景预测 1.中国大数据产业发展现状分析 大数据产业链建设情况 大数据产业市场规模分析 目前,「产业在发展过程中已经形成了一些层次分据贵阳大数据交易所发布的《2016年中国大数据交 布,有做服务器和底层系统的,有做软件的,有做易产业白皮书》数据显示,2014年,中国大数据产 应用的,大数据也需要在原有的架构上加以发展。业规模大约为1038亿元,2015年产业整体规模达 原来做基础设施的企业,如联想、华为,也要向大到169

  3. 所属分类：互联网

    • 发布日期：2019-07-03
    • 文件大小：1mb
    • 提供者：qq_34543438

  1. 大数据需求架构

  2. 谭志坚的大数据需求和架构设计（最原始版本）

  3. 所属分类：算法与数据结构

    • 发布日期：2017-08-21
    • 文件大小：791kb
    • 提供者：m0_37845836

  1. 水火风光多源发电调度系统大数据平台架构及关键技术_申建建.pdf

  2. 水风光等可再生能源高速发展使得电力调度数据出现 爆发式增长，并呈现出多源、异构、高维等大数据典型特点， 如何应对电力大数据的集成管理及高效应用是我国电网运 行的重大技术挑战之一。为此，围绕水火风光复杂发电调度 系统，解析超大规模电站群调度大数据特征及相互关系，设 计调度管理功能体系，构建发电调度大数据平台架构，提出 满足不同业务场景共性需求的多源数据校验和多平台协同 存储技术、面向发电调度分析场景的大数据融合处理技术以 及面向发电计划编制场景的大数据分析决策技术，实现电力 大数据的采集、存储、分

  3. 所属分类：讲义

    • 发布日期：2020-09-05
    • 文件大小：1mb
    • 提供者：SparkQiang

  1. 经典大数据架构案例：酷狗音乐的大数据平台重构

  2. 本文来自于infoq，讲解了对原来的架构上进行重构的工作内容，总共分为重构的原因、新一代的大数据技术架构、踩过的坑、后续持续改进四个部分.眨眼就新的一年了，时间过的真快，趁这段时间一直在写总结的机会，也总结下上一年的工作经验，避免重复踩坑。酷狗音乐大数据平台重构整整经历了一年时间，大头的行为流水数据迁移到新平台稳定运行，在这过程中填过坑，挖过坑，为后续业务的实时计算需求打下了很好的基础。在此感谢酷狗团队成员的不懈努力，大部分从开始只知道大数据这个概念，到现在成为团队的技术支柱，感到很欣慰。从重构

  3. 所属分类：其它

  1. 美图大数据平台架构实践

  2. 如今大数据在各行业的应用越来越广泛：运营基于数据关注运营效果，产品基于数据分析关注转化率情况，开发基于数据衡量系统优化效果等。美图公司有美拍、美图秀秀、美颜相机等十几个app，每个app都会基于数据做个性化推荐、搜索、报表分析、反作弊、广告等，整体对数据的业务需求比较多、应用也比较广泛。因此美图数据技术团队的业务背景主要体现在：业务线多以及应用比较广泛。这也是促使我们搭建数据平台的一个最主要的原因，由业务驱动。举几个美图的数据应用案例。如图1所示，左起第一张是美图自研的数据可视化平台DataFa

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：893kb
    • 提供者：weixin_38631182

  1. 如何做一个好的大数据平台架构

  2. Lambda架构背后的需求是由于MR架构的延迟问题。MR虽然实现了分布式、可扩展数据处理系统的目的，但是在处理数据时延迟比较严重。实际上如果内存和CPU足够强大，MR也可以实现近实时运算，但实际业务环境并非如此，因此我们需要权衡，选择实时处理和批处理所需要数据量和恰当的资源。2012年Storm的作者NathanMarz提出的Lambda数据处理框架。Lambda架构的目标是设计出一个能满足实时大数据系统关键特性的架构，包括有：高容错、低延时和可扩展等。Lambda架构整合离线计算和实时计算，融

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：271kb
    • 提供者：weixin_38745859

  1. 经典大数据架构案例：酷狗音乐的大数据平台重构

  2. 本文来自于infoq，讲解了对原来的架构上进行重构的工作内容，总共分为重构的原因、新一代的大数据技术架构、踩过的坑、后续持续改进四个部分.眨眼就新的一年了，时间过的真快，趁这段时间一直在写总结的机会，也总结下上一年的工作经验，避免重复踩坑。酷狗音乐大数据平台重构整整经历了一年时间，大头的行为流水数据迁移到新平台稳定运行，在这过程中填过坑，挖过坑，为后续业务的实时计算需求打下了很好的基础。在此感谢酷狗团队成员的不懈努力，大部分从开始只知道大数据这个概念，到现在成为团队的技术支柱，感到很欣慰。从重构

  3. 所属分类：其它

  1. 美图大数据平台架构实践

  2. 如今大数据在各行业的应用越来越广泛：运营基于数据关注运营效果，产品基于数据分析关注转化率情况，开发基于数据衡量系统优化效果等。美图公司有美拍、美图秀秀、美颜相机等十几个 app，每个app都会基于数据做个性化推荐、搜索、报表分析、反作弊、广告等，整体对数据的业务需求比较多、应用也比较广泛。因此美图数据技术团队的业务背景主要体现在：业务线多以及应用比较广泛。这也是促使我们搭建数据平台的一个最主要的原因，由业务驱动。举几个美图的数据应用案例。如图1所示，左起第一张是美图自研的数据可视化平台

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：893kb
    • 提供者：weixin_38554186

  1. 如何做一个好的大数据平台架构

  2. Lambda架构背后的需求是由于MR架构的延迟问题。MR虽然实现了分布式、可扩展数据处理系统的目的，但是在处理数据时延迟比较严重。实际上如果内存和CPU足够强大，MR也可以实现近实时运算，但实际业务环境并非如此，因此我们需要权衡，选择实时处理和批处理所需要数据量和恰当的资源。2012年Storm的作者NathanMarz提出的Lambda数据处理框架。Lambda架构的目标是设计出一个能满足实时大数据系统关键特性的架构，包括有：高容错、低延时和可扩展等。Lambda架构整合离线计算和实时计算，融

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：271kb
    • 提供者：weixin_38582685
« 12 3 4 5 6 7 8 9 10 ... 39 »