注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. 基于大数据平台构建数据仓库的研究与实践.pdf

  2. 数据仓库设计文档，帮助大家理解及如何设计数据仓库，很不错的一篇论文。专题 lTo 学习体系,能从海量数据中提炼高价值信息,构建自主 (1)源系统结构化数据:源系统按大数据平合的 训练与反馈、可不断从最新数据中调整演化的智能业务供数规范要求提供表数据文本和标志文件。 模型体系。 (2)文件交换区FSA:文件的交换中枢,含源系 以 Hadoop^ Spark为代表的大规模数据处理技术为统结构化数据和半结构化、非结构化数据(主要是外部 超越传统数据库的处理局限性提供了先进的并行计算和数据)。 资源调度

  3. 所属分类：其它

    • 发布日期：2019-07-16
    • 文件大小：1048576
    • 提供者：bucaixia08

  1. 大数据量写xls（by binary）.zip

  2. 不安装office 的环境下， 可以超高速度 ms级别，的保存数据为 xls文件， 我测试每次15个单元格，写了1000万行，没有任何错误，和写二进制文件， 顺序文件，记录文件一样的速度 上次审核说高速不需要OFFICE 未通过， 这里解释下，写的数据有的客户要求是必须被office打开客户查看的，所以是非常难有用的

  3. 所属分类：VB

    • 发布日期：2020-04-10
    • 文件大小：183296
    • 提供者：gxdhover

  1. java poi 导入大数据量Excel数据 防止内存溢出处理.zip

  2. java 使用 poi 解析导入大数据量（几万数据量+）时，报出OOM。这是使用POI 第二种处理方法，解决大数据量导入内存溢出问题，并提升效率

  3. 所属分类：Java

    • 发布日期：2020-03-20
    • 文件大小：10240
    • 提供者：qq_20512139

  1. 大数据量时提高分页的效率

  2. 当我们在处理大量数据的时候，就需要注意分页的效率问题了，下面大家可以看看

  3. 所属分类：其它

    • 发布日期：2020-09-11
    • 文件大小：655360
    • 提供者：weixin_38657835

  1. 30个mysql千万级大数据SQL查询优化技巧详解

  2. 本文总结了30个mysql千万级大数据SQL查询优化技巧,特别适合大数据里的MYSQL使用

  3. 所属分类：其它

    • 发布日期：2020-09-09
    • 文件大小：79872
    • 提供者：weixin_38681736

  1. 使用Poi读取大数据量excel的方法-Java代码类资源

  2. 使用Poi读取大数据量excel的方法 支持2003和2007的版本 使用Poi读取大数据量excel的方法 支持2003和2007的版本

  3. 所属分类：Java

    • 发布日期：2020-11-01
    • 文件大小：10485760
    • 提供者：weiwei19821023

  1. 针对Sqlserver大数据量插入速度慢或丢失数据的解决方法

  2. 我的设备上每秒将2000条数据插入数据库，2个设备总共4000条，当在程序里面直接用insert语句插入时，两个设备同时插入大概总共能插入约2800条左右，数据丢失约1200条左右，测试了很多方法，整理出了两种效果比较明显的解决办法： 方法一：使用Sql Server函数: 1.将数据组合成字串，使用函数将数据插入内存表，后将内存表数据复制到要插入的表。 2.组合成的字符换格式：’111|222|333|456,7894,7458|0|1|2014-01-01 12:15:16;1111|222

  3. 所属分类：其它

    • 发布日期：2020-12-15
    • 文件大小：57344
    • 提供者：weixin_38526612

  1. MySQL中使用innobackupex、xtrabackup进行大数据的备份和还原教程

  2. 大数据量备份与还原，始终是个难点。当MYSQL超10G，用mysqldump来导出就比较慢了。在这里推荐xtrabackup,这个工具比mysqldump要快很多。 一、Xtrabackup介绍 1、Xtrabackup是什么 Xtrabackup是一个对InnoDB做数据备份的工具，支持在线热备份(备份时不影响数据读写)，是商业备份工具InnoDB Hotbackup的一个很好的替代品。 Xtrabackup有两个主要的工具：xtrabackup、innobackupex 1、xtraback

  3. 所属分类：其它

    • 发布日期：2020-12-15
    • 文件大小：92160
    • 提供者：weixin_38698149

  1. MySQL 大数据量快速插入方法和语句优化分享

  2. 锁定也将降低多连接测试的整体时间，尽管因为它们等候锁定最大等待时间将上升。例如： 代码如下: Connection 1 does 1000 inserts Connections 2, 3, and 4 do 1 insert Connection 5 does 1000 inserts 　　如果不使用锁定，2、3和4将在1和5前完成。如果使用锁定，2、3和4将可能不在1或5前完成，但是整体时间应该快大约40%。 　　INSERT、UPDATE和DELETE操作在MySQL中是很快的，通过为

  3. 所属分类：其它

    • 发布日期：2020-12-15
    • 文件大小：60416
    • 提供者：weixin_38731761

  1. 大数据量下的查找新的几条数据的通用方法

  2. 由于项目需要，需要获取一组数据的的新一条数据，表结构如下： CREATE TABLE [dbo].[WUSU_SUOLITest_Table](  [ID] [bigint] IDENTITY(1，1) NOT NULL，  [ReceiveTime] [datetime] NULL，  [GroupID] [bigint] NOT NULL，  [DataValue] [float] NULL，  [SensorCode] [char](10) NOT NULL， ) 　　在

  3. 所属分类：其它

    • 发布日期：2020-12-15
    • 文件大小：38912
    • 提供者：weixin_38715831

  1. 大数据时代的数据存储，非关系型数据库MongoDB

  2. 爆炸式发展的NoSQL技术 　　在过去的很长一段时间中，关系型数据库（Relational Database Management System）一直是主流的数据库解决方案，他运用真实世界中事物与关系来解释数据库中抽象的数据架构。然而，在信息技术爆炸式发展的，大数据已经成为了继云计算，物联网后新的技术革命，关系型数据库在处理大数据量时已经开始吃力，开发者只能通过不断地优化数据库来解决数据量的问题，但优化毕竟不是一个长期方案，所以人们提出了一种新的数据库解决方案来迎接大数据时代的到来——NoSQ

  3. 所属分类：其它

    • 发布日期：2020-12-14
    • 文件大小：187392
    • 提供者：weixin_38599518

  1. 大数据量，海量数据 处理方法总结.pdf

  2. 对海量数据的处理⽅方法进行了一个一般性的总结，当然这些方法可能并不能完全覆盖所有的问题，但是这样的一些方法也基本可以处理绝大多数遇到的问题。下面的一些问题基本直接来源于公司的面试笔试题目。

  3. 所属分类：嵌入式

    • 发布日期：2020-12-14
    • 文件大小：160768
    • 提供者：szy19811114

  1. C语言实现大数据文件的内存映射机制

  2. C语言实现大数据文件的内存映射机制 摘要 本文主要讲述大量数据的文件的内存映射机制的实现。 1. 内存映射 内存映射文件，是由一个文件到一块内存的映射。Win32提供了允许应用程序把文件映射到一个进程的函数 (CreateFileMapping)。内存映射文件与虚拟内存有些类似，通过内存映射文件可以保留一个地址空间的区域，同时将物理存储器提交给此区域，内存文件映射的物理存储器来自一个已经存在于磁盘上的文件，而且在对该文件进行操作之前必须首先对文件进行映射。使用内存映射文件处理存储于磁盘上的文

  3. 所属分类：其它

    • 发布日期：2020-12-31
    • 文件大小：46080
    • 提供者：weixin_38738830

  1. 面试官：怎么设计大文件、大数据场景下的传输加密方案？

  2. 某年某月某一天，冷冽寒风中，姚小毛走进了某家公司，开始了新一轮的面试。 一阵寒暄后。 面试官：“你好，看你的项目经验中有做过数据加密的工作，你是使用什么加密算法加解密的？” 姚小毛：“嗯，我是采用的 非对称加密 + 对称加密 的混合加密算法。” 面试官：“为什么要用混合加密的方式？” 姚小毛：“非对称加密跟对称加密都各有优缺点。 非对称安全性好点，由发送方跟接收方分别持有公钥、私钥。 但是缺点是在做大数据量的加密传输时，传输速度会比较慢。” 面试官：“那对称算法呢？” 姚小毛：“对称加密的优点是

  3. 所属分类：其它

    • 发布日期：2021-01-08
    • 文件大小：68608
    • 提供者：weixin_38689027

  1. 大数据平台开发架构讲解

  2. 大数据背景 对于业务数据数据量的暴增，用户智能化需求提升。在这个DT的时代，大数据的开发也就应运而生了，大数据开发必须解决两个问题，大数据量如何统一存储，大数据量如何统一计算。针对这些问题产生了很多大数据方面的技术框架。到今天为止，大数据方面的技术可以说已经相当成熟，BAT在大数据方面都应用十分的广泛，大数据量的分析使得数据更有了价值，运营有了通过大数据的分析可以做出精确的营销计划，通过收集用户的操作日志，分析用户行为，给出用户精确和有价值的推荐。人工智能也是通过海量数据做分析，通过算法做出智能

  3. 所属分类：其它

    • 发布日期：2021-01-07
    • 文件大小：495616
    • 提供者：weixin_38564718

  1. 大数据并行增量频繁项目集挖掘

  2. 频繁项集挖掘（FIM）是许多领域采用的流行数据挖掘问题，例如零售行业的商品推荐，Web搜索中的日志分析以及查询推荐（或相关搜索）。 为了获得更好的性能，已经提出了大量的FIM算法，包括用于处理大数据量的并行算法。 此外，还提出了增量FIM算法来处理增量数据库。 但是，这些增量算法大多数都具有较低的并行度，从而在大型数据库上导致较低的效率。本文介绍了在MapReduce框架上实现的两种并行增量FIM算法，分别为IncMiningPFP和IncBuildingPFP。 IncMiningPFP保留原

  3. 所属分类：其它

    • 发布日期：2021-03-15
    • 文件大小：2097152
    • 提供者：weixin_38518638

  1. mysql大数据高并发处理

  2. 如果不能设计一个合理的数据库模型，不仅会增加客户端和服务器段程序的编程和维护的难度，而且将会影响系统实际运行的性能。所以，在一个系统开始实施之前，完备的数据库模型的设计是必须的。在一个系统分析、设计阶段，因为数据量较小，负荷较低。我们往往只注意到功能的实现，而很难注意到性能的薄弱之处，等到系统投入实际运行一段时间后，才发现系统的性能在降低，这时再来考虑提高系统性能则要花费更多的人力物力，而整个系统也不可避免的形成了一个打补丁工程。所以在考虑整个系统的流程的时候，我们必须要考虑，在高并发大数据量的

  3. 所属分类：其它

    • 发布日期：2021-03-02
    • 文件大小：151552
    • 提供者：weixin_38687277

  1. 怎么搞个大数据平台？

  2. 从“存储系统”、“处理系统”和“分析方法”来看大数据平台IntetixFoundation（英明泰思基金会）由从事数据科学、非营利组织和公共政策研究的中国学者发起成立，致力于通过数据科学改善人类社会和自然环境。通过联络、动员中美最顶尖的数据科学家和社会科学家，以及分布在全球的志愿者，我们创造性地践行着我们的使命：为美好生活洞见数据价值。解决问题时需要哪些技能呢？当你去处理还没发生的事件，即便是很大数据量的分析，也需要一定程度的直觉。但很明显基于数据分析的决策比直觉意见更可信，因为它排除了决策人的

  3. 所属分类：其它

    • 发布日期：2021-02-26
    • 文件大小：612352
    • 提供者：weixin_38625708

  1. HBase分布式架构处理大数据量（高并发和实时处理）

  2. 本文来自于csdn，介绍了Hadoop的原理，HBase的特点，HBase的高并发和实时处理数据，数据模型，工作流程等。(一)HDFS主要是用于做什么的？HDFS（HadoopDistributedFileSystem）分布式文件管理系统、是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。它所具有的高容错、高可靠性、高可扩展性、高获得性、高吞吐率等特征为海量数据提供了不怕故障的存储，为超大数据集（La

  3. 所属分类：其它

    • 发布日期：2021-02-25
    • 文件大小：1048576
    • 提供者：weixin_38748875

  1. 实战大数据平台开发架构讲解

  2. 本文来自于csdn，本文主要介绍了大数据平台的系统架构以及大数据开发过程离线和实时常用的技术框架的介绍，希望对您的学习有所帮助。对于业务数据数据量的暴增，用户智能化需求提升。在这个DT的时代，大数据的开发也就应运而生了，大数据开发必须解决两个问题，大数据量如何统一存储，大数据量如何统一计算。针对这些问题产生了很多大数据方面的技术框架。到今天为止，大数据方面的技术可以说已经相当成熟，BAT在大数据方面都应用十分的广泛，大数据量的分析使得数据更有了价值，运营有了通过大数据的分析可以做出精确的营销计划

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：594944
    • 提供者：weixin_38587509
« 1 2 3 4 5 6 7 89 10 11 12 13 ... 50 »