您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. 基于FPGA和EPP的图像传感器高速数据采集系统

  2. 引言           USB、串口、并口是PC机和外设进行通讯的常用接口,但对于数据量大的图像来说,若利用串行RS-232协议进行数据采集,速度不能达到图像数据采集所需的要求;而用USB进行数据采集,虽能满足所需速度,但要求外设必须支持USB协议,而USB协议与常用工程软件的接口还不普及,给使用带来困难。有些用户为了利用标准并行口(SPP)进行数据采集,但SPP协议的150kb/s传输率对于图像数据采集,同样显得太低。因此,为了采集数据量大的图像数据,本文采用了具有较高传输速率的增强型并行口
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:141312
    • 提供者:weixin_38699551
  1. MySQL如何快速的创建千万级测试数据

  2. 备注: 此文章的数据量在100W,如果想要千万级,调大数量即可,但是不要大量使用rand() 或者uuid() 会导致性能下降 背景 在进行查询操作的性能测试或者sql优化时,我们经常需要在线下环境构建大量的基础数据供我们测试,模拟线上的真实环境。 废话,总不能让我去线上去测试吧,会被DBA砍死的 创建测试数据的方式     1. 编写代码,通过代码批量插库(本人使用过,步骤太繁琐,性能不高,不推荐)     2. 编写存储过程和函数执行(本文实现方式1)     3. 临时数据表
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:269312
    • 提供者:weixin_38719635
  1. 基于FPGA和USB2.0的高速数据采集系统

  2. 数据采集在现代工业生产及科学研究中的重要地位日益突出,对实时高速数据采集的要求也不断提高。在信号测量、图像处理、音频信号处理等一些高速、高精度的测量中,都要求进行高速、高精度的数据采集。这就对数据采集系统的设计提出两个方面的要求:一方面,要求接口简单灵活且有较高的数据传输率;另一方面,由于数据量通常都较大,要求主机能够对数据做出快速反应,并及时分析和处理。   实现数据采集与传输,可选择如下3种方法:   ①使用传统的串/并口。传统的串口(如RS232),其传输速率为几十kb/s到100 k
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:439296
    • 提供者:weixin_38736721
  1. 基于FPGA的一种新型8通道数据采集系统

  2. 数据采集是通过采样电路将输入的模拟信号转换成离散信号,并送入CPU进行处理,已经广泛应用在现代工业控制的各个方面。数据采集的速度和精度,很大程度上影响到整个系统的工作能力。常用数据采集方案是以MCU或者DSP为,控制数据采集并对数据进行相应处理,A/D转换器的启动、通道选择、数据传输和读取均依靠软件编程来实现。由于受MCU或者DSP执行指令时间的限制,这种采集方案的速率和效率较低,难以适应各种高速信号采集的需要,另外,各种复杂系统中,CPU要协调各外围设备工作时序,收发指令,同时还要完成各种控制
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:210944
    • 提供者:weixin_38677234
  1. MySQL数据库运维之数据恢复的方法

  2. 之前三篇文章分别介绍了MySQL数据库常见的备份方法,其中包括逻辑备份和物理备份,本篇将总结一下MySQL数据库的数据恢复相关内容。这些数据恢复方案在之前备份内容介绍时,此处总结一下恢复方案,并结合数据库的二进制日志做下数据恢复的示范! 一、恢复方案 1、数据量不是特别大,可以将mysqldump命令备份的数据使用mysql客户端命令或者source命令完成数据的恢复; 2、使用Xtrabackup完成数据库的物理备份恢复,期间需要重启数据库服务; 3、使用LVM快照卷完成数据库物理备份恢复
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:79872
    • 提供者:weixin_38618140
  1. MSSQL 大量数据时,建立索引或添加字段后保存更改提示超时的解决方法

  2. 一般我们都喜欢用数据库管理器的UI来对数据表结构进行更改,然后自然而然地点”保存” 按钮进行保存,但数据量比较大的时候,用这招往往会出现”无法创建索引“IX_索引名”。 超时时间已到。在操作完成之前超时时间已过或服务器未响应。 “这种错误。一时不知所措,蜡人张的文章 代码如下: 修改表属性后使用“索引/键”对话框为一个大型表(记录数13,239,473)创建索引,提示: – 无法创建索引“IX_TableName”。 超时时间已到。在操作完成之前超时时间已过或服务器未响应。 “生成更改脚本”后
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:50176
    • 提供者:weixin_38615591
  1. 关于MySQL数据迁移–data目录直接替换注意事项的详解

  2. 近日更换服务器,要做数据库迁移,将数据库内的数据从服务器A迁移到服务器B。由于数据量较大,直接做dump耗时太长,故而采用如下方式处理:首先,在服务器B上安装了与服务器A同版本的MySQL,停止MySQL服务,将安装后的data目录删除;然后,服务器A锁住全部表,从服务器A将整个data目录和数据文件直到拷贝到服务器B上,修改服务器B上MySQL的my.cnf文件中的datadir指向新的data目录。最后,启动服务器B上的MySQL服务。结果启动失败,报出 “无法启动MySQL服务”异常,查看
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:47104
    • 提供者:weixin_38714509
  1. 千万级别数据的mysql数据表优化

  2. 出发点   比如,现在有这么一个问题,常见的一个面试题:   有一张users表,数据量在五千万以上,存在一条查询语句:   SELECT * FROM users WHERE name LIKE '%明%' AND sex='\u7537' AND age=32 AND created_at BETWEEN 1388505600 AND 1420041600;   是说从users表中找出创建时间在14年到15年之间的年龄在32岁,名字中带有‘明’字的男性用户   追溯到数据表的设计
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:92160
    • 提供者:weixin_38665822
  1. 数据库数据分片(分库分表)

  2. 什么是数据分片? 简单来说,就是指通过某种特定的条件,将我们存放在同一个数据库中的数据分散存放到多个数据库(主机)上面,以达到分散单台设备负载的效果。 数据切分有两种类型:垂直拆分与水平拆分。 垂直拆分: 1.表的垂直拆分:将一个表中的字段拆分到多个表中 拆分原则: 把不常用的字段单独放在一张表; 把text,blob等大字段拆分出来放在附表中; 经常组合查询的列放在一张表中; 缺点: 1.主表在数据量大且访问频繁的情况下可能还是满足不了要求 2.表的关联操作需要放在代码中实现 3.事务的处理
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:183296
    • 提供者:weixin_38725137
  1. 浅谈MySQL大表优化方案

  2. 背景 阿里云RDS FOR MySQL(MySQL5.7版本)数据库业务表每月新增数据量超过千万,随着数据量持续增加,我们业务出现大表慢查询,在业务高峰期主业务表的慢查询需要几十秒严重影响业务 方案概述 一、数据库设计及索引优化 MySQL数据库本身高度灵活,造成性能不足,严重依赖开发人员的表设计能力以及索引优化能力,在这里给几点优化建议 时间类型转化为时间戳格式,用int类型储存,建索引增加查询效率 建议字段定义not null,null值很难查询优化且占用额外的索引空间 使用T
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:558080
    • 提供者:weixin_38745925
  1. 大容量NAND Flash在多媒体手机中的应用

  2. 1  引言   随着手机市场竞争的日趋激烈,多媒体手机逐渐成为市场的宠儿。因为有大量的多媒体数据,因此大容量存储是多媒体手机所要解决的首要问题。   NOR和NAND是现在市场上两种主要的非易失闪存技术。NOR的特点是芯片内执行(XIP,eXecuteInPlace),这样应用程序可以直接在flash闪存内运行,不必再把代码读到系统RAM中。NOR的传输效率很高,在1~4MB的小容量时具有很高的成本效益,但是很低的写入和擦除速度大大影响了它的性能。NAND结构能提供极高的单元密度,可以达到高
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:152576
    • 提供者:weixin_38640150
  1. 基于Hadoop的电信大数据采集方案研究与实现

  2. ETL是数据仓库实施过程中一个非常重要的步骤,设计一个能够对大数据进行有效处理的ETL流程以提高运营平台的采集效率,具有重要的实际意义。首先简单介绍某运营商大数据平台采集的主要数据内容。随后,为提升海量数据采集效率,提出了Hadoop与Oracle混搭架构解决方案。继而,提出一种动态触发式ETL调度流程与算法,与定时启动的ETL流程调度方式相比,可有效缩短部分流程的超长等待时间;有效避免资源抢占拥堵现象。最后,根据Hadoop和Oracle的系统运行日志,比较分析了两个平台的采集效率与数据量之间
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:1048576
    • 提供者:weixin_38722721
  1. 电力大数据安全治理体系研究

  2. 近年来,针对大数据的勒索攻击事件和数据泄露问题日趋严重,针对数据安全国家相继出台了一系列相关法律法规,明确了大数据安全工作的要求,电力大数据资产具有数据量大、分布面广、利用价值高、敏感度高等特点,急需开展大数据安全治理技术研究。在分析电力大数据安全面临的挑战的基础上,设计了电力大数据安全治理体系,提出了电力大数据安全治理要求,研发了电力大数据安全治理平台,在实验中对数据安全管控进行了验证。
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:789504
    • 提供者:weixin_38734037
  1. 大数据典型相关分析的云模型方法

  2. 针对传统大数据典型相关分析(CCA,canonical correlation analysis)方法的高复杂度在面临大数据PB级数据规模时不再适应的现状,提出了一种基于云模型的大数据 CCA 方法。该方法在云计算架构的基础上,通过云运算将各端点云合并为中心云,并据此产生中心云滴,以中心云滴作为大数据的不确定性复原小样本,在其上施以CCA运算,中心云滴的较小数据量提高了运算效率。在真实数据集上的实验结果验证了该方法的有效性。
  3. 所属分类:其它

    • 发布日期:2021-01-15
    • 文件大小:647168
    • 提供者:weixin_38553381
  1. 基于最小包含球的异质空间大数据集快速相似度学习算法

  2. 针对跨空间数据相似度学习问题提出的跨空间相似度学习(CSAL) 算法表现出了良好的性能, 并已成功地应用于各类推荐系统中. 但构建一个完善的推荐系统, 其待处理的数据量常呈现大样本特征, 而CSAL 算法并不具备大样本快速处理能力. 针对此不足, 提出了跨空间相似度学习-最小包含球(CSAL-MEB) 方法和跨空间相似度学习-核向量机(CSAL-CVM) 快速方法. CSAL-CVM 方法既具有渐近线性时间复杂度和空间复杂度的优点, 同时又继承了CSAL 的良好性能. 相关实验亦验证了所提出方法
  3. 所属分类:其它

    • 发布日期:2021-01-14
    • 文件大小:336896
    • 提供者:weixin_38520046
  1. 基于Hadoop技术的大数据分析应用系统的研究与设计

  2. 传统的信息处理技术已难以满足现代数据处理的要求。因此,文中针对云计算时代数据处理计算量大、实时性要求高的特点,研究了基于Hadoop技术的大数据分析应用系统。该系统以Hadoop技术为基本框架,采用HDFS系统作为数据存储的基本单元。并在此基础上,利用Hive方式建立新的数据库系统,结合MySQL数据管理系统和Kylin进行数据分析系统完成对数据的获取、存储、分析、管理功能。最后,通过大数据可视化系统和大数据报表分析系统完成对数据分析结果的呈现。本研究内容对实现大数据的管理和分析具有重要意义。
  3. 所属分类:其它

    • 发布日期:2021-01-13
    • 文件大小:1048576
    • 提供者:weixin_38607026
  1. 零售商品关联大数据稀疏网络的快速聚类算法

  2. 关联规则方法被广泛应用于分析零售企业交易数据,以此指导品类管理、门店布局陈列和商品促销等运营决策,但面对电子商务网站非常巨大的数据量,仍存在效率低下的问题.对此,提出商品关联大数据稀疏网络快速聚类算法.首先,利用单步链表结构存储零售商品的共同购买关系矩阵;其次,对商品关联大数据稀疏网络的低度商品节点进行剪枝,降低搜索空间;再次,利用模糊k均值聚类对商品关联大数据稀疏网络进行快速聚类,并利用高连接度值商品节点被低连接度值商品节点分割的思想对剩余节点聚类;最后,将所提算法应用到亚马逊网站商品交易数据
  3. 所属分类:其它

    • 发布日期:2021-01-13
    • 文件大小:2097152
    • 提供者:weixin_38607971
  1. 基于随机矩阵理论的交直流输电通道线损大数据关联特性分析

  2. 基于随机矩阵理论对西电东送交直流输电通道线损率的关联特性进行分析。首先,利用线损大数据构建出实验矩阵数据源与对比矩阵数据源,并通过滑动窗口分别对这2类数据源进行滑动取样;其次,将平均谱半径作为关联特性的量化指标,计算出实验矩阵与对比矩阵的平均谱半径以量化线损率之间的关联特性;最后,对南方电网“八交八直”输电通道的线损大数据进行分析,结果表明所提方法能定量描述线损率与状态量及不同通道的线损率之间的关联特性。
  3. 所属分类:其它

    • 发布日期:2021-01-12
    • 文件大小:1048576
    • 提供者:weixin_38737144
  1. 双链接无线网络海量电力大数据合理分流方法

  2. 传统电力数据分流方法在复杂的双链接无线网络环境下,容易导致关键电力数据的丢失,为此从电力用户的视角出发,提出基于用户分类的海量电力大数据分流方法研究。建立双链接无限网络电力数据分流平台,并基于该平台按电力用户的类别,提取出用户地址和电力传输数据包结构等关键数据特征,依据电力分流函数值与电力数据单元密度之间的关系,确定出系统的QoS参数值并最终实现对双链接无线网络中海量电力大数据的合理分流。实验结果表明,提出的电力数据分流方法所消耗的系统平台资源更少,与传统的数据分流方法相比在数据的丢失量方面优势
  3. 所属分类:其它

    • 发布日期:2021-01-12
    • 文件大小:1048576
    • 提供者:weixin_38715097
  1. 云雾网络架构的大数据分析平台研究

  2. 随着云计算和物联网的快速发展,企业和个人产生的数据信息量和速度都在不断增加。如何使用和管理如此庞大的数据量进行大数据分析已经成为一项重要的任务。但在云计算的架构下,Hadoop在执行MapReduce操作时会占用大量的网络带宽,尤其是在多个节点的情况下,网络传输质量的影响更为严重。基于大数据信息储存平台为基础架构,结合雾计算的数据预处理能力,构建了以雾计算架构为基础的大数据分析平台,利用雾的特性计算近端设备的优点,将大多数的数据信息在送进MapReduce做分析前,先进行初步的整合和计算,可以减
  3. 所属分类:其它

    • 发布日期:2021-01-12
    • 文件大小:1048576
    • 提供者:weixin_38543280
« 1 2 ... 45 46 47 48 49 50»