您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. SparkStreaming编程讲解

  2. 1.什么是SparkStreaming?2.SparkStreaming可以接受那些数据源?3.Dstream,我们可以进行哪两种操作?Sparkstreaming:构建在Spark上处理Stream数据的框架,基本的原理是将Stream数据分成小的时间片断(几秒),以类似batch批量处理的方式来处理这小部分数据。SparkStreaming构建在Spark上,一方面是因为Spark的低延迟执行引擎(100ms+)可以用于实时计算,另一方面相比基于Record的其它处理框架(如Storm),R
  3. 所属分类:其它

    • 发布日期:2021-02-26
    • 文件大小:244736
    • 提供者:weixin_38700409
  1. 公共安全领域Kafka应用实践

  2. 本案例作为大数据框架在公共安全领域应用实践的开篇之作,将从最基础的数据架构体系优化讲起。在接下来的章节里将详细描述Kafka的基本原理、Kafka增强组件以及基于Kafka的Lambda架构的具体应用场景以及相应的研发成果。Lambda架构由Storm的作者NathanMarz提出。旨在设计出一个能满足。实时大数据系统关键特性的架构,具有高容错、低延时和可扩展等特。Lambda架构整合离线计算和实时计算,融合不可变(Immutability,读写分离和隔离一系列构原则,可集成Hadoop,Kaf
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:989184
    • 提供者:weixin_38560768
  1. SparkStreaming编程讲解

  2. 1.什么是SparkStreaming?2.SparkStreaming可以接受那些数据源?3.Dstream,我们可以进行哪两种操作?Sparkstreaming:构建在Spark上处理Stream数据的框架,基本的原理是将Stream数据分成小的时间片断(几秒),以类似batch批量处理的方式来处理这小部分数据。Spark Streaming构建在Spark上,一方面是因为Spark的低延迟执行引擎(100ms+)可以用于实时计算,另一方面相比基于Record的其它处理框架(如Storm),
  3. 所属分类:其它

    • 发布日期:2021-01-30
    • 文件大小:244736
    • 提供者:weixin_38547035
  1. “阿里架构师”kafka数据可靠性深度解读

  2. 本文来自于网络,本文首先从Kafka的架构着手,先了解下Kafka的基本原理,然后通过对kakfa的存储机制、复制原理、同步原理、可靠性和持久性保证等等一步步对其可靠性进行分析,最后通过benchmark来增强对Kafka高可靠性的认知。 Kakfa起初是由LinkedIn公司开发的一个分布式的消息系统,后成为Apache的一部分,它使用Scala编写,以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark等
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:168960
    • 提供者:weixin_38617851
  1. 公共安全领域Kafka应用实践

  2. 本案例作为大数据框架在公共安全领域应用实践的开篇之作,将从最基础的数据架构体系优化讲起。在接下来的章节里将详细描述Kafka的基本原理、Kafka增强组件以及基于Kafka的Lambda架构的具体应用场景以及相应的研发成果。Lambda架构由Storm的作者NathanMarz提出。旨在设计出一个能满足。实时大数据系统关键特性的架构,具有高容错、低延时和可扩展等特。Lambda架构整合离线计算和实时计算,融合不可变(Immutability,读写分离和隔离 一系列构原则,可集成Hadoop
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:989184
    • 提供者:weixin_38522636
  1. 一文弄懂Flink基础理论

  2. 文章目录Flink概述Flink生态为什么选择Flink?系统架构JobManager运行架构常用的类型和操作程序结构介绍并行数据流Task and Operator Chains核心原理Window&TimeWindowTimeState状态管理按组织形式的划分按照数据的划分和扩张方式Checkpoint容错机制Savepoint保存点Savepoint 和 CheckpointFlink部署与运行Yarn运行Flink作业Flink YARN SessionRun a single Flin
  3. 所属分类:其它

    • 发布日期:2021-01-20
    • 文件大小:3145728
    • 提供者:weixin_38744207
« 1 2 3 4»