点数信息
www.dssz.net
注册会员
|
设为首页
|
加入收藏夹
您好,欢迎光临本网站!
[请登录]
!
[注册会员]
!
首页
移动开发
云计算
大数据
数据库
游戏开发
人工智能
网络技术
区块链
操作系统
模糊查询
热门搜索:
源码
Android
整站
插件
识别
p2p
游戏
算法
更多...
在线客服QQ:632832888
当前位置:
资源下载
搜索资源 - 运行Spark程序的方法
下载资源分类
移动开发
开发技术
课程资源
网络技术
操作系统
安全技术
数据库
行业
服务器应用
存储
信息化
考试认证
云计算
大数据
跨平台
音视频
游戏开发
人工智能
区块链
在结果中搜索
所属系统
Windows
Linux
FreeBSD
Unix
Dos
PalmOS
WinCE
SymbianOS
MacOS
Android
开发平台
Visual C
Visual.Net
Borland C
CBuilder
Dephi
gcc
VBA
LISP
IDL
VHDL
Matlab
MathCAD
Flash
Xcode
Android STU
LabVIEW
开发语言
C/C++
Pascal
ASM
Java
PHP
Basic/ASP
Perl
Python
VBScript
JavaScript
SQL
FoxBase
SHELL
E语言
OC/Swift
文件类型
源码
程序
CHM
PDF
PPT
WORD
Excel
Access
HTML
Text
资源分类
搜索资源列表
Flex_4开发应用程序
Flex 4:开发RIA 应用程序 课程简介 掌握学习法简介 ................................................................................................................................................. 2 了解课程形式 ...............................................................
所属分类:
Web开发
发布日期:2011-11-08
文件大小:5mb
提供者:
yaojun_123_123
Flex_4:开发RIA_应用程序.pdf
Flex 4:开发RIA 应用程序 课程简介 掌握学习法简介 ................................................................................................................................................. 2 了解课程形式 ...............................................................
所属分类:
Web开发
发布日期:2012-10-22
文件大小:5mb
提供者:
chshjian001
Spark快速数据处理
Spark是一个通用的并行分布式计算框架,由UCBerkeley的AMP实验室开发。Spark使得程序员更容易地编写分布式应用,并且能够根据自己的喜好使用Scala、Java或者Python作为开发语言。本书系统讲解了Spark的应用方法,包括如下内容:第1章介绍如何在多种机器上安装Spark,以及如何配置一个Spark集群。第2章介绍如何在交互模式下运行第一个Spark作业。第3章介绍如何在Spark集群上构建一个生产级的脱机\独立作业。第4章介绍如何与Spark集群建立连接,以及Spark
所属分类:
其它
发布日期:2015-08-31
文件大小:23mb
提供者:
hx0_0_8
Spark学习--RDD编码
RDD:弹性分布式数据集(ResilientDistributed Dataset),是Spark对数据的核心抽象。RDD其实是分布式的元素集合。当Spark对数据操作和转换时,会自动将RDD中的数据分发到集群,并将操作并行化执行。 Spark中的RDD是一个不可变的分布式对象集合。每个RDD都倍分为多个分区,这些分区运行在集群中的不同节点。RDD可以包含Python、Java、Scala中任意类型的对象,甚至可以包含用户自定义对象,本文主要通过Java实现相关示例。 Spark程序或shel
所属分类:
Java
发布日期:2017-05-09
文件大小:10kb
提供者:
a123demi
spark官方文档
1 概述(Overview) Spark SQL是Spark的一个组件,用于结构化数据的计算。Spark SQL提供了一个称为DataFrames的编程抽象,DataFrames可以充当分布式SQL查询引擎。 2 DataFrames DataFrame是一个分布式的数据集合,该数据集合以命名列的方式进行整合。DataFrame可以理解为关系数据库中的一张表,也可以理解为R/Python中的一个data frame。DataFrames可以通过多种数据构造,例如:结构化的数据文件、hive中的
所属分类:
spark
发布日期:2017-09-01
文件大小:15mb
提供者:
qq_39532946
图解Spark++核心技术与案例实战
1) 大数据爱好者 随着大数据时代的来临,无论传统行业、IT行业以及互联网等行业都将涉及到大数据技术,本书能够帮助这些行业的大数据爱好者了解Spark生态圈和发展演进趋势。通过本书可以了解到Spark特点和使用的场景,如果希望继续深入学习Spark知识,该书也是很好的入门选择。 (2) Spark开发人员 如果要进行Spark应用的开发,仅仅掌握Spark基本使用方法是不够的,还需深入了解Spark的设计原理、架构和运行机制。在本书中将深入浅出地讲解Spark的编程模型、作业运行机制、存储原理
所属分类:
其它
发布日期:2018-04-25
文件大小:67mb
提供者:
hmliy_hao
Spark大数据处理_原理算法与实例
Spark最好的书之一; 第 1 章从 Hadoop 到 Spark 1. 1 Hadoop一一大数据时代的火种·· 1. 1. 1 大数据的由来 1. 1. 2 Google 解决大数据计算问题的方法 ……................…........... 5 1. 1. 3 Hadoop 的由来与发展………................. .. ......................…. 10 1. 2 Hadoop 的局限性·················……......
所属分类:
spark
发布日期:2018-08-24
文件大小:144mb
提供者:
y_a_n2009
*图片检测神经网络open_nsfw.zip
使用:网络需要在图像和输出概率(评分0-1)之间过滤不适合工作的图片。评分<0.2表示图像具有较高概率是安全的。评分>0.8表明极有可能是不适合工作(NSFW)图像。我们建议开发者根据用例和图像类型的不同选择合适的阈值。根据使用情况、定义以及公差的不同会产生误差。理想情况下,开发人员应该创建一个评价集,根据“什么是安全的”对他们的应用程序进行定义,然后适合ROC曲线选择一个合适的阈值。结果可以通过微调你的数据/ uscase /定义NSFW的模型的改进。我们不提供任何结果的准确性保证。使
所属分类:
其它
发布日期:2019-07-19
文件大小:21mb
提供者:
weixin_39840914
在IntelliJ IDEA中创建和运行java/scala/spark程序的方法
主要介绍了在IntelliJ IDEA中创建和运行java/scala/spark程序的教程,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
所属分类:
其它
发布日期:2020-08-19
文件大小:214kb
提供者:
weixin_38664532
详解Java编写并运行spark应用程序的方法
主要介绍了详解Java编写并运行spark应用程序的方法,内容详细,结合了作者实际工作中的问题进行具体分析,具有一定参考价值。
所属分类:
其它
发布日期:2020-08-29
文件大小:81kb
提供者:
weixin_38705699
运行Spark程序的方法
Spark shell: 提供了一个强大的交互式分析数据的工具,我们可通过Scala或Python语言来使用 pyspark 在启动时便会自动生成一个驱动器程序,所以只需要在Spark shell中输入项运行的操作就可以了 pyspark –master MasterURL –name NAME 在Spark shell中运行语句sc可直接得到驱动器程序的相关信息 jupyter Notebook 是一个受许多Python开发者喜爱的Python shell,具有交互界面清晰、方便便调试编译等优
所属分类:
其它
发布日期:2021-01-07
文件大小:48kb
提供者:
weixin_38643212
Spark_compile:通过maven编译之后的Spark原始码-源码通
阿帕奇火花 Spark是用于大数据的快速通用集群计算系统。 它提供了Scala,Java,Python和R中的高级API,以及优化的引擎,该引擎支持用于数据分析的通用计算图。 它还支持丰富的高级工具集,包括用于SQL和DataFrames的Spark SQL,用于机器学习的MLlib,用于图形处理的GraphX和用于流处理的Spark Streaming。 在线文件 您可以在和上找到最新的Spark文档,包括编程指南。 此自述文件仅包含基本的安装说明。 建筑火花 Spark是使用构建的。 要构建
所属分类:
其它
发布日期:2021-03-24
文件大小:16mb
提供者:
weixin_42121058
spark-1.3.0:原始码分析与修改[spark-parent_2.10]-源码
阿帕奇火花 Spark是用于大数据的快速通用集群计算系统。 它提供了Scala,Java和Python中的高级API,以及优化的引擎,该引擎支持用于数据分析的通用计算图。 它还支持丰富的高级工具集,包括用于SQL和结构化数据处理的Spark SQL,用于机器学习的MLlib,用于图形处理的GraphX和用于流处理的Spark Streaming。 在线文件 您可以在和上找到最新的Spark文档,包括编程指南。 此自述文件仅包含基本的安装说明。 建筑火花 Spark是使用构建的。 要构建Spark
所属分类:
其它
发布日期:2021-03-23
文件大小:13mb
提供者:
weixin_42151599
spark1.52:Spark源代码中文注释-源码
阿帕奇火花 Spark是用于大数据的快速通用集群计算系统。 它提供了Scala,Java,Python和R中的高级API,以及优化的引擎,该引擎支持用于数据分析的通用计算图。 它还支持丰富的高级工具集,包括用于SQL和DataFrames的Spark SQL,用于机器学习的MLlib,用于图形处理的GraphX和用于流处理的Spark Streaming。 在线文件 您可以在和上找到最新的Spark文档,包括编程指南。 此自述文件仅包含基本的安装说明。 建筑火花 Spark是使用构建的。 要构建
所属分类:
其它
发布日期:2021-03-23
文件大小:322mb
提供者:
weixin_42153793
bigdata_project_1-源码
大规模数据处理:项目1 了解Git 如果您不熟悉版本控制系统,尤其是Git,请查阅《 及其提供的一些其他资源。 设置您的本地环境 一种。 确保检查环境变量设置是否正确。 一种。 选择具有Hadoop 2.7的版本3.0.1。 b。 安装后,您可能需要正确设置环境变量。 C。 要测试一切是否正常运行,请打开一个终端,然后键入spark-shell 。 现在您已经在Scala解释器中,您可以在此处执行Scala代码。 例如,您可以尝试println(“Hello World!”) 。 您可以
所属分类:
其它
发布日期:2021-03-13
文件大小:19kb
提供者:
weixin_42160252
火花混洗过程的一种新的压缩算法决策方法
随着Spark大数据平台的广泛应用,暴露了实际应用中的一些问题,其中主要问题之一就是性能优化。 Spark的Shuffle模块是Spark的核心模块之一,也是其他一些分布式大数据计算框架的重要模块。 Shuffle模块的设计是直接决定大数据计算框架性能的关键因素。 Shuffle流程的主要优化参数涉及CPU利用率,I / O识字率,网络传输率,而这些因素之一可能是应用程序执行过程中的瓶颈。 网络数据传输时间消耗,I / O读写时间以及CPU利用率与数据处理的大小密切相关。 因此,Spark提供了
所属分类:
其它
发布日期:2021-03-11
文件大小:383kb
提供者:
weixin_38557896
spark-源码
这是一个用引导的项目。 入门 首先,运行开发服务器: npm run dev # or yarn dev 用浏览器打开以查看结果。 您可以通过修改pages/index.js来开始编辑页面。 页面在您编辑文件时自动更新。 可以在上访问。 可以在pages/api/hello.js编辑此端点。 pages/api目录映射到/api/* 。 此目录中的文件被视为而不是React页面。 了解更多 要了解有关Next.js的更多信息,请查看以下资源: -了解Next.js功能和API。 交
所属分类:
其它
发布日期:2021-03-07
文件大小:74kb
提供者:
weixin_42122986
基于Spark的BLAST算法并行化设计与实现。
BLAST(基本局部比对搜索工具)是一种局部比对算法,具有很高的准确度,被广泛使用。 它可以在保持高精度的同时减少程序的运行时间,但是在比较大型基因数据集时却存在性能瓶颈和低效率。 因此,提出了一种基于Spark的分布式并行方法Spark_BLAST。 该方法利用Spark内存计算来识别和划分任务,并实现了BLAST算法的分布式并行计算。 最后,该方法在5个节点的Spark集群上实现。 与单机比较表明,Spark .cluster的加速可以达到约4,而不会改变比较结果的准确性。 该方法为生物信息
所属分类:
其它
发布日期:2021-03-06
文件大小:732kb
提供者:
weixin_38712578
比重计-公共服务器:具有数字比重计的相应UI的后端-源码
电子比重计公共服务器 这是用于电子比重计(如计或 )的公共服务器,通常用于测量过程中的发酵过程。 服务器允许自制程序保留数据日志并通过图表将其可视化。 方法 比重计及其数据保存在关系数据库中。 数据使用图表可视化。 该接口是使用构建的。 身份验证由OAuth2和各种支持的提供程序处理。 安装 和PHP的软件包管理器(如果没有)。 在目录中创建一个项目 composer create-project ckrack/hydrometer-public-server DIRECTORY --pref
所属分类:
其它
发布日期:2021-02-04
文件大小:425kb
提供者:
weixin_42151305
aws-serverless-java-container:一个Java包装器,用于在AWS Lambda内运行Spring,Jersey,Spark和其他应用程序-源码
无服务器Java容器 使用aws-serverless-java-container可以轻松运行用框架(例如 , , , 或编写的Java应用程序。 无服务器Java容器本机支持API Gateway的代理集成模型来处理请求和响应,您可以为使用自定义映射的方法创建和注入自定义模型。 按照的快速入门指南,将无服务器Java容器与您的项目集成: Micronaut和 以下是启动Spring应用程序的最基本的AWS Lambda处理程序示例。 您还可以查看此存储库中的,我们的主Wiki页面包
所属分类:
其它
发布日期:2021-01-30
文件大小:595kb
提供者:
weixin_42138780
«
1
2
»