首页
博客
源码
资源
博客
源码
写文章
发布博客
发布资源
登录
X
大数
相关资讯
热门
最新
后端
01-01 08:00
后端
大数据场景中语言虚拟机的应用和挑战
大数据场景中语言虚拟机的应用和挑战,大数据场景中语言虚拟机的应用和挑战吴明瑜1,2,陈海波1,2,臧斌宇1,21领域操作系统教育部工程研究中心,上海2002402上海交通大学软件学院并行与分布式系统研究所,上海200240摘要:语言虚拟机为大数据应用提供了与平台无关的执行环境,简化了应用的开发和部署,因此在大数据场景中得到了较广泛的应用。主要分析了两种主流语言虚拟机——JVM和CLR在大数据场景中
163
后端
01-01 08:00
后端
大数据平台使用搭建脚本一键安装OS
大数据平台使用搭建脚本一键安装OS,本文给大家分享的是如何在大数据平台使用脚本来实现一键安装定制OS,并给大家附上了脚本源码,有需要的小伙伴可以参考下搭建脚本篇脚本命名随便,只要能看懂就行镜像包说明os1.1.iso用于安装服务端和客户端操作系统hdp.iso用于安装hdp服务1.架构图:服务端客户端2.原理分析安装系统-安装本地yum源-安装http源-安装并配置ntp服务-配置秘钥-安装jdk
161
百科问答
01-01 08:00
百科问答
大数据开发工程师需要掌握哪些知识(必备的专业技能介绍)
大数据开发工程师需要掌握哪些知识(必备的专业技能介绍)Big Data—大数据,一种无法在一定时间内用常规工具进行捕捉、管理和处理的数据集合。大数据开发技术作为大数据技术的一个分支,是许多人学习大数据技术的方向选择之一,那么如何去学习大数据开发技术呢? 大数据开发其实可以分为两类,第一类是编写一些Hadopp、Spark的应用程序;第二类是对大数据处理系统本身进行开发。在学习大数据开发技术前,小编将挑选并展示一家互联网企业中对于大数据开发其中一种岗
154
百科问答
01-01 08:00
百科问答
大数据价值密度高还是低(大数据五大基本特点)
大数据价值密度高还是低(大数据五大基本特点)1、企业大数据,你到底是什么1.1我们先来看看主流的大数据概念。IBM提出大数据的5V特点:Volume(大量)、Velocity(高速)、Variety(多样)、Value(低价值密度)、Veracity(真实性)。麦肯锡全球研究所给出的定义是:一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四
150
后端
01-01 08:00
后端
大数据成长之路—— Hadoop 词频统计
大数据成长之路—— Hadoop 词频统计,HDFS项目实战需求分析使用HDFSJavaAPI才完成HDFS文件系统上的额文件的词频统计例子/test/1.txt==>'helloworld'/test/2.txt==>'helloworldworld'得出hello两个,world三个代码框架编写1:读取HDFS上的文件2:词频统计3:将处理的结果混存起来Map4:将结果输出到HDFS上下文pa
147
后端
01-01 08:00
后端
大数据开发-Flink-窗口全解析
大数据开发-Flink-窗口全解析,大数据开发-Flink-窗口全解析Flink认为Batch是Streaming的一个特例,因此Flink底层引擎是一个流式引擎,在上面实现了流处理和批处理。而Window就是从Streaming到Batch的桥梁。通俗讲,Window是用来对一个无限的流设置一个有限的集合,从而在有界的数据集上进行操作的一种机制。流上的集合由Window来划定范围,比如“计算过去
146
后端
01-01 08:00
后端
大数翻倍法求解CRT
大数翻倍法求解CRT,大数翻倍法求解CRT目录正文引入大数翻倍法复杂度证明大数翻倍法的优势最后的最后:上代码!注:做法和思路是zhx在一次讲课中提出的,如有侵权,请联系作者删除其实别的题解也有提到过暴力做法,但这里将会给出更加严谨的复杂度的证明正文引入我们知道,中国剩余定理是一种用来求解类似于⎧⎩⎨⎪⎪⎪⎪⎪⎪⎪⎪⎪⎪x≡a1(modm1)x≡a2(modm2)x≡a3(modm3)...x≡a4
142
百科问答
01-01 08:00
百科问答
大数据处理框架有哪些(全面了解大数据处理框架)
大数据处理框架有哪些(全面了解大数据处理框架)大数据要实现处理,需要专业的技术手段去实现,以Hadoop、Spark为首的一些计算框架,也已经在大数据处理当中,稳稳地占据一席之地。当然,在大数据当中,可用的计算处理框架不止于此。今天加米谷学院就来为大家介绍一些大数据常用处理框架。发展到今天,大数据处理主要分为两类大的需求,一是批处理,一是流处理。在企业的实际业务场景当中,可能会只需要批处理或者流处理,也可能同时需要批处理和流处理,这就使得搭建
135
后端
01-01 08:00
后端
大数据高级开发工程师-开课吧
大数据高级开发工程师-开课吧,###download:大数据高级开发工程师源码学习思绪Koa的中心文件一共有四个:application.js、context.js、request.js、response.js。一切的代码加起来不到2000行,非常笨重,而且大量代码集中在request.js和response.js关于恳求头和响应头的处置,真正的中心代码只要几百行。另外,为了更直观地梳理koa的运
135
后端
01-01 08:00
后端
大数据独角兽 MapR 难以为继,将资产出售给惠普企业
大数据独角兽 MapR 难以为继,将资产出售给惠普企业,近日,根据多家外媒报道,MapR正在向惠普企业(HewlettPackardEnterprise)出售其资产,这一消息是在MapR披露其可能关闭之后两个多月发布的。早前,根据加州就业发展部门的一份文件,MapR于5月14日通知加州就业发展局,计划在SantaClara总部裁员122人。在工人调整及再培训通知(WARN)文件中,这次裁减被标记为
132
«
1
2
3
4
5
6
7
8
...
11
12
»