首页
博客
源码
资源
博客
源码
写文章
发布博客
发布资源
登录
X
spa
相关资讯
热门
最新
后端
01-01 08:00
后端
Spark 3.0 中七个必须知道的 SQL 性能优化
Spark 3.0 中七个必须知道的 SQL 性能优化,本文来自IBM东京研究院的高级技术人员KazuakiIshizaki博士在SparkSummitNorthAmerica2020的《SQLPerformanceImprovementsataGlanceinApacheSpark3.0》议题的分享,本文视频参见今天的推文第三条。PPT请关注过往记忆大数据并后台回复sparksql3获取。Spa
175
后端
01-01 08:00
后端
SpaceX用10手火箭将51颗星链卫星送入轨道 助推器回收成功
SpaceX用10手火箭将51颗星链卫星送入轨道 助推器回收成功,9月14日消息,当地时间周一晚间,SpaceX公司的猎鹰9号火箭从位于美国加州的范登堡太空部队基地发射升空,成功将51颗星链互联网卫星送入预定轨道。这枚猎鹰9号火箭于美国东部时间晚11点55分准时发射升空,这是SpaceX在美国西海岸进行的第一次星链卫星发射任务,也是第29次星链卫星发射任务,使得在轨运行的星链卫星总数达到1797颗
175
后端
01-01 08:00
后端
Spark解决SQL和RDDjoin结果不一致问题(工作实录)
Spark解决SQL和RDDjoin结果不一致问题(工作实录),问题描述:DataFrame的join结果不正确,dataframeA(6000无重复条数据)joindataframeB(220条无重复数据,由dataframeA转化而来,key值均源于dataframeA)只有200条数据,丢了20条问题验证:1,查询丢的20条数据,均无异常,不存在Null,数据不存在空格2,重新运行算法,丢1
174
后端
01-01 08:00
后端
Spark实现K-Means算法代码示例
Spark实现K-Means算法代码示例,这篇文章主要介绍了Spark实现K-Means算法代码示例,简单介绍了K-Means算法及其原理,然后通过具体实例向大家展示了用spark实现K-Means算法,需要的朋友可以参考下。K-Means算法是一种基于距离的聚类算法,采用迭代的方法,计算出K个聚类中心,把若干个点聚成K类。MLlib实现K-Means算法的原理是,运行多个K-Means算法,每个
171
后端
01-01 08:00
后端
SparkStreaming 整合 Kafka 实现精准一次消费
SparkStreaming 整合 Kafka 实现精准一次消费,SparkStreaming整合Kafka实现精准一次消费简介SparkStreaming消费Kafka实现精确一次性消费.保证消息不丢失、不重复消费.消息处理的语义AtLeastOnce(至少处理一次):消息至少被处理一次可以保证数据不丢失,但有可能存在数据重复问题。AtMostOnce(最多处理一次)消息最多被处理一次可以保证数
170
百科问答
01-01 08:00
百科问答
spacesniffer怎么用详细介绍
spacesniffer怎么用详细介绍 spacesniffer是一款非常优秀的硬盘扫描和管理软件,能够通过颜色、图表的方式为用户直观地呈现硬盘中的文件表达情况,不过因为这款软件是英文的因此有些用户不知道spacesniffer怎么用,下面就来看看详细教程吧。 spacesniffer怎么用: 1、首先我们双击“spacesniffer.exe”运行这款软件。 2
167
百科问答
01-01 08:00
百科问答
spacesniffer清理C盘教程
spacesniffer清理C盘教程 spacesniffer是一款可以用于清理C盘的软件,他可以非常直观地帮助我们显示是哪些文件夹占用了太多的内存空间,从而方便进入这些文件夹进行清理,它还自带直接的清理和管理功能,使用起来非常方便。 spacesniffer怎么清理C盘: 1、首先我们打开软件,选中“C盘”,然后点击右下角的“Start”来扫描C盘。 2、扫描完成
167
代码人生
01-01 08:00
代码人生
spark streaming 使用实例:用户行为统计
spark streaming 使用实例:用户行为统计,前面我们已经做好了数据的输入以及数据的输出操作了,现在我们可以开始使用开始sparkstreaming的一些简单的使用了。这次完成的处理是对一个用户行为数据流来做分析。数据源的数据原本是一个购物网站的数据集,被我做成了重复利用的数据(循环的读取),它共有五个字段。不过这次用到的只有第3个字段(代表用户的行为分类)。这个字段的取值范围是1到4。
165
后端
01-01 08:00
后端
SpaceX最大火箭B4助推器安装完成29部猛禽发动机
SpaceX最大火箭B4助推器安装完成29部猛禽发动机,SpaceX最大火箭B4助推器安装完成29部猛禽发动机8月3日消息,当地时间上周日,SpaceX完成超级重型火箭助推器原型B4的堆叠工作。随后工程师和技术人员仅仅花了一晚上时间,就将29部猛禽发动机安装在助推器上。据悉,B4助推器高70米,直径9米,推力大约是土星五号火箭的两倍。SpaceX在B4助推器内部安装了29部猛禽发动机用于初始飞行测
163
后端
01-01 08:00
后端
SpaceX首个超重型火箭助推器原型完工 将被推上发射台接受测试
SpaceX首个超重型火箭助推器原型完工 将被推上发射台接受测试,SpaceX首个超重型火箭助推器原型完工将被推上发射台接受测试在开始组装6周后,美国太空探索技术公司SpaceX已经完成了其首个真正意义上的超重型火箭助推器原型,将其推出了“高舱”,并将安装在发射台上接受测试。这枚超重型火箭助推器被简称为B3,高约65米,几乎与猎鹰9号火箭和龙飞船加起来的高度相当。预计在装满液氧和甲烷推进剂的情况下
159
«
1
2
3
4
5
6
7
8
...
15
16
»