大数据处理 | Spark集群搭建及基本使用

本文将详细介绍Spark集群的搭建及Spark的运行原理、运行模式。—▼—Spark集群环境搭建如果已经理解了前文Hadoop集群环境的搭建，那么学习Spark集群环境的搭建会容易很多，因为Hadoo...

写给大忙人系列:spark开发环境搭建

Spark开发环境搭建一.安装Spark二.词频统计案例三.Scala开发环境配置...

SPARK官方教程系列快速入门 spark 教程

1-概述ApacheSpark是一个用于大规模数据处理的统一分析引擎，它在Java、Scala、Python和R中的提供了高级api，以及一个支持通用执行图[generalexecutiongr...

详解 jupyter notebook 集成 spark 环境安装

来自：1相关介绍jupyternotebook是一个Web应用程序，允许你创建和分享，包含活的代码，方程的文件，可视化和解释性文字。用途包括：数据的清洗和转换、数值模拟、统计建模、机器学习...

Spark集群:环境搭建之Scala安装指南

前篇文章介绍了Spark计算框架相较于MapReduce框架的种种优势，接下来我们一起安装、配置Spark集群环境，方便后期继续学习研究。Spark项目是由Scala语言编写的，因此需提前配置Scal...

Home Assitant出海如何配置，看这一篇就够了

之前对卧室和工作室进行了一波智能化改造，主要是依托米家系统支持。挑选好并购入支持米家系统的设备，能够大大降低学习和使用成本，但对于非米家的设备就力有不逮了。很多所谓智能家居支持都是厂家自己修改通用协议...

Docker三剑客之Swarm docker w3cschool

一、概述Swarm是Docker公司推出的用来管理docker集群的平台...

酷炫!一款 Go 语言实现的实时图形化分析的性能测试工具

性能测试工具有很多，传统知名的有apacheab工具；现代的有wrk[1]。Go语言有两款这样的工具：hey[2]和vegeta[3]。今天推荐的这款工具基于vegeta，但使用起来更...

Docker Compose 命令大全，Linux 运维工程师收藏!

DockerCompose是一个用于定义和运行多容器Docker应用程序的工具。通过一个YAML文件来配置你的应用服务，然后使用一个简单的命令，就可以创建并启动所有服务。在这篇文章中，我们将详细介绍...

Java 服务 Docker 容器化最佳实践

一、概述当我们在容器中运行Java应用程序时，可能希望对其进行调整参数以充分利用资源。...