standalone centos spark
Vmware_centos7:连接失败+ping不通，设置静态ip
https://blog.csdn.net/weixin_44259720/article/details/128959100 导读 小编之前使用过 VMware workstation 工具搭建 Centos 7 版本的虚拟机集群，各项功能都正常，用完了也就清除了（节约本地空间）。因为最近学习大数 ......
CentOS7 配置本地yum源软件仓库
## CentOS7 配置本地yum源软件仓库 ## 前言 > 配置本地yum源软件仓库可以离线状态下安装本地已有的软件 1. 先连接虚拟光驱，对应的光驱iso文件  2. 查看磁盘 ......
《Linux系统管理初学者指南 基于CentOS 7.6》pdf电子书免费下载
这是一本面向零基础读者的Linux入门图书。书中所有内容，都是从初学者的角度来组织编写的。虽然这本书从系统运维的角度来介绍Linux系统的使用，但是同样也适用于各类以Linux为基础平台的专业人员，因为书中所介绍的是Linux系统中基础和通用的操作。适用于系统运维、嵌入式、云计算、大数据和人工智能等 ......
CentOS 7 在登录界面隐藏普通用户
CentOS 7 在登录界面隐藏普通用户 例如隐藏普通用户“test” 1 [root@localhost ~]# cd /var/lib/AccountsService/users/ 2 [root@localhost users]# vi test[User]SystemAccount=true ......
Spark基础
# Spark基础 [toc] ## 1 Spark简介 ### 1.1 Spark介绍 - 什么是Spark 1. Apache Spark is an open source cluster computing system that aims to make data analytics fa ......
CentOS中安装mysql
安装前检查： 一。先检查CentOS 的默认数据库 mariadb是否存在 rpm -qa | grep mariadb 查出结果 mariddb-libs-5.5.68-1.el7.x86_64 二。强行删除上边的文件 rpm -e --nodeps mariadb-libs-5.5.68-1.e ......
docker安装spark
curl -L "https://github.com/docker/compose/releases/download/1.29.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose chmod +x ......
CentOS7 本地光盘镜像rpm包
# CentOS7 本地光盘镜像rpm包 ## 一、前言 > rpm包的下载方式 > > - 通过本地光盘镜像下载rpm，centos7.iso镜像文件，内置了绝大多数软件的rpm包（本文章即演示如何配置本地rpm） > > - 在线下载rpm包，有很多软件的官网，以及第三方软件仓库，会提供下载功能 ......
002--CentOS8 操作系统安装 Docker
CentOS8 操作系统安装 Docker 因为有的同学可能会选择其他的 Linux 的发行版来学习本课程，所以这节课我们也列举了如何在 Ubuntu 下安装 Docker 的方法。对于初次接触 Linux 的用户，我们会提供尽可能详细的注释来告知每个命令的作用，放松心态，跟着做就可以了。 Tips ......
如何在window上使用spark
关于怎么使用spark在windos系统？下载anaconda下载spark怎么用呢？步骤1：打开anaconda prompt，激活步骤2：安装需要导入的东西步骤3：打开Jupyter Notebook，使用下面命令在一个py文件中步骤4：使用import导入成功使用 ......
CentOS7.6配置CentOS-7-x86_64-Everything-1810.iso本地镜像源
1，准备工作 需要下载CentOS-7-x86_64-Everything-1810.iso镜像并放置到服务器上， 2，挂在镜像 # mount -o loop /opt/CentOS-7-x86_64-Everything-1810.iso /mnt mount ：挂载命令，-o loop：指定将 ......
CentOS7安装体验
一。准备一个32GU盘 二。下载老毛桃，安装后，制作一个U盘启动盘，用FAT32文件格式 三。下载CentOS7镜像，下载mini版本，因为要放在FAT32文件格式的U盘中，所以文件不能超出4G。 四。安装前把主机电脑上硬盘全部分区删除 五。U盘启动时选择CentOS Install 注意要修改下 ......
CentOS 安装后的网络设置
一。在安装minimalCentOS后，启动后输入 root 与密码 二。cd 进入/etc/sysconfig/network-scripts 文件夹 三。vi 编辑 文件 ifcfg-enp4sp0 我看网上其它是 ifcfg-eth0，因为我的网卡名是 enp4sp0 四。修改内容 BOOTP ......
《RHEL 7.4 & CentOS 7.4网络操作系统详解》pdf电子书免费下载
《RHEL 7.4 & CentOS 7.4网络操作系统详解（第2版）》以目前被广泛应用的Red Hat Enterprise Linux服务器发行版7.4为主，兼容CentOS7.4，采用教、学、做相结合的模式，着眼应用，全面系统地介绍了Linux的应用、开发及网络服务器配置与管理的方法与技巧。该 ......
spark调用HTTP请求并返回数据落地到数仓(or数据库)
POM xml复制代码 com.alibaba fastjson spark-sql依赖 --> org.apache.spark spark-sql_${scala.tools.version} org.apache.spark spark-hive_${scala.tools.version} ......
RDS 、HDFS、 mapreduce 、spark 、hive、 hbase 、zookeeper 、kafka 、flume、mysql 安装时之间配置文件是如何依赖的？
这些技术是大数据领域的常用组件，它们之间的配置文件依赖关系如下： RDS是一种关系型数据库，可以独立安装和使用，不需要依赖其他组件。 HDFS是Hadoop分布式文件系统，通常与MapReduce一起使用。在Hadoop集群中，HDFS需要配置core-site.xml和hdfs-site.xml两 ......
centOS 安装docker
一、安装前必读 在安装 Docker 之前，先说一下配置，我这里是Centos7 Linux 内核：官方建议 3.10 以上。 注意：本文的命令使用的是 root 用户登录执行，不是 root 的话所有命令前面要加 sudo 1.查看当前的内核版本 [root@localhost vagrant]# ......
CentOS 6.9 python3.10 numpy 安装使用 - gcc 升级
## 踩坑记录 程序写好了，使用了 pandas，放在服务器上，运行报错： ```text Original error was: /lib64/libgcc_s.so.1: version `GCC_4.8.0' not found (required by /usr/local/lib/pyth ......
在centos环境下 ,自己写的sh脚本,如何开机自执行
在 CentOS 环境下，可以通过将脚本添加到系统服务中来实现开机自启动，具体步骤如下： 创建一个新的服务文件，比如/etc/systemd/system/yourscript.service，并在文件中添加以下内容： [Unit] Description=Your Script After=net ......
如何在centos7部署网站
# 如何在centos7部署网站 ## 1.买服务器 推荐阿里云试用三个月。 ## 2.安装数据库，Java ，nginx java安装教程 https://www.youtube.com/watch?v=90-0dRxs1fs&ab_channel=LiquidWeb mysql安装教程 http ......
centos7系统配置阿里云yum源
先查看系统是否有wget这个命令，没有的话需要先安装下：yum -y install wget 下面会用到此命令 进入yum源目录 将以上本地源备份 建立备份存放目录 mkdir yum.bak 将原文文件全部移动至备份目录 mv *o yum.bak 阿里云源地址：http://mirrors.a ......
centos7升级nvidia驱动
硬件环境:安装centos7的服务器 centos7上基本都是没有图像界面的，所以可以直接装 卸载显卡： 方式1：./驱动文件.run --uninstall 方式2：/usr/bin/nvidia-uninstall 卸载完以后，安装新的驱动 ./新的驱动文件.run -no-opengl-fil ......
CentOS7可视化修改网卡命令
CentOS7可视化修改网卡命令：【 nmtui 】nmtui 命令可以实现如下配置：1、修改IP地址-掩码-网关等；2、修改CentOS计算机名；3、启动或停用网卡 ......
CentOS7.0设置开机网卡自动启动
新安装的centos7系统网卡没有自动启动 [root@ETS004 ~] # cd /etc/sysconfig/network-scripts[root@ETS004 network-scripts] # ls //列出 network-scripts 文件夹下的列表信息找到 ifcfg-ens ......
《CentOS 7系统配置与管理》pdf电子书免费下载
本书基于CentOS7.5系统编写，且内容通用于RHEL7、Fedora等系统。内容涵盖了部署虚拟环境、安装Linux系统；常用的Linux运维命令；与文件读写操作有关的技术；使用Vim编辑器编写Shell命令脚本；配置与应用远程连接服务，用户身份与文件权限的设置；硬盘设备分区、格式化以及挂载等操作 ......
centos
1 查看开放的端口： firewall-cmd --list-ports 2 开启端口： firewall-cmd --zone=public --add-port=8000/tcp --permanent && firewall-cmd --reload 3 重置：firewall-cmd --r ......
CentOS7防火墙开启与关闭以及开放某个端口
CentOS7用firewall防火墙替代了原来的iptables，所以我们应该使用firewall的一些命令。 1.关闭防火墙 systemctl stop firewalld.service #停止firewall systemctl disable firewalld.service #禁止f ......
centos 开机自动执行脚本
要让 CentOS 在开机时自动执行脚本，你可以按照以下步骤进行操作： 编写你需要执行的脚本文件。假设你的脚本文件名为 startup.sh，并且位于 /usr/local/bin/ 目录下。 给脚本文件添加执行权限。你可以使用以下命令给文件添加执行权限： bash 复制代码 chmod +x /u ......
CentOS7 通过 yum 安装 Docker
从 Docker 官网上也能够找到 CentOS7 安装 Docker 的文档，但是文档比较简略，为了能够在安装过程中少走一些弯路，还是很有必要写一下 Docker 安装的博客总结，方便后续提高工作效率。 CentOS7 安装 Docker 的官网文档地址为：https://docs.docker. ......
Centos7 离线编译安装python3
一，安装依赖 yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel readline-devel tk-devel gcc make 安装libffi-devel依赖 yum install libffi-devel -y ......