standalone centos spark
安装centos stream 8的笔记
一、安装 下载centos stream 8的iso文件: https://mirrors.tuna.tsinghua.edu.cn/centos/8-stream/isos/x86_64/ 安装过程与之前的centos类似,我这里进行的是在vmware workstation 16.1中安装。 文 ......
尝试CentOS8---部署集群(生产环境7.9为好)
一、LVS集群简介 什么是集群 通过网络将很多服务器集中起来,提供同一种服务,在客户端看来就像是只有一个服务器 二、LVS-NAT集群 1、环境准备 启动3台虚拟机,禁用selinux和firewalld,挂载光盘文件并配置yum扩展源,安装vim、bash-completion net-tools ......
centOS 7安装gcc、g++
centOS7安装gcc g++ 在使用yum时遇到这个错误 Another app is currently holding the yum lock; waiting for it to exit… 运行命令 rm -f /var/run/yum.pid // 强制关掉yum进程 一、第一种方式 ......
CentOS 32位系统
CentOS 2.x - 6.x 32位 下载地址:https://vault.centos.org/ CentOS 7.x 32位 下载地址:https://vault.centos.org/altarch/ ......
Centos7 离线安装指定版本 redis
1、本次安装redis7,官方网站 https://redis.io/download/ 2、安装gcc yum install -y gcc 3、解压 tar zxvf redis-7.0.11.tar.gz -C /usr/local/ 4、编译 cd /usr/local/redis-7.0. ......
centos7 离线安装infuxdb 2.4
1、influxdb官网下载 https://mirrors.tuna.tsinghua.edu.cn/influxdata/yum/el7-x86_64/ 2、安装rpm包 yum install -y influxdb2-2.4.0.x86_64.rpm 3、启动 systemctl enabl ......
win10环境下 VMware Workstation Pro 安装centos7无法上网
一、安装centos7 网上类似的教程太多了,我就不一一写了,提供两个网址,先按照教程安装 VMware Workstation Pro ,秘钥在第二个链接里面(亲测可用), 安装完VMware在根据教程安装centos7,网络配置安装教程中不全,可参考如下 虚拟机安装教程 VMware Works ......
centos没有vi命令 或者apt-get update很慢问题
apt-get update很慢问题 1.打开终端,进入目录: cd /etc/apt 2.备份一下原来的source文件: mv sources.list sources.list.bak 3.修改source.list文件,清空里面的内容,并复制以下内容进去:因为没有vi命令 echo "deb ......
CentOS设置程序开机启动程序/服务的方法(转)
注意:CentOS 6下基本没什么问题,CentOS 7估计不一定能行。 在CentOS系统下,主要有两种方法设置自己安装的程序开机启动。 1、把启动程序的命令添加到/etc/rc.d/rc.local文件中,比如下面的是设置开机启动httpd。 #!/bin/sh # # This script ......
CentOS 7安装配置SSR客户端
CentOS 7安装配置SSR客户端 ##1. 安装配置SSR客户端 #wget https://raw.githubusercontent.com/biutefo/dabaobei/main/ssr.sh 1.1 安装SSR客户端 由于博客平台对关键字过滤,如下SSR代替如下字符: 安装epel扩 ......
Linux CentOS 7 离线安装.NET环境
下载离线安装包 下载.NET 例如: aspnetcore-runtime-6.0.15-linux-x64.tar.gz 复制到Linux /usr/local/dotnet/aspnetcore-runtime-6.0.15-linux-x64.tar.gz 解压 cd /usr/local/d ......
Centos7 yum安装k8s 1.23.0
本次部署有3个节点,一个master,2个node。其中maser是192.168.18.11,node分别是192.168.18.12、192.168.18.12。 一、在master:192.168.18.11上 1、前提条件安装docker,并修改/etc/docker/daemon.json ......
centos 常用命令
centos 常用命令 批量删除进程 ps -ef | grep mongo | grep -v "grep" | awk '{print $2}' | xargs kill -9 grep -v这个参数的作用是排除某个字符。所以这里排除了grep的命令。 之后也利用awk找到pid这一列。 最后的 ......
CentOS网卡无法启动返回'Failed to start LSB:Bring up/down networking.'
装了一台虚机,配置docker服务的时候发现忘了开CPU虚拟化,关机开启后再登录,发现网卡down了,重启网卡报错。 1. journalctl -ex #查看日志,发现返回错误'Failed to start LSB:Bring up/down networking.'; 2. vi /var/l ......
vm+centos+lnmp部署dvwa
1、说明 本次安装环境: VMware-player-16.0.0-16894299 CentOS-7-x86_64-Minimal-2009.iso Nginx:Web 服务器,本文以 Nginx 1.17.7 为例。 MariaDB:数据库,本文以 MariaDB 10.4.8 为例。 PHP: ......
CentOS强制指定用户下线并禁止用户再次登录
CentOS强制指定用户下线并禁止用户再次登录 强制指定用户下线 可以使用pkill命令kill该用户所有的进程 pkill -u tom 执行上面的命令会将名为“tom”的用户踢下线 禁止用户登录 使用pkill命令将用户踢下线后该用户可以再次登录,我们要禁止这种行为,有两种方法可以办到 锁定用户 ......
CentOS7.9 安装 RabbitMQ
官方安装文档 https://www.rabbitmq.com/install-rpm.html 一、rpm 包下载 1. 下载 erlang https://packagecloud.io/rabbitmq/erlang/packages/el/7/erlang-23.3.4.11-1.el7.x ......
修改centos7虚拟机的用户密码
在忘记原密码无法登录桌面的情况下,修改centos7的用户密码 非常规启动,进入编辑启动菜单 在启动GRUB菜单中选择编辑选项,按键e进入编辑; 找到linux16开头的一行,在该行中寻找ro的所在地点,将ro改为rw init=/sysroot/bin/bash,然后Ctrl+x开始执行,进入单用 ......
spark
首先安装JAVA,SCALA scala安装 解压包 [root@master ~]# tar -zxvf scala-2.11.8.tgz -C /usr/local/src/ 配置环境变量 #SCALA_HOME export SCALA_HOME=/usr/local/src/scala ex ......
CentOS7 升级openssl版本(升级至3.0.3)
首先查看本地openssl版本 openssl version 创建一个放源码的目录(按自己习惯) #这里是我的习惯 cd /usr/local/src #去官网获取你想要版本的tar压缩包 如果没有wget命令,自行百度 wget --no-check-certificate https://ww ......
CentOS7使用systemctl添加自定义服务
一、简介 Centos7开机第一个程序从init完全换成了systemd这种启动方式,同centos 5 6已经是实质差别。systemd是靠管理unit的方式来控制开机服务,开机级别等功能。 在/usr/lib/systemd/system目录下包含了各种unit文件,有service后缀的服务u ......
CentOS7 云服务器搭建及部署SpringBoot+vue项目
CentOS7 云服务器搭建及部署SpringBoot+vue项目 1)云服务器配置以及环境搭建 1.1 JDK安装 卸载现有环境(有则卸载) 使用rpm命令查询相关java套件 rpm -qa | grep java 如果存在,通过命令删除对应版本的JDK rpm -e --nodeps java ......
在CentOS上安装Docker引擎
1,先决条件 #### 1-1操作系统要求 1-2 卸载旧版本 2,安装方法 2-1使用存储库安装 设置存储库 安装 Docker 引擎 本文永久更新地址: 官方地址:https://docs.docker.com/engine/install/centos/ 1,先决条件 #### 1-1操作系统 ......
CentOS7yum安装Docker20.10.11
一、安装脚本 mkdir -p /root/soft/jiaoben vim /root/soft/jiaoben/yum_docker20-10-11.sh 点击查看代码 #!/bin/bash # 定义颜色 BLUE_COLOR="\033[36m" RED_COLOR="\033[31m" G ......
Centos7 开机时遇到initramfs-xxx.img not found错误导致虚拟机无法开启问题处理
1、背景 一台运行在Esxi上面的VM重启后报initramfs-xxx.img not found错误。 按任意键后出现以下错误。 之前在运维Centos7的时候解决过Kernel panic - not syncing : VFS: Unable to mount root fs on unkn ......
Spark持久化
众所周知,RDD只会保留血缘关系,不存储计算结果。如果想要让计算结果持久化存储,那就要引入cache和persist方法。 提前感受变化 禁用持久化 package com.pzb.rdd.persist import org.apache.spark.rdd.RDD import org.apac ......
Spark算子总结
Spark的算子分为两大类:transform(转换算子)和action(行动算子) transform算子:map、mapPartitions、mapPartitionsWithIndex、flatMap、glom、groupBy、filter、sample、distinct、coalesce、r ......
centos 搭建yum源服务器
1、安装httpd 只是做测试用,生产环境是不联网的,要自己编译安装,自己的虚拟机可以直接yum安装 yum install -y httpd systemclt start httpd 注意:防火墙,可开放端口80或直接关闭防火墙 浏览器访问,成功 2、下载ios 地址:https://mirro ......
CentOS 7下MariaDB 5.5升级到MariaDB 10.2
转载自:https://cloud.tencent.com/developer/article/2075410 一次CentOS 7下升级MariaDB过程,在此记录下。 原因:新的项目需要新的数据库版本支持。 升级主要步骤: 备份原数据库 》卸载mariadb 》添加mariadb国内yum源 》 ......