standalone centos spark

要在CentOS上安装Nginx，请按照以下步骤进行操作： 1.更新系统软件包： ```shell sudo yum update ``` 2.安装EPEL存储库（Extra Packages for Enterprise Linux）： ```shell sudo yum install epel ......

1、使用ext3的分区格式，挂载到/data目录 fdisk -l fdisk /dev/vdb n┛p┛1┛┛┛wq┛ mkfs ext3 /dev/vdb1 echo '/dev/vdb1 /data ext3 defaults 0 0' >> /etc/fstab mkdir /datamou ......

# 报错信息 ### locale: cannot set LC_XXX to default locale: No such file or directory ### terminal message ![image](https://img2023.cnblogs.com/blog/31137 ......

## 前言 在 CentOS 9 x64 系统上，可以通过以下步骤来部署 Golang 服务。 ## 1\. 安装必要的软件包 安装以下软件包： 1. Golang：Golang 编程语言 2. Nginx：Web 服务器 3. Supervisor：进程管理工具 4. Git：版本控制工具 5. ......

镜像方式安装： # 1.安装docker # 2.安装postgreSQL ps:必须要检查 云服务器 的安全组策略，出方向、入方向都要开放postgres的端口[5432]，否则很容易无法远程连上 ps:防火墙必须开放postgres的端口[5432]，不然，也无法远程连上，学习使用的话，关掉也可 ......

# RDD的Transformation算子 ## map map算子的功能为做映射，即将原来的RDD中对应的每一个元素，应用外部传入的函数进行运算，返回一个新的RDD ```Scala val rdd1: RDD[Int] = sc.parallelize(List(1,2,3,4,5,6,7,8 ......

# 1.系统配置 - 硬件配置基本要求 | 资源 | 大小 | | | | | 硬盘 | >= 20G | | cpu | >= 2核 | | 内存 | >= 2G | - 本教程配置 | 主机名 | IP | 配置 | | | | | | master | 192.168.10.155 | 3核+ ......

# 1.下载依赖以及脚本 git@github.com:a356a/deploy.git # 2.执行脚本-dockerInstall.sh 脚本具体执行： ## 卸载原有docker yum -y remove $(yum list installed | grep docker |awk '{p ......

1.下载Jenkins Jenkins下载地址：http://jenkins-ci.org/ 或 https://mirrors.jenkins-ci.org/redhat/ 2.卸载jenkins 1.卸载旧jenkins rpm -qa | grep jenkins 2.卸载 jenkins r ......

1.tar -zxvf nginx-1.6.2.tar.gz 2.yum install -y gcc pcre-devel zlib-devel openssl openssl-devel 3. ./configure 4.删除-Werror，这个文件在/nginx-1.6.2/objs/Make ......

1.tar -zxvf jdk-8u11-linux-x64.tar.gz 2.编辑环境变量 vim /etc/profile 3.source /etc/profile 4.java -version ......

# 1.安装virtualbox - 下载virtualbox ``` https://www.virtualbox.org/wiki/Downloads ``` ![](https://files.mdnice.com/user/34714/feb17a22-1a8f-4fc9-87bb-7b77 ......

1.先去官网准备好几个安装包： 2.tar -xvf mysql-8.0.26-1.el8.x86_64.rpm-bundle.tar 3.可能需要卸载系统中自带的mariadb rpm -qa|grep mariadb rpm -e --nodeps mariadb-connector-c-3.1 ......

在二进制安装Mysql8.0.33过程中，出现了如下报错信息： ./mysqld: /lib64/libstdc++.so.6: version `CXXABI_1.3.11' not found (required by ./mysqld) ./mysqld: /lib64/libstdc++.s ......

1、添加EPEL软件包安装源 yum install https://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm 2、安装mosquitto yum install mosquitto ......

查看硬盘信息 查看现有磁盘文件系统的使用情况 确定盘符，这里是/dev/sdb 也可以用lsblk命令列出所有可用块设备的信息 对新磁盘进行分区 磁盘的空间大于2T，不能用直接用fdisk分区，应当使用parted创建分区。 使用mkpart primary 0% n%创建主分区，n为要分的分区占整 ......

在 CentOS 上给某个用户赋予某文件夹的权限，可以按照以下步骤进行操作： 1. 使用 root 用户登录到 CentOS 服务器。 2. 使用 `ls -l` 命令查看文件夹的权限和所有者。例如，假设要给 `/data/folder` 文件夹赋予用户 `user1` 的权限，可以运行以下命令： ......

CentOS 查看系统 CPU 个数、核心数、线程数 1、查看 CPU 物理个数 grep 'physical id' /proc/cpuinfo | sort -u | wc -l 2、查看 CPU 核心数量 grep 'core id' /proc/cpuinfo | sort -u | wc ......

由于工作需要接触Docker，手上大部分机器又都是Centos6，所以需要升级内核。 2.6.32-279.el6.x86_64 升级至 4.9.75-30.el6.x86_64的操作记录如下： 1、下载 http://rpm.pbone.net/info_idpl_73484345_distro_ ......

需求：公司外部员工需要访问内部办公网服务器，所以需要搭建一个vpn提供外部员工使用。 1： 环境服务器系统：CentOS Linux release 7.9.2009 (Core)服务器配置：不重要服务器IP： Openvpn服务器： 外网：124.70.49.106 内网：192.168.0.15 ......

1.先安装相应的组件： yum -y install xclock xorg-x11-xauth.x86_64 xorg-x11-utils2.打开xmanager-passive： 打开后会自动隐藏到任务栏右下角。3.终端中操作，如果切换到其他用户仍要注意环境变量 DISPLAY： ~]# exp ......

-I INPUT -s 10.195.132.185 -j DROP-I INPUT -s 10.230.91.2 -j DROP查看列表iptables -Lservice iptables restart vi /etc/sysconfig/iptablescentos7systemctl st ......

出现问题，系统进不去； 参考： 亲测有效 https://blog.csdn.net/Nightwish5/article/details/119640728 ......

# 使用PySpark ## 配置python环境 在所有节点上按照python3，版本必须是python3.6及以上版本 ```Shell yum install -y python3 ``` 修改所有节点的环境变量 ```Shell export JAVA_HOME=/usr/local/jdk ......

一.下载安装 1.直接用linux自带的yum源，下载不了 2.安装第三方源 yum -y install https://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm 3.再次使用yum下载 yum -y instal ......

scp root@10.10.10.1:/etc/yum.repos.d/test.repo . # 需要安装的依赖 yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel readline-devel tk-devel m ......

例：配置集群1的A,B,C三台Centos7的test无密码用户免密登录 1，在A机器执行ssh-kengen生成秘钥，一路回车 [root@lms lms]# su - test [test@test ~]# ssh-keygen Generating public/private rsa key ......

CentOS 7 下/etc/ssh/sshd_config 文件详解 SSH由客户端和服务端的软件组成，在客户端可以使用的软件有SecureCRT、putty、Xshell等，而在服务器端运行的是一个sshd的服务，通过使用SSH，可以把所有传输的数据进行加密，而且也能够防止dns和IP欺骗，此外 ......

注：以下所有操作均在CentOS 7.9 x86_64位系统下完成。 #准备工作# 在安装Redis之前，请确保已经使用yum安装了以下基础组件： make gcc gcc-c++ kernel-devel #Redis的安装# 开始下载Redis并进行编译安装： wget http://downl ......

netcore 2.2 sdk 安装 注意事项：鉴于服务器不能连接外网，只能通过现将安装包下载到本地电脑，再通过xftp 工具上传 官方下载页面：Download .NET Core 2.2 (Linux, macOS, and Windows) (microsoft.com) 通过xftp工具传到 ......