standalone centos spark
centos系统 修改ssh默认端口号
前提:关闭防火墙、关闭SELinux # 关闭防火墙 systemctl stop firewalld && systemctl disable firewalld # 关闭 SElinux # 永久关闭 sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' ......
Liunx(CentOS)磁盘管理常用命令备忘
1、查看分区情况:lsblk 2、查看磁盘总体情况:df -h 3、查看各目录的磁盘占用情况:du -h -x --max-depth=1 4、文件管理相关 删除:rm -rf obj 复制:cp -a src dest 移动或重命名:mv src dest 其他博主的文章转载: Linux系统/d ......
centos7做bond0
留个记录 cd /etc/sysconfig/network-scripts/cat >ifcfg-bond0<< EOF_bond0 NAME=bond0 DEVICE=bond0 TYPE=Bond ONBOOT=yes BOOTPROTO=static IPADDR=10.1.3.41 #替换 ......
Spark任务调试(Scala开发语言)
// 将dataframe存储到hdfs myDF.write.orc("hdfs://nsxxxx/user/admin/dir") // 读取操作 val mdf = spark.read.orc("hdfs://nsxxxx/user/admin/dir") ......
centos添加永久静态路由
CentOS7系统双网卡环境下添加静态路由的几种方法 发布于2019-11-21 11:11:44阅读 9.4K0 如下拓扑图所示(点击图片查看清晰大图) 场景简单描述一下: CentOS7系统为双网卡的网络环境 1)ens33:10.20.10.93/23是外网网卡,也是默认网卡,网关10.20. ......
自动安装centos 6:kickstart文件及光盘文件的制作
转至:https://www.cnblogs.com/charliewch/p/8654974.html 一、前言 最近学习了如何使用kickstart文件自动安装系统,在研究了两天后终于成功将系统安装了起来,本文记录我利用kickstart文件安全系统的相关流程步骤及注意事项。 二、安装流程: 在 ......
CentOS/Ubuntu 安装 Docker和Portainer
在两个环境下安装了Docker及Portainer,记录下以供日后查阅 CentOS7部分 1.清理旧版本 $ sudo yum remove docker \ docker-client \ docker-client-latest \ docker-common \ docker-latest ......
ubuntu & centos 安装包管理命令
Ubuntu 管理包操作的相关命令 使用apt命令管理包,可以自动下载依赖 sudo apt-get update 更新源 sudo apt-get install package 安装包 sudo apt-get remove package 删除包 sudo apt-cache search p ......
Centos7 安装 mysql 8
安装 1.配置yum仓库 # 更新密钥 rpm -import https: /repo.mysql.com/RPM-GPG-KEYmysql-202 # 安装Mysql8.x版本 yum库 rpm -Uvh https: /dev.mysql.com/get/mysql80-community- ......
Centos7 安装 git 2.39.0
1.安装依赖 yum install curl-devel expat-devel gettext-devel openssl-devel zlib-devel yum install gcc-c++ perl-ExtUtils-MakeMaker 2.下载源码包 wget http://mirro ......
Centos7安装Python3.7
说明:全部操作都在root用户下执行,python3.7安装在/root/python3目录下 1.安装编译相关工具 yum -y groupinstall "Development tools" yum -y install zlib-devel bzip2-devel openssl-devel ......
centos7 yum -y install nodejs安装npm时报错,处理方法
centos7 yum -y install nodejs安装npm时报错,处理方法 安装npm时报错,处理方法 sudo: npm: command not found sudo yum -y install nodejs Loaded plugins: fastestmirrorLoading ......
Centos Linux 正确安装 Redis 的方式
官方文档 Getting started with Redis | Redis 第一步 、下载源代码 源代码的下载方式有很多种,可以去源代码仓库下载,或者使用下面的命令下载 wget https://download.redis.io/redis-stable.tar.gz 第二步 、编译代码 ......
CentOS7环境下数据库运维---主从复制、读写分离
1.理解MySQL主从复制原理 主服务器开启binlog日志,从库生成log dump线程,将binlog日志传给从库I/O线程,从库生成俩个线程,一个是I/O线程,一个是SQL线程,I/O线程去请主库的binlog日志,并将binlog日志中的文件写入relay log中,sql线程会读取rela ......
解决vmware安装的centos7和主机win11不能互传文件复制粘贴
虚拟机(M) 安装VMware Tools(T) 一直显示灰色解决:1.打开VMware 开启虚拟机 点击之后立即去 虚拟机(M) 安装VMware Tools(T) 这是后是可以点击的 2.虚拟机centos7 启动好了以后会在可视化桌面上看到VMware Tools,点进去有个VMware To ......
centos7升级openssh9.3p1
centos7升级openssh9.3p1 制作rpm包 安装依赖包 yum install -y rpm-build gcc gcc-c++ glibc glibc-devel openssl-devel openssl pcre-devel zlib zlib-devel make wget k ......
Centos8安装JDK
官网下载页:https://www.oracle.com/java/technologies/downloads/选择自己需要的JDK版本进行下载即可一、下载上传https://docs.oracle.com/javase/8/docs/technotes/guides/install/linux_ ......
Centos8安装MySQL
受苦于博客总是过于老旧,安装时总会出现版本包已经删除的情况而且步骤总是各式各样难以理解,无奈之下还是官网靠谱,于是这篇博客以官网方法为基准,方便以后安装的时候可以直接复制命令。一、官网教程https://dev.mysql.com/doc/refman/8.0/en/linux-installati ......
Spark入门到精通
一、Spark简介 1. 概念 Apache Spark 是一个开源的分布式计算系统,最初由加州大学伯克利分校的AMPLab(Algorithms, Machines, and People Lab)开发,并于2010年加入Apache基金会进行开源。Spark 提供了一种统一的数据处理引擎,支持在 ......
centos7安装Docker(转)
原文:https://cloud.tencent.com/developer/article/1701451 1、安装前必读 在安装 Docker 之前,先说一下配置,我这里是Centos7 Linux 内核:官方建议 3.10 以上,3.8以上貌似也可。 注意:本文的命令使用的是 root 用户登 ......
ubutu/centos共享文件夹 & ubuntu网络图标不显示
ubutu共享文件夹 查看共享文件是否成功:vmware-hgfsclient 如果不成功 装一下VMware Tool 方案一:将CD/DVD、CD/DVD2 和软盘等设置为自动检测 方案二:使用 ISO 映像文件(VMware 的下载目录里有一个 linux.iso) cd /usr/bin s ......
linux (CentOS7.5_x86_64)下安装mysql8.0
# 下载mysql $ wget http://mirrors.163.com/mysql/Downloads/MySQL-8.0/mysql-8.0.13-el7-x86_64.tar.gz # 解压$ mysql tar -zxvf mysql-8.0.4-rc-linux-glibc2.12- ......
CentOS 7.8配置Java环境
一、安装CentOS 7.8 关闭防火墙 systemctl stop firewalld systemctl disable firewalld 关闭SELINUX setenforce 0 vi /etc/selinux/config 将SELINUX=enforcing改为SELINUX=di ......
Centos7扩充root分区
安装Centos7系统的时候,如果没有自定义分区,系统默认分配给root分区的空间只有50G。而root分区的空间如果被占满了,会影响到我们使用系统。本文主要介绍如何在Centos7上扩充root分区。 ......
Centos 安全加固
#!/bin/bash L1="\E[0;41m" R1="\E[0m \n" backPatch sshdConfPath=/etc/ssh sshdConf=sshd_config cp -pf ${sshdConfPath}/${sshdConf} /etc/ssh/sshd_config.b ......
centos 7 手动编译升级gcc9.3.0
1、下载gcc9.3.0源码包 wget https://mirrors.tuna.tsinghua.edu.cn/gnu/gcc/gcc-9.3.0/gcc-9.3.0.tar.gz sudo tar xvf gcc-9.3.0.tar.gz ./contrib/download_prerequi ......
从一台centos服务器登录另外一台centos服务器 ssh
从一台centos服务器登录另外一台centos服务器(使用私钥) centos7一台服务器登录另一台服务器并退出 ssh root@192.168.118.128ls /etc/sshmoduli sshd_config ssh_host_ecdsa_key.pub ssh_host_ed2551 ......
centos7 yum 安装nodejs 16,搭建编译vue项目环境
1、安装nodejs curl -fsSL https://rpm.nodesource.com/setup_16.x | sudo bash - sudo yum install nodejs node -v 2、安装yarn #安装yarn npm install -g yarn #查看版本 y ......
centos安装xampp后报错:egrep: error while loading shared libraries: libc.so.6: cannot open shared object file: No such file or directory
1、centos6.9安装xampp(xampp-linux-x64-7.0.21-0-installer.run)后启动的时候,报错: 2. 有人说少了glibc包,但是机器不缺少报错的包 3.正确答案: vi /opt/lampp/lampp 找到export LD_ASSUME_KERNEL= ......
centos7 安装maven3.9
1、创建目录 cd /home mkdir mavencd /maven 2、下载包 wget https://mirrors.cnnic.cn/apache/maven/maven-3/3.9.0/binaries/apache-maven-3.9.0-bin.tar.gz 3、解压包 tar - ......