standalone centos spark
centos 8
############ dnf -y install epel-release # shfmt需要依赖epel-release dnf -y install shfmt ############## ......
centos安装hexo
之前参照网上教程,但是使用npm不存在,尝试不同的方法,终于测试一个成功解决方案: wget https://nodejs.org/dist/v14.17.4/node-v14.17.4-linux-x64.tar.xz tar -xvf node-v14.17.4-linux-x64.tar.xz ......
centos7 nginx安装与开机自启动
(nginx详细安装教程) Nginx简介(https://zh.wikipedia.org/zh-cn/Nginx) Nginx(发音同“engine X”)是异步框架的网页服务器,也可以用作反向代理、负载平衡器和HTTP缓存。该软件由俄罗斯程序员[伊戈尔·赛索耶夫]开发并于2004年首次公开发布 ......
CentOS 7.X PwServer 架设教程
水木年华 1.上传Java并设置环境变量 #修改etc/profile 文件末尾增加Java的环境变量 JAVA_HOME=/usr/java/jdk1.8.0_301 JRE_HOME=/usr/java/jdk1.8.0_301/jre CLASS_PATH=.:$JAVA_HOME/lib/d ......
centos7获取IP地址的两种方法
一、centos7获取IP地址的两种方法 动态获取IP 设置静态IP地址 二、动态获取IP(不推荐使用) 1、使用 ip addr命令查看查看网卡名和是否有网络,获知网卡名为ens33。 2、输入vi /etc/sysconfig/network-scripts/ifcfg-ens33 ,修改ifc ......
Redhat/CentOS Linux 系统进入单用户模式
Redhat/CentOS Linux 系统进入单用户模式 以 CentOS 7.9 和 Redhat 8.2 为例进行操作,因为CentOS是Redhat的发行版,所以同版本号界面和操作是一样的。 CentOS 7.9 开机在 grub 引导界面时,按下 e 键进入编辑模式: 找到 linux16 ......
Install Ansible on CentOS 8
环境准备: 1.至少俩台linux主机,一台是控制节点,一台是受控节点 2.控制节点和受控节点都需要安装Python36 3.控制节点需要安装ansible 4.控制节点需要获得受控节点的普通用户或root用户的权限,控制节点需要ssh客户端,受控节点需要ssh服务端 5.控制节点和受控节点之间网络 ......
Spark源码解析(二):Spark闭包检查
一、理解 Scala 闭包:Closures 1.1 闭包的定义 闭包就是一个函数和与其相关的引用环境组合的一个整体(实体)。进一步说,闭包是绑定了自由变量的函数实例。 通常来讲,闭包的实现机制是定义一个特殊的数据结构,保存了函数地址指针与闭包创建时的函数的词法环境以及绑定自由变量。 对于闭包最好的 ......
Spark源码解析(一):RDD之Transfrom算子
一、延迟计算 RDD 代表的是分布式数据形态,因此,RDD 到 RDD 之间的转换,本质上是数据形态上的转换(Transformations) 在 RDD 的编程模型中,一共有两种算子,Transformations 类算子和 Actions 类算子。开发者需要使用 Transformations ......
CentOS 7 yum加速
cd /etc/yum.repos.d/ mkdir bak mv CentOS-Base.repo ./bak/ wget http://mirrors.163.com/.help/CentOS7-Base-163.repo yum install epel-release sed -e 's!^ ......
Centos7重装Python和Yum
There was a problem importing one of the Python modules required to run yum. The error leading to this problem was:
Please install a package which pro... ......
CentOS服务器查看TCP连接数信息netstat命令
netstat命令的功能是显示网络连接、路由表和网络接口的信息,可以让用户得知有哪些网络连接正在运作。在日常工作中,我们最常用的也就两个参数,即netstat –an,如下所示: [root@localhost# head mo.txt Active Internet connections (se ......
CentOS上搭建代理服务器
1. 安装Squid代理服务器软件: sudo yum install squid 2. 配置Squid代理服务器: #http_access allow localnet 将其改为: http_access allow all 然后找到以下行: #http_port 3128 将其改为: http ......
ffmpeg:m4a转mp3(ffmpeg 4.2.2 / linux / centos8)
一,centos8上安装所需的程序ffmpeg 安装ffmpeg 参考此文: https://www.cnblogs.com/architectforest/p/12807683.html 说明:刘宏缔的架构森林是一个专注架构的博客,地址:https://www.cnblogs.com/archit ......
Centos7 离线安装Gitlab-ce
Gitlab-ce的安装 确认gitlab对应依赖的包是否安装 policycoreutils-python openssh-server cronie可用以下命令查询系统中是否已安装对应的依赖包 [root@jws-gitlab ~]# [root@jws-gitlab ~]# rpm -qa | ......
Centos性能监控工具——netdata配置
netdata配置有一条自动配置的命令,但因为功夫qiang的原因,自动配置总是会失效,所以本文是手动配置 一、准备环境,预先安装依赖 sudo yum install epel-release sudo yum install autoconf automake curl gcc git libm ......
CentOS7-自动化部署web集群
一、项目要求 1、创建role,通过role完成项目(可能需要多个role) 2、部署nginx调度器(node2主机) 3、部署2台lnmp服务器(node3,node4主机) 4、部署mariadb数据库(node5主机) 主要用的ansible实现自动化部署,ansible的安装教程省略,控制 ......
给我的组装机子装centos7
1.用镜像通过UltraISO做个启动盘 2.通过u盘启动 3.由于我的组装机是志强处理器没有核心,需要进入选择安装界面选第一项按一下tab键修改后缀quiet为nomodeset,然后CentOS\x207\x20x86_64改成CentOS\x207\x20x8(这里由于不支持过长的扩展名储存不 ......
centos8重启网络服务
1.重启网卡之前一定要重新载入一下配置文件,不然不能立即生效 nmcli c reload 2.重启网卡(下面的三条命令都可以): nmcli c up ens160 nmcli d reapply ens160 nmcli d connect ens160 备注:ens160是网卡名字 ......
centos7安装elasticsearch
下载安装包,这里有一个分词器,第二个是es6安装包 解压 yum -y install unzip #安装解压缩软件 unzip elasticsearch-6.8.6.zip #解压缩 es unzip analysis-icu-6.8.6.zip -d elasticsearch-6.8.6/p ......
CentOS7 Docker安装 ElasticSearch8、Kibana8
一、Docker安装 yum install -y docker #开机自启 systemctl enable docker#启动 dockersystemctl start docker 二、安装 ElasticSearch docker pull docker.elastic.co/elasti ......
单用户模式进centos系统修改root密码
为虚拟机 server 重设管理密码 1)重启系统,进入 recovery 恢复模式 在读秒时候按e键,找到 linux16 行,按键盘End 末尾添加空格 rd.break console=tty0 按 ctrl + x 启动 2)以可写方式重新挂载 /sysroot,并切换到此环境 switch ......
Centos 7 配置阿里云yum源
1 备份现有的yum源 cd /etc/yum.repos.d/ mkdir bak mv *.repo /etc/yum.repos.d/bak 2 创建阿里云yum源 cat > /etc/yum.repos.d/Centos-7.repo << EOF # CentOS-Base.repo # ......
CentOS7.6安装Docker
CentOS7.6安装Docker20.10 移除现有docker sudo yum remove docker \ docker-client \ docker-client-latest \ docker-common \ docker-latest \ docker-latest-logrot ......
常用spark优化参数
常用spark优化参数 强制使用spark engine set tqs.query.engine.type = sparkCli; set spark.yarn.priority = 4; 双写HDFS开启: set spark.shuffle.hdfs.enable=true; set spar ......
centos7安装google-chrome
1、下载包 wget https://dl.google.com/linux/direct/google-chrome-stable_current_x86_64.rpm 2、安装 rpm -ivh google-chrome-stable_current_x86_64.rpm 3、可能会报错,如下 ......
面向chatgpt运维:解决centos环境下tomcat重启很慢的问题
Crafted by Genie You 怎么解决:30-Mar-2023 09:35:53.881 WARNING [localhost-startStop-1] org.apache.catalina.util.SessionIdGeneratorBase.createSecureRandom ......
centos7.6 64位分区及扩展
1、#fdisk /dev/sdb(分区) [root@orcltest ~]# fdisk /dev/sdb 分区详细步骤及输入参数 欢迎使用 fdisk (util-linux 2.23.2)。 更改将停留在内存中,直到您决定将更改写入磁盘。 使用写入命令前请三思。 Device does no ......
centos7修改网卡ens33成eth0
centos7默认的网卡名为en开头的,如果想改成eth开头的,在没有图形界面的情况下,则可以按照以下的步骤进行。 1.先修改/etc/default/grub,关闭默认的“一致的网络设备命名”并重命名接口,主要涉及的参数:"net.ifnames=0 biosdevname=0"。 修改前: 修改 ......