standalone centos spark
centos7及Tomcat8Dockerfile
Centos7 FROM centos:centos7 RUN rm -f /etc/yum.repos.d/* ADD jdk-8u201-linux-x64.tar.gz /usr/local ADD CentOS-Base.repo /etc/yum.repos.d ADD epel-7.re ......
centos7 安装docker
## 安装需要的软件包 ```sh yum install -y yum-utils device-mapper-persistent-data lvm2 ``` ## 设置yum安装源 ```shell yum-config-manager --add-repo http://download.d ......
spark常见问题
spark任务报错：KryoException: Buffer overflow. Available: xxx, required: xxx 可以适当增加spark.kryoserializer.buffer.max 的值, 默认是128m，可以尝试给到256m或512m ......
Linux_Centos 增加中文字体支持
>宋体黑体为例 1、安装字体库 在CentOS 4.x开始用`fontconfig`来安装字体库，所以输入以下命令即可： ``` sudo yum -y install fontconfig ``` 这时在`/usr/shared`目录就可以看到`fonts`和`fontconfig`目录了（之前是 ......
Centos7 搭建Mysql8.0 主从
一、环境说明 MASTER： [root@server01 ~]# cat /etc/redhat-release CentOS Linux release 7.9.2009 (Core) 外网IP：192.168.100.20 内网IP：192.168.200.20 SLAVE： [root@se ......
解决使用锐捷网络时CentOS7在网络适配器为NAT模式下无法联网的问题
原因：锐捷网络会反复自动关闭 该服务 解决方法： 1.使用脚本保持自动打开nat服务 2.[锐捷客户端下虚拟机VM ......
Spark编程基础
# Scala编写Spark的WorkCount ## 创建一个Maven项目 在pom.xml中添加依赖和插件 ```XML 8 8 UTF-8 3.2.3 2.12.15 org.scala-lang scala-library ${scala.version} org.apache.spark ......
在Centos7上部署Yapi
#### 组件版本： > CentOS 7 > Node v12.22.9 > mongoDB v4.4.22 > Yapi v1.12.0 #### 一、安装node node下载地址： 下载node压缩包到本地，解压缩文件，移动并重命名node ```bash # 下载压缩包到本地 wget h ......
centos之格式化输出 printf
############################ 对齐： 右对齐：printf "%s" 左对齐：printf "%-s" 宽度： printf "%-10s" ， 左对齐，宽度为10 printf “%-4.2f” ，左对齐，宽度为4，保留两位小数。 格式化说明符： %s: 字符串 %d: ......
centos 7成功安装nginx并启动后浏览器无法访问
使用yum安装nginx之后，在浏览器中输入ip地址，显示无法访问，如下图所示 第一步：检查nginx是否启动成功，如图所示则是启动成功 ps aux|grep nginx 第二步：查看80-端口是否被分配给了Nginx netstat -ntlp 第三步：对80端口进行防火墙配置 firewall ......
centos7 rpm安装rabbitmq
1、在 https://www.rabbitmq.com/which-erlang.html 查看erlang和rabbitmq的版本对应关系 2、在https://packagecloud.io/rabbitmq/erlang?page=1 下载erlang的rpm包 3、在https://git ......
【人麻了】centos6.5更换yum源+httpd安装+php56安装+执行shell无写入权限+卸载php
平常都是用宝塔部署web测试环境，今天需要手动去给客户部署php项目运行环境。而且居然还是centos6.5的老系统了，我整个人都麻了... ## 更换yum源 为啥我人麻了？？？ > 报错：centos6 yum安装软件报错Cannot retrieve repository metadata ( ......
Spark环境搭建及Spark shell
# StandAlone模式环境搭建 环境准备：三台Linux，一个安装Master，其他两台机器安装Worker  java8 Java Downloads | Oracle hadoop3.3.5 Index of /dist/hadoop/common/hado ......
centos里的openrestry笔记
参考文档：https://www.cnblogs.com/cheyunhua/p/13395745.html 1、openrestry配置 功能控制在：/usr/local/openrestry/nginx/conf/waf/config.lua 过滤参数在：/usr/local/openrestr ......
Centos 7使用nginx实现挂载本地yum源
前言：生产环境中由于一些安全问题，无法使用外网，只能在内网运行，无法访问外部yum源，这时候对于一些环境的安装及其不方便，故使用内部挂载yum源方式解决。 #### 1、环境 操作系统版本 #### 2、关闭selinux和防火墙 ``` # 关闭selinux sed -ri 's/SELINUX ......
Centos7 解决ab压力测试报错apr_socket_recv: Connection reset by peer (104)问题
# ab -n 10000 -c 10000 http://192.168.1.66/ This is ApacheBench, Version 2.3 <$Revision: 1430300 $>Copyright 1996 Adam Twiss, Zeus Technology Ltd, htt ......
centos 7 安装RabbitMQ
RabbitMQ是一个开源的遵循 AMQP协议实现的基于 Erlang语言编写，即需要先安装部署Erlang环境再安装RabbitMQ环境。 Linux系统：CentOS7.x （如果是CentOS8.x的话，需要修改下面两个环境版本号中的el7为el8） Erlang： erlang-22.3.4 ......
Centos7安装Docker
# 0.安装Docker Docker 分为 CE 和 EE 两大版本。CE 即社区版（免费，支持周期 7 个月），EE 即企业版，强调安全，付费使用，支持周期 24 个月。 Docker CE 分为 `stable` `test` 和 `nightly` 三个更新频道。 官方网站上有各种环境下的 ......
Linux（centos7.9）搭建mysql服务器
以下服务器信息为该文档安装mysql服务器环境 服务器信息：CentOS7 内核版本：3.10.0-1160.el7.x86_64 一.安装mysql服务器 1.检查是否安装过mysql数据库，无输出即为没安装。 rpm -qa| grep mysql 2.下载mysql的rpm源 wget htt ......
centos7安装nvm
1. 清除nvm缓存：运行以下命令清除nvm的缓存： ``` rm -rf ~/.nvm ``` 2. 重新安装nvm：按照以下步骤重新安装nvm： - 使用curl或wget下载nvm安装脚本。例如，使用curl： ``` curl -o- https://raw.githubuserconten ......
Linux虚拟机CentOS7系统中网卡名称enp0s3修改为eth0
Linux虚拟机CentOS7系统中网卡名称enp0s3修改为eth0 原创 左明水 天有日月星 2023-06-25 22:15 发表于云南 收录于合集 #虚拟机22个 #Linux38个 #云计算10个 #云平台23个 #大数据5个 点击蓝字 关注我们 // 千里之行始于足下 由于创建虚拟机过程 ......
CentOS7 部署 k8s 集群
CentOS7 部署 k8s 集群 BUG弄潮儿 2023-06-10 20:32 发表于广东 BUG弄潮儿 多年开发经验，专注软件开发、架构；推送 微服务，分布式，Spring全家桶，Redis，Linux，Nginx等技术，欢迎一起学习、探讨。 396篇原创内容 公众号 K8s+Istio+Go ......
centos7安装mongodb
1、打开终端或SSH会话，并使用root或具有管理员权限的用户登录到CentOS服务器。 2、添加MongoDB的源。执行以下命令： vi /etc/yum.repos.d/mongodb-org-4.4.repo 3、在编辑器中，复制并粘贴以下内容： [mongodb-org-4.4] name= ......
CentOS 7 修改默认 yum 源
修改CentOS默认yum源为mirrors.aliyun.com 1、首先备份系统自带的yum源配置文件 [root@localhost ~]# mv /etc/yum.repos.d/centos.repo /etc/yum.repos.d/CentOS-Base.repo.backup 2、进 ......
Spark架构体系
# Spark架构体系 StandAlone模式是spark自带的集群运行模式，不依赖其他的资源调度框架，部署起来简单。 StandAlone模式又分为client模式和cluster模式，本质区别是Driver运行在哪里，如果Driver运行在SparkSubmit进程中就是Client模式，如果 ......
升级CentOS 7.9内核
1.背景 不知道大家有没有遇到过这样的问题，在使用docker创建vlan网络时，会提示“Error response from daemon: kernel version failed to meet the minimum ipvlan kernel requirement of 4.2, f ......
.NETCore项目在Windows下构建Docker镜像并本地导出分发到CentOS系统下
在Windows下使用Docker，我们选择Docker Desktop这个软件，非常方便。 ## Docker Desktop介绍及安装 Docker Desktop是适用于Mac、Linux或Windows环境的一键安装应用程序，使您能够构建和共享容器化应用程序和微服务。 它提供了一个简单的GU ......
CentOS搭建DNS（安装、配置、测试）
[TOC] # 一、BIND服务安装、启动 ## 1、安装BIND ```shell yum -y install bind* ``` ## 2.启动DNS服务 ```shell #CentOS6： service named start #开机自启 #添加nginx服务 chkconfig --a ......
centos添加服务
一、添加服务启动脚本 #!/bin/bash export JAVA_HOME=/usr/java/jdk1.8.0_201 export PATH=$JAVA_HOME/bin:$PATH # 注意，这里的文件都必须是绝对路径 nohup java -jar /luban/app/deploy/d ......