standalone centos spark
linux centos 安装 SFTP,windows与之传文件
首先要安装ssh,这里检查是否安装了ssh,如果没装,则要先装ssh,注意开放端口信息 ssh -V 一、创建文件目录,创建用户 # 创建文件目录 mkdir -p /home/LdRun/data/sftp/sftpuser chown root:root /home/LdRun/data/sft ......
CentOS中查看Java进程
1.ps命令:可以用来查看当前系统中正在运行的进程。要查看Java进程,可以使用以下命令: ps -ef|grep java 该命令会列出所有包含“java”关键字的进程信息。你可以通过查看进程的PID(进程ID)和其他详细信息来确定你要找的java进程。 2.jps命令:是Java虚拟机(JVM) ......
CentOs安装Tomcat
首先需要安转java 下载Linux版本的Tomcat,jdk1.8最好安装Tomcat8,9和10没有装成功。 Apache Tomcat® - Apache Tomcat 9 Software Downloads 右键复制链接 使用wget下载 下载后解压 将tomcat移动到/usr/loca ......
centos8 python3 安装达梦驱动 dmpython
方案一 全新安装: 1.https://eco.dameng.com/download/ 下载dm8_20231011_x86_rh6_64.iso 到/aaa目录 2.创建用户所在的组 groupadd dinstall 3.创建用户 useradd -g dinstall -m -d /home ......
centOS配置java、maven环境
1.下载jdk与maven安装包 2.在自定义的位置解压安装包 3.修改profile的环境变量: vim /etc/profile 在最下面增加 export JAVA_HOME=/usr/local/java/jdk1.8.0_191 export CLASSPATH=.:$JAVA_HOME/ ......
手机centos下mysql安装,ARM架构下安装Mysql8.0数据库
只能安装使用Mysql 8.0版本,因为5.7版本在mysql官网没有适配,需要自己手动编译安装 一、下载镜像 https://downloads.mysql.com/archives/community/ 二、卸载系统自带的MySQL和MariaDB rpm -qa | grep mysql rp ......
centos7安装nfs(离线和yum都可以)
一:检查端口是否占用 本程序占用2049的tcp和udp端口; 二:安装nfs: yum安装: yum install nfs-utils rpcbind -y 注意:服务端和客户端都是这个命令 离线包安装: 百度网盘下载安装包: 链接:https://pan.baidu.com/s/1ORc1cX ......
随笔-Centos7 install systemtap
SystemTap Beginners Guide Chapter 2. Using SystemTap This chapter instructs users how to install SystemTap, and provides an introduction on how to run ......
centos7 关闭swap分区
目录 1. 查看swap分区信息 2. 关闭swap分区 1. 查看swap分区信息 通过free -h 命令查看[root@k8s-master-02 ~]# free -htotal used free shared buff/cache availableMem: 1.8G 131M 1.4G ......
Centos7 nginx反向代理gitea和grafana&钉钉告警
1 安装nginx yum install -y gcc make pcre-devel zlib-devel openssl-develwget https://nginx.org/download/nginx-1.20.1.tar.gztar -zxvf nginx-1.20.1.tar.gzc ......
CentOS7编译安装openssl1.1.1
Centos7默认提供的openssl版本是1.0.2的,想要升级openssl版本则需要手动进行编译 一、下载openssl1.1.1 cd /usr/local/src/ wget --no-check-certificate https://www.openssl.org/source/ope ......
CentOS 7.9 防火墙启动报错--Process: 12848 ExecStart=/usr/sbin/firewalld --nofork --nopid $FIREWALLD_ARGS (code=exited, status=0/SUCCESS)
原因:配置防火墙策略过程中,多次启停防火墙,导致防火墙启动报错 报错截图: 排查: python版本是一致的,有一个遗留的防火墙进程 防火墙正常关闭后没有这个进程 解决办法: 杀掉这个进程,启动防火墙 ......
在CentOs 7 下的Linux基本操作(一)
1.目录操作 (1)创建目录 创建单个目录用mkdir ,创建多级目录 门 mdkir -p (2)查看目录 查看当前目录用 pwd 查看实际工作目录用 pwd -P 注意该P为大写 也可以用 ls -l 简写 ll (3)切换目录 用 cd ,cd - 是返回上一次目录, cd ../是返回上一层 ......
Spark优化
意识篇 类型转换 优化前: val extractFields: Seq[Row] => Seq[(String, Int)] = { (rows: Seq[Row]) => { var fields = Seq[(String, Int)]() rows.map(row => { fields = ......
CentOS 7编译Linux内核(6.5.7)详细步骤
CentOS 7编译Linux内核(6.5.7)详细步骤 参考链接: 下载解压部分参考:Linux 内核动手编译实用指南 - LinuxEden 比较详细,可用于了解原理,但没有给出针对CentOS 7的方案(实验室用到的openEuler基于CentOS,所以需要CentOS的方案)。 配置编译安 ......
【CentOS】CentOS7安装PostgreSQL
1、安装 PostgreSQL 使用以下命令安装 PostgreSQL: sudo yum install postgresql-server postgresql-contrib 2、初始化数据库 执行以下命令来初始化 PostgreSQL 数据库: sudo postgresql-setup i ......
centos7 扩展硬盘
新增硬盘后 注意,我这里用的xfs!!! 注意,文件夹不能已存在的!! 尽量不要把多个硬盘挂载在同一个文件夹上!!! vi /etc/fstab 注意,用0 0 即可 查看uuid =>blkid /dev/sdb1 df-h ......
基于Spark对消费者行为数据进行数据分析开发案例
原创/朱季谦 本文适合入门Spark RDD的计算处理。 在日常工作当中,经常遇到基于Spark去读取存储在HDFS中的批量文件数据进行统计分析的案例,这些文件一般以csv或者txt文件格式存在。例如,存在这样一份消费者行为数据,字段包括消费者姓名,年龄,性别,月薪,消费偏好,消费领域,购物平台,支 ......
Centos 7 安装Mongodb社区版
Centos 7 安装Mongodb社区版 准备环境 操作系统:Centos 7 安装包:https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-rhel70-7.0.3.tgz windows 可视化工具:Studio 3T(原robot 3t) ......
linux系统centos7安装docker
1、Docker官网安装地址 https://docs.docker.com/engine/install/centos/#prerequisites 2、离线安装下载地址 https://download.docker.com/linux/static/stable/x86_64/ 3、使用yum ......
CentOS系统,文件压缩与解压命令大全
在CentOS系统中,可以使用多种命令进行文件压缩和解压缩操作。以下是常见的文件压缩和解压命令及其用法: 一、 tar:用于打包文件或目录,并可选择压缩为tar压缩包 1. 创建tar压缩包:tar -cvf archive.tar file1 file2 directory 2.解压他让压缩包:t ......
Centos8开放防火墙相关端口操作
原文地址: https://blog.csdn.net/qq_36093146/article/details/131520827 查看防火墙某个端口是否开放[root@test /]# firewall-cmd --query-port=3306/tcp开放防火墙端口3306# 注意:开放端口后要 ......
yum源修改基于CentOS Linux release 8.3.2011
查看系统版本 :(8的镜像源都可以用不用分小版本) cat /etc/redhat-release 修改 centos 文件内容 sed -i 's/mirrorlist/#mirrorlist/g' /etc/yum.repos.d/CentOS-* sed -i 's|#baseurl=http ......
centos 7 中安装 LWP::UserAgent 模块
001、编译安装RepeatModeler-2.0.2a 时报错如下: (base) [root@pc1 RepeatModeler-2.0.2a]# perl configure ## 编译安装, 提示缺乏 LWP::UserAgent module The following perl modu ......
【windows】【Docker Desktop】centos phpstorm 搭建xdebug
一、下载xdebug,适合自己版本的 https://xdebug.org/download.php,你需要仔细分析和选择要下载的对应版本,否则无法调试。 建议进入网页 https://xdebug.org/wizard.php,然后将自己phpinfo()输出的信息全复制拷贝到该网页信息框里,让x ......
docker在centos7下的安装
# step 1: 安装必要的一些系统工具 sudo yum install -y yum-utils device-mapper-persistent-data lvm2 # Step 2: 添加软件源信息 sudo yum-config-manager --add-repo http://mir ......
CentOS 7下安装配置Nginx
本文基于 CentOS 7 下安装配置 Nginx 操作实践记录整理。 一、配置 EPEL 源 sudo yum install -y epel-release sudo yum -y update 二、安装 Nginx sudo yum install -y nginx 安装成功后,默认的网站目录 ......
centos7.9安装kubernetes1.27.4版本
. /etc/os-release color () { RES_COL=60 MOVE_TO_COL="echo -en \\033[${RES_COL}G" SETCOLOR_SUCCESS="echo -en \\033[1;32m" SETCOLOR_FAILURE="echo -en \\ ......
centos下配置OpenGL环境简单记录
yum install mesa-libGL-devel mesa-libGLU-devel freeglut-devel yum install mesa* freeglut* *GLEW* 如遇报错error:0:1(10): error: GLSL 3.30 is not supported. ......