standalone centos spark
centos7 升级sqlite
软件下载地址均为其官网。 一.wget升级 yum install -y wget 二.sqlite3安装 sudo yum install sqlite-devel 查看sqlite3的版本 sqlite3 -version 三.sqlite3升级 下载源码 wget https://www.sq ......
Spark简介
# Spark Spark是一种快速、通用、可扩展的大数据分析引擎，2009年诞生于加州大学伯克利分校AMPLab，2010年开源，2013年6月成为Apache孵化项目，2014年2月成为Apache的顶级项目，2014年5月发布spark1.0，2016年7月发布spark2.0，2020年6月 ......
Linux下卸载重装MySQL（基于CentOS8）
> 背景：卸载宝塔面板后，MySQL服务起不来，尝试修复无果，直接重装 ## 1.卸载MySQL组件 ```shell $ rpm -e --nodeps mysql-community-common $ rpm -e --nodeps mysql-community-libs $ rpm -e - ......
CentOS7的系统初始化
centos 7（community enterprise operation system ）：红帽公司linux的发行版（centos6、7、8） 开源免费 centos6官网不再更新了 系统初始化：刚刚安装好的系统可以对环境进行初始化（配置优化 设置静态IP 永久关闭防火墙等等） GUI界面 ......
CentOS7中ping不通外网
在参考文档安装了一个CentOS7系统后，发现无法ping通外网，实际在用wget下载文件时却又是可以的，不知道这是为何？ 暂时没有追究这个问题，决定先把ping不通外网的问题解决。 在按照其他方法尝试解决的时候发现一共有以下几个问题： 1.没有配置DNS 在/etc/sysconfig/netwo ......
centos8系统虚拟机配置
https://mirrors.aliyun.com/centos/8.5.2111/isos/x86_64/?spm=a2c6h.25603864.0.0.303044cbZ7Ri6R 上面为镜像地址 之后一直点下一步 在这里设置你的操作系统镜像文件 这样搭载完成了 ......
centos7-datax和datax-web安装以及安装中问题的解决
一、下载这些软件（见） 系统变量设置（安装maven和jdk略） vi /etc/profile JAVA_HOME=/usr/local/jdk1.8.0_40 CLASSPATH=$JAVA_HOME/lib/ PATH=$PATH:$JAVA_HOME/bin DATAX_HOME=/usr/ ......
在CentOS7.9上搭建以太坊私链
为了方便了解以太坊的操作流程，故在CentOS7上搭建以太坊的私链。下面，介绍在CentOS7.9 x64上部署以太坊的私链。 常用的以太坊源码是用Go语言编写的，所以要安装Go。这里选择Go 1.15.6。 1、搭建Go软件环境 安装方法，请参考这篇文章： https://blog.csdn.ne ......
集成AMD Xilinx的standalone的例子到FreeRTOS时，关于中断的注意事项
集成AMD Xilinx的standalone的例子到FreeRTOS时，关于中断的注意事项。 FreeRTOS也可以说是standalone的程序。因此可以方便的把AMD Xilinx的standalone的例子，集成到FreeRTOS。 但是对于中断的处理，要小心。FreeRTOS会初始化中断控 ......
RHEL CentOS Debian Ubuntu 如何刷新 DNS 缓存
RHEL CentOS Debian Ubuntu 如何刷新 DNS 缓存 全文：如何刷新 DNS 缓存 (macOS, Linux, Windows) Unix Linux Windows 如何刷新 DNS 缓存 (macOS, FreeBSD, RHEL, CentOS, Debian, Ubu ......
CentOS 设置密码为永久不过期
CentOS 下用户密码的有效期默认是90天，通过 root 权限可以设置密码为永久有效。 ### 设置密码有效期 ``` sudo chage -M 99999 用户名 ``` ### 查看密码有效期 ``` chage -l 用户名 ``` ......
Centos7 内核限制
一、设置所有用户最大打开文件数和网络连接数 1、编辑 /etc/security/limits.conf 文件，可以使用下面的命令打开该文件： sudo vim /etc/security/limits.conf 2、添加以下四行： 第一行和第二行分别设置所有用户的文件打开数的软限制和硬限制均为 6 ......
Spark基础
Spark是一种基于内存的快捷、通用、可扩展的大数据分析引擎 1. Spark模块 Spark Core: Spark核心模块，包含RDD、任务调度、内存管理、错误恢复、与存储系统交互等 Spark SQL：用于处理结构化数据的一个模块，提供了2个编程抽象：DataFrame DataSet，并且作 ......
Linux 虚拟机修改ip地址（CentOS7）【Linux】
1、编辑文件 vi /etc/sysconfig/network-scripts/ifcfg-ens33 2、输入 i 键，进入编辑模式 3、编辑 ip 地址 4、输入 :wq 退出保存 5、重启网卡 service network restart 6、测试外网连接 ping www.baidu.c ......
vMware-Centos7网络连接设置
# 原文链接:https://blog.csdn.net/zacry/article/details/124229889 VmWare 12.5.9 build-7535481[安装CentOS](https://so.csdn.net/so/search?q=安装CentOS&spm=1001.2 ......
阿里云Centos7安装和启动nginx
# centos7安装nginx ## 一、背景 在阿里云租了一台centos7的服务器，上面部署了6个tomcat容器，每个里面至少一个应用在跑。 之前都是跑的后台应用，应用之间的调用都通过ip+port来解决。但是现在有了2个前端页面的显示要部署，需要通过[www.xxxx.com](https ......
Linux之CentOS 7 安装-最小
感谢原博主：https://blog.csdn.net/qq_44737094/article/details/116651790 ## 1.安装 [vmware](https://so.csdn.net/so/search?q=vmware&spm=1001.2101.3001.7020) 安装很 ......
centos8 安装mysql8.0.33
一、在官网下载mysql源 [root@zabbix-server ~]# wget https://dev.mysql.com/get/mysql80-community-release-el8-5.noarch.rpm 二、安装mysql [root@zabbix-server ~]# yum ......
Centos7 开机卡在进度条页面
1.原因 我这里是操作不当，设置selinux参数错误，导致无法进入系统 2.操作 在这个界面的时候，按下键盘的 e 进行编辑 使用键盘向下移动光标，找到如图所示位置，并在改行后添加 init=/bin/sh 然后按下 CTRL + X 然后会出现 sh-4.2# 然后输入： mount -o re ......
centos7防火墙
通过systemctl status firewalld查看防火墙状态，确认已开启。 通过systemctl start firewalld开启防火墙，无提示成功。 通过systemctl stop firewalld关闭防火墙，无提示成功。 ......
如何在Databricks中使用Spark进行数据处理与分析
[toc] 1. 《如何在Databricks中使用Spark进行数据处理与分析》 随着大数据时代的到来，数据处理与分析变得越来越重要。在数据处理与分析过程中，数据的存储、处理、分析和展示是不可或缺的关键步骤。在数据处理与分析中，Spark是一个强大的开源计算框架，它可以处理大规模分布式数据集，并提 ......
Centos7 安装后无网络连接
1.切换目录 cd /etc/sysconfig/network-scripts 2.编辑指定文件 sudo vi ifcfg-ens33 3.文件内编辑 1.shirt + g跳转到最后一行 2.按 i 进入编辑模式 3.找到 ONBOOT 4.将no 改为 yes 5.按esc 6.冒号 7.冒 ......
centos6以lvm划分磁盘分区swap/root禁用swap导致重启kernel异常
## 目的 禁用swap,虚机重启正常 **env** - centos6.9 - root/swap lvm形式 > 终端kernel异常，导致系统无法正常启动(引导出了问题)  [GCC 11.2.1 20220127 ......
centos 安装mongodb
在 CentOS 系统中安装 MongoDB 可以按照以下步骤进行： 1. 配置 MongoDB 的 Yum 仓库 ``` sudo vi /etc/yum.repos.d/mongodb-org-4.4.repo ``` 在编辑器中输入以下内容： ``` [mongodb-org-4.4] nam ......
centos ceph octopus 安装
一、服务器规划 主机名 主机IP 磁盘 角色 node3 public-ip：172.18.112.20 cluster-ip: 172.18.112.20 vdb ceph-deploy,monitor,mgr,osd node4 public-ip：172.18.112.19 cluster-i ......
Centos 7.X根分区磁盘扩容（非LVM）或home数据盘
原配置100G，改配后110G 查看当前磁盘情况 df -h 查看磁盘信息 fdisk -l 删除分区 新建分区 更新磁盘 [root@localhost ~]# df -h 文件系统 容量 已用 可用 已用% 挂载点 devtmpfs 1.9G 0 1.9G 0% /dev tmpfs 1.9G ......
centos配置开机自启动
目前有三种方法 一.systemctl 以nginx自启动为例 1.进入/usr/lib/systemd/system cd /usr/lib/systemd/system 2.创建nginx.service touch nginx.service 3.vim编辑nginx.service，里面的路 ......