课堂 第一次 系统linux
Mac 和 Win，到底用哪个系统学编程？
Windows 其实他的软件生态非常丰富，无论是游戏、办公、甚至是看片儿，Windows 总有那么几款软件符合你的诉求，而且即使到了 2023 年，有些软件还是只有 Windows 版本的，毕竟用户基数大嘛。 而且在 Windows 上使用软件、或者强制使用原本不能用的软件也是相对方便的，对于学生党 ......
制作一个最小的Linux内核,制作一个最小的CentOS6系统
转至https://blog.csdn.net/weixin_30916255/article/details/116692027 制作一个最小的CentOS6系统 首先，要明确一下CentOS6启动的过程 POST -> BootSequence(BIOS) -> Bootloader(MBR) ......
一次spark任务提交参数的优化
起因 新接触一个spark集群，明明集群资源（core,内存）还有剩余，但是提交的任务却申请不到资源。 分析 环境 spark 2.2.0 基于yarn集群 参数 spark任务提交参数中最重要的几个： spark-submit --master yarn --driver-cores 1 --dr ......
linux 常见学习内容
Linux 下文件删除的原理：Linux 系统是通过 link 的数量来控制文件删除的,只有当一个文件不存在任何 link 的时候,这个文件才会被删除。一般来说每个文件两个 link 计数器来控制 i_count 和 i_nlink。当一个文件被一个程序占用的时候 i_count 就加 1。当文件的 ......
ASP.NET Core - 选项系统之选项使用
上一篇 ASP.NET Core - 选项系统之选项配置 中提到 IOptions、IOptionsMonitor 和 IOptionsSnapshot 三个接口，通过这三个接口都可以从依赖注入容器中解析出已经配置的选项类，在我们通过 Configure 方法配置选项时，这三个接口会被同时注册，但三 ......
Linux 网络配置 ---桥接模式---最简单的方法！！！
1.桥接模式（ Bridged） VMware桥接模式，也就是将虚拟机的虚拟网络适配器与主机的物理网络适配器进行交接，虚拟机中的虚拟网络适配器可通过主机中的物理网络适配器直接访问到外部网络。简而言之，这就好像在上图所示的局域网中添加了一台新的、独立的计算机一样。因此，虚拟机也会占用局域网中的一个IP ......
centos7 Linux 安装及升级node、npm
centos7 初始版本 node 6 npm 3 更新升级node版本 # 安装 nnpm install -g n# 查看版本n --version// v9.0.1 # 把当前系统的 Node 更新成最新的 “稳定版本” n stable # 长期支持版 n lts # 最新版 n lates ......
windows和linux文件格式互转
# 查看当前文件格式 cat -A filename 每行结尾是^M$为windows每行结尾是$为linux 方式一: dos2unix test2.txt # 把DOS格式的文本文件转变成UNIX下的文本文件 方式二: #windows转linux #打开文件在控制模式下输入set ff=uni ......
linux静默安装oracle11g 执行dbca.rsp时出错
问题大概是： [oracle@bogon ~]$ $ORACLE_HOME/bin/dbca -silent -responseFile /home/oracle/etc/dbca.rspException in thread "main" java.lang.NullPointerExceptio ......
linux 文件解压
tar命令 一 必选参数 -c 表示创建文件 -create -x 表示解压缩文件 -t 表示查看压缩包里的文件 -r 追加压缩文件 -u 更新压缩包中的文件 -f 指定文档名 后面不能接参数，例如-xzvf是对的而-xzfv不对 二 可选参数 -z 用gzip压缩/解压缩 -j 用bzip2压缩/ ......
Linux 中间件 | Nginx 支持 perl-cgi
本文环境，Amazon Linux release 2，全程用 root 用户。 前提是已经装好了 Nginx，并且有 --with-http_perl_module 模块。没有则参考添加 一、首先确认并安装 perl-FCGI rpm -qa | grep perl-FCGI yum instal ......
shell脚本监控系统资源-linux
#!/bin/bashbase_dir=/optwar_processor="tomcat"jar_processor="manager-server.jar platform-server.jar platform-task.jar platform-trade.jar platform-user ......
Linux 中间件 | Perl 及 Perl 模块安装
Perl 作为脚本语言，应用范围也比较广泛。 本文环境，Amazon Linux release 2，全程用 root 用户。 Perl 安装 一、通常系统会自带，先确认一下 rpm -qa | grep perl 二、没有自带，或者版本不满足，可手动安装 官网下载需要的版本，后续步骤改成自己下载的 ......
存储系统
DAM补充：光盘顺序存取存储器SAM的内容只能按某种顺序存取，存取的时间长短与信息的物理位置有关，存取速度慢。直接存取存储器DAM的内容既不像RAM那样可以随机存取，又不像SAM那样完全按顺序存取，而是处于两者中间，存取时先找到某个小区域，再在其中顺序存取。 带宽（数据传输率）表示每秒从主存进出的信 ......
指令系统
一台计算机的所有指令的集合构成该机的指令系统，也叫指令集。 指令系统是计算机的主要属性，位于硬件和软件的交界面上。 指令格式 指令字长 指令的操作类型 扩展操作码 为了在指令字长有限的前提下仍保持比较丰富的指令种类，可采取可变长度操作码。（并不是变长指令字结构）指令的操作码字段的位数不固定，且分散地 ......
操作系统概述
操作系统概念 脱机命令接口又称批处理命令接口，适用于批处理系统。 联机命令接口又称交互式命令接口，适用于分时或实时系统。 程序接口由一系列系统调用（即广义指令）组成。 GUI是通过调用程序接口实现的。 没有任何软件支持的计算机叫做裸机。 覆盖了软件的机器叫做扩充机器或虚拟机。 操作系统的特征 操作系 ......
I_O系统
I/O系统概念 外部设备：包括输入/输出设备及通过输入/输出接口才能访问的外部设备； 接口：在各个外设与主机之间传输数据时进行各种协调工作的逻辑部件。协调包括传输过程中速度的匹配、电平和格式转换； 输入设备：用于向计算机系统输入命令和文本、数据等信息的部件。键盘和鼠标是最基本的输入设备； 输出设备： ......
计算机系统概述
计算机的发展历程 计算机系统的层次结构 硬件系统和软件系统共同构成了一个完整的计算机系统。 硬件系统（计算机硬件） 冯·诺依曼机 冯·诺依曼机的基本思想： 采用“存储程序”的工作方式 计算机硬件系统由运算器、存储器、控制器、输入设备和输出设备5大部分组成 指令和数据以同等地位存放在存储器中，形式上没 ......
linux面试常问命令
常用命令: 修改密码：passwd 用户名 切换用户名：su 用户名 查看当前路径：pwd 调整路径：cd. 、cd.. 、cd 具体路径 复制文件：cp 原文件 目标位置 剪切、移动：mv 原文件 目标文件 创建目录：mkdir 目录 创建文件：touch 文件 删除文件：rm 【选项】【文件】（ ......
linux 根据进程名称kill进程
经常需要Kill多个进程，这些进程包含共同的关键字，可以用一条命令Kill掉它们。 ps aux | grep "common" | cut -c 9-15| xargs kill -9 管道符“|”用来隔开两个命令，管道符左边命令的输出会作为管道符右边命令的输入。下面说说用管道符联接起来的几个命令 ......
Linux安装Redis
举例版本 Redis版本 5.0.4 服务器版本 Linux CentOS 7.6 64位 下载Redis 进入官网找到下载地址 https://redis.io/download 右键Download按钮，选择复制链接。 进入到Xshell控制台(默认当前是root根目录)，输入wget 将上面复 ......
消息队列之系统解耦
消息队列之系统解耦 A 系统产生一条数据，发送到 MQ 里面去，哪个系统需要数据自己去 MQ 里面消费。如果新系统需要数据，直接从 MQ 里消费即可；如果某个系统不需要这条数据了，就取消对 MQ 消息的消费即可。这样下来，A 系统压根儿不需要去考虑要给谁发送数据，不需要维护这个代码，也不需要考虑人家 ......
为 Linux 下 .AppImage 运行文件快速生成桌面和任务栏图标 .sh 文件
I had a friend make an install sh file: It seems to work well and I get an icon added to my ubuntu left app shortcut bar. Here it is below. I will del ......
136. 只出现一次的数字
136. 只出现一次的数字 给你一个 非空 整数数组 nums ，除了某个元素只出现一次以外，其余每个元素均出现两次。找出那个只出现了一次的元素。 你必须设计并实现线性时间复杂度的算法来解决此问题，且该算法只使用常量额外空间。 示例 1 ： 输入：nums = [2,2,1] 输出：1 示例 2 ： ......
linux下面使用netstat相关的命令不可用，改如何解决？
【问题描述】 克隆了一台虚拟机过来，但是相关的命令都使用不了： 【解决方案】 1、克隆机器过来后，相关的软件工具包需要重新安装一下，可以使用 yum install net-tools 命令重新安装工具包。 2、再次使用netstat -ntlp命令可以正常使用了 ......
数据库系统原理之关系数据库
关系数据库 一、关系数据库概述 进入20世纪80年代后，在商用数据库管理系统中，关系模型逐渐取代早期的网状模型和层次模型，成为主流数据模型。 二、关系数据模型 关系数据结构 关系模型的数据结构只包含单一的数据结构，即关系。 在用户看来，关系模型是把数据库表示为关系的集合，且关系数据库是以二维表格的形 ......
第一章 Kettle 概述
1.1 ETL简介 ETL（数据抽取、转换、装在的过程）对于企业或行业应用来说，我们经常会遇到各种数据的处理，转换，迁移，所以了解并掌握一种ETL工具的使用，必不可少。 市面上常用的ETL工具有很多，比如Soop，DataX，Kettle，Taland等，作为一个大数据工程师，我们最好要掌握其中的两 ......
如何构建通用的垂直爬虫系统？
对于一个资深程序员来说写一个爬虫其实很简单，如何写一个稳定持续运行的爬虫也不难，但是如果构建一个通用化的爬虫平台系统将为后面的工作节省很多时间。 这篇文章，我就来和你分享一下，一个通用垂直爬虫平台的构建思路。 首先介绍一下，什么是爬虫？ 搜索引擎是这样定义的： 网络爬虫（又被称为网页蜘蛛，网络机器人 ......