三剑客 脚本grep awk
pandas -- 处理非数值型数据 -- 数据分析三剑客(核心)
博客地址：https://www.cnblogs.com/zylyehuo/ 为什么学习pandas numpy已经可以帮助我们进行数据的处理了，那么学习pandas的目的是什么呢？ numpy能够帮助我们处理的是数值型的数据，当然在数据分析中除了数值型的数据还有好多其他类型的数据（字符串，时间序列 ......
linux中awk命令对fastq格式的碱基质量体系进行判断
001、 [root@pc1 test]# ls a.fastq [root@pc1 test]# head -n 4 a.fastq ## 测试fastq格式数据 @SRR12342886.1 1/1 TCTTCAAAAATTTCTCACAGCTTGTTGTGATCCACACAGTCAAAGGCT ......
numpy -- 数据分析三剑客
博客地址：https://www.cnblogs.com/zylyehuo/ NumPy(Numerical Python) 是 Python 语言中做科学计算的基础库。重在于数值计算，也是大部分Python科学计算库的基础，多用于在大型、多维数组上执行的数值运算。 开发环境 anaconda 集成 ......
Linux脚本扩展
《Linux脚本基础扩充》 在之前的!《Linuxshell脚本基础知识》中，介绍了编写脚本的基础语法知识；现根据B站教程，对脚本编写实践部分进行总结； 1. 编写脚本，遍历目录下的所有txt文件，且将文件做备份，备份的格式为源文件名后缀增加日期；如：a.txt备份为a.txt_20230122 # ......
Windows 每天定时执行 bat 脚本
创建包含如下内容的 bat 文件： forfiles /p "." /s /m *.temp* /d -31 /c "cmd /c del @file" 它会删除当前路径下的所有以.temp结尾的超过 31 天的旧文件（详见 bat 删除当前路径指定天数前的旧文件）。 现在想每天中午 12 点定时执 ......
Linux_JXNUFiveWeek_Linux三剑客—sed
from pixiv sed 入门 Linux sed 命令是利用脚本来处理文本文件。sed 可依照脚本的指令来处理、编辑文本文件。Sed 主要用来自动编辑一个或多个文件、简化对文件的反复操作、编写转换程序等。 工作原理 命令格式 sed 常用命令 命令 选项 -r 使用ERE（扩展正则表达式元字符 ......
编程和脚本编写
编程指南 断言 assert 在开发期间帮助检测和诊断不正常或无效的运行时条件。且不会存在于发布代码中。其默认值必须一律为true。 assert主要有三个不同族系：check、verify和ensure，底层代码在Engine/Source/Runtime/Core/Public/Misc/Ass ......
【脚本】统计视频的帧数、fps、时长、以固定fps进行采样后的时长
输入：存放有很多视频文件的文件夹路径 输出：包含采样前后视频信息的csv文件 import os import cv2 import pandas as pd import numpy as np from PIL import Image def get_videos(vidname, read_ ......
go go代码中调用python脚本
目录go go代码中调用python脚本写个简单的py脚本再写个go的脚本 go go代码中调用python脚本 有的官方文档只提供了java和python的sdk，而我们需要用他们封装的服务，只能调用python或java的接口，接下来演示怎么调用python 写个简单的py脚本 import s ......
赛事星平台的作答脚本Python实现(适用于刷时间)
灵感来源:白嫖 某文理的一次答题竞赛,前一百名有奖品正好缺个蓝牙耳机索性就刷个时间白嫖一波吧.咳咳,正式开始分享咯. 准备工作: 谷歌浏览器以及自带开发者工具 页面分析: 由于此次白嫖活动已经结束,就采用其他竞赛URL进行分析,原理相同. URL: https://saishi.cnki.net/M ......
Python脚本连接Oracle数据库并验证成功
# yaml文件存储数据->root\Data\oracle_admin_f_shozaiko.yaml # Test Data for Oracle DB: ADMIN->F_SHOZAIKO- name: connect to Oracle request: uname: admin upwd: ......
linux 中 awk中sub命令正则匹配数字
001、 [root@pc1 test2]# ls a.txt [root@pc1 test2]# cat a.txt batch01 xyz1 batch02 xyz2 batch03 xyz3 batch04 xyz4 batch05 xyz5 [root@pc1 test2]# awk '{s ......
add-migration : 无法将“add-migration”项识别为 cmdlet、函数、脚本文件或可运行程序的名称
遇到的问题： vs2019+EF的项目中，数据库迁移本来用的好好的，突然出现add-migration提示：“无法将“add-migration”项识别为 cmdlet、函数、脚本文件或可运行程序的名称”，实在莫名奇妙，因为前一天还用得好好的，第二天突然出现这个问题，网上查了很多资料，步骤很复杂，总 ......
shell脚本批量自动分发文件
1、安装expect yum -y install expect 2、创建iplist.txt文件（要分发的IP地址） vim iplist.txt 192.168.100.22 192.168.100.23 3、创建pwd.txt（里面包含密码） vim pwd.txt 123456 123123 ......
磁盘坏道检测脚本
磁盘坏道检测脚本 说明： hp服务器有一定概率执行命令会卡主， #!/bin/bash # utf-8 # 说明: 其他型号服务器获取raid信息通过MegaCli # 说明: HP服务器获取raid信息通过hpacucli # 安装包信息定义 HP_SSACLI_COMMAND_RPM_NAME= ......
PhpStorm 2021.3.3最新激活破解教程_PhpStorm破解教程（一键脚本激活5000年！）
之前给大家分享的激活方案步骤过于繁琐，导致很多小伙伴不能一步到位的激活软件。现在最新的方案已经不需要这么繁琐了，分享给大家！ 本教程支持 JetBrains 全家桶产品，支持 Windows、macOS 和 Linux 系统。 激活教程 1、为了确保一次性激活成功，我建议大家将电脑上原有的 PhpS ......
Trubo Intruder 按条件重试脚本
由于 burpsuite 自带的 intruder 没有按照特定的条件进行重放请求的设置。所以使用 Trubo Intruder 来定制爆破脚本。 import string #26个小写字母 payloads = list(string.ascii_lowercase) #26个大写字母 #pay ......
shell脚本中的EOF是什么
概述 在Shell脚本中，EOF（End of File）是一个特殊标记，用于指示一段文本的开始和结束位置。但它并不是Shell脚本中的关键字或保留字。您可以自由选择EOF之前的标记，只需确保开始和结束标记匹配即可。基本上<<EOF告诉 shell 您将输入多行字符串，直到“标记” EOF。您可以根 ......
Applescript脚本实现全自动无痕检测手机号码是否注册iMessage的原理
一、检测数据的两种方式:1.人工筛选，将要验证的号码输出到文件中，以逗号分隔。再将文件中的号码粘贴到iMessage客户端的地址栏，iMessage客户端会自动逐个检验该号码是否为iMessage账号，检验速度视网速而定。红色表示不是iMessage账号，蓝色表示iMessage账号。2.编写脚本控 ......
bash的start脚本
#!/bin/bash #这里可替换为你自己的执行程序，其他代码无需更改 APP_NAME=gateway-1.0-SNAPSHOT.jar INSTALL_PATH=/home/server/immp/gateway #使用说明，用来提示输入参数 usage() { echo "Usage: sh ......
linux巡检脚本常用
Linux系统服务巡检脚本 原创 李逸皓 运维book思议 2023-09-24 18:01 发表于河北 收录于合集 #linux系统63个 #运维103个 #shell66个 先放个链接，万一有人关注呢 运维book思议 李小白，一个北漂的运维。希望能够通过本公众号与业内各位大神交流技术问题。 1 ......
4-Linux 操作系统进阶指令 du、df、free、find、ps、service、grep、wc、管道
重点：find 、ps 、grep 、管道 1、du 指令 作用：du表示directory used，显示出目录所占的磁盘空间大小的情况。 语法：#du -sh 目录路径 选项说明： -s：表示sumary，汇总统计 -h：表示以较高可读性的形式显示 案例：使用du指令统计出“/home”的大小情 ......
JMeter 基于脚本实现代码共享
需求描述 需求是这样的：执行某次压测任务时，压测涉及的前端接口，要求携带一个userName请求头，该请求头值为实际用户名经过DES加密后，再采用Base64加密后的值，为此，编写了一段加密代码，发送请求前，对用户名进行加密，并将加密结果存储为变量。最后将代码添加到 JSR233采样器中，如下 DE ......
shell-进程管理脚本
功能函数列表： 1、function get_all_group 返回进程组列表字符串 2、function get_all_process 返回进程名称列表字符串 3、function get_process_info 返回进程详细信息列表字符串，详细信息包括：运行状态、 PID、CPU、MEM、 ......
windows+iis脚本映射方式实现伪静态(包括asp.net)
一 . Windows2008、2012或更高系统 只需要在设置脚本影射的目录下创建web.config文件，其内容为 <?xml version="1.0" encoding="UTF-8"?> <configuration> <system.webServer> <handlers> <add ......
Postman 中 Pre-request Script 加密脚本 CryptoJS-AES-ECB-128
参考链接：http://jser.io/2014/08/19/how-to-use-aes-in-crypto-js-to-encrypt-and-decrypt Aug 19, 2014 //明文 test_Str=`{ "pageNo": 1, "pageSize": 15 }` const p ......
【问题解决】shell脚本执行错误 $‘\r‘:command not found
问题原因：在 Windows 中，换行符是由回车符（\r）和换行符（\n）组成的，而在 Unix/Linux 等系统中，只使用换行符（\n）作为换行标志。 当你在 Unix/Linux 系统上运行一个包含 Windows 格式换行符的脚本时，Shell 会尝试解释其中的回车符，导致错误提示 $‘\r ......
shell-awk-命令
AWK 是一种处理文本文件的语言，是一个强大的文本分析工具。 FS内置变量 awk -F 字段分隔符(默认是任何空格) 1、截取文档中的某个段 head -n2 /etc/passwd |awk -F ':' '{print $1}' 2、匹配字符和字符串 awk '/oo/' test.txt o ......
grep命令复习
grep命令详细讲解 zz/2023/9/22 14:19:14 一:grep命令的基本概念和用途 grep命令是linux中一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。在一个或多个文件中搜素字符串模式，如果字符串模式包括空格，也必须被引用，模式后的所有字符串被看作文件 ......
关于编写自动调度脚本遇到的问题
需求 将入库的stg层表中日指标历史数据同步到dwd层，之前的日指标数据账期从20230820到20230918 1.echo 输出变量 导入配置文件 最后的结果 #! /bin/bash source ~/.bashrc source ~/.bash_profile source /etc/pro ......