脚本hadoop

nacos清理日志脚本

#!/bin/sh ############################ #$1 nacos home #$2 log save days ############################# logs_path=$1 savedays=$2 echo $(date) clean >> . ......
脚本 nacos 日志

Apifox设置登录脚本

第一步,设置脚本 const url = '/Platform/Login/Login' const curUrl = pm.request.getBaseUrl(); let baseUrl = pm.environment.get("SYS"); console.log('sd',baseUrl ......
脚本 Apifox

k8s运维过程中,总是碰到项目从内网迁移到公网,从阿里云到腾讯云,华为云等等情况 需要一个脚本把命名空间里面的资源全部导出

#!/bin/bash #NS=kube-system NS=pre resourceList=( deploy services endpoints ingress secrets pvc cm ) printList(){ for aa in ${resourceList[@]}; do aLi ......
脚本 过程 情况 项目 资源

javaweb-jsp脚本总结笔记

1什么是JSP jsp又叫 Java servelt Page 这门技术最大的特点就是,写jsp就像是再写html 但是不仅可以写静态页面,而且可以内置Java代码写出动态页面,也就是说可以为用户提供动态数据。 总的来说jsp = java+ HTML 2.JSP快速入门 2.1提供对应的驱动包 2 ......
javaweb-jsp 脚本 javaweb 笔记 jsp

关于crontab运行脚本时报错KeyError: 'PATH'

最近在服务器上为let's encrypt证书添加自动续签计划任务时,发现总是不成功,但手动执行该计划任务所对应的sh脚本则没问题,这让我怀疑crontab执行时可能缺少了点什么导致的,想追踪一下crontab的执行日志,发现并没有,需要手动修改配置文件打开: sudo vim /etc/rsysl ......
脚本 KeyError 时报 crontab 39

在Bash shell脚本中,如何检查目录是否存在?

内容来自 DOC[ https://q.houxu6.top/?s=在Bash shell脚本中,如何检查目录是否存在?](https://q.houxu6.top/?s=在Bash shell脚本中,如何检查目录是否存在?) 在Bash shell脚本中,什么命令可以检查目录是否存在? 要检查目录 ......
脚本 目录 shell Bash

2_脚本程序

一.脚本程序 1.脚本执行方式 执行1:bash file1 # !/bin/bash 脚本声明 echo "你好!" [root@kvm ~]# vim aaa.sh [root@kvm ~]# bash aaa.sh 你好! 执行2:sh file1 [root@kvm ~]# sh aaa.s ......
脚本 程序

Shell脚本学习笔记

导航 目录导航Shell脚本入门脚本格式第一个Shell脚本helloworldShell中的变量系统变量常用系统变量案例实操自定义变量基本语法变量定义规则案例实操特殊变量$n基本语法案例实操特殊变量$#基本语法案例实操特殊变量$*、$@基本语法案例实操特殊变量$?基本语法案例实操运算符基本语法案例 ......
脚本 笔记 Shell

hadoop集群 大数据项目实战_电信用户行为分析_day02

集群配置好后,运行一个小例子,统计单词 1.hdfs dfs -put 将本地系统的文件或文件夹复制到HDFS上 2.hdfs dfs -ls /output 将所有的文件显示出来 3.hdfs dfs -cat /output/ 将所有的文件读取出来 下载part-r-000000 安装Redis ......
行为分析 大数 集群 实战 行为

自动批量将阿里云盘资源发布成WordPress文章带截图Python脚本(含正文 付费信息 下载地址 SEO等自动设置)源码

自动批量将阿里云盘资源发布成WordPress文章带截图Python脚本(含正文 付费信息 下载地址 SEO等自动设置) 自动批量将阿里云盘资源发布成WordPress文章带截图Python脚本(含正文 付费信息 下载地址 SEO等自动设置)源码下载 自动上传图片至WordPress站点,使用Res... ......
截图 脚本 WordPress 源码 地址

aFlex脚本入门

aFlex脚本入门 对于A10的aFelx脚本,相信很多人都知道,甚至用过,但是实际上很多工程师在各种项目中的使用可能都是按照模板进行修改,虽然能ok,但是却缺乏对aFelx脚本本质上的了解,所以在用户实际场景与脚本应用场景不完全一致的时候,就会碰到问题,不知如何修改。而更多的技术人员或者用户更是知 ......
脚本 aFlex

xss跨站脚本攻击

前言:终于继续来学习xss了 1 反射型xss xss是跨站脚本攻击的缩写,本来应该写成css,但和层叠样式表(css)重合了,就改叫xss了 1.1无过滤反射型xss 就和名字一样,服务器收到你传递的数据后就直接传递给了前端页面上,然后在前端页面进行显示。 这时候我们直接传入js代码,然后通过js ......
脚本 xss

Hadoop-3.3.5 自动安装

Hadoop-3.3.5 自动安装脚本 为了方便数据科学与大数据技术的 hadoop-3.3.5 安装与配置 目前适用于新安装的纯净虚拟机,未配置冲突检测.. 所以安装的话请使用全新创建的机器以避免错误... 如何使用 ssh localhost 输入你目前用户的密码 exit 退出当前ssh终端( ......
Hadoop

hadoop集群 大数据项目实战_电信用户行为分析_day01

上图是相关配置的要求,主要创建了四个虚拟系统,有三台虚拟机搭建hadoop集群,一台作为业务系统。 涉及到相关的Linux指令有::set nu[显示行号] :6[到第6行 shift+G跳到最后一行 进入vi指令后查找相关东西/(你需要查找的东西) 1.配置环境、 第一步设置网络参数,设置静态网络 ......
行为分析 大数 集群 实战 行为

创建用户密码的脚本

......
脚本 密码 用户

基于Docker搭建Hadoop+Hive

基于Docker搭建Hadoop+Hive 本文主要是照搬这篇文章的https://zhuanlan.zhihu.com/p/242658224,但是这篇文章有一些细节配置没有讲清楚,这里对其进行完善 零、环境信息 电脑配置 Ubuntu 20.04.6 LTS (Focal Fossa) 5.15 ......
Docker Hadoop Hive

Jenkins流水线(pipeline)、自动化脚本

1.Jenkins流水线任务介绍 之前采用的都是Jenkins的自由风格,每个流程都要通过不同的方式设置,并且构建过程中整体流程时不可见的,无法确认每个流程花费的时间,同时不方便问题的定位。 Jenkins的Pipeline可以让项目的发布整体流程可视化,明确执行的阶段,快速定位问题。让整个项目的生 ......
流水线 脚本 pipeline 流水 Jenkins

Loadrunner12 在谷歌浏览器录制https协议的脚本时,提示不是私密链接-解决办法

在谷歌浏览器下,录制https协议网址的脚本时,会出现如下提示: 接下来,教大家一招黑操作: 1、鼠标点击屏幕,聚焦在当前页面 2、输入thisisunsafe,点击回车,奇迹的事情发生了,可以打开https协议的网页正常录制了!!! 3、接下来就根据你的测试需求,来进行操作。(只要提示不是私密链接 ......
私密 脚本 Loadrunner 浏览器 办法

Hadoop-Operation category READ is not supported in state standby 故障解决

在查询hdfs时或者执行程序向hdfs写入数据时遇到报错:Operation category READ is not supported in state standby 意思是:该主机状态为待机,不支持操作类别READ. 你会发现最基本的hdfs命令都不能执行,例如:hadoop fs -ls ......

一些shell脚本

1.判断目录是否为空 DIRECTORY=$1 #在此加上是不是目录的判断。 if [ "ls -A $DIRECTORY" = "" ]; then echo "$DIRECTORY 目录是空的" else echo "$DIRECTORY 目录非空" fi 2.判断文件夹是否存在 if [ -d ......
脚本 shell

cnpm : 无法将“cnpm”项识别为 cmdlet、函数、脚本文件或可运行程序的名称

报错如下,重新安装cnpm即可 npm install -g cnpm --registry=https://registry.npm.taobao.org ......
cnpm 脚本 函数 名称 文件

Hadoop2伪分布式安装

最近有观看我主讲的《Hadoop基础与演练》课程的同学问到Hadoop环境到底应该怎么安装。Hadoop的安装其实非常的简单,网上有很多教程,官网也有示例。但是可能部分同学对于linux不太熟悉,导致安装的时候会遇到各种问题,打击学习激情。本文就来详细的讲解一下如何配置Hadoop2的伪分布式环境, ......
分布式 Hadoop2 Hadoop

Linux脚本内开异步进程和终端开异步进程区别

sleep.sh内容 sleep 1000 & echo $! 脚本内开异步进程是1号进程的子进程 终端开异步进程是当前bash进程的子进程 在关闭终端后该异步进程会停止 停止终端时想要继续执行,使用nohup sleep 1000 &,刚开始是终端bash进程的子进程,在终端停止后会变成1号进程的 ......
进程 脚本 终端 Linux

spyglass用脚本运行

前面讲到过spyglass的操作,挺简单的不过对于规模比较大的项目来说,通过图形化界面进行spyglass检查则显得笨拙效率低下。对于小的项目或者模块而言用图形界面操作很简单。笔者最近做项目用到的.v文件比较多,如果用图形化界面一个个添加那就很浪费时间。这里就简单介绍下使用脚本运行spyglass。 ......
脚本 spyglass

R 脚本Trycatch在for循环中的使用记录

点击查看代码 x = list() p = list() outdir = paste0(getwd(),'/8.metabolites.connect.enrichment') if(dir.exists(outdir)){ print("dir exists") }else{ dir.creat ......
脚本 Trycatch for

simulink中调用python脚本

command = 'test.py &'; %后轴&:等待调用结束( command = 'test.py'; %无后轴&:立即执行下一句 [status,cmdout] = system(command,'-echo'); 参考:详解MATLAB的函数system()和shell转义字符“感叹号 ......
脚本 simulink python

shell脚本内,如何知道本文件在操作系统的什么位置

我写的shell,假如叫1.sh在系统中在这个位置/root/test/1.sh,且存在软链接/root/test_____1.sh -> test/1.sh 支持以下几种情况的操作 /root/test>./1.sh /root>./test/1.sh />/root/test/1.sh /roo ......
脚本 位置 文件 系统 shell

jmeter 提取一个或多个响应值保存到csv文件中,用beanshell实现脚本

import org.json.JSONObject; //写入文件//本地存储文件路径FileWriter fs=new FileWriter("D:/apache-jmeter-5.1.1/bin/token.csv",true); BufferedWriter out=new Buffered ......
脚本 beanshell 多个 文件 jmeter

Jmeter - 定时执行jxm脚本实现稳定性测试

一、背景 1、背景 有个需求需要对某个应用做稳定性测试。 2、参考文章链接: https://blog.csdn.net/SomethingBeTrue/article/details/126310730 https://learn.microsoft.com/zh-cn/windows-serve ......
稳定性 脚本 Jmeter jxm