脚本hadoop
脚本化修改Oracle用的密码以及执行sql
一、脚本化检查Oracle是否能正常登录 # shell定义检查函数 function check(){ VALUE=`sqlplus -S 用户名/$1@数据库网络服务名 <<EOF set heading off feedback off select count(1) from dual; E ......
PowerShell 脚本在 Windows 操作系统中同时连接外网和内网
要使用 PowerShell 设置允许同时连接内外网的组策略,可以使用以下脚本: powershell # 设置允许同时连接内外网的组策略 Set-ItemProperty -Path "HKLM:\SOFTWARE\Policies\Microsoft\Windows\WcmSvc\GroupPo ......
若要通过批处理启用桌面上的计算机、回收站、用户文件夹、控制面板和网络图标,你可以使用下面的批处理脚本
Windows11 桌面图标设置 启用 计算机 回收站 用户的文件 控制面板 网络 图标 批处理 若要通过批处理启用桌面上的计算机、回收站、用户文件夹、控制面板和网络图标,你可以使用下面的批处理脚本: @echo off REM 启用计算机图标 reg add "HKCU\Software\Micr ......
sh脚本:trap "kill -- -$$" EXIT和exec的用法
linux环境下,在sh脚本中启动了一个javav程序,ctrl+c结束程序时,未能正常结束另一个程序。为了解决上述问题,可以在sh中添加trap "kill -- -$$" EXIT 或使用 exec 执行java程序。 trap "kill -- -$$" EXIT: 功能:该命令用于设置一个信 ......
JMeter脚本报错:Cannot find engine named: 'javascript'的解决方法
本文将介绍如何解决在JMeter版本5.4.1下执行脚本时出现的错误信息“javax.script.ScriptException: Cannot find engine named: 'javascript'”。通过将本地JDK版本从18.0.1.1更改为1.8.0_151来解决此问题。 当使用J ......
Hadoop MapReduce编写实现序列化统计各学生的总分
Map类 package org.example.score; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text; i ......
脚本注释
# 内容匹配行首注释 ```bash /bin/sed -i "s/^[^#].*jdfalcon_agent*/#&/g" /etc/crontab #: s:替换 #: ^:开头匹配 #: [^#]:匹配非# #: #&:中的&代表匹配整行,整个意思就是行前面加上#号 #: g:全部(只匹配特定 ......
简单记录个启动脚本
#!/bin/bash # /etc/profile DataPath="/cloud/sync/syncData" echo "[info][$(date +'%F %H:%M:%S')]正在监控syncData,路径:$DataPath" pid=`ps -ef | grep syncData ......
安装Hadoop单节点伪分布式集群
[toc] # 安装Hadoop单节点伪分布式集群 操作系统:Ubuntu server 20.04 参考文档:`http://apache.github.io/hadoop/hadoop-project-dist/hadoop-common/SingleCluster.html` ## 系统准备 ......
Linux下python脚本自启动和定时启动
一、服务器开机自动运行 用root权限编辑以下文件 sudo vim /etc/rc.local 编辑启动脚本的命令地址 /usr/bin/python3 /path/to/python > /path/to/log 二、定时启动 编辑crontab文件 crontab -e 编辑命令 */30 * ......
AE脚本 骨骼动作捕捉导入生成动画 BVH Importer 1.6.0 + 视频教程
BVH Importer 1.6.0 是一个AE脚本,它可以导入骨骼动作捕捉数据并生成动画。通过解析关节骨架结构和相应的运动数据,将它们转化为基于Solid/Null的骨骼动画,以供在After Effects中使用。 这个脚本提供了一种方便的方式来导入BVH(Biovision Hierarchy ......
hadoop基础-hadoop启动脚本分析及常见命令
进程 [hdfs]start-dfs.sh NameNode NN DataNode DN SecondaryNamenode 2NN [yarn]start-yarn.sh ResourceMananger RM NodeManager NM 脚本分析 sbin/start-all.sh libe ......
shell脚本-批量主机执行命令(expect)
# shell脚本-批量主机执行命令(expect) ## 准备 > 上次连接多台服务器使用ssh-keygen,24机器去连接22、25,所以存在.ssh/authorized_keys > > 1.如果有.ssh/authorized_keys该文件则先删除 > > ``` > rm -rf.s ......
shell脚本-批量检查网站是否异常
# shell脚本-批量检查网站是否异常 > - 200 - 请求成功 > - 301 - 资源(网页等)被永久转移到其它URL > - 404 - 请求的资源(网页等)不存在 > - 500 - 内部服务器错误 > > 通过获取状态码检查网站是否正常 但是这种方式不太好直接取出状态码 > > > ......
shell脚本-监控多台服务器磁盘利用率
# shell脚本-监控多台服务器磁盘利用率 ## 介绍 > 第一步:实现免密登录服务器 ,为后续脚本免密登录做好准备。 > > 第二步:把要监控服务器的ip地址 root用户 端口port 写入host.info文件中以便后续脚本从这个文件读取服务器信息。 > > 第三步:写shell脚本,先从h ......
linux shell脚本实现删除连续的空行为一行
001、awk实现 [root@PC1 test02]# ls a.txt [root@PC1 test02]# cat a.txt ## 测试数据 01 02 03 04 05 06 07 08 09 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 ......
go编写zabbix企业微信媒介脚本
```go package main import ( "bytes" "fmt" "io" "net/http" "os" "time" "github.com/bytedance/sonic" ) var ( subject, message, webHook, is_all, user_pho ......
shell脚本-监控多台服务器磁盘利用率
# shell脚本-监控多台服务器磁盘利用率 ## 介绍 > 第一步:实现免密登录服务器 ,为后续脚本免密登录做好准备。 > > 第二步:把要监控服务器的ip地址 root用户 端口port 写入host.info文件中以便后续脚本从这个文件读取服务器信息。 > > 第三步:写shell脚本,先从h ......
脚本-01
1. redis启停脚本,redis_start_stop.sh #!/bin/bash REDIS_PORT=6379 SENTINEL_PORT=26379 IP=`(ifconfig|grep inet|egrep -v "127.0.0.1"|awk '{print $2}')` redis ......
Hadoop中hive的使用
启动元数据管理服务(必须启动,否则无法工作) 前台启动:bin/hive --service metastore 后台启动:nohup bin/hive --service metastore >> logs/metastore.log 2>&1 & 启动客户端 Hive Shell方式(可以直接写 ......
IDApython练习1-脚本去花
# IDApython练习1-脚本去花 这里主要是练习IDApython脚本去花 ## 1 ![](https://img2023.cnblogs.com/blog/2665547/202307/2665547-20230711082545581-1596957749.png) 这里 jz跳转条件是 ......
西门子界面官方精美触摸屏+WINCC程序模板 西门子官方触摸屏程序模板,炫酷的扁平式动画效果,脚本动画,自
西门子界面官方精美触摸屏+WINCC程序模板 西门子官方触摸屏程序模板,炫酷的扁平式动画效果,脚本动画,自动生成二维码,可仿真,堪比智能手机,有精简,精致,wincc,无线面板等包含了所有西门子人机界面。YID:4639656292012492 ......
Android中WebView和网页js脚本互操作
参考 Android WebView与JS的交互方式:https://blog.csdn.net/u011035026/article/details/123267616代码示例: package com.jay.wvjsapp; import android.app.Activity; impor ......
Hadoop on k8s 快速部署进阶精简篇
[TOC] ## 一、概述 前面一篇文章已经很详细的介绍了Hadoop on k8s部署了,这里主要针对部署时可能会调整的地方和注意事项进行讲解,想详细了解详细部署过程可参考我上一篇文章:[Hadoop on k8s 编排部署进阶篇](https://www.cnblogs.com/liugp/p/ ......
大数据面试题集锦-Hadoop面试题(四)-YARN
> 你准备好面试了吗?这里有一些面试中可能会问到的问题以及相对应的答案。如果你需要更多的面试经验和面试题,关注一下"**张飞的猪大数据分享**"吧,公众号会不定时的分享相关的知识和资料。 [TOC] ## 1、为什么会产生 yarn,它解决了什么问题,有什么优势? 1)Yarn最主要的功能就是解决运 ......
Hadoop中YARN集群启停命令
一键启停脚本 # 一键启动yarn集群 start-yarn.sh # 一键关闭yarn集群 stop-yarn.sh 单进程启停 start和stop决定启动和停止可控制resourcemanager、nodemanager、proxyserver三种进程 yarn --daemon start| ......
web安全学习日志---xss漏洞(跨站脚本攻击)
1.反射性xss(reflacted) 仅执行一次,非持久型。主要存在于攻击者将恶意脚本附加到url的参数中,发送给受害者,服务端未经严格过滤处理而输出在用户浏览器中,导致浏览器执行代码数据。 利用场景: 直接插入JS代码,修改url参数 攻 <script>alert('hack')</scrip ......
centos初始化脚本
#关闭防火墙和selinux:systemctl stop firewalldsystemctl disable firewalldsetenforce 0sed -i 's/^SELINUX=.*/SELINUX=disabled/g' /etc/selinux/config #yum 源加速#1 ......
hadoop3.3.5完全分布式搭建live nodes只有一个的情况
在我配置完所有结点启动后发现存活的结点只有一个,一开始我以为是主机或者配置的问题,但是都没有用 后来终于找到了问题所在,问题的关键就是xsync脚本分发后再使得三台主机的datanode id一样 修改这个使得三个主机的uuid不同即可 ......
Hadoop3.3.5完全分布式搭建
首先在之前的伪分布基础上克隆两台机器 这样一共三台虚拟机 为这三台虚拟机设置三个不同的静态ip地址和主机名 我的是 billsaifu 192.168.15.130 hadoop1 192.168.15.131 hadoop2 192.168.15.132 静态IP设置 #先进入root vim / ......