脚本hadoop
git 拉取多个项目shell脚本
1、项目 /var/www/xm1 /var/www/xm2 /var/www/xm3 2、脚本 #!/bin/bash codeBaseDir="/var/www/" defaultProjects=("xm1" "xm2" "xm3") # 判断是否提供了项目名称参数 if [ $# -eq 0 ......
(Windows Hadoop环境配置)IDEA：ERROR util.Shell: Failed to locate the winutils binary in the hadoop binary path
ERROR util.Shell: Failed to locate the winutils binary in the hadoop binary path 出错原因：还没有在windows上配置hadoop环境变量。 解决：在windows上配置hadoop环境变量 参考：windows下缺少 ......
使用BAT脚本实现文件异机备份，并且还有文件的时间戳
事件起因： 由于我们单位是创意设计公司，在设计文件的隐私性和保密性上都是有要求的，单位里的办公机的USB口都是禁用的，防治资料泄露；服务器之间还要做实时备份，并且文件的创建时间都是要保证准确性的。但是我们正常拷贝文件夹和文件，会将文件夹的创建时间显示为最新时间。 举个例子：A服务器上有个文件，创建于 ......
使用source和sh执行脚本打印字母表的区别
前言 在使用shell打印由两个任意字母组合的字符串时出现了两种情况。:一种情况使用source执行脚本；另一种使用sh执行。 脚本如下 #!/usr/bin/env bash for n in {a..z} do for m in {a..z} do echo "$n$m" done done 脚 ......
shell脚本生成随机密码
1.创建generate_password.sh脚本 2.编写内容 #!/bin/bash # 默认密码长度 length=12 # 默认包含大小写字母、数字和特殊字符 characters="ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0 ......
Windows使用任务计划程序创建定时运行Python脚本
最近有需求需要每天定时运行python程序，了解了一些方法。目前觉得Windows系统最简单的方法就是设置任务计划程序定时运行。 在Windows中，任务计划程序（Task Scheduler）是一个持久的服务，通常不会因为计算机的关机或重启而停止。一旦你成功创建并配置了定时任务，它将按照你设置的触 ......
JSP的脚本标识
1.声明 在JSP页面中可以声明变量、方法和类，其格式为： <%! 声明变量、方法和类的代码 %> 2.代码段 JSP允许在<%和%>之间插入Java程序段。一个JSP页面可以有许多程序段，这些程序段将被JSP引擎按顺序执行。 当多个客户请求一个JSP页面时，JSP引擎为每个客户启动一个线程，一个客 ......
nacos redis mysql 服务启动脚本
nacos # cat /etc/systemd/system/nacos.service [Unit] Description=nacos After=network.target [Service] Type=forking ExecStart=/usr/local/src/nacos/bin/ ......
Shell脚本中文英文多语言国际化和命令行批处理(bash sh cmd bat)中定义函数的简单写法
目录命令行脚本参考 - bat命令行脚本参考 - bash值得学习的知识点1. 识别终端使用的语言2. 函数的编写3. 获取用户的输入4. bat文件老是乱码怎么办 有时候为了方便别人使用，我们会选择去编写各种各样的命令行脚本：给Windows用户编写.bat cmd批处理脚本，给macOS、Lin ......
使用Python调用Hadoop Hdfs的API
一、Java调用hdfs的api import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; import org.jun ......
PyCharm无法加载 venv\Scripts\activate.ps1,因为在此系统上禁止运行脚本
解决办法1：把Terminal更改为cmd 解决办法2：更改PowerShell的脚本执行策略 以管理员身份运行PowerShell 执行：set-executionpolicy remotesigned 再到PyCharm下的Terimal中执行：get-executionpolicy 查看，已经 ......
vscode 终端报错：无法加载文件 D:\nodejs\npm.ps1，因为在此系统上禁止运行脚本。
问题：vscode终端执行npm指令时报错如下 解决： 1. 在终端通过输入指令 get-ExecutionPolicy 得到以下结果： 表示当前执行策略为受限的 2. 执行指令 Set-ExecutionPolicy -Scope CurrentUser，并输入 RemoteSigned。 Set ......
MySQL异常断电恢复脚本
#!/bin/bash user="root" host="127.0.0.1" passwd="password" conf_file="/etc/mysql/mysql.conf.d/mysqld.cnf" backup_file="/home/ehigh/DB.sql" data_dir="/ ......
Failed to connect to server: hadoop/ip:9000: try once and fail.
hadoop 连接失败，报如下错误！ java.net.ConnectException: Connection refused at sun.nio.ch.SocketChannelImpl.checkConnect(Native Method) at sun.nio.ch.SocketChann ......
bat命令行批处理脚本直接以管理员权限启动Java程序
bat命令行代码： @echo off :: BatchGotAdmin (Run as Admin code starts) REM --> Check for permissions >nul 2>&1 "%SYSTEMROOT%\system32\cacls.exe" "%SYSTEMROOT ......
linux切换IP脚本
#VIP设置 #v_ip:10.229.128.21 #local_ip:10.229.128.79 #!/bin/bash ngxsrv="nginx_srv_2" logsrv="10.229.128.76" v_ip="10.229.128.21" local_ip="10.229.128.8 ......
sqoop1.4.7完全支持Hadoop3.x, Hive3.x Hbase2.x
已经修改好 保存至云盘 自己下载 花了时间的，记得关注我。。。 链接：https://pan.xunlei.com/s/VNe6P6Tm1A9Q-RG5GByN08rdA1# 提取码：5nke 复制这段内容后打开手机迅雷App，查看更方便 下载解压直接用，里面的内容已经改好 但是需要注意的是conf ......
Oracle 查询当前用户下所有索引（Index）并拼接创建脚本
原文地址：https://blog.csdn.net/zy_workjob/article/details/82011825 Oracle 查询当前用户下所有索引（Index，PK）并拼接创建脚本【不包含FUNCTION-BASED基于函数的索引】 SELECT T.TABLE_NAME, --表名 ......
删除百度网盘windows右键菜单的脚本
以下代码保存为 任意文件名.bat，然后右键“以管理员身份运行”即可 reg delete HKEY_CLASSES_ROOT\Directory\shellex\ContextMenuHandlers\YunShellExt /f reg delete HKEY_CLASSES_ROOT\*\sh ......
实现shell脚本多线程
默认的情况下，Shell脚本中的命令是串行执行，必须等到前一条命令执行完后才执行接下来的命令，但是如果有一大批命令需要执行，而且互相又没有影响的情况下，那么就要使用并发的方式执行命令了。 因为Shell本身并不提供多线程机制，因此需要借助其他技术（如有名管道）来实现多线程的通信。 后台执行实现并发 ......
IDEA连接Hadoop
因为一些学习的需要，用到了idea连接hadoop，并对它进行一些相关的读写操作，总结一下大概的流程。 一、使hadoop集群可以被远程访问，配置一些文件，可以参考一些其它博主的教程，记住配置的URL或者IP地址以及远程访问用到的端口号。 二、在idea中建一个连接，测试一下是否可以连接hadoop ......
Unity 游戏开发、01 基础知识大全、简单功能脚本实现
Unity学习笔记。记录大部分基础知识、术语，API使用方式，简单游戏功能的脚本实现等。部分内容带图文和个人见解 ......
Windows bat脚本的for语句差异
在cmd窗口中，for之后的形式变量I必须使用单百分号引用，即%I；而在批处理文件中，引用形式变量I必须使用双百分号，即%%I。在cmd窗口中：for %I in (command1) do command2 在批处理文件中：for %%I in (command1) do command2 ......
pycharm上运行UI自动化脚本后浏览器自动关闭的原因
现象：代码中没有出现关闭浏览的代码，但是代码运行完后还是自动将浏览器给关闭了 原因：selenium版本过高导致，新版的selenium在代码运行完后就会关闭浏览器 解决办法：可以安装之前selenium的版本，如4.4.3版本就不会自动关闭浏览器 ......
makefile中导入shell脚本中export的环境变量
1.在makefile中，想要直接导入shell脚本的环境变量是有点麻烦，因为source命令导出的变量只在当前终端有效，而且source命令和.命令是等价的,如下： source ./env.sh . ./env 通常我们拿到SDK交叉编译链，都会先解压工具链，在source一下工具链中的环境变量 ......
shell脚本中的变量定义
shell脚本中的变量 局部变量 local 修饰，作用域在函数里，当出现同名变量优先级高于外部全局变量 全局变量 全局变量，不加任何修饰符，一般用于定义常量，任何函数体里都可以直接去取全局变量的值 ......
shell脚本
1.case语句 可以实现switch case的逻辑 case $server_vendor in "HP"|"Hewlett-Packard") install_rpm "HP" hp_server_hardware_health_check ;; *) install_rpm "Other" ......
Hadoop3.3.6 Shell命令操作
一、mkdir 创建文件夹通过命令hadoop fs -mkdir /cyw在hdfs中创建名为cyw的文件夹 二、moveFromLocal从本地剪切到hdfs中 这里将本地/home/input/movefromlocal文件剪切到hdfs的cyw文件夹下hadoop fs -moveFromL ......
ROS路由器环回脚本，实际在用，只需要更新一个IP地址
实际在用的脚本，需要ros版本较高，低版本可以照着自己改改用，亲测可以。 #取当前拨号ip地址 :global ednsiph [ /ip address get [/ip address find interface="pppoe-out1" ] address ] :global newip [ ......
Groovy脚本生成带注释的实体类
出处忘了，之前自己编过一个，后来申请教育资格的时候，把原来的脚本忘了 大驼峰、小驼峰 loombock import com.intellij.database.model.DasTable import com.intellij.database.util.Case import com.inte ......