windows hadoop spark and
Windows cmd命令行
查看当前目录： echo %cd% 列出当前目录的所有文件 dir 跳转到 Desktop 文件夹： chdir Desktop 跳转到当前目录的上一级文件夹 chdir .. 返回 home 目录 chdir %HOMEPATH% 创建一个可用于修改的新文件： echo "my awesome f ......
Spark安装部署与基础实践
安装 java 运行命令 sudo apt install openjdk-8-jdk-headless 进行安装 运行java -version测试安装是否成功，结果如下，安装成功 安装Spark 运行wget http://mirror.bit.edu.cn/apache/spark/spark ......
单机版hadoop在Linux环境下的安装和配置
创建hadoop用户 首先打开终端窗口，输入如下命令创建hadoop用户，这条命令创建可以登录的hadoop用户，并使用/bin/bash作为shell： $ sudo useradd -m hadoop -s /bin/bash 接着为hadoop设置登录密码，可简单设为123456，按提示输入两 ......
windows 10 安装node.js
安装 node.js 官网地址：https://nodejs.org/zh-cn/download 安装方式：zip包 1下载zip 2 解压zip包： 解压在非中文目录下 新建两个目录 node_global node_cache 新建目录说明 node_global：npm全局安装位置 node ......
windows 10下复现CVE-2021-26411漏洞
CVE-2021-26411复现,学习JavaScript之POC源码分析 概述 CVE-2021-26411，该漏洞的原因：removeAttributeNode()触发属性对象nodeValue的valueOf回调，回调期间手动调用clearAttributes()，导致nodeValue保存的 ......
window10删除3D对象等7个文件夹
注册表管理器regedit HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows\CurrentVersion\Explorer\MyComputer\NameSpace\ 按照需要，删除以下7个文件夹。 [3D 对象] {0DB7E03F-FC29-4DC6- ......
Codeforces 1815E - Bosco and Particle
首先，对于每个 $s_i$，我们只用保留其最小周期，证明显然。 同时以多个光电门为研究对象显然状态数过多，不方便统计。考虑一下连接不同光电门的纽带是什么：显然是相邻光电门之间的空隙。对于每个光电门 $i$，如果我们只保留 $i$ 作为唯一的光电门，那么显然有 $0\to 1$ 和 $1\to 2$ ......
Windows 11 启用 Hyper-V 之后网络上传速度异常慢解决方案
最近在开发用的台式机上启用了 Windows 的 Hyper-V 虚拟化功能，利用虚拟机运行了一台 Windows Server 2022 和 一台 Ubuntu Server，为了方便别的机器直接访问这两台虚拟机，所以网络采用了外部网络桥接的模式，让虚拟机和物理机保持在了同一网段。 为了实现在这一 ......
Cygwin、MSYS2 Bash封装函数restart，重启Windows程序进程向导，输入序号一键重启对应进程或软件
概述 作用：输入restart,根据菜单提示输入序号重启特定的软件或进程，定义的重启函数太多不便于记忆的情况，特别是手机远程终端（如：JuiceSSH）连接的情况下，减少输入和误操作，其中判定浏览器进程使用了另一篇文章中预定的函数wmicps,ps2为指向wmicps的alias ( 详见：http ......
Windows系统自带工具介绍
1 Windows系统工具 1.1 系统增强工具PowerToys 1.1.1 简介 下载地址：https://github.com/microsoft/PowerToys PowerToys 是一款来自微软的系统增强工具，就像是一个神奇的系统外挂，整套软件由若干子组件构成，包括：“屏幕取色器”、“ ......
[ARC144D] AND OR Equation
Problem StatementYou are given positive integers $N$ and $K$. Find the number, modulo $998244353$, of integer sequences $\bigl(f(0), f(1), \ldots, f(2 ......
FFmpeg开发笔记（二）搭建Windows系统的开发环境
由于Linux系统比较专业，个人电脑很少安装Linux，反而大都安装Windows系统，因此提高了FFmpeg的学习门槛，毕竟在Windows系统搭建FFmpeg的开发环境还是比较麻烦的。不过若有已经编译好的Windows版本FFmpeg开发包，那就免去了繁琐的Windows编译过程，所以直接安装已 ......
XMake学习笔记（1）：Windows（MSYS2）下MinGW-w64环境搭建和XMake安装
以前写的C++基本都是C with STL，大多是面向过程的算法题，或者比较小的项目，然后经常报各种编译错误（对编译原理不熟），经常把人搞到崩溃，搞不懂构建、链接之类的东西。 现在开始记录一下XMake的学习笔记，记录一些学习过程中踩的坑，在这篇文章，你将学习到Windows下利用MSYS2进行Mi ......
适用于 Windows 10 的触摸板手势
在 Windows 10 笔记本电脑的触摸板上试用这些手势。 选择项目：点击触摸板。 滚动：将两个手指放在触摸板上，然后以水平或垂直方向滑动。 放大或缩小：将两个手指放在触摸板上，然后收缩或拉伸。 显示更多命令（类似于右键单击）：使用两根手指点击触摸板，或按右下角。 查看所有打开的窗口：将三根手指放 ......
Windows下配置vscode和gcc开发环境
vscode下载安装 下载地址vscode官网，直接点击下载可能会比较慢，可以在开始下载之后复制下载地址，然后用vscode.cdn.azure.cn替换下载地址开头，用国内镜像加速下载 下载安装完成后打开，安装简体中文插件和C++插件，重启 MinGW-w64下载安装 由于MinGW-w64的官方 ......
2、题目：The Informed Design Teaching and Learning Matrix
期刊信息 （1）作者：Crismond, David P. （2）期刊：Journal of Engineering Education, 2012, 101(4): 738–797 （3）DOI：10.1002/j.2168-9830.2012.tb01127.x （4）ISSN：10694730 ......
windows server加固(密码策略)
#密码策略 ###设置启用密码复杂度，最短密码长度为8，密码的最小长度为7，最长为30 使用win建 + R，打开运行输入 gpedit.msc回车进入本地策略组编辑器 ###设置允许5次登录错误，账户锁定时间为30分钟，重置账户锁定时间30分钟 ###设置sale用户只能在周一至周五8：00到20 ......
hive on spark报错
Error in query: Detected implicit cartesian product for LEFT OUTER join between logical plansUnion Join condition is missing or trivial.Either: use th ......
Windows、IDEA、VS Code常用快捷键
一、Windows快捷键 win+E 打开文件管器 win+D 显示桌面 win+L 锁计算机 alt+F4 关闭当前程序 ctrl+shift+Esc 打开任务管理器（或者ctrl+alt+delete） ctrl+F 在一个文本或者网页里面查找，相当实用（退出一般按ESC） ctrl+A 选中所 ......
windows【7】：匿名共享访问的一些关键点
服务器端： 必须启用（enable）guest账号 guest账号必须不能设置密码——密码留空 ntfs文件系统上给相应的文件、文件夹分配guest（或guests组）相应权限 share共享上也分配相应的权限 ......
Poetry在windows下的安装使用
1.安装 1.下载软件包 下载地址 下载最新release的win版，例如：poetry-1.1.13-win32.tar.gz 2.获取安装脚本 脚本获取地址 直接复制到本地，新建一个文件即可，名字随意，后续要用到 3.使用命令安装 打开cmd，进入安装包和脚本文件所在目录 执行命令：python ......
Windows 11 竟然还自带了expand工具
Windows从3.x版本，到Windows 9x，再到Windows NT/2K/XP，安装过程都是使用微软自己的压缩格式，及文件后缀是一个下划线的一种格式，比如exe压缩后，就是ex_，bmp压缩后就为bm_，mid压缩后就是mid_ 安装过程就是把文件解压到目标位置。这种情况一直持续到Vist ......
Vulkan Support Check and Dynamic Loader C++ code sample
很多时候不想静态依赖VulkanSDK所提供的静态库，因为会遇到一些过早的电脑不支持vulkan， 那么就需要使用动态加载vulkan-1.dll（for Windows）或libMoltenVK.dylib（for MacOS）的方式进行判断了。 VulkanSDK提供了相关头文件实现可以做到相关 ......
wampserver 设置在windows下开机自动启动
wampserver 安装后默认是手动启动。想随开机自启动，需要在服务中设置一下。 右键点 开始 进 计算机管理 点 服务 将 wampapache64 和 wampmysqld64 改为 自动 即可 ......
Windows/Android/iOS 等常见 User-Agent 大全
User Agent 中文名为用户代理，简称 UA，是一个特殊字符串头，使得服务器能够识别客户使用的操作系统及版本、CPU 类型、浏览器及版本、浏览器渲染引擎、浏览器语言、浏览器插件等。Python 爬虫通过伪装 UA 可以绕过某些检测。 以下为搜集的常见的各浏览器的 User-Agent，其中： ......
Hadoop启动集群报错:Starting namenodes on [hadoop01] hadoop01: root@hadoop01: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
搭建三个hadoop集群的时候,master没有启动namenode和datanode， 报错: Starting namenodes on [hadoop01]hadoop01: root@hadoop01: Permission denied (publickey,gssapi-keyex,gs ......
Windows中qtcreator怎么将编译路径更改为当前目录？
像VC那样，将执行文件所在debug或release目录，放置到源文件的当前目录是不错的选择。因为便于查找。 要实现这个将编译路径更改为当前目录功能，其实很简单，只需要在“构建目录”所在的编辑框中输入“./”即可。 此时，会在源文件的当前目录中产生如下文件： .qmake.stash Makefil ......
Hadoop概述
Hadoop概述 Hadoop是什么 hadoop是一个由Apache基金会所开发的分布式系统基础框架 其主要解决，海量数据的存储和海量数据的的分析计算问题 广义上，Hadoop通常是指一个更加广泛的概念——Hadoop生态圈 Hadoop的发展历史 Hadoop创始人Doug Cutting，为了 ......
论文阅读笔记《Residual Physics Learning and System Identification for Sim to real Transfer of Policies on Buoyancy Assisted Legged Robots》
Residual Physics Learning and System Identification for Sim to real Transfer of Policies on Buoyancy Assisted Legged Robots 发表于2023年。论文较新，未找到发表期刊。 基于浮 ......
CF1814E Chain Chips & CF750E New Year and Old Subsequence - 动态 dp -
一句话概括动态 dp：用来解决带修改/多次区间询问的 dp 问题。将转移写成矩阵的形式，然后利用线段树求解区间问题/单点修改 1814E 注意一条边要么选 2 要么选 0 次，而且第一条边一定是选了 2 次。如果有一条边没选，那么这条边两侧的边一定都选了。 设 $f_i$ 代表考虑到第 $i$ 条边 ......