windows hadoop spark and
windows下dapr的代码调试--非docker部署
上一篇大概的整理了一下在vm虚拟机下通过docker部署dapr应用，作服务之间调用的例子。 今天整理一下windows下dapr的非docker部署调试，毕竟大部分开发不需要花费太多时间做部署。 源代码还是来自上一篇的例子,代码就不再贴出来了。 exercisebook/Dapr/DaprDemo ......
Centos7系统编译Hadoop3.3.4
1、背景 最近在学习hadoop，此篇文章简单记录一下通过源码来编译hadoop。为什么要重新编译hadoop源码，是因为为了匹配不同操作系统的本地库环境。 2、编译源码 2.1 下载并解压源码 [root@hadoop01 ~]# mkdir /opt/hadoop [root@hadoop01 ......
Centos7搭建hadoop3.3.4分布式集群
1、背景 最近在学习hadoop，本文记录一下，怎样在Centos7系统上搭建一个3个节点的hadoop集群。 2、集群规划 hadoop集群是由2个集群构成的，分别是hdfs集群和yarn集群。2个集群都是主从结构。 2.1 hdfs集群规划 | ip地址 | 主机名 |部署服务| |--|--| ......
《关于我因为flink成为spark源码贡献者这件小事》
各位读者老爷请放下手上的板砖，我可真没有标题党，且容老弟慢慢道来。 spark和flink本身相信我不用做过多的介绍，后端同学不管搞没搞过大数据，应该都多多少少听过。 如果没听过，简单说，spark和flink之于大数据，就好比vue和react之于前端，就好比spring家族之于java。 从20 ......
k8s中使用prometheus operator监控外部服务器部署的windows exporter
k8s中使用prometheus operator监控外部服务器部署的windows exporter 0、文档说明 （1）Prometheus Operator是一个流行的k8s集群监控套件，项目地址：https://github.com/prometheus-operator/kube-prom ......
DIVFusion_ Darkness-free infrared and visible image fusion 论文解读
研究 背景： 当前图像融合方法都是针对正常照明的红外与可见光图像设计的，无法有效处理夜景下的情况。 而针对夜景下的融合可以分为以下两个步骤，1 可见光图像增强，2 可见光图像与红外图像融合。但是现存的弱光增强算法与融合算 法存在严重不兼容，简单的组合会导致一系列问题。如何建模消除两种算法的不 ......
Windows下x86和x64平台的Inline Hook介绍
Windows下Inline Hook技术可以用来拦截一个指定的函数，并使其跳转到指定的地址执行相应的程序，从而实现某种想要的效果，本文介绍了x86和x64平台下Inline Hook的原理和基本使用方法，着重于x64下可行的方案，以及适用于多线程的方法。 ......
C#实现聊天消息渲染、图文混排（支持Windows、Linux）
在实现聊天软件时，渲染文字表情图文混排是一项非常繁琐的工作，再加上还要支持GIF动图、引用消息、撤回消息、名片等不同样式的消息渲染时，就更加麻烦了。那么有简单的实现办法吗？嗯，有的。 ......
windows右键菜单扩展容器[开源]
今天给大家分享一个我做的小工具，可以自定义扩展右键菜单的功能来提高工作效率，效果图如下： image 如上图，右键菜单多了几个我自定义的菜单 复制文件路径 复制文件夹路径 我的工具箱 <走配置文件动态创建子菜单，下面会讲> 我上图是在win10操作系统下演示的，在win11系统也测试可用。 源码和工 ......
微软外服札记④——Spark中的那些坑...
Spark中的那些坑 Spark中的那些坑 前言 读取配置文件 时区陷阱 怪异的DayOfWeek substring陷阱 IP地址解析 枚举的数值 posexplode函数 为什么我的程序运行那么慢？慎用Count()和Show() 为什么我的程序运行那么慢？（2）优化、优化 其它 题外话 前言 ......
05安装一个Hadoop分布式集群
安装一个Hadoop分布式集群 最小化的Hadoop已经可以满足学习过程中大部分需求，但是为了研究Hadoop集群运行机制，部署一个类生产的环境还是有必要的。因为集群机器比较少，笔者没有配置ssh，所以就需要在每一台机器上手动启动服务。启动上相对繁琐一些，优点是可以高度自定义集群中的任务节点数量，从 ......
安装Windows Server 2022 - 初学者系列 - 学习者系列文章
这天要写一个关于系统部署的系列文章，涉及到Windows Server 2022操作系统的安装，所以就写了此文。Windows系列的操作系统安装，以前的博文中都有介绍，这里再次做一个安装描述吧。需要的朋友请自行参考。 1、 安装虚拟机； 关于虚拟机，笔者选择的是VMWare Workstation ......
浙江某男子对多端应用开发工具HBuilderX在windows下安装的解说
同学,学uni-app好啊，大致上写一套代码能生成这么多个平台的应用，我简单念一下，它们分别是Android应用、IOS应用、Web应用、微信小程序、支付宝小程序、百度小程序、字节跳动小程序、快应用、qq小程序、360小程序、快手小程序、飞书小程序、钉钉小程序、京东小程序。 哇偶!好好好，图省力那你 ......
What's new in Dubbo 3.1.5 and 3.2.0-beta.4
在 1 月 27 日，新年伊始，Dubbo 3.1.5 和 3.2.0-beta.4 正式通过投票发布。本文将介绍发布的变化一览。 Dubbo 3.1.5 版本是目前 Dubbo 3 的最新稳定版本，我们建议所有的用户都升级到最新的稳定版本。Dubbo 3.2.0-beta.4 版本是目前 Dubb ......
Windows下使用Graalvm将Springboot应用编译成exe大大提高启动和运行效率
GraalVM安装 GraalVM安装 安装 请前往GraalVM官网 下载 GraalVM Community 22.3，注意当前支持的Springboot的GraalVM版本必须是22.3 笔者这里下载的Java版本为17，如下图 安装GraalVM的方法与安装JAVA方法大致相同，GraalV ......
使用docker安装hadoop（已实现）
1.拉镜像 这里推荐第一个 docker pull registry.cn-hangzhou.aliyuncs.com/hadoop_test/hadoop_base 或者 docker pull qianiqan/hadoop_only 2.创建容器 三个容器的名称分别是Master、Slave1 ......
论文翻译：2020：ECAPA-TDNN: Emphasized Channel Attention, Propagation and Aggregation in TDNN Based Speaker Verification
论文地址：ECAPA-TDNN：在基于TDNN的说话人验证中强调通道注意、传播和聚集 论文代码：https://github.com/TaoRuijie/ECAPA-TDNN 引用格式：Desplanques B, Thienpondt J, Demuynck K. Ecapa-tdnn: Emph ......
论文翻译：2022_PercepNet+: A Phase and SNR Aware PercepNet for Real-Time Speech Enhancement
博客地址：凌逆战 (转载请注明出处) 论文地址：PercepNet+: 用于实时语音增强的相位和信噪比感知 PercepNet 引用格式： Ge X, Han J, Long Y, et al. PercepNet+: A Phase and SNR Aware PercepNet for Real ......
Windows 11 内核新调试器「GitHub 热点速览 v.23.01」
本周热点趋势榜虽然新项目不多，但是还是有几个不错值得收藏的工具项目，比如用来做文本转语音的 tortoise-tts 能生成更加贴近真实人声的语音，让 Golang 并发更出色的 conc，以及通过 Hook 来管理 React 状态的 zustand，以及本周特推调试 Windows 11 内核的 ......
将IoTDB注册为Windows服务
昨天写的文章《Windows Server上部署IoTDB集群》，Windows下的IoTDB是控制台程序，打开窗口后，很容易被别人给关掉，因此考虑做成Windows服务，nssm正是解决该问题的利器。 1.下载nssm：http://www.nssm.cc/download 查看官网提示，如果是w ......
Windows Server上部署IoTDB 集群
本文是参考官方的 IoTDB 集群版（1.0.0）的安装及启动教程：https://iotdb.apache.org/zh/UserGuide/V1.0.x/Cluster/Cluster-Setup.html ，在Windows Server 2019上部署集群的实践记录。前置检查使用微软发布的O ......
windows11预览版装WSA心得
这两天心血来潮想要装个WSA（安卓windows子系统），原来一直用的安卓模拟器（mumu啊蓝叠啊逍遥啊），但感觉像wsa这种安卓系统与主系统融合的模式更带感，于是开始了我艰苦的安装（瞎捯饬）之路 我也是真惨，别人安装失败都是一两个原因，我安装失败倒是把几乎所有失败原因都搭上了。 因为我年少轻狂，当 ......
Windows 平台计算 CPU 总利用率
利用 GetSystemTimes 可以获得 Windows 系统的 Idle Time、 Kernel Time 和 User Time。Idle Time 是系统空闲的时间，也就是系统没有利用的时间。Kernel Time 是系统在内核模式下的执行时间。User Time 是系统在用户模式下的执 ......
迁移学习（JDDA） 《Joint domain alignment and discriminative feature learning for unsupervised deep domain adaptation》
论文信息 论文标题：Joint domain alignment and discriminative feature learning for unsupervised deep domain adaptation论文作者：Chao Chen , Zhihong Chen , Boyuan Jia ......
Windows安装Anaconda并且配置国内镜像教程
在学习OpenCV或者其他关于Python技术的时候，我们通常需要准备不同的Python环境，我选择了Anaconda作为我的Python环境管理器。 ......
【好软推荐】Scoop - Windows快速软件安装指南
在平常生活中如果要安装像git、java、node这些环境的时都需要先去官网下载安装程序，点击安装，之后还需要配置，不仅过程麻烦，而且工具多了之后整理起来也相当不容易，配置也很杂，整个电脑就像被污染了一样。而scoop可以很好地解决这一问题，安装scoop后，只需要在命令行输入简单的一串命令即可安装... ......
Windows上使用QEMU创建银河麒麟ARM64虚拟机完全手册
“好记性不如烂笔头。” —— 张溥 0x00 大纲 0x01 前言 最近某个特殊的项目需要用到银河麒麟系统，物理机是arm64架构的，由于架构不同，没办法在x86机器上使用 VMware 和 VirtualBox 等软件直接创建虚拟机，条件有限，只能借助支持多种架构的QEMU，期间踩坑无数，特写本文 ......
跟光磊学Java-Windows版Java8开发环境搭建
Java语言核心技术 如果想要开发Java程序/Java项目之前，必须要安装和配置JDK，这里的JDK表示Java8\JDK8，不过下载软件的时候，强烈推荐大家一定要去软件的官网下载,因为官网提供的软件版本是最新的，会修复旧版本遗留的问题，这样我们在使用软件时可以避免一些问题。 1. Windows ......
M.2 SSD固态硬盘上安装windows(win11)问题
本文简要介绍了windows在ssd类固态硬盘中安装的一些关键要点，及安装过程中可能遇到的一些坑或阻碍，以帮助读者避坑及解决相关问题 ......