数据处理 客户端 客户 服务器
IO数据拷贝的几种方式——传统、mmap、sendFile、splice
# IO数据拷贝的几种方式——传统、mmap、sendFile、splice ## 1. 传统IO数据拷贝方式 ![img](https://img2023.cnblogs.com/blog/2020662/202307/2020662-20230707164517773-21709011.png) ......
filebeat无法传递数据到kafka
## 一、故障现象 filebeat无法传递数据到kafka,但是topic却能创建成功,就很神奇。 ```sh kafka 10.0.7.7 filebeat 10.0.7.5 在kafka机器上执行消费者,一直没有数据 kafka-console-consumer.sh --bootstrap- ......
一次简单的Java服务性能优化,实现压测 QPS 翻倍
背景 前段时间我们的服务遇到了性能瓶颈,由于前期需求太急没有注意这方面的优化,到了要还技术债的时候就非常痛苦了。 在很低的 QPS 压力下服务器 load 就能达到 10-20,CPU 使用率 60% 以上,而且在每次流量峰值时接口都会大量报错,虽然使用了服务熔断框架 Hystrix,但熔断后服务却 ......
按单元格填充颜色或字体颜色统计数据的自定义函数
参考网络代码,自己写了二个通用的自定义函数,用于统计不同颜色的单元格数值或个数。 1 Function SumColor(rng As Range, cellColor As Range, N As Byte) As Double 2 3 '输入=SumColor(A1:A10, A1, 0),其中 ......
ASP.NET Core SignalR 系列(二)- 中心(服务端)
本章将和大家分享 ASP.NET Core SignalR 中的中心(服务端)。 本文大部分内容摘自微软官网:https://learn.microsoft.com/zh-cn/aspnet/core/signalr/hubs?view=aspnetcore-7.0 废话不多说,我们直接来看一个De ......
数据库连接
# 数据库连接: ## 原始方式: ```text 原始的方式:getConnection() >connection >statement >**statement*(executeQuery(sql);executeUpdate(sql);) 通过statement来获取结果rs或者int。 ` ......
用Dockers搭建DNS服务器
1、Docker-Compose的配置文件用vi编辑器,创建文件:vi docker-compose.yml 内容如下:version: '3.6' networks: main: ipam: config: - subnet: 10.10.1.0/24 services: web: image: ......
node.js 创建微服务器
const http = require('http'); const hostname = '127.0.0.1'; const port = 3000; const server = http.createServer((req, res) => { res.statusCode = 200; ......
Matlab-字符串处理
1. 字符串赋值给数组 A{1, 1} = 'Hello'; % 将字符串 'Hello' 赋值给 A 的第一行第一列 A{2, 1} = 'World'; % 将字符串 'Hello' 赋值给 A 的第一行第二列 % 注意字符串数组赋值时需要采用大括号,采用小括号会报错数组大小不兼容 2. 字符串 ......
本地服务器重装麒麟操作系统
# 本地服务器重装麒麟操作系统 公司为了响应国家的信创工程, 开始支持国产, 所以就安排我在本地服务器安装麒麟操作系统 > 跟着这个安装就可以了 > > https://docs.openkylin.top/zh/%E7%A4%BE%E5%8C%BA%E5%8F%82%E4%B8%8E%E6%8C% ......
麒麟V10服务器PHP连接MySQL报错PHP Warning: mysqli_connect(): Unexpected server respose while doing caching_sha2 auth: 99
1.问题描述 这个警告表示在进行缓存的 caching_sha2 认证过程中,服务器返回了一个意外的响应码 99。这是由于 MySQL 服务器的配置或版本与使用的客户端库不兼容导致的。 2.解决办法 a.检查MySQL客户端版本: 确保你使用的MySQL客户端版本与服务器版本兼容。如果服务器使用较新 ......
【7月最新实现】使用Python获取全网招聘数据,实现可视化分析
哈喽兄弟们,今天来实现采集一下最新的qcwu招聘数据。因为网站嘛,大家都爬来爬去的,人家就会经常更新,所以代码对应的也要经常重新去写。 对于会的人来说,当然无所谓,任他更新也拦不住,但是对于不会的小伙伴来说,网站一更新,当场自闭。 所以这期是出给不会的小伙伴的,我还录制了视频进行详细讲解,跟源码一起 ......
关于Azure-平台-Redhat-Linux-服务器时间同步的问题解决
首先说明一下,关于Azure平台中国区,是没有Redhat Linux系统镜像的 于是笔者这边是通过在Windows系统 Hyper-V 管理器中安装完Redhat 8.x 操作系统后,最后将系统磁盘转换成转换为VHD格式 然后经过一系列操作、最终在Azure平台上形成了自己的并且加固过的 Red ......
C++之共享数据
背景 在C++多线程编程中,线程间共享数据是一种常见的情况。然而,如果不加以处理,共享数据可能导致一些问题,如条件竞争。本文将介绍C++中多线程共享数据的方式,包括各种方式的使用场景和比较。 使用互斥锁(Mutex) 互斥锁(Mutex)是一种同步原语,用于保护共享数据的访问。当一个线程访问共享数据 ......
手把手教学小型金融知识图谱构建:量化分析、图数据库neo4j、图算法、关系预测、命名实体识别、Cypher Cheetsheet详细教学等
手把手教学小型金融知识图谱构建:量化分析、图数据库neo4j、图算法、关系预测、命名实体识别、Cypher Cheetsheet详细教学等 ......
mysql 慢查询处理
mysql 执行 EXPLAIN SELECT `post`.*,`category_post`.`category_id` FROM `mj_portal_post` `post` INNER JOIN `mj_portal_category_post` `category_post` ON `p ......
并行计算框架Polars、Dask的数据处理性能对比
在Pandas 2.0发布以后,我们发布过一些评测的文章,这次我们看看,除了Pandas以外,常用的两个都是为了大数据处理的并行数据框架的对比测试。 本文我们使用两个类似的脚本来执行提取、转换和加载(ETL)过程。 测试内容 这两个脚本主要功能包括: 从两个parquet 文件中提取数据,对于小型数 ......
python 数据结构之:查找
# python 数据结构之:查找 [toc] ## 1 顺序查找 - 当数据存储在诸如列表的集合中时,我们说这些数据具有线性或顺序关系。 每个数据元素都存储在相对于其他数据元素的位置。 由于这些索引值是有序的,我们可以按顺序访问它们。 这个过程产实现的搜索即为顺序查找。 - 顺序查找原理剖析: - ......
python 数据结构之:排序
# python 数据结构之:排序 [toc] ## 1 冒泡排序 - 相邻元素两两比较,大的往后放。第一次完毕后,最大值就出现在了最大索引处。同理,再执行,即可得到一个排好序的数组。 - 冒泡排序基础原理: ```python def sort(li): """ 将无序列表中最大数移动到最后 :p ......
python 数据结构之:栈
# python 数据结构之:栈 ## 1 栈简介 - 特性:先进后出的数据结构 - 名词:栈顶,栈尾 - 应用:每个 web 浏览器都有一个返回按钮。当你浏览网页时,这些网页被放置在一个栈中(实际是网页的网址)。你现在查看的网页在顶部,你第一个查看的网页在底部。如果按‘返回’按钮,将按相反的顺序浏 ......
python 数据结构之:队列
# python 数据结构之:队列 ## 1 队列简介 - 队列:先进先出 - 应用场景:打印机队列。第一个进入的任务是先完成。如果你是最后一个,你必须等待你前面的所有其他任务打印 ## 2 python 实现队列 - `Queue() `创建一个空的新队列。 它不需要参数,并返回一个空队列。 - ......
python 数据结构之:链表
# python 数据结构之:链表 [toc] ## 1 内存概念 - 计算机的作用:用来存储和运算二进制的数据 - 问题:计算机如何计算1+2? - 将1和2的二进制类型的数据加载到计算机的内存中,然后使用寄存器进行数值的运算。 - 变量的概念 - 变量就是某一块内存,如引用变更:`a=1`时: ......
python 数据结构之:二叉树
# 二叉树 ## 1 二叉树: - 根节点 - 叶子节点: - 左叶子节点 - 右叶子节点 - 树的层级 - 树的调度 ## 2 二叉树的遍历: - 广度优先遍历:一层一层对节点进行遍历 - 尝试优先遍历: - 前序:根左右 - 中序:左根右 - 后序:左右根 ## 3 二叉树的遍历 ```pyth ......
python数据结构性能分析
# python数据结构性能分析 [toc] ## 1 案例 实例化一个空列表,然后将0-n范围的数据添加到列表中。(四种方式) ### 1.1 方式一 ```python def test1(num): num_list = [] for i in range(n) num_list += [i] ......
查看sql server数据库连接情况
SELECT * FROM [Master].[dbo].[SYSPROCESSES] WHERE [DBID] IN ( SELECT [DBID] FROM [Master].[dbo].[SYSDATABASES] WHERE NAME='你的数据库名称' ) 系统存储过程 SP_WHO 提供 ......
阿里云ECS服务器回滚服务器遇到的一些问题
由于阿里云的ECS服务器系统盘快被占满了,清理垃圾也不理想,幸好早一些时间对系统盘有快照备份.于是进行了快照回滚。回滚后网站无法访问,安装的宝塔也是,通过VNC远程登陆,发现服务器端口正常,阿里云安全组也没问题,想到可能是阿里云服务器本身的一些问题。于是联系了客服。 通过在服务器上执行命令 dhcl ......
C语言:数据结构之单链表(二)
上一篇随笔谈了谈单链表是什么东西,然后进行了初始化,这篇随笔就开始对其进行操作了,首先是增,删,改,查的增。 增,顾名思义就是要增加新的元素,单链表是链式的,那就要考虑怎么去加新元素,有三种,从头部添加,从尾部添加,从中间添加。先说说从尾部添加,这个比较好理解,直接在尾部放一个结点然后连起来就好了。 ......
bpf中的数据结构bpf_perf_event_data解析
1 前言 在系统性能运维监控的一些场景中我们往往需要对系统进行"采样"分析,最场景的例子就是perf top/record;在使用ebpf+perf event的情况下,ebpf中使用SEC("perf_event")这个名字的section来作为perf event的prog程序。 这类程序有着固 ......
sqlalchemy连接多个数据库
# sqlalchemy连接多个数据库_异步形式 ```py from fastapi import FastAPI from sqlalchemy import create_engine, Column, Integer, String from sqlalchemy.ext.asyncio i ......