数据处理 客户端 客户 服务器
python 批量删除 redis 大量数据
#!/usr/bin/env python # Scan and delete keys in Redis. # Author: cdfive from redis import Redis import time def RedisScanAndDelete(host, port, passwor ......
ubuntu搭建python3.10.7（服务器第一步）
一 安装python 更新Ubuntu软件源和依赖（建议操作） 1-sudo apt update 2-sudo apt install build-essential zlib1g-dev libncurses5-dev libgdbm-dev libnss3-dev libssl-dev lib ......
phi-1：高质量小数据小模型逆袭大模型
人工智能的三个核心要素是算力、算法和数据，这是大多数人在初识人工智能时都会接触到的一个观点。不过，在深入阐述该观点时，很多材料都倾向于解释数据「大」的一面，毕竟当前的大模型一直在由不断增加的「大数据」来推动，而且这条路似乎还没有走到极限。 不过，随着数据获取难度增加以及算力增长出现瓶颈，单纯追求「大 ......
芯片等高科技制造业 如何实现安全的跨网数据传输？
芯片是信息产业的基础，一直以来占据全球半导体产品超过80%的销售额，在计算机、家用电器、数码电子、自动化、电气、通信、交通、医疗、航空航天等几乎所有的电子设备领域中都有使用。 所以，对于芯片这种高科技制造业来说，数据的安全性尤为重要。大部分芯片企业都会通过网络隔离的方式来保护内部的核心数据，比如使用 ......
Linux（centos7.9）搭建mysql服务器
以下服务器信息为该文档安装mysql服务器环境 服务器信息：CentOS7 内核版本：3.10.0-1160.el7.x86_64 一.安装mysql服务器 1.检查是否安装过mysql数据库，无输出即为没安装。 rpm -qa| grep mysql 2.下载mysql的rpm源 wget htt ......
上游接口提供多个数据，Foreach控制器遍历全部
上游接口提供多个数据，Foreach控制器遍历全部 一．使用场景 获取用户列表数据，全部登录 二．Foreach使用方法 1.编写获取用户接口脚本 Json提取器，提取所有用户名。因为会被登录接口调用，所以需要定义变量名称 2.编写用户登录接口脚本 线程-添加-逻辑控制器-foreach控制器 输入 ......
3 分钟为英语学习神器 Anki 部署一个专属同步服务器
> 原文链接：[https://icloudnative.io/posts/anki-sync-server/](https://icloudnative.io/posts/anki-sync-server/) ## Anki 介绍 Anki 是一个辅助记忆软件，其本质是一个卡片排序工具--**即依 ......
关于微服务-Nacos
下面是使用 Nacos 作为注册中心和配置中心的简单示例： 引入依赖：在项目的 pom.xml 文件中添加 spring-cloud-starter-alibaba-nacos-discovery 和 spring-cloud-starter-alibaba-nacos-config 依赖。 配置文 ......
这问题巧了，SpringMVC 不同参数处理机制引发的思考
这个问题非常有趣，不是SpringMVC 的问题，是实际开发中混合使用了两种请求方式暴露出来的。 ## 问题场景 功能模块中，提供两个 Http 服务。一个是列表查询（application/json 请求），一个是列表导出（表单请求）。运行环境发现个问题：MVC model 新添加的属性，类似的 ......
10个图像处理的Python库
在这篇文章中，我们将整理计算机视觉项目中常用的Python库，如果你想进入计算机视觉领域，可以先了解下本文介绍的库，这会对你的工作很有帮助。 1、PIL/Pillow Pillow是一个通用且用户友好的Python库，提供了丰富的函数集和对各种图像格式的支持，使其成为开发人员在其项目中处理图像的必要 ......
SQL Server复制表结构和数据
1、复制表结构，当新表名称未经在，数据库会创建一个新表 select * into 新表名称 from 旧表名称 where 1=2; 2、复制表数据，当新表名称已经在 insert into 新表 select * from 旧表 ; ......
javafx如何使用scenebuilder创建表格, 并向其添加数据
1. 新建JavaFX项目 , 并用scenebuilder 打开项目 fxml文件 . 将此部件拉到界面中, 并设置好. 1. 表格的fx:id 2. 设置好列名 3. 设置好每个列的 fx:id 2. 点击这里 如果你们表格和列都设置好了 fx:id , 这里是有代码 直接复制, 替换掉我们原来 ......
jmeter中使用jdbc插件写sql构造测试数据
jmeter中使用jdbc插件写sql构造测试数据 一．创建jdbc连接配置 1.项目的数据库配置文件中查看连接配置 2.配置元件-jdbc connection configuration 填写配置信息 二．创建goods数据 1.添加goods_id计数器 起始值：查看数据库 2.添加jdbc ......
关于微服务-目录结构
biz 目录通常是指在软件项目中用于存放业务逻辑代码的目录，"biz" 是 "business" 的缩写。该目录下的代码主要负责实现特定领域或业务的核心逻辑和功能。 在大多数常见的项目结构中，biz 目录通常位于项目根目录下，与其他常见的目录（如 src、lib、app 等）同级。以下是一些可能存在 ......
Java跟数据库连接有问题怎么办？
Java与数据库连接出现问题时，可以尝试以下几个步骤来解决问题： 1、检查数据库驱动程序：确保使用的数据库驱动程序与数据库版本兼容。检查并确保已正确导入所需的数据库驱动程序的jar文件。 2、验证数据库连接参数：确保提供了正确的数据库连接参数，包括数据库URL、用户名和密码等。验证这些参数是否正确， ......
基于DSP的设备振动信号的采集和处理模块研发总结
前记 在能源领域，由于很多地方都是无人值守，设备故障检测是一个必须面对的问题。笔者通过最近几个行业案例了解到，由于很多设备发生故障时候会产生特定频谱的声音，所以该行业对振动监测的需求特别强烈，由于涉及到个性化的方案定制和处理，市面上此类的解决方案特别少。笔者希望把最近的研发成果梳理一下，形成标准化的 ......
docker compose部署mysql数据库
## 1. 想要达成的目标 通过docker compose 来部署 mysql，并实现一些列需求 > - 在mysql容器初始化时设置字符类型 > - 设置mysql容器的时区为中国时区 > - 设置mysql root密码，采用.env传入参数 > - 初始化时创建一个数据库 > - 初始化时创 ......
通过接口构造测试数据
通过接口构造测试数据 一.使用计数器 1.添加和设置计数器 点击配置元件-计数器 Starting value：起始值 递增：1 Maximum value：最大值 引用名称：c_user_id 2.计数器变量引用 ${c_user_id} 线程数：10 循环：1000 二．上传至jmeter服务器 ......
爬虫：爬到的数据存到mysql中、爬虫和下载中间件、加代理，cookie、header、加入selenium、集成selenium、==去重规则源码分析(布隆过滤器)、布隆过滤器、scrapy-redis实现分布式爬虫
[toc] ### 爬到的数据存到mysql中 ```python class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root' ......
爬虫：scrapy架构介绍、scrapy解析数据、settings相关配置，提高爬取效率、持久化方案、全站爬取cnblogs文章
[toc] ### scrapy架构介绍  ```python # 引擎(EGINE) 引擎负责控制系统所 ......
分布式任务elasticjob整合springboot本地多服务启动（附源码）
Elastic-Job是一个分布式调度的解决方案，由当当网开源，它由两个相互独立的子项目Elastic-Job-Lite和ElasticJob-Cloud组成，使用Elastic-Job可以快速实现分布式任务调度。 Elastic-Job的github地址：https://github.com/el ......
clickhouse数据库里面，类型 datetime, datetime64, datetime(3), datetime64(3)
问：clickhouse数据库里面，类型 datetime, datetime64, datetime(3), datetime64(3) 分别是什么意思，举例详细说明 答： 在 ClickHouse 数据库中，有以下几种日期时间类型： DateTime：这是一个 8 字节的整数类型，表示从公元 1 ......
Ubuntu将jar包部署为服务运行
1、进入/etc/systemd/system目录cd /etc/systemd/system 之前没有在该目录放置时有时候汇报格式不正确，需要在头部加点东西，这边省事规范，我们就放在这个目录下就好了。 2、新建service文件sudo vim 服务名称.service内容大致如下： [Unit] ......
Taurus .Net Core 微服务开源框架：Admin 插件【2】 - 系统环境信息管理
继上篇：Taurus .Net Core 微服务开源框架：Admin 插件【1】 - 微服务节点管理，本篇继续介绍下一个内容：系统环境信息管理...... ......
go：接口、并发与协程、信道、缓冲信道、mutex、异常处理
[toc] ### 接口 ```go 1.实现多个接口 2.接口嵌套 3.接口零值 package main import "fmt" // 接口 //1 实现多个接口 具体类型可以赋值给多种接口类型 //type Animal interface { // run() //} // //type ......
Fiddler修改返回数据
## 断点修改 ### 命令行方式断点拦截制定请求 影响范围：仅影响指定URL操作时，会被fiddler拦截 使用该方法，首先我们需要明确知道，我们需要构造断点的请求URL。然后在fiddler下方的命令行中，输入：bpu+空格+URL，然后回车，当我们操作该接口对应的功能，被fiddler抓包识别 ......
信息安全服务
1. 漏洞扫描设备的主要功能 通过专业的自动化漏洞检测工具，定期对网络设备、操作系统、中间件、应用系统、数据库、网络安全设备等实施漏洞检测，输出:《漏洞扫描检测报告》《弱口令检测报告》 《渗透测试检测报告》《系统后门入侵事件分析报告》，服务人员均具备CISP注册信息安全服务资质。 2. 安全服务全需 ......
微信海量数据查询如何从1000ms降到100ms？ 转载
微信的多维指标监控平台，具备自定义维度、指标的监控能力，主要服务于用户自定义监控。作为框架级监控的补充，它承载着聚合前 45亿/min、4万亿/天的数据量。当前，针对数据层的查询请求也达到了峰值 40万/min，3亿/天。较大的查询请求使得数据查询遇到了性能瓶颈：查询平均耗时 > 1000ms，失败 ......
自然语言处理 Paddle NLP - 文本翻译技术及应用-理论
- 什么是机器翻译 - 机器翻译质量的自动评价 - 从统计机器翻译到神经网络机器翻译 - 多语言/多领域/多模态的翻译应用 - 神经网络机器翻译面临的挑战 视频：https://aistudio.baidu.com/aistudio/course/introduce/24177?sharedLess ......