数据 持久性 数据备份 分布式
自动化文件管理：使用Python创建匹配Excel数据的文本文件
介绍 在日常工作中，我们经常需要处理大量的数据和文件。尤其是在处理涉及多层嵌套目录和数据文件时，手动操作变得极其繁琐和耗时。为了提高效率，自动化这一过程显得尤为重要。 本博客介绍了一个实用的Python脚本，它能够自动读取Excel表格中的数据，并在相应的文件夹中创建文本文件。这个程序首先读取Exc ......
数据结构 —— 线性表、栈、队列
一、算法复杂度 【2011】设 n 是描述问题规模的非负整数，下面的程序片段时间复杂度是（） x = 2; while (x < n/2 ) x = 2*x; A O( log2(n) ) B O( n ) C O( nlog2(n) ) D O( n^2 ) 答案：Ａ 解析： x = 2^i = ......
Tapdata 亮相 2023 谷歌出海创业加速器展示日活动，实时数据点亮企业创新之路
在商海蓬勃拓展的时代，企业出海不仅是一次业务冒险，更是一场文明探险，探索未知，开创无限可能。无惧挑战，Tapdata 将持续为全球用户带来高质量的实时数据服务。 ......
【python爬虫课程设计】纵横中文网——分类数据爬取+数据可视化
一、选题的背景 通过新书榜和推荐榜来分析小说分类和人气之间的关系，让作者能加了解读者的需求,写出令读者感兴趣的题材来吸引读者。热门的小说分类是社会文化普遍认可的体现，了解和分析社会文化对于提升和改善社会文化起着重要作用。了解热门小说分类让新人作者选择题材时有份参考，以至于写出的小说分类偏门而鲜有人关 ......
数据结构算法---二叉排序树
二叉排序树（Binary Search Tree，BST），也称为二叉搜索树或二叉查找树，是一种经典的数据结构，它满足以下性质： 对于树中的每个节点，其左子树中的所有节点的值都小于该节点的值。 对于树中的每个节点，其右子树中的所有节点的值都大于该节点的值。 左子树和右子树也都是二叉排序树。 基于这些 ......
数据结构算法---折半查找
折半查找算法（Binary Search），也称为二分查找算法，是一种高效的查找算法，用于在有序数组中查找特定元素的位置。 工作原理：折半查找算法的工作原理基于对有序数组的划分。它将查找范围逐步缩小为两半，通过比较目标元素与中间位置元素的大小来确定目标元素可能存在的区域，然后在该区域继续进行查找。每 ......
数据结构算法---冒泡排序
冒泡排序（Bubble Sort）是一种简单的排序算法，它重复地遍历要排序的列表，比较相邻两个元素并按照大小交换位置，直到整个列表排序完成。这种排序算法得名于越小的元素会经由交换慢慢"浮"到列表的顶端。 下面是冒泡排序的基本步骤： 从列表的第一个元素开始，比较它与下一个元素的大小。 如果当前元素大于 ......
Oceanbase开源版 数据库恢复MySQL数据库的过程
Oceanbase开源版 数据库恢复MySQL数据库的过程 背景 想进行一下Oceanbase数据库的兼容性验证. 想着用app create 数据库的方式周期比较长. 所以我想着换一套 备份恢复的方式进行数据库的创建直接进行兼容性验证. 这里面就需要进行一下数据库的备份恢复了. 所以想总结一下. ......
数据结构 —— 哈希函数，散列表
名词解释 1.关键字 Key 一个序列，用{} 表示。例如，{10，2，23} 2.散列函数 / 哈希表 某种映射方式，例如， H(Key) = Key%10 注意，这里的 MOD 后面这个数字 10，实际含义是，留出 10 个 Slot。 3放在外存/主存 中的数组，其位置编号由 散列函数 决定。 ......
Eolink Apikit 快速发起 API 测试，一键生成测试数据
我们在测试接口时，通常需要先创建 API 文档，再根据 API 文档生成测试用例。未创建该接口文档，仅临时调试接口，Eolink Apikit 支持创建 API 快速测试页面，输入接口相关的信息即可进行快速测试。 Eolink Apikit 支持操作数据库，API 测试时，可以一键生成测试请求数据。 ......
数据归一化
数据归一化 目录数据归一化均值和方差Min-Max归一化Mean 归一化Z-Score标准化对比和比较为什么需要数据处理哪些模型需要进行特征缩放参考资料 均值和方差 \[\bar{x} = \sum_{i=1}^{n}{x_i} \]\[std(x)=\sqrt{\frac{ \sum_{i=1}^ ......
云数据库MySQL多人协同开发实践
随着云计算技术的快速发展，云数据库作为云计算的重要组成部分，为企业提供了高效、灵活和可靠的数据存储和管理服务。其中，MySQL作为一款流行的开源关系型数据库，在云数据库领域具有广泛的应用。多人协同开发是软件开发过程中的重要环节，本文将探讨云数据库MySQL多人协同开发的实践。 ......
大语言模型微调数据竞赛，冠军！
近日，天池FT-Data Ranker竞赛落下帷幕，天翼云智能边缘事业部AI团队（后称天翼云AI团队）凭借在大语言模型（LLM）训练数据增强方面的卓越研究，荣获大语言模型微调数据竞赛——7B模型赛道冠军。 ......
训练每个epoch初始加载数据时间长
参考 https://blog.csdn.net/a237072751/article/details/124599426 源代码： https://github.com/huggingface/pytorch-image-models/pull/140/commits/a7f570c9b72369 ......
数据结构与算法 第二章线性表（48课时课程笔记）Data Structure and Algorithms
2.1 线性表的类型定义 一个线性表是n个数据元素的有限序列。 （1）结构初始化 InitList(&L) 构造一个空的线性表L。 （2）销毁结构 DestroyList(&L) （3）引用型操作 （4） 修改型操作 一个算法举例： 假设有两个集合A和B分别用两个线性表LA和LB表示（即：线性表中的 ......
列表查询查询数据
当进行列表分页查询的时候，有些数据需要换一下格式或者数据库中不存在某些数据，所以在业务层需要进行一些处理。 这个例子是查询的数据里面有图片 我们需要给前端一个base64的数据。 我们需要对查询记录进行循环，根据ID来获取查询出来数据，然后调用某个方法进行数据处理，最后将数据进行设置。最后在对查询结 ......
Day03八大基本数据类型
//八大基本数据类型 //整数 int num1 = 10;//最常用!!!! byte num2 = 20; short num3 = 30; long num4= 30L;//Long类型后面加 L //小数:浮点数 float num5 = 50.1F; //fLoat类型要在数字后面加F d ......
如何给图数据库 NebulaGraph 新增一种数据类型，以 Binary 为例
数据库通常会内置支持常用的数据类型，但特征处理又要用到 Embedding、Binary 类型，那么，如何在已有的数据类型中增加新的数据类型呢？ ......
数据库版本历史的总结-信创部分
数据库版本历史的总结-信创部分 背景 总结了开源和国外商业数据库的非常简单的历史. 发现想总结一下国产的数据库非常困难. 云和恩墨的数据库排行榜上面, 国产数据库有 接近300种 我感觉我这边几乎是无法进行学习和总结的. 所以只能够将几种比较常见的数据库进行一些总结. 人大金仓 人大金仓应该是国内第 ......
elasticsearch数据迁移工具elasticdump安装
1、安装node #下载安装包 wget https://nodejs.org/dist/v16.14.0/node-v16.14.0-linux-x64.tar.xztar axf node-v16.14.0-linux-x64.tar.xz -C /usr/local/mv /usr/local ......
Orecal数据库还原
tags: - Orecal - 数据库 author: zhanglei data: 2023-11-15 aliases: - 宏景数据库Orecal还原记录 以下所有操作均基于刚安装的orecal11g数据库, 本文中的所有命令都是在具有管理员权限的cmd中执行 使用dba账号登录 sqlpl ......
zabbix分布式proxy
1.为什么要学zabbix-proxy https://www.zabbix.com/documentation/4.0/zh/manual/distributed_monitoring/proxies zabbix除了前面于超老师讲解的 zabbix-server / zabbix-agent模式 ......
datax web采集oracle数据库，能连接无法使用的问题
链接oracle数据库时，要注意自己数据的连接参数，下边代码中的高亮部分作为参考 { "job": { "setting": { "speed": { "channel": 3, "byte": 1048576 }, "errorLimit": { "record": 0, "percentage" ......
验证数据输入的合法性（二）
简介 前面写了： 验证数据输入的合法性（一） - wzwyc - 博客园 https://www.cnblogs.com/wzwyc/p/17894900.html 一般验证失败的时候，想着要执行某些操作。 例如，如果验证输入字段不正确，则把光标切换到对应的输入框等等。 这样的话，之前的方式就有一点 ......
数据库启动
1、 登录oracle su - root 2、查看监听状态 lsnrctl status 监听启动： lsnrctl start 监听停止：lsnrctl stop 3、如果监听启动了，无实例 需要启动实例 先 su - oracle 再 sqlplus / as sysdba 再 startup ......
机器学习项目精选 第一期：超完整数据科学资料合集
大噶吼，不说废话，分享一波我最近看过并觉得非常硬核的资源，包括Python、机器学习、深度学习、大模型等等。 1、超完整数据科学资料合集 地址：https://github.com/krishnaik06/The-Grand-Complete-Data-Science-Materials Pytho ......
火山引擎DataLeap：助你实现从数据研发1.0到数据研发3.0的跨越
近日，火山引擎开发者社区 Meetup 第 12 期暨超话数据专场在深圳举办，本次活动主题为“数智化转型背景下的火山引擎大数据技术揭秘 ”，来自 DataLeap 的产品经理黄虹带来了 DataOps 相关实践的分享，以下内容经小编整理编辑后发布。 ......
C#的相关知识，封装一个泛型的数据库访问查询方法
public T Get<T>(int id) where T : BaseModel { string ConnectionString = "Data Source=DESKTOP-63QE7M1; Database=CustomerDB; User ID=sa; Password=sa123; ......