数据库 数据mysql平台
一文搞定K8S监控告警平台选型
公众号「架构成长指南」，专注于生产实践、云原生、分布式系统、大数据技术分享 前言 最近在搞K8S的监控告警平台选型，对比了目前比较流行两款开源平台kube-prometheus、夜莺，也踩了一些坑分享一下 kube-prometheus 项目地址：https://github.com/prometh ......
数据库系列：业内主流MySQL数据中间件梳理
数据库系列：MySQL慢查询分析和性能优化 数据库系列：MySQL索引优化总结（综合版） 数据库系列：高并发下的数据字段变更 数据库系列：覆盖索引和规避回表 数据库系列：数据库高可用及无损扩容 数据库系列：使用高区分度索引列提升性能 数据库系列：前缀索引和索引长度的取舍 数据库系列：MySQL引擎M ......
python 数据结构与算法知识图
1.算法思想：递归、分治（归并排序、二分查找、快速排序）、贪心（贪心策略排序+当前最优）、动态规划（最优子结构+递推式）、回溯（解空间：排列树+子集树、深度搜索+剪枝）、分支限界（解空间：排列树+子集树、广度搜索+剪枝）） 2.排序算法：（low：冒泡、插入、选择；mid：快排、归并、堆排，其他：桶 ......
数据可视化爆发式发展背后原因探析
现在，数据可视化作为一种强大的工具逐渐走进人们的视野，其爆发式发展背后涌现了多种原因值得探讨，今天我就以可视化从业者的视角来简单谈谈数据可视化爆发式发展背后的原因。 首先是互联网和传感技术的普及，令大量数据源不断涌现，例如IOT设备、传感器等。这使得数据规模巨大且类型多样化，需要更好的方式来处理、理 ......
MySQL 存储过程
8.1.3 mysql流程控制语句 mysql 流程控制语句和局部变量一样， 只能放在存储过程，存储函数和触发器中 1. 顺序语句 begin....end 语句块， 语句块中可以包含一组语句，语句可以嵌套 begin 语句块......; end; delimiter 命令 delimiter 结 ......
js 处理对象数组 + map 筛选出指定字段数据 + filter过滤重复数据/指定数据
const res = [{ id: 1, name: 'zhangsan', age: 16, gender: 0 }, { id: 1, name: 'zhangsan', age: 16, gender: 0 }, { id: 2, name: 'lisi', age: 20, gender: ......
测试 doris stream load 数据流
root@tc-doris-fe-1:~# vim data.csv root@tc-doris-fe-1:~# curl --location-trusted -u root -T ./data.csv -H "label:label_example" -H "column_separator:, ......
【反汇编3】基本数据类型的表现形式
参考书籍，《C++反汇编与逆向分析技术揭秘》。 这次主要研究各种数据在计算机里怎么存的，又要涉及补码、科学计数法等基础内容。这些课程计算机专业的都会学，但作为程序员未必有直观的体验，比如java或python程序员，他们不用自己管理内存，也就根本不会接触到这类内容，例如int i = -1; 对于他 ......
Redis和Mysql如何保证数据一致性？
1、redis作用： 用于读数据库操作的缓存层，可以减少数据库的io，还能提升数据的io性能； 无法保证数据的acid 2、实现一致性方案： 1、先更新数据库，在更新缓存 2、先删除缓存再更新数据库 3、最终一致性方案： （1）基于roketMQ可靠通信 （2）通过canal组件采集mysql bi ......
MongoDB中如何优雅地删除大量数据
删除大量数据，无论是在哪种数据库中，都是一个普遍性的需求。 除了正常的业务需求，我们也需要通过这种方式来为数据库“瘦身”。 为什么要“瘦身”呢？ 表的数据量到达一定量级后，数据量越大，表的查询性能相对也会越差。 毕竟数据量越大，B+树的层级会越高，需要的IO也会越多。 表的数据有冷热之分，将很多无用 ......
MySQL中TEXT和BLOB区别
在MySQL数据库中，TEXT 和 BLOB 是用于存储字符串数据的两种不同的数据类型。它们都可以存储大量的数据，但是主要区别在于它们的存储和检索方式以及如何处理数据。 1. TEXT 类型 TEXT 是用于存储非二进制字符串的数据类型。 它是用来存储可变长度的字符串，适合存储大量的文本数据。 TE ......
数据隐私治理所面临的四大挑战
近年来，隐私功能越来越受到重视，在重大立法改革和加强监管审查的支持下，各组织通过部署和扩展专门的隐私计划和职能来做出回应。隐私不再是信息安全、法律或道德的一个子集，而是一门专业学科，需要全球专门的隐私专业人士投入时间和精力。 ......
Databend 源码阅读： Meta-service 数据结构
作者：张炎泼（XP） Databend Labs 成员，Databend 分布式研发负责人 https://github.com/drmingdrmer 引言 Databend 是一款开源的云原生数据库，采用 Rust 语言开发，专为云原生数据仓库的需求而设计。 面向云架构：Databend 是完全 ......
php+dm达梦数据库简单连接
1.安装php 准备php环境，下载phpstudy，自带php7.3.4nts，安装好以后如果系统环境变量没有配置要配置一下php的的系统环境变量 2.安装达梦数据库 win64+dmv8 在达梦数据库的文件夹中选择合适版本的扩展文件复制到 达梦的各版本扩展文件所在位置： php的扩展文件中 ph ......
linux：date <=> timestamp：转换；10进制 <=> 16进制；读取二进制原始数据hexdump
进制转换： 使用linux的 coreutils 的 printf 函数 ： printf "%d" 0xf23b9 printf "%x" 12345 date timestamp 转换： date +"%F_%T" -d @时间戳的长整型值 date +"%s" [now] tail\head ......
mysql数据库字符集utf8mb4和排序规则utf8mb4_bin
一、存储字符集 utf8 和 utf8mb41、utf8utf8 是 Mysql 中的一种字符集，只支持最长三个字节的 UTF-8 字符，也就是 Unicode 中的基本多文本平面2、utf8mb4要在 Mysql 中保存 4 字节长度的 UTF-8 字符，需要使用 utf8mb4 字符集，但只有 ......
李强 分布式计算、云计算与大数据 作者:林伟伟 著出版社:机械工业出版社出版时间:2015年11月
前 言背景分布式计算从20世纪六七十年代发展到现在，一直是计算机科学技术的理论与应用的热点问题，特别是*近几年，随着互联网、移动互联网、社交网络应用的发展，急需分布式计算的新技术——云计算、大数据，以满足和实现新时代计算机的应用需求。云计算、大数据等新技术本质上是分布式计算的发展和延伸，现有的书籍一 ......
mysql-----------------------------------------------testdata
6种SQL数据去重技巧大揭秘！ 原创 测试开发成长录 测试开发成长录 2023-12-17 14:08 发表于广东 你终于来了，戳蓝一键关注 测试开发成长录不负时光，遇见每一次成长 在上一期中，我们学习了SQL基本语法｜查询语句的使用方法和技巧。接下来，我们将重点学习SQL中去重数据的6种方法。 当 ......
MySQL运维12-Mycat分库分表之按天分片
一、按天分片 指定一个时间周期，将数据写入一个数据节点中，例如：第1-10天的数据，写入到第一个数据节点中，第2-20天的数据写入到第二个节点中，第3-30天的数据节点写入到第三个数据节点中。 说明1：按天分片要配置一个起始日期，一个结束日期，一个分片间隔时间三个参数 说明2：按天分片允许当前时间超 ......
实时湖仓技术选型，企业如何借实时湖仓赢在“数据驱动”时代
在之前三期的实时湖仓系列文章中，我们从业务侧、产品侧、应用侧等几个方向，为大家介绍了实时湖仓方方面面的内容，包括实时湖仓对于企业数字化布局的重要性以及如何进行实时湖仓的落地实践等。 本文将从纯技术的角度，为大家解析实时湖仓的存储原理以及生态选型，为企业建设实时湖仓给出技术方面的参考意见。 实时湖仓能 ......
sqlserver bak还原时提示文件过大，系统盘符空间较小（数据库日志清理）
USE [master] GO ALTER DATABASE QTHQ SET RECOVERY SIMPLE WITH NO_WAIT GO ALTER DATABASE QTHQ SET RECOVERY SIMPLE GO USE QTHQ GO DBCC SHRINKFILE (N'QTHQ ......
羚通视频智能分析平台森林防火预警 烟火检测算法识别
羚通视频智能分析平台是一项利用先进的人工智能技术进行实时监控的创新解决方案。该平台专门设计出用于森林防火的烟火识别预警系统，旨在提高森林防火的效率和准确性。 该系统的核心是烟火识别算法，它基于深度学习技术。通过对大量烟火图像数据的学习和训练，该算法形成了一套能够自动识别视频中的烟火目标并对它们进行分 ......
mysql union all、union、join
union和join是需要联合多张表时常见的关联词，join:两张表做交连后里面条件相同的部分记录产生一个记录集，union:union是产生的两个记录集(字段要一样的)并在一起，成为一个新的记录集 。二者区别：join和union的主要区别就一条，join是将拼接内容变成一行（左右拼接），根据共同 ......
LANDSAT LC08 C02 T1_L2 metadata dictory 元数据字典
LANDSAT/LC08/C02/T1_L2 metadata dictory 元数据字典2023年12月20日星期三 by xrkvar image=ee.ImageCollection('LANDSAT/LC08/C02/T1_L2').first();print("image",image); ......
MySQL server is running with the --super-read-only option的解决办法
原因 数据库是只读模式 解决办法 修改为读写模式 mysql -uroot -p你的密码 进入mysql select @@read_only; set global read_only=0; # 顺便设置可远程连接（不需要可跳到flush privileges） use mysql; update ......
前端体验优化（4）——数据
数据包括性能指标、监控数据以及通过埋点得到的业务数据，而数据分析是体验优化的最后一环。 通过数据来量化当前的工作，从而证明工作是否高效，优化是否有效等问题。 量化的工作包括代码质量和业务数据。 一、代码质量 代码质量的数据来源于思维导图中的性能指标和监控体系，包括 SLA、慢响应、前端错误、白屏和首 ......
数据库
Oracle 序列 新建 create sequence '序列名称'; -- 创建序列名称 CREATE SEQUENCE 'sequence_name' -- 递增`n`的序列（默认：`1`） -- 如果`n`是正数就递增 -- 如果`n`是负数就递减 [INCREMENT BY 'n'] -- ......
羚通视频智能分析平台危险区域行人入侵算法识别检测
羚通视频智能分析平台的危险区域行人入侵检测算法是一种基于计算机视觉和深度学习等前沿技术的应用，它通过实时处理和分析视频图像，对行人目标进行准确识别和跟踪。该算法利用先进的计算机视觉技术，能够自动识别行人特征，如头部、身体轮廓等，并根据这些特征进行分类和预测，从而为行人入侵检测提供有力的决策支持。 当 ......
不容忽视，电力行业挑选跨网数据交换平台的五大准则！
为了加强数据传输控制和安全防护。电力企业一般都会采用防火墙、网闸等方式，将网络隔离为办公网、生产网等隔离网域。 生产网：主要负责电力生产过程中的控制和监控，包括发电、输电、配电等环节。生产网通常与电力生产设备直接相连，对实时性、可靠性和安全性要求非常高。生产网中的数据传输通常是单向的，以确保数据的安 ......