mysql知识点 知识 数据
0103 JAVA的前置知识
JAVA三大版本 java是一个跨平台的语言 JAVASE 标准版，基础，桌面程序和控制台开发（核心且基本） javaEE 企业版，比如web和服务器开发 JDK、JRE、JVM ## JDK java开发工具 JRE java运行环境（java虚拟机、库...） JVM j ......
数据丢失不用怕，火山引擎 DataLeap 提供排查解决方案
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 当一家公司的日均处理的数据流量在 PB 级别时，巨大的任务量和数据量会对消息队列（MQ）dump 的稳定性和准确定带来极大的挑战。 针对这一问题，火山引擎数智平台推出的大数据研发治理套件 DataLeap，可以为企 ......
什么是选择性回归测试-软件测试知识
降低回归测试成本的一个办法就是从回归测试转变为选择性回归测试。所谓选择性回归测试，就是在因为代码改动需要执行回归测试时，只选择回归测试用例集合中可能受到本次改动影响的子集执行。 选择性回归测试的可行性在于：一次代码的改动不太会对所有回归测试用例产生影响。另外，根据迭代开发的要求，我们通常倾向于将较大 ......
分析微信好友数据，可以可视化好友男女比例分布，可视化省份来源，可视化签名的情感强度值
一、分析数据可视化好友男女分布比例 1 plt.rcParams['font.sans-serif']=['SimHei'] 2 #用来正常显示中文标签 3 plt.rcParams['axes.unicode_minus']=False 4 5 # 1.读取csv文件，把性别信息读取出来 6 de ......
echarts柱状图表数据过多显示滚动条效果
1.背景描述： 图表数据过多，需要展示滚动条方便查看剩余数据 2.效果展示： 关于截图中左下角伪类样式：<div class="chart-container"> <div class="chart" id="myChart"></div> <div class="chart-footer"></d ......
一键获取测试脚本，轻松验证“TSBS 时序数据库性能基准测试报告”
基于 TDengine 3.0 TSBS 基准测试报告，此前我们已经输出了系列文——为什么选择 TSBS 作为测试平台、写入性能对比、查询性能对比，分别就 TSBS 及测试环境、写入性能及开销、查询性能及开销进行了相关解读。在本篇文章中，我们将为想要验证本报告测试结果的小伙伴，分享进行报告测试复现的 ......
OSM（OpenStreetMap）全球路网数据下载方式介绍
本文对OpenStreetMap（OSM）网页与各类OSM数据的多种下载方式加以详细介绍，并对不同数据下载方式加以对比~ ......
COMP5310 分析数据
COMP5310 Project Stage 2ASummarise and Analyse the DataDue: 11:59pm on 6th of April 2023 (Week 7)Value: 10% of the unit This stage is usually done wit ......
Qt音视频开发32-qmedia内核回调拿图片数据
一、前言 使用qmediaplayer来打开视频并播放，默认首选会采用QVideoWidget控件来展示，优点是不用自己来绘制，一切交给了QVideoWidget控件，这样可以做到极低的CPU占用，缺点也明显，就是无法拿到每一帧的图片，很多时候我们还需要主动拿到每一帧的图片来运算做人工智能，通过不断 ......
Mysql之SQL语句基础1
一、基本概念 ——后续的内容将会记录作者在计科学习内容 DB(数据库)：存储数据的仓库，数据是有组织进行存储 DBMS（数据库管理系统）：操纵和管理数据库的大型软件 SQL：操纵关系数据库的编程语言，是一套标准 有Mysql,Oracle,SQLSever,PostgreSQl RDBMS(关系型数 ......
数据库系统的三层架构
1、传统的数据库访问程序： （1）数据库访问和数据处理放在一起实现 （2）用户界面层直接调用数据访问实现 （3）整个系统功能放在同一项目中实现 2、三层架构模式 三层架构： （1）界面层（UI） 为用户提供一种交互式操作界面。 作用： 根据用户的具体需求，为每个功能模块部署输入控件、操作控件和输出控 ......
mysql Error:index column size too large. the maximum column size is 767 bytes
问题现象 mysql在执行脚本create创建表时，提示以下错误： index column size too large. the maximum column size is 767 bytes 异常原因 INNODB 引擎，UTF-8，主键字符串 默认最大 767，需要修改 解决方案 对数据库 ......
《很多反相吧友的知识体系，既没深度，也没广度》 回复
《很多反相吧友的知识体系，既没深度，也没广度》 https://tieba.baidu.com/p/8325085511 @真Djh801 在 36 楼 回复 里 说 “ 单叶红枫: 回复 Ehg2000：对，你说对了。迈－实验实际就只是一个验证地球上光速各向相同性的实验。而不能作为测量地球绕太阳公 ......
Redis数据库高可用
一、Redis高可用 在web服务器中，高可用是指服务器可以正常访问的时问，衡量的标准是在多长时间内可以提供正常服务(99.9%、99.99% 99.998等等)。但是在Redis语境中，高可用的含义似乎要宽泛一些，除了保证提供正常服务（如主从分离、快速容灾技术)，还需要考虑数据容量的扩展、数据安全 ......
CloudCanal 落地 DB2 数据迁移同步功能
简述 Db2 是一款具有悠久历史的关系型数据库，由 IBM 公司开发和维护，广泛应用于金融级业务场景。 CloudCanal 近期提供了 Db2 为源端的数据迁移同步 功能，用户可以便利地将 Db2 中数据实时同步到其他数据库，实现数据更广泛、更实时的应用。 功能介绍 目标数据库和能力 | 目标端数 ......
mysql的查询--子查询，order by，group by，having
一、 1.多表查询 格式1： select 字段列表 from 表1 join 表2 on 表1.字段1=表2.字段1 where 查询条件 格式2： select 字段列表 from 表1 join 表2 on 表1.字段1=表2.字段1 join 表3 on 表2.字段2=表3.字段2 wher ......
接口自动化之测试数据动态生成并替换
一、测试数据 1. 随机库random 查看内置random方法，该方法自行学习，不再介绍。 show print([name for name in dir(random) if callable(getattr(random, name))]) ['Random', 'SystemRandom' ......
RestSharp组件Get请求带body的时候返回数据丢失问题
###postman的复制代码默认就是RestSharp。方便也好用，但是使用get请求并且带Body的时候要注意，返回的数据竟然会有丢失 ####解决办法： string RequestByGet(string index, string action, object paramter) { va ......
php站点导入大mysql文件（linux系统）
问题描述：站点数据多，mysql导出后大于1G，使用phpmyadmin，导入一半报错，白白浪费等待时间，使用navicat 导入，执行时间过长提示错误 解决思路：1.拆分mysql文件，分批次导入，亲测还是比较花费时间，小于100M可以尝试，大于100M不推荐 2.推荐使用进入linux系统导入m ......
azure databricks使用external hive metastore跨工作区共享元数据
为什么要使用external hive metastore可以跨workspace的共享元数据，不用每次创建workspace的时候都重复的把元数据重建一次。更好的元数据集中管理，Create once, use everywhere。为灾难恢复(DR)做好为准备，并降低复杂性。（PAAS一样会存在 ......
playwright 使用日常知识点积累--不定期补充
简介： Playwright是由微软公司2020年初发布的新一代自动化测试工具，相较于目前最常用的Selenium，它仅用一个API即可自动执行Chromium、Firefox、WebKit等主流浏览器自动化操作，并同时支持以无头模式、有头模式运行。官网地址：Playwright | Playwri ......
千万级数据量表如何快速添加索引/字段
添加字段语句 ALTER TABLE id_t ADD title(255) DEFAULT '' COMMENT '标题' AFTER id; 问题 线上的一张表如果数据量很大千万级，执行加字段加索隐操作就会锁表，这个过程可能需要很长时间甚至导致服务崩溃，那么这样操作就很有风险了。 解决一 1. ......
JSON多层嵌套复杂结构数据扁平化处理转为行列数据
背景 公司的中台产品，需要对外部API接口返回的JSON数据进行采集入湖，有时候外部API接口返回的JSON数据层级嵌套比较深，举个栗子: 上述的JSON数据中，最外层为请求返回对象，data里面包含返回的业务数据，业务数据按照学校 / 班级 / 学生进行嵌套 在数据入湖时，需要按照最内层的学生视角 ......
mysql，pg连接重试参数配置
PostgreSQL JDBC URL连接重试的示例： String dbUrl = "jdbc:postgresql://localhost:5432/mydb?autoReconnect=true&maxReconnects=5&connectTimeout=5000"; Connection ......
JDBC和MyBatis数据库访问技术
传统的Java Web应用开发时，一般使用JDBC进行数据库连接和操作SQL命令。但是，随着互联网技术的飞速发展，使用JDBC已经满足不了项目的开发需求，出现了Hibernate、MyBatis等一些优秀的持久层框架，它们结合了JDBC的优点，使得开发简捷、规范、快速，系统易维护、易扩展。 1.1 ......
技术贴，必看！谷歌云新的 BigQuery 版本：数据云的灵活性和可预测性
在数据云和 AI 峰会上，谷歌宣布推出具有三个定价层级的 BigQuery 版本——标准版、企业版和企业增强版——供您选择，并能够根据您的个人工作负载进行混合搭配以获得合适的性价比需要。 ......
数据库基础知识
一、DB/DBSM/DBS 1. 数据库DataBase(DB) 是信息的集合；或是由DBSM管理的数据的集合 2. 数据库管理系统Database Management System(DBSM) 是一种操纵和管理DB的大型软件，通常用于建立、使用、维护DB 3. 数据库系统Data Base Sy ......
数据链路层
封装成帧： MAC没有帧定界，因为他们有时间间隔地发送帧，不需要区别。 差错检测： 法一：奇偶校验：主机一个主机二规定0，1的个数为奇数或者偶数，如果有误，奇数偶数发生变化，那么就知道出现了误码。但如果正好出现2个误码，就没有改变奇偶性，则无法辨别是否出现误码。 法二：循环冗余校验：发送方用发送数据 ......
河北稳控科技便携式钻孔测斜仪数据采集仪的使用方法
河北稳控科技便携式钻孔测斜仪数据采集仪的使用方法 开机关机手动开机开机前，请将测斜探头连接到采集仪传感器接口上。禁止开机后带电插拔探头。按下电源开关按钮，电源指示灯亮（按钮外环），主设备通电，屏幕启动，操作系统启动完成后，若设置了测斜程序自动启动则进入测斜仪程序主界面，否则进入操作系统桌面。 自动开 ......
在 MySQL 数据库中删除重复记录的步骤
在 MySQL 数据库中删除重复记录的步骤 当我们在处理数据库中的数据时，有时候会出现重复记录的情况，这些重复记录会影响数据的正确性，需要将其删除。下面是在 MySQL 数据库中删除重复记录的步骤： 1. 查找重复记录 首先，我们需要找到数据库表中的重复记录。可以使用以下 SQL 语句查询表中所有的 ......