工具 数据mysql shell
12 SQL语句的补充----复制表数据
复制数据表 1、复制数据 1.1创建一个字段和源表不同的虚拟表 create temporary table t_yy( id int(16), name varchar(25), sex varchar(25) ); 源表与目标字段不一致，复制数据需要指定字段 insert into t_yy(i ......
数据分析1 数据仓库
数据仓库 就是将所有业务数据经汇总处理，构成数据仓库 1记录全部事实 2部分维度与数据的整理（数据集市-DM） 3数据库VS仓库 数据仓库是根据主题建立的 数据库面向应用（OLTP） 仓库针对分析(OLAP) 数据库组织规范，仓库可能冗余，相对变化大，数据量大 数据获取手段-监测与抓取 python ......
0108 数据类型
数据类型 代码 public class VariableDemol3 { public static void main(String[] args){ //byte //-128 到 +127 byte b = 10; System.out.println(b); //short short s ......
SHELL创建钉钉群接入机器人推送报警信息（text消息类型）
步骤一：获取自定义机器人Webhook 选择需要添加机器人的群聊，然后依次单击群设置 > 智能群助手。 在机器人管理页面选择自定义机器人，输入机器人名字并选择要发送消息的群，同时可以为机器人设置机器人头像。 完成必要的安全设置，勾选我已阅读并同意《自定义机器人服务及免责条款》，然后单击完成。 完成安 ......
数据丢失不用怕，火山引擎 DataLeap 提供排查解决方案
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 当一家公司的日均处理的数据流量在 PB 级别时，巨大的任务量和数据量会对消息队列（MQ）dump 的稳定性和准确定带来极大的挑战。 针对这一问题，火山引擎数智平台推出的大数据研发治理套件 DataLeap，可以为企 ......
revit专用卸载工具，完全彻底卸载删除干净revit各种残留注册表和文件的方法和步骤。
revit专用卸载工具，完全彻底卸载删除干净revit各种残留注册表和文件的方法和步骤。如何卸载revit呢？有很多同学想把revit卸载后重新安装，但是发现revit安装到一半就失败了或者显示revit已安装或者安装未完成，大多数情况下其实是revit没有被卸载干净。还有的同学会遇到安装错误162 ......
分析微信好友数据，可以可视化好友男女比例分布，可视化省份来源，可视化签名的情感强度值
一、分析数据可视化好友男女分布比例 1 plt.rcParams['font.sans-serif']=['SimHei'] 2 #用来正常显示中文标签 3 plt.rcParams['axes.unicode_minus']=False 4 5 # 1.读取csv文件，把性别信息读取出来 6 de ......
jdk的keytool工具生成证书
1.生成证书 keytool -genkeypair -alias serverkey -keypass 111111 -storepass 111111 -dname “C=CN,ST=SD,L=QD,O=haier,OU=dev,CN=haier.com” -keyalg RSA -keysiz ......
echarts柱状图表数据过多显示滚动条效果
1.背景描述： 图表数据过多，需要展示滚动条方便查看剩余数据 2.效果展示： 关于截图中左下角伪类样式：<div class="chart-container"> <div class="chart" id="myChart"></div> <div class="chart-footer"></d ......
一键获取测试脚本，轻松验证“TSBS 时序数据库性能基准测试报告”
基于 TDengine 3.0 TSBS 基准测试报告，此前我们已经输出了系列文——为什么选择 TSBS 作为测试平台、写入性能对比、查询性能对比，分别就 TSBS 及测试环境、写入性能及开销、查询性能及开销进行了相关解读。在本篇文章中，我们将为想要验证本报告测试结果的小伙伴，分享进行报告测试复现的 ......
OSM（OpenStreetMap）全球路网数据下载方式介绍
本文对OpenStreetMap（OSM）网页与各类OSM数据的多种下载方式加以详细介绍，并对不同数据下载方式加以对比~ ......
COMP5310 分析数据
COMP5310 Project Stage 2ASummarise and Analyse the DataDue: 11:59pm on 6th of April 2023 (Week 7)Value: 10% of the unit This stage is usually done wit ......
Qt音视频开发32-qmedia内核回调拿图片数据
一、前言 使用qmediaplayer来打开视频并播放，默认首选会采用QVideoWidget控件来展示，优点是不用自己来绘制，一切交给了QVideoWidget控件，这样可以做到极低的CPU占用，缺点也明显，就是无法拿到每一帧的图片，很多时候我们还需要主动拿到每一帧的图片来运算做人工智能，通过不断 ......
Mysql之SQL语句基础1
一、基本概念 ——后续的内容将会记录作者在计科学习内容 DB(数据库)：存储数据的仓库，数据是有组织进行存储 DBMS（数据库管理系统）：操纵和管理数据库的大型软件 SQL：操纵关系数据库的编程语言，是一套标准 有Mysql,Oracle,SQLSever,PostgreSQl RDBMS(关系型数 ......
数据库系统的三层架构
1、传统的数据库访问程序： （1）数据库访问和数据处理放在一起实现 （2）用户界面层直接调用数据访问实现 （3）整个系统功能放在同一项目中实现 2、三层架构模式 三层架构： （1）界面层（UI） 为用户提供一种交互式操作界面。 作用： 根据用户的具体需求，为每个功能模块部署输入控件、操作控件和输出控 ......
mysql Error:index column size too large. the maximum column size is 767 bytes
问题现象 mysql在执行脚本create创建表时，提示以下错误： index column size too large. the maximum column size is 767 bytes 异常原因 INNODB 引擎，UTF-8，主键字符串 默认最大 767，需要修改 解决方案 对数据库 ......
Redis数据库高可用
一、Redis高可用 在web服务器中，高可用是指服务器可以正常访问的时问，衡量的标准是在多长时间内可以提供正常服务(99.9%、99.99% 99.998等等)。但是在Redis语境中，高可用的含义似乎要宽泛一些，除了保证提供正常服务（如主从分离、快速容灾技术)，还需要考虑数据容量的扩展、数据安全 ......
CloudCanal 落地 DB2 数据迁移同步功能
简述 Db2 是一款具有悠久历史的关系型数据库，由 IBM 公司开发和维护，广泛应用于金融级业务场景。 CloudCanal 近期提供了 Db2 为源端的数据迁移同步 功能，用户可以便利地将 Db2 中数据实时同步到其他数据库，实现数据更广泛、更实时的应用。 功能介绍 目标数据库和能力 | 目标端数 ......
mysql的查询--子查询，order by，group by，having
一、 1.多表查询 格式1： select 字段列表 from 表1 join 表2 on 表1.字段1=表2.字段1 where 查询条件 格式2： select 字段列表 from 表1 join 表2 on 表1.字段1=表2.字段1 join 表3 on 表2.字段2=表3.字段2 wher ......
接口自动化之测试数据动态生成并替换
一、测试数据 1. 随机库random 查看内置random方法，该方法自行学习，不再介绍。 show print([name for name in dir(random) if callable(getattr(random, name))]) ['Random', 'SystemRandom' ......
RestSharp组件Get请求带body的时候返回数据丢失问题
###postman的复制代码默认就是RestSharp。方便也好用，但是使用get请求并且带Body的时候要注意，返回的数据竟然会有丢失 ####解决办法： string RequestByGet(string index, string action, object paramter) { va ......
php站点导入大mysql文件（linux系统）
问题描述：站点数据多，mysql导出后大于1G，使用phpmyadmin，导入一半报错，白白浪费等待时间，使用navicat 导入，执行时间过长提示错误 解决思路：1.拆分mysql文件，分批次导入，亲测还是比较花费时间，小于100M可以尝试，大于100M不推荐 2.推荐使用进入linux系统导入m ......
azure databricks使用external hive metastore跨工作区共享元数据
为什么要使用external hive metastore可以跨workspace的共享元数据，不用每次创建workspace的时候都重复的把元数据重建一次。更好的元数据集中管理，Create once, use everywhere。为灾难恢复(DR)做好为准备，并降低复杂性。（PAAS一样会存在 ......
千万级数据量表如何快速添加索引/字段
添加字段语句 ALTER TABLE id_t ADD title(255) DEFAULT '' COMMENT '标题' AFTER id; 问题 线上的一张表如果数据量很大千万级，执行加字段加索隐操作就会锁表，这个过程可能需要很长时间甚至导致服务崩溃，那么这样操作就很有风险了。 解决一 1. ......
JSON多层嵌套复杂结构数据扁平化处理转为行列数据
背景 公司的中台产品，需要对外部API接口返回的JSON数据进行采集入湖，有时候外部API接口返回的JSON数据层级嵌套比较深，举个栗子: 上述的JSON数据中，最外层为请求返回对象，data里面包含返回的业务数据，业务数据按照学校 / 班级 / 学生进行嵌套 在数据入湖时，需要按照最内层的学生视角 ......
mysql，pg连接重试参数配置
PostgreSQL JDBC URL连接重试的示例： String dbUrl = "jdbc:postgresql://localhost:5432/mydb?autoReconnect=true&maxReconnects=5&connectTimeout=5000"; Connection ......
JDBC和MyBatis数据库访问技术
传统的Java Web应用开发时，一般使用JDBC进行数据库连接和操作SQL命令。但是，随着互联网技术的飞速发展，使用JDBC已经满足不了项目的开发需求，出现了Hibernate、MyBatis等一些优秀的持久层框架，它们结合了JDBC的优点，使得开发简捷、规范、快速，系统易维护、易扩展。 1.1 ......
技术贴，必看！谷歌云新的 BigQuery 版本：数据云的灵活性和可预测性
在数据云和 AI 峰会上，谷歌宣布推出具有三个定价层级的 BigQuery 版本——标准版、企业版和企业增强版——供您选择，并能够根据您的个人工作负载进行混合搭配以获得合适的性价比需要。 ......
Linux Shell命令
Linux Shell命令 "ip" 命令：用于配置和管理网络接口及路由表。可以使用 "ip" 命令来添加、删除、修改网络接口、设置 IP 地址、修改路由表等。这个命令是配置网络的关键命令之一。 # 查看网络接口信息 ip link show # 设置网卡 eth0 的 IP 地址和子网掩码 ip ......