结构 数据结构 队列 算法
雪花算法
Python 实现雪花算法 雪花算法：雪花算法是一种分布式全局唯一ID，一般不需要过多的深入了解，一般个人项目用不到分布式之类的大型架构，另一方面，则是因为，就算用到市面上很多 ID 生成器帮我们完成了这项工作。 介绍：Twitter 于 2010 年开源了内部团队在用的一款全局唯一 ID 生成算法 ......
记录使用mybatis时踩到的坑-integer类型数据为0时，会判断为：等于空字符串为true
因为做查询操作时，需要设置为传入参数值才进行查询，于是判断条件是： status != null and status != '' 即mapper层的写法： <if test="status != null and status != ''">and status=#{status}</if> 但设 ......
使用SqlBulkCopy sqlserver 批量插入数据(C#)
先说实现原理:将需要插入数据库的集合里面的数据存在datatable里面，列名需相同，然后调用SqlBulkCopy方法。 1.新建datatable，并赋值 DataTable dataTable = new DataTable(); dataTable.Columns.Add("NAME1"); ......
net6+canal 实现数据实时同步数据
前言： 前几天在做公司的一个项目，需求：把A项目数据，同步到B项目，A\B项目数据结构不一样（我们用的是mysql），B项目可以接受几秒内的数据同步；我当时第一时间就想到了flink和canal，然后发现flink并不支持net，所以转用canal；那么接下来我们看看canal到底是什么； cana ......
任务运维 | 怎么补数据？这有一篇实践案例
在任务运维同学的日常工作中，经常需要使用补数据功能，例如当一个新的数据开发任务提交上线后，需要将历史的数据也能写入对应的时间分区；或者当发现某个任务产出数据有误时，需要重新刷新数据，这时候也会需要用到补数据功能。 通过本篇文章，你能够收获： 了解补数据的场景和流程； 掌握补数据的步骤和内容，体验Ea ......
c# 下 根据Datatable的结构动态创建表
点击查看代码 /// <summary> /// 根据DataTable,生成建表语句 /// </summary> /// <param name="table"></param> /// <param name="tableName"></param> /// <returns></return ......
使用事务和SqlBulkCopy批量插入数据
DataTable table = new DataTable(); table.Columns.AddRange(new DataColumn[]{ new DataColumn("flow_id",typeof(int)), new DataColumn("sheet_no",typeof(st ......
使用SqlBulkCopy批量插入，批量更新数据解决方案
1） 根据取过来的数据（DataTable）字段创建临时表 ‘ tmp_表名‘ 2）SqlBulkCopy数据导入临时表 3） 根据正式表主键对数据进行处理，删除相同主键数据，批量导入数据 4） 删除临时表 点击查看代码 public class DataBaseUtil { public even ......
大数据经典论文解读 - BigTable
BigTable 定位是分布式表格系统。步入21世纪后，单机关系db无法支撑海量数据，GFS等分布式文件系统可低成本支持存储但效率低。分布式事务模型、共识算法和Percolator、Spanner等NewSQL到2010年前后才成熟。所以当时取各项目共性，在GFS上封装一层KV结构。技术对标HBas ......
重学Java设计模式-结构型模式-享元模式
重学Java设计模式-结构型模式-享元模式 内容摘自：https://bugstack.cn/md/develop/design-pattern/2020-06-14-重学 Java 设计模式《实战享元模式》.html#重学-java-设计模式-实战享元模式「基于redis秒杀-提供活动与库存信息查 ......
NoSQL - 非关系型数据库
一、定义 主要针对键值、文档、图形类型数据存储； 天生支持分布式，数据冗余和数据分片等特性，旨在提供可扩展的高可用高性能数据存储解决方案； 代表有：HBase, Cassandra, MongoDB, Redis 二、SQL 与 NoSQL 区别 三、 分类 1. 键值数据库 其中每个项目都包含键和 ......
【LabVIEW】程序结构-循环结构
LabVIEW学习笔记汇总链接 【LabVIEW】小白入门学习笔记-汇总 目录 1.基本使用 2.加法小程序图示 3.labview的编程特点 4.平铺式顺序结构 5.整理程序 6.快捷键 程序结构 循环结构包括：for循环和while循环 返回顶部目录 for循环 添加for循环控件 后面板(程序 ......
非Spring项目下使用H2数据库做UnitTest
1.Maven引入包 <dependency> <groupId>junit</groupId> <artifactId>junit</artifactId> <scope>test</version> </dependency> <dependency> <groupId>com.h2databa ......
（达梦数据库）我sql查询访问别的的数据库出现没有权限的问题，怎么解决这个问题呢？
我sql查询访问别的的数据库出现没有权限的问题，怎么解决这个问题呢？ 答：测试环境你可以用达梦管理工具给自己授个权啊，测试环境又没限制。 ......
标识符，数据类型
标识符 标识符是大小写敏感的 所有的标识符都应该以字母（A-Z或者a-z）美元符号$、下划线（_)开始 首字母符号之后可以是字母（A-Z或者a-z)、美元符号$、下划线（_)或数字的任何符号组合 不能使用关键字作为变量名或者方法名 可以使用中文命名，但是一般不这样做，也不建议是用拼音 ，很LOW 数 ......
重学Java设计模式-结构型模式-外观模式
重学Java设计模式-结构型模式-外观模式 内容摘自：https://bugstack.cn/md/develop/design-pattern/2020-06-11-重学 Java 设计模式《实战外观模式》.html#重学-java-设计模式-实战外观模式「基于springboot开发门面模式中间 ......
DB2数据库安装和管理
DB2 数据库安装 解压软件包 tar zxvf v11.5.7_linuxx64_server_dec.tar.gz 检查安装环境 ./db2prereqcheck 开始安装DB2软件 ./db2_install 安装server 创建组和用户 groupadd db2adm4 groupadd ......
JavaScript中的数据类型和判断类型的方法
js有哪些类型？ JavaScript中一共有9中数据类型，其中包含五种基本类型和一种复杂类型Object,Object中包含四种类型。 基本数据类型 字符串(string) 数字(number) 布尔(boolean) NULL Undefined 复杂数据类型 Symbol(表示一个独一无二的值 ......
Tapdata Connector 实用指南：如何将 CRM 数据从 Salesforce 实时同步到 MongoDB 等其他数据库
数据环境不断变化的今天，想要仅凭 Salesforce 这样的 CRM 软件来为企业获得最大价值已然远远不够。往往需要将其与一个表现出色的数据库或数仓结合起来，才能激发更强大的分析洞察力，促进企业效益持续增长。 ......
基于oracle数据库存储过程的创建及调用
plsql 是oracle对sql语言的过程化扩展 通过sql命令语言中增加了过程处理语句（分支，循环），使sql语言具有过程处理能力 declare 声明变量和游标 begin end；方法体 dbms_output.put_line('');//打印 set serveroutput on 打开 ......
第8章 数据结构算法专题二
线索二叉树与哈夫曼树 线索二叉树 线索二叉树的概念 采用某种方法遍历二叉树的结果是一个结点的线性序列。 修改空链域改为存放指向结点的前驱和后继结点的地址。 这样的指向该线性序列中的”前驱“和”后继“的指针，称作线索（thread）。 创建线索的过程称为线索化。 线索化的二叉树称为线索二叉树。 显然线 ......
12 SQL语句的补充----复制表数据
复制数据表 1、复制数据 1.1创建一个字段和源表不同的虚拟表 create temporary table t_yy( id int(16), name varchar(25), sex varchar(25) ); 源表与目标字段不一致，复制数据需要指定字段 insert into t_yy(i ......
数据分析1 数据仓库
数据仓库 就是将所有业务数据经汇总处理，构成数据仓库 1记录全部事实 2部分维度与数据的整理（数据集市-DM） 3数据库VS仓库 数据仓库是根据主题建立的 数据库面向应用（OLTP） 仓库针对分析(OLAP) 数据库组织规范，仓库可能冗余，相对变化大，数据量大 数据获取手段-监测与抓取 python ......
0108 数据类型
数据类型 代码 public class VariableDemol3 { public static void main(String[] args){ //byte //-128 到 +127 byte b = 10; System.out.println(b); //short short s ......
数据丢失不用怕，火山引擎 DataLeap 提供排查解决方案
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 当一家公司的日均处理的数据流量在 PB 级别时，巨大的任务量和数据量会对消息队列（MQ）dump 的稳定性和准确定带来极大的挑战。 针对这一问题，火山引擎数智平台推出的大数据研发治理套件 DataLeap，可以为企 ......
分析微信好友数据，可以可视化好友男女比例分布，可视化省份来源，可视化签名的情感强度值
一、分析数据可视化好友男女分布比例 1 plt.rcParams['font.sans-serif']=['SimHei'] 2 #用来正常显示中文标签 3 plt.rcParams['axes.unicode_minus']=False 4 5 # 1.读取csv文件，把性别信息读取出来 6 de ......
echarts柱状图表数据过多显示滚动条效果
1.背景描述： 图表数据过多，需要展示滚动条方便查看剩余数据 2.效果展示： 关于截图中左下角伪类样式：<div class="chart-container"> <div class="chart" id="myChart"></div> <div class="chart-footer"></d ......
一键获取测试脚本，轻松验证“TSBS 时序数据库性能基准测试报告”
基于 TDengine 3.0 TSBS 基准测试报告，此前我们已经输出了系列文——为什么选择 TSBS 作为测试平台、写入性能对比、查询性能对比，分别就 TSBS 及测试环境、写入性能及开销、查询性能及开销进行了相关解读。在本篇文章中，我们将为想要验证本报告测试结果的小伙伴，分享进行报告测试复现的 ......
OSM（OpenStreetMap）全球路网数据下载方式介绍
本文对OpenStreetMap（OSM）网页与各类OSM数据的多种下载方式加以详细介绍，并对不同数据下载方式加以对比~ ......