数据库 笔记 数据mysql
cpp mysql lmysqlcppconn call procedure
mysql> show create table t5; + + + | Table | Create Table | + + + | t5 | CREATE TABLE `t5` ( `id` bigint unsigned NOT NULL AUTO_INCREMENT, `name` varc ......
MySQL使用JSON存储数据
1.优点 1.不用为数据中的每个key值新建一个字段，可以任意的增减字段而无需修改数据表结构，甚至可以减少数据表的设计。 2.可以减少数据表的查询，减少关联查询，一个查询的结果就可以代替几个查询的结果，降低数据库服务器的压力。 2.缺点 1、json数据仅仅只能用于展示display，如果用于条件查 ......
使用NineData，轻松完成阿里云RDS MySQL至ClickHouse数据迁移
NineData数据复制产品可以轻松解决MySQL到ClickHouse的同步问题，具有强大的数据转换和映射功能、实时同步性能卓越、简单配置操作、可靠的数据一致性、灵活的定制选项、可观测可干预、运行稳定和安全可靠等优点。只需简单三步，即可完成RDS MySQL到云数据库ClickHouse的数据同步... ......
JavaWeb - day07 - MySQL - DQL、多表设计
01. MySQL-DQL-基本查询 介绍 DQL英文全称是Data Query Language(数据查询语言)，用来查询数据库表中的记录。 查询关键字：SELECT 查询操作是所有SQL语句当中最为常见，也是最为重要的操作。在一个正常的业务系统中，查询操作的使用频次是要远高于增删改操作的。当我们 ......
数据表对数据表对换
需求：数据表对数据表进行转换！！！ 构建kettle数据流图： 指定从哪到哪？ @@@@@@@@@@@@@@@@@@@ 启动： 2023/12/14 10:30:43 - Carte - Installing timer to purge stale objects after 1440 minut ......
第五单元 数据查询
Entity Framework Core 使用语言集成查询 (LINQ) 来查询数据库中的数据。 通过 LINQ 可使用 C#（或你选择的其他 .NET 语言）编写强类型查询。 它使用你派生得到的上下文和实体类来引用数据库对象。 EF Core 将 LINQ 查询的表示形式传递给数据库提供程序。 ......
Python 学习笔记
Python 学习笔记 1、Python脚本 1.1脚本.py hello.py #code:utf-8 # 以下空一行 import os # 以下空两行 print(os.getcwd()) print('欢迎大家') print('来到python世界')`# 最后也要空一行 虽然空行对程序的 ......
分页查询 数据重复问题
1、问题： 后端返回的分页查询数据存在好几页的数据完全一模一样的问题 2、分析： 将该sql放到数据库中查询后发现，该接口的sql语句中order by 的字段不唯一，将导致数据排序不固定，某些数据有可能一直排在最后，导致一直取到重复的数据 3、解决： 令order by字段唯一： order by ......
MySQL左连接丢失null值的问题
一、前言 我们有的时候直接使用左连接查询，当右表不存在该数据的时候，是可以查出带有null的列。可是当在where条件中有右表相关的筛选条件时，我们惊奇的发现查询的结果不带null值了，换句话说就是查出来的结果比预期的少。 二、错误复现以及解决方案 1、右表不带筛选条件的查询 sql相关的表主要是w ......
视频数据卡设计方案：120-基于PCIe的视频数据卡
一、产品概述 基于PCIe的一款视频数据收发卡，并通过PCIe传输到存储计算服务器，实现信号的采集、分析、模拟输出，存储。 产品固化FPGA逻辑，实现PCIe的连续采集，单次采集容量2GB，开源的PCIe QT客户端软件，用户可以在很短的时间内完成采集器程序的开发，如连续信号采集、数据处理算法、网络 ......
阅读笔记《探索需求》
这是本学期最后一本书了，《探索需求》。 第一章讲的是方法论是不够的，主要围绕了三个问题：第一是为什么，因为我们使用的通常都是需求映射图，而不是需求本身，这就是需求要“探索”的原因。人们探索制作映射图，最终得到一张足够接近于实际形态的映射图，并为了一个“现实的”目的把它表达出来。第二是什么时候，如果你 ......
laravel php 50W数据导出excel 分批分页导出
文章目录 需求 问题 解决 需求 导出50W左右的数据导excel表 问题 使用phpexcel等插件，碰到数据量大很慢，可能能花半个小时以上 数据量大查询慢 内存不足 执行超时 解决 使用原生csv导出 设置脚本超时和内存，进行加大内存，不限制超时时间 进行分页查询 public function ......
【论文阅读笔记】【多模态-Vision-Language Pretraining】 BLIP: Bootstrapping Language-Image Pre-training for Unified Vision-Language Understanding and Generation
BLIP ICML 2022 (Spotlight) 读论文思考的问题 论文试图解决什么问题？写作背景是什么？ 问题： 在视觉-语言预训练（VLP）中，如何更加高效地利用充斥着噪声的海量图文对数据，提升预训练效果？ 如何设计模型，使得预训练后的模型在理解（understanding-based）任务 ......
SQLite数据类型
SQLite 数据类型 一般数据采用的固定的静态数据类型，而SQLite采用的是动态数据类型，会根据存入值自动判断。SQLite具有以下五种数据类型： 1.NULL：空值。2.INTEGER：带符号的整型，具体取决有存入数字的范围大小。3.REAL：浮点数字，存储为8-byte IEEE浮点数。4. ......
单日30PB量级！火山引擎ByteHouse云原生的数据导入这么做
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近期，火山引擎ByteHouse技术专家受邀参加DataFunCon2023（深圳站）活动，并以“火山引擎ByteHouse基于云原生架构的实时导入探索与实践”为题进行了技术分享。在分享中，火山引擎ByteHous ......
解决mysql的语句中group_concat长度限制问题
在mysql中，有个函数叫“group_concat”，平常使用可能发现不了问题，在处理大数据的时候，会发现内容被截取了。其实MYSQL内部对这个是有设置的，默认不设置的长度是1024。查看默认配置 show variables like "group_concat_max_len"; 模板返回是 ......
excel_to_mysql过程（Excel数据转换到MySQL数据库当中）
准备数据流图：在输入输出里面找到对应的类型：数据流图建好了接下来怎么将excel表格数据抽取到mysql当中去？？？####编辑excel输入：手机号改为数字类型，就没有.0了，主要是类型问题@@@@@@@@@@@@@@@@@@@@@@@建立mysqll连接，进行编辑表输出最后看一下原始数据： 22 ......
数据库选型：MySQL、PostgreSQL、MongoDB
能够支撑实时业务的数据库，常见的数据库有： 关系型数据库：MySQL、PostgreSQL，以及Oracle、DB2、Microsoft SQL Server等 非关系型数据库：MongoDB 下面针对MySQL、PostgreSQL、MongoDB做对比分析。 关于最受欢迎排行榜，该三类数据库处于 ......
mysql导入导出
# 数据库导出 mysqldump -u root -p mysql > mysql.sql # 数据库导入 mysql -u root -p -D mysql < mysql.sql # 单表导出 mysqldump -u root -p mysql tablename > tablename.s ......
数据分析--数据预处理
本文主要是个人的学习笔记总结，数据预处理的基本思路和方法，包括一些方法的使用示例和参数解释，具体的数据预处理案例case详见其他文章。如有错误之处还请指正！ 目录数据的质量评定数据处理步骤缺失值的处理标记缺失值删除缺失值填充缺失值重复值处理异常值的处理数据集合并pandas.DataFrame.co ......
医院如何实现安全、可控、便捷的内外网数据交互？
我国医院基本进行了内外网隔离。医院内外网隔离是指医院内部网络和外部网络之间的隔离措施，以确保医院内部网络的安全性和保密性。 医院内外网隔离的重要性在于： 1、保护患者隐私：医院内部网络中存储着大量的患者个人信息和医疗记录，这些信息需要得到严格保护，防止泄露和滥用。 2、防止恶意攻击：外部网络中存在大 ......
MySQL ERROR:Access denied for user `root`@`localhost` (using password:YES)
背景 使用docker安装mysql5.7，容器显示正常启动，但始终本地或者远程都连接不上该数据库 定位原因 密码加密方式错误 解决方法 ......
为什么说跨网数据安全交换系统 对高新技术企业是必要的？
高新技术企业现已成为市场经济中不可或缺的重要力量，因其雄厚的技术实力、宽阔的发展前景以及卓越的创新能力成为推动经济发展的关键因素。对于高新技术企业而言，其数据资产尤其重要，研发数据、产品信息、客户资料等，数据成为企业发展立足之根本，可以说，没有数据，高新技术企业则无法发展。 数据的重要性不言而喻，为 ......
MySQL Update语句一个非常经典的“坑”
起因 最近好几次有开发同学在钉钉上问我，比如下图： 问题归纳起来就是：在MySQL里面update一条记录，语法都正确的，但记录并没有被更新… 结论 小结：在一条UPDATE语句中，如果要更新多个字段，字段间不能使用“AND”，而应该用逗号分隔。 现象 刚遇到这个问题的时候，我拿到这条语句直接在测试 ......
深度学习笔记4：在卷积基上添加数据增强代码块和分类器
特征提取的另一种方式是将原有模型与一个新的密集分类器相连接，以构建一个新的模型，然后对整个模型进行端到端的训练。这种方法在输入数据上进行整体训练，使模型能够更好地适应数据特性并提取更有效的特征。通过这种方式，模型的性能可以得到进一步提高，同时也能更好地捕捉到数据中的复杂模式。 冻结卷积基 from ......
八、后代组件数据双向Provide和Consume
祖宗组件向后代组件传递数据并实现数据的双向绑定，即：祖宗组件的数据改变则后代组件的数据也跟着变化，后代组件数据变化则祖宗组件的数据也跟着变化。 这里需要在祖宗中使用@Provide装饰器，后代组件需要使用@Consume装饰器 以下代码说明了两点注意： 1.祖宗组件使用@Provide，孙组件使用@ ......
读程序员的README笔记10_软件交付（上）
1. 行为准则 2. 软件交付 2.1. 你应该了解你的代码最终是如何出现在用户面前的 2.2. 当软件在生产环境中稳定运行，并且被客户真实使用时，它就被交付了 3. 软件交付流程 3.1. 交付阶段并没有行业标准的定义 3.1.1. 从打包到展开，统称为发布(release) 3.1.1.1. 打 ......
Caché/M 数据库上面的那个 é 怎么打
Caché/M 数据库名字上的 e 有一撇，这个 e 是法语字符，通常英语键盘还不是那么好打。 因最近在研究这个数据库，所以这个字符会用得比较多，简单点的方法就是直接用 e 代替，并且后面加个斜杆 M 用于区分英文的 Cache。 拷贝方法 如果实在没有办法，复制粘贴吧，这个能够把这个字符给粘贴过来 ......
Linux 学习笔记
Linux的常用命令1.终端命令格式命令格式：command [-options] [parameter]说明：command ：命令名，相应功能的英文单词或者单词的缩写[-options] ：选项，可以用来对命令进行控制，也可省略[parameter]：传给命令的参数，可以是零个、一个或者多个绝对 ......
MySQL 主从复制
二进制日志管理 MySQL的主从复制是借助二进制日志来实现的，二进制日志（Binary Log）是一种特殊类型的日志文件，它记录了所有修改数据库内容的操作，并且二进制日志对性能的影响通常较小。 二进制日志配置 log_bin ：用于开启二进制日志，如果不指定日志名前缀，默认会以当前主机名为前缀，存放 ......