数据 数据备份freefilesync备份
[数据库] SQL特定查询场景之时间段切分方法
# 1 序言 大数据项目、数据分析场景中，经常遇到需要切分时段的需求。 如下是一些项目上的经验总结。 # 2 实时数仓即席查询场景的解决方法 ## 2.1 函数拼接法 + 方法特点： > + 时间数据以`时间戳`形式存储在数据库，而非以`时间字符串` > + 查询时**实时运算时间段** >> 基于 ......
SpringBoot获取树状结构数据-SQL处理
前言 在开发中，层级数据（树状结构）的获取往往可能是我们一大难点，我现在将自己获取的树状结构数据方法总结如下,希望能给有需要的小伙伴有所帮助！ 一、测试数据准备 /* Navicat Premium Data Transfer Source Server : 本地MySQL-local Source ......
启动mysql数据库
首先确定电脑是否安装mysql 在命令行终端输入以下命令来检查MySQL是否已安装： mysql --version 如果已安装，将会返回MySQL的版本信息，否则需要先安装MySQL。 手动启动mysql 在 此电脑-- 管理 -- 服务和应用程序 -- 服务 -- MySQL 右键启动； 只有先 ......
Tick数据的清洗
程序筛选 测试的品种如下 ''' # 以下日盘交易时间一样 9:00-10:15、10:30-11:30、13:30-15:00 郑商所 日夜盘 'FG401' 21:00-23:00 郑商所 无夜盘 'AP310' 大商所 日夜盘 'i2401' 21:00-23:00 大商所 无夜盘 'jd23 ......
mysql取最大日期数据
# 1. 使用SELECT语句和ORDER BY子句 SELECT * FROM table_name ORDER BY date_column DESC LIMIT 1; # 2. 使用MAX()函数和SELECT语句 SELECT * FROM table_name WHERE date_col ......
“数据驱动”时代，企业为什么需要实时湖仓？
当谈到[数据湖](https://www.dtstack.com/dtengine/easylake?src=szsm)的时候，大家都在说，可以把所有数据（结构化/半结构化/非结构化）一股脑都丢进去，进行统一的元数据管理。然后上层计算对接，进行[流批计算](https://www.dtstack.c ......
使用GPT-4生成训练数据微调GPT-3.5 RAG管道
OpenAI在2023年8月22日宣布，现在可以对GPT-3.5 Turbo进行微调了。也就是说，我们可以自定义自己的模型了。然后LlamaIndex就发布了0.8.7版本，集成了微调OpenAI gpt-3.5 turbo的功能 也就是说，我们现在可以使用GPT-4生成训练数据，然后用更便宜的AP ......
django-Celery 定时任务保存到数据库
1.安装相关模块 pip install django-celery-beat pip install django-celery-results 2.Setting配置修改 INSTALLED_APPS = [ *** 'django_celery_beat', 'django_celery_re ......
sql手动创建数据库
--1.先切换到系统数据库skmaster use skmaster go --2.创建之前先检查数据库名称是否已存在,如果存在输出已存在，否则执行创建 IF exists(select * from master.dbo.sysdatabase where name='TestData') PRI ......
优化mysql大数据量查询：范围条件与限制结果集的比较
引言：在处理大数据量的MySQL查询时，优化查询性能是至关重要的。当数据量达到上亿级别时，选择合适的查询条件和方法可以显著影响查询效率和响应时间。本篇博客将重点探讨范围条件查询和限制结果集的两种常见查询方式，并比较它们在大数据场景下的性能差异。 范围条件查询：范围条件查询是一种基于指定范围条件的数据 ......
第五节：亿级数据库的设计方案
一. 二. 三. ! 作 者 : Yaopengfei(姚鹏飞) 博客地址 : http://www.cnblogs.com/yaopengfei/ 声 明1 : 如有错误，欢迎讨论，请勿谩骂^_^。 声 明2 : 原创博客请在转载时保留原文链接或在文章开头加上本人博客地址，否则保留追究法律责任的权 ......
数据结构与集合源码1
# 数据结构与集合源码1 ### 1．数据结构概念: 总结:简单来说，数据结构，就是一种程序设计优化的方法论，研究数据的逻辑结构和物理结构以及它们之间相互关系，并对这种结构定义相应的运算，目的是加快程序的执行速度、减少内存占用的空间。 #### 1.1研究对象一:数据间逻辑关系 数据的逻辑结构指反映 ......
教你如何使用API接口获取数据
随着互联网技术的发展和应用的普及，越来越多的系统和应用提供API接口供其他系统和应用进行数据交互。通过API接口，我们可以获取到各种各样的数据，例如天气预报、股票行情、新闻摘要等等。本文将介绍如何使用API接口获取数据，并附有示例代码。 一、选择适合的API接口 首先，需要选择适合的API接口。 ......
java递归返回树形数据结构
近期项目有个需求，需要将组织机构数据拼成树型结构返回至前端。我的做法如下 方式一、使用递归方式实现 private List<SysDept> getSysDepts(String deptId) { // 1、获取表中所有数据 (自行根据实际场景拿到所有表数据) List<SysDept> all ......
如何创建一个数据交互的Angular应用程序？这个工具不要错过！（二）
在上文中（点击这里回顾>>），我们介绍了如何使用Kendo UI for Angular完成一个Angular应用的数据交互功能创建，其中涉及到了内置的数据方法、场景等，本文将继续介绍剩下的部分。 PS：给大家推荐一个实用组件~Kendo UI for Angular是专业级的Angular UI组 ......
[转]如何在 MySQL / MariaDB 中导入导出数据，导入导出数据库文件、Excel、CSV
原文地址:如何在 MySQL / MariaDB 中导入导出数据，导入导出数据库文件、Excel、CSV - 掘金 在日常的数据库维护工作中，经常需要对数据库进行导入导出操作，备份、分析、迁移数据都需要用到导入导出功能，在本教程中将详细讲解所有常见的 MySQL 和 MariaDB 中导入导出数据的 ......
python 可变数据类型和不可变数据类型
python数据类型分别有整数int / 浮点数float / 布尔值bool / 元组tuple / 列表list / 字典dict，其中数据类型分为两个大类，一种是可变数据类型；一种是不可变数据类型 在python编程的时候，代码中的变量实际上都是存储在计算机内存中，通过python内置函数id ......
JS基础-数据类型
JS 作为弱类型的编程语言， 在声明变量时，统一使用 **var**、**const**、或者**let**关键字。但是每个变量都有一个隐式的数据类型。 ## 数据类型检测 使用 typeof 关键字可以检测数据类型。 ``` ``` ### Number 数字类型 - 整形、浮点型在内的所有数字， ......
解决 Element-ui中 选择器（Select）因options 数据量大导致渲染慢、页面卡顿的问题
仅设置 element-ui 的 filterable 属性 ，搜索的范围只有懒加载已滚动出的数据，导致搜索不全、不准确。继续使用了 filter-method 属性并结合 visible-change 事件，以及搜索输入时增加防抖进行优化。 // utils.js function _deboun ......
tensorflow 数据及操作整理
目录： # 1. 类型 # 2. 基础操作 # 3. 运算相关 # 4. 求导相关 数据类型： ############################## # 标量（0 维数组）、 # 向量（1 维数组）、 # 矩阵（2 维数组） # 张量 （Tensor）, 概念上等同于多维数组 # 1. 类型 ......
深入浅出流批一体理论篇——数据架构的演进
这篇文章的主要内容包括：1、数据架构的演变历史与各种架构的优缺点。2、流批一体的价值。3、流批一体架构中流与批的关系。 ......
系统时间与docker中mysql数据库时间相差八小时解决方法
情景：在项目中往数据库差数据时，发现时间字段在mysql显示的时间和当前系统时间老是相差八小时，查看可能是mysql当前时区没设置好的问题。 一、docker exec -it your_mysql_name bash进入mysql容器中，mysql -uroot -p 进入mysql， 查看当前时 ......
数据库基础面试第二弹
1. 乐观锁和悲观锁的理解及使用 乐观锁和悲观锁是在并发编程中使用的两种并发控制机制，用于解决多线程或多进程环境下的数据一致性问题。 1. 悲观锁（Pessimistic Locking）： 悲观锁的思想是假设并发访问会导致冲突，因此在访问共享资源之前，悲观锁会将资源锁定，确保其他线程无法修改资源。 ......
数据结构-CS61B学习日记
##总结： 1.今天学习使用Java复习最简单链表->具有头结点的链表(或者头结点叫哨兵)->双向链表。 以及对哨兵的优化更改方案: 1).将哨兵作为头尾节点 2)将列表实现为循环列表 2.今天完成了lab2，顺便也熟悉了一下如何autograde ##2.1-2.3List文件 ```Java p ......
oracle导入导出某个schema数据
# 背景 公司之前部门拆分，但一些服务并没有拆分清楚。其中一个老服务，两个部门都在用，现在为了避免互相影响，决定克隆该服务。克隆就要克隆全套，当然也包括数据库，我们这个老服务，用的oracle，所以，就涉及到从旧的oracle中导出数据，然后再导入到另一套新的oracle实例中。 届时在线上肯定是要 ......
关于数据库中表的检索
老师去考察某企业的ERP系统的开发，拷贝了企业这个ERP系统的部分数据库，让我们到这个数据库中去检索出三张有关存储基本信息的表。原本以为这项工作会很容易，但是当我把.bak的数据库导入到SQLServer中，整个人直接就是惊呆了。这仅仅只是部分的数据库，他的数据量就直接刷新了在校学习、闭门造车的这名 ......
数据链路层设备-网卡和网桥
数据链路层的设备有：网卡、网桥、交换机 1 网卡 网卡(网络接口卡) 网卡工作在数据链路层和物理层。其作用是将数据链路层的以太网报文变换成高低电平传输到物理层；将物理层到达的高低电平信号传输到数据链路层，数据链路层再进行以太网报文的组装。 2 网桥 网桥是连接两个局域网的存储转发设备。在两个局域网之 ......
数据结构代码题-链表
## 链表 ### 单链表 **单链表结构体的声明：** ```C typedef struct Link { int data;//代表数据域 struct Link* next;// 代表指针域，指向直接后继元素 } link; //link为节点名，每个结点都是一个link结构体 ``` 另一 ......