随笔 数据
【最佳实践】MongoDB导入数据时重建索引
MongoDB一个广为诟病的问题是，大量数据resotore时索引重建非常缓慢，实测5000万的集合如果有3个以上的索引需要恢复，几乎没法成功，而且resotore时如果选择创建索引也会存在索引不生效的问题，种种情况表明，MongoDB的一些默认设置存在明显不合理之处。 当然，深入理解后总会有办法解 ......
R语言 常用 文件格式 和 数据格式
**R 语言文件格式：** -R 语言使用各种文件格式来存储和共享代码和数据。R 中一些常用的文件格式包括： 1。**R 脚本 (.R) **：R 脚本是扩展名为 “.R” 的纯文本文件，包含 R 代码。它们可以使用任何文本编辑器创建和编辑，并在 R 中执行以运行代码。 2。**R Markdown ......
DataFrame通过JDBC读写数据读写到数据mysql
# coding:utf8 import time from pyspark.sql import SparkSession from pyspark.sql.types import StructType, StringType, IntegerType import pandas as pd f ......
Redis——底层和数据结构
数据结构 简单动态字符串SDS 可以认为在Redis中所有的东西最终都是字符串。Redis是C语言实现的，但是Redis没有直接使用C语言中的字符串，C语言字符串是字符数组实现的，存在很多问题： 1、获取字符串的长度需要运算，时间复杂度达到O(n)。 2、非二进制安全，无法保存\0字符（被识别成结束 ......
df -h查看磁盘空间不足，du -sh /*却没有找到大数据文件
df -h Filesystem Size Used Avail Use% Mounted on /dev/vda1 296G 199G 82G 71% / tmpfs 7.8G 0 7.8G 0% /dev/shm 但是通过du -sh/* 查看7.7M /bin 138M /boot 214M ......
Unity 通信方案 - 使用 Google Protobuf 序列化数据
1.下载和编译 1.1 下载ProtoBuf源文件 从 github 下载最新的 protoBuf 库，如下图所示 Releases · protocolbuffers/protobuf (github.com) 1.2 编译dll和导入 解压后打开 /scharp/src 中的 sln 工程文件 ......
使用binlog恢复数据
目录数据模拟恢复到查找最初始的建prod表查找updata语句查找delete语句查找删除语句 数据模拟 [root@db01 ~]# cat 6.sh #!/bin/bash mysql -uroot -p123 -e "drop database if exists prod;" mysql - ......
MySQL数据备份
目录MySQL数据备份binlog存在问题binlog作用为什么要备份备份类型备份方式备份策略（每天一次全备，每小时一次增备）MySQL逻辑备份工具mysqldump所有库备份备份单个库备份时刷新binlog打点备份参数快照备份实用扩展选项额外扩展选项（很好用的）完整备份语句mysqldump的恢复 ......
创建数据库全量备份脚本
创建用户账号和密码配置文件 # 创建一个backup的登录路径 mysql_config_editor set --login-path=backup --host=localhost --user=username --password 在上述命令中，将 backup 替换为适合您的环境和需求的登 ......
图形化登录，数据库设置
# 创建库 root@localhost [tu] >create database tu; ## 进入库 use tu; # 创建表结构 CREATE TABLE `tiao` ( `ip` int(10) unsigned zerofill NOT NULL AUTO_INCREMENT COM ......
完整创建数据库,shell脚本
# 1.安装依赖 [root@db03 ~]# yum install -y autoconf libaio-devel # 1.解压 [root@db02 ~]# tar xf mysql-5.6.50-linux-glibc2.12-x86_64.tar.gz # 2.创建app目录 [root ......
数据结构的关键码序列的理解概述
1、关键码序列的理解 所谓关键码序列，就是出现在二叉排序树中的，对二叉排序树的各个结点进行排序的一个结点序列。 依据左子树的各个结点的值都小于父结点的值，右子树的各个结点的值都大于父结点的值 的条件进行排序。 2、习题解决 一般都是给我们一个二叉排序树的图，让我们去判断选项里面的各个关键码序列是否与 ......
学生管理系统使用集合保存，不是用数据库的（仅供参考，网上找的，记录用）
package com.ima; import com.itheima.Student; import java.util.ArrayList;import java.util.Scanner; /* 学生管理系统 */public class StudentManager { public sta ......
关于数据库的复习
数据库分位关系数据库和非关系数据库 关系数据库中有Oracle、DB2、SQL Server、MySQL等。非关系数据库就是NOSQL。 这老师MySQL的官网下载地址https://dev.mysql.com/downloads/windows/installer/8.0.html 接下来就是使用 ......
jmeter 两个"csv数据文件设置"遍历数据，实现多用户购买多个商品
目标 使用jmeter构造基础数据，需要实现多个用户购买多个商品的场景。 数据准备 1号数据txt文件，包含token和userId，用于用户登录（有10个用户的登录信息）； 2号数据txt文件，包含goodsId，用户购买商品（有6个商品的Id）； jmeter设置 1.添加--配置元件--“CS ......
第1章：MySQL数据库入门-cnblog
第1章：MySQL数据库入门 以前，在开发程序时，我们会把很多的数据和信息存储到某个文件夹中的文件中，例如：user.txt 、db.xlsx 等。 现在，有那么一个叫：数据库管理系统（DBMS，Database Management System）的软件，可以帮助我们实现对文件夹中的文件进行操作， ......
如何使用Java创建数据透视表并导出为PDF
摘要：本文由葡萄城技术团队原创并首发。转载请注明出处：葡萄城官网，葡萄城为开发者提供专业的开发工具、解决方案和服务，赋能开发者。 前言 数据透视分析是一种强大的工具，可以帮助我们从大量数据中提取有用信息并进行深入分析。而在Java开发中，可以借助PivotTable，通过数据透视分析揭示数据中的隐藏 ......
Qt学习随笔-1、初识Qt
1 Qt简介 1.1 跨平台图形界面引擎 1.2 历史 1.2.1 1991 奇趣科技 1.3 优点 1.3.1 跨平台 1.3.2 接口简单 1.3.3 一定程度上简化了内存回收 1.4 版本 1.4.1 商业版 1.4.2 开源版 1.5 成功案例 1.5.1 Linux桌面环境 KED 1.5 ......
es针对nested类型数据无法进行过滤查询的问题记录
问题描述 es中存在有一个名为task_data_1的索引，其字段映射关系如下所示： { "task_data_1" : { "mappings" : { "dynamic_templates" : [ { "dates" : { "match_mapping_type" : "date", "ma ......
295. 数据流的中位数
中位数是有序整数列表中的中间值。如果列表的大小是偶数，则没有中间值，中位数是两个中间值的平均值。 例如 arr = [2,3,4] 的中位数是 3 。 例如 arr = [2,3] 的中位数是 (2 + 3) / 2 = 2.5 。 实现 MedianFinder 类: MedianFinder() ......
【合集】实在太懒把模拟赛分开新建随笔了
B. 特 二分哈希找公共长度 C. 伯 考场上其实是有往正解那个奇怪的结合上想的 考虑 n很小的时候怎么做： 这时候可以用最小表示乘上排列数 形态为树的时候，会发现可以直接 dp ，k中颜色实际上都是相同的 所以直接设 \(dp[i]\) 表示 节点 i 每一种颜色的 ans 考虑结合两部分 将原图 ......
【多线程笔记】多线程处理队列数据
using System.Collections.Concurrent; using System.Diagnostics; { int threadCount = 20; List<Task> tasks = new List<Task>(); ConcurrentQueue<int> queue ......
浅谈构造数据这件事
一.前言 为什么会写这篇文章呢？原因就是最近一段时间测试发现身边2为测试人员一个优秀，一个普通，身上巨大差异点就出现在这里，前者，在转测前，利用空闲时间造好数据，为测试做好准备 后者，因为不会造数据，基本上不造数据，针对需要推送数据的内容，基本就不测试，所有测试结果可想而知 我们都知道，不管做任何类 ......
JS中数据的存储方式和位置
1.js数据类型 ①原始数据类型： Undefined,Null,Boolean,Number,String ②引用数据类型： 对象，数组，函数 2.数据存储的位置 ①原始数据类型： 栈内存 原始数据类型直接存储在栈(stack)中的简单数据段，占据空间小、大小比较稳定，属于被频繁使用数据，所以放入 ......
MYSQL中 find_in_set() 函数用法详解（匹配部门id或父id为100的数据）
https://blog.csdn.net/carefree31441/article/details/119563685 ......
05_数据结构与算法
Sort 排序算法 sort 包中实现了四种基本排序算法：插入排序、归并排序、堆排序、快速排序。但是它们不公开，只供sort包内部自己使用，所以在需要实现数据排序时不必考虑使用哪一种排序方法，只要实现了 sort.Interface 定义的三个方法： 获取数据集合长度Len()、比较两个元素大小Le ......
Centos系统安装MySQL数据库时，要以不安全的方式连接至 dev.mysql.com，使用“--no-check-certificate”
解决：要以不安全的方式连接至 dev.mysql.com，使用“--no-check-certificate” 问题： [root@192 桌面]# wget https://dev.mysql.com/get/mysql80-community-release-el7-5.noarch.rpm-- ......
页帧的数据结构设计
前言 页帧page是物理内存管理的基本单位，struct page记录了任意时刻page的所有状态，因此每一个物理页帧都需一个对应的struct page结构体记录状态，对于内存多计算机系统来说需要的struct page本身就需要大量内存进行存储，因此该结构体中每增加一个变量带来的代价会很大，需要 ......