数据结构 结构 数据redis
MySQL实现over partition by（分组后对组内数据排序）
开发中遇到了这样一个需求：统计商品库存，产品ID + 子产品名称都相同时，可以确定是同一款商品。当商品来自不同的渠道时，我们要统计每个渠道中最大的那一个。如果在Oracle中可以通过分析函数 OVER(PARTITION BY… ORDER BY…)来实现。在MySQL中应该怎么来实现呢。现在通过两 ......
php swoft 中的数据分层
不仅仅局限于 MVC 。将数据在model 这一个层面剖析开，优雅的处理数据 逻辑，缓存，业务，数据库操作的烦恼。 这个思路也适用于 thinkphp，hyperf，imi 等框架。不再简单的 实现 controller->model->view 的处理过程。 简化代码，每一层清晰地定义相应处理的数 ......
elasticsearch 7.8.X 数据类型与使用规范
1 核心数据类型 string 字符串 字符类型说明 text ⽤于全⽂索引，搜索时会自动使用分词器进⾏分词再匹配。字段内容会被分析，在生成倒排索引以前，字符串会被分析器分成一个一个词项 keyword 不分词，搜索时需要匹配完整的值 numberic 数值 整数类型说明 （1byte(字节)=8b ......
elasticsearch 数据认识 与 数据表\文档 的增删改
【Elasticsearch 7.8.1】当前版本 新建 mingduhui 的数据库 \ 检索库 向其中新增表 操作如下 PUT /mingduhui/_mapping/goods { "properties": { "id": { "type": "long", "store": true, } ......
elasticsearch 数据查查询、分词查询
1、普通查询 GET /mingduhui/goods/2 POST /mingduhui/goods/_search { "query": { //查询 "query_string": { //表示使用字符串查询 "default_field": "title", //指定搜索域 "query": ......
[数据结构与算法] 树状数组
链接：树状数组_哔哩哔哩 （只有五分钟，多看几遍，就会了） 模板题：P3374 【模板】树状数组 1 - 洛谷 14.1 作用 求前缀和、区间和（跟前缀和的作用一样）； 元素修改之后能高效更新：（时间复杂度） 前缀和：$O(log \space n)$； 区间和：$O(log \space n)$； ......
EasyCVR插件工具：如何删除EasyShark的抓包数据？
EasyCVR视频融合平台基于云边端一体化架构，具有强大的数据接入、处理及分发能力，平台支持海量视频汇聚管理，可支持多协议接入，包括市场主流标准协议与厂家私有协议及SDK，平台丰富的视频能力包括：视频监控直播、录像、云存储、检索与回看、告警、集群、级联、共享等。感兴趣的用户可以前往演示平台进行体验或... ......
阿里云RDS与ECS自建mysql数据库主从同步(GTID方式)
1、GTID的概念全局事务标识：global transaction identifiers；GTID是一个事务一一对应，并且全局唯一ID；一个GTID在一个服务器上只执行一次，避免重复执行导致数据混乱或者主从不一致；GTID用来代替传统复制方法，不再使用MASTER_LOG_FILE+MASTER ......
redis集群简介
1.1 集群的概念 所谓的集群，就是通过添加服务器的数量，提供相同的服务，从而让服务器达到一个稳定、高效的状态。 1.1.1 使用redis集群的必要性 问题：我们已经部署好了redis，并且能启动一个redis，实现数据的读写，为什么还要学习redis集群？ 答：（1）单个redis存在不稳定性。 ......
redis 高级数据 hyperLogLog
1、 统计独立的UV 2、用做 基数 统计的 ｛1,3,5,7,8,7,5｝ 基数集：{1,3,5,7,8} 基数：5 ｛1,1,1,1,1,7,1｝ 基数集：{1,7} 基数：2 基数是数据集去重后元素个数 用于进行基数统计，不是集合，不保存数据，只记录数量而不是具体数据 核心是技术估算算法，最终 ......
【数据库】DataGrip安装、破解和汉化
软件下载地址：（如果连接失效，请公众号内私聊获取） 链接：https://pan.baidu.com/s/10KQ0-N9iYz5PDdaNBWqHVA 提取码：1234 解压后如下： 勾选项如下： 破解和汉化操作步骤： 1、软件已经正确安装，首次启动如图，先点击试用： 2、启动会让你选择一个主题， ......
利用redis完成自动补全搜索功能（一）
最近要做一个搜索自动补全的功能（目前只要求做最前匹配），自动补全就是自动提示，类似于搜索引擎，再上面输入一个字符，下面会提示多个关键词供参考，比如你输入 nb 2字符， 会自动提示nba,nba录像,nba直播 。 能想到的一般有3种解决方案 1.利用mysql来做，只能使用 like 'nb%'这 ......
Redis常用命令
命令参考：https://www.redis.net.cn 字符串String操作命令 Redis中字符串类型常用命令： * SET key value 设置指定key的值 * GET key 获取指定key的值 * SETEX key seconds value 设置指定key的值，并将key的过 ......
redis哨兵
Redis哨兵是一个用于监控Redis主从复制和故障转移的工具，它可以自动发现Redis的主从关系，并在主节点失效时自动完成故障转移。 Redis哨兵本身不存储数据，它只是在Redis集群中进行监控和管理，通过不断地与主节点、从节点进行交互，来判断节点的状态是否正常，当主节点失效时，哨兵会自动选举出 ......
redis持久化
Redis持久化是指将Redis内存中的数据保存到磁盘中，以防止数据在Redis重启后丢失。Redis支持两种不同的持久化方式：RDB和AOF。 RDB持久化：将内存中的数据定时或者按照一定规则保存到磁盘上的一个快照文件中。快照文件是一个二进制文件，包含了某个时刻Redis内存中的所有数据。RDB持 ......
swoole+websocket+redis实现一对一聊天
如同web端的QQ和微信一样，这是一个web端的聊天程序。 环境：linux(centos) + php7.2 + swoole扩展 + redis + mysql Redis 实现每个连接websocket的服务都唯一绑定一个用户。通过 用户账号 = websocket fd 存到redis中。 ......
NBU上Oracle数据库恢复演练手册
目录 2. 1|01.1 Oracle数据库恢复 4 3.1 1|11.1.1 安装新的客户端 6 3.2 1|21.1.2 新建异机恢复文件 6 3.3 1|31.1.3 新建数据库实例 6 3.4 1|41.1.4 建立spfile文件 6 3.5 1|51.1.5 建立数据文件夹 11 3.6 ......
大数据经典论文解读 01
大数据核心3个概念： 能伸缩到一千台以上的分布式数据处理集群技术 这上千个节点是使用廉价PC搭建 将数据中心当做一台计算机 大数据的起源：“三架马车” 这三篇论文还依赖了两个基础设施：Chubby锁服务，Thrift序列化 MapReduce 演进路线： 编程方式：最初的MapReduce需要工程师 ......
Redis添加分布式锁
1.不是高并发的场景 stringRedisTemplate.opsForValue.setIfAbsent("zql","人在代码在",10,TimeUnit.SECONDS);//只加过期限制 2.高并发的场景 如果加锁的过期时间小于业务执行时间，那么需要给每个线程的锁加这个线程的唯一标识，让每 ......
前端，将图片转为base64格式后保存至数据库
调用上述函数，因为onload回调是异步的，需要等图片转换成功后使用base64图片路径，所以需要包在promise实例内抛出去 this.imgBase().then(baseUrl =>{ // 使用成功回调拿到图片处理成功后的格式 }) ......
redis通用命令
1、keys * ：查看所有键 2、exists key：判断key是否存在，1表示存在，0表示不存在 3、del key1 key2...：删除key 4、type key：获取key的类型 ......
按照时间分组统计查询的时候，返回的某个业务数据不全，业务数据是通过GROUP_CONCAT函数来统计的。
【问题描述】 按照时间分组统计查询的时候，返回的某个业务数据不全，业务数据是通过GROUP_CONCAT函数来统计的。 【原因分析】 查看页面调用的接口，并追踪到最终调用的方法和SQL语句；在Navicat中执行SQL语句也发现返回的数据不全，并发现返回的业务数据是使用GROUP_CONCAT函数来 ......
面试题锦集：1、数据库三大范式，2、mysql索引类型及作用，3、事务的特性和隔离级别
面试题集锦 一、数据库三大范式 第一范式(1NF): 指数据库中表的每一列都是不可分割的最小单位 # 分割前： 地址 安徽省合肥市蜀山区 # 分割后： 省 | 市 | 区 安徽省|合肥市|蜀山区 第二范式(2NF): 如果表是单主键，那么主键以外的列必须完全依赖于主键列，如果表是符合主键（联合索引） ......
交货单打印之二：ＪＺＴ_ＷＭＳ数据结构熟悉中
准备交货单打印的用，ＳＡＰ将交货单下传至ＷＭＳ，然后再打印单据，配货出库。 ＩＮＦ_ＢＩＬＬ_ＯＳＨ是 接口表。 ＩＮＦ_ＢＩＬＬ_ＯＳＨ_upload是接口上传表 SELECT * FROM INF_BILL_OSH_upload WHERE ROWNUM<1000 and created_tim ......
数据
# -*- coding: utf-8 -*- # 代码12-1 评论去重的代码 import pandas as pdimport reimport jieba.posseg as psgimport numpy as np # 去重，去除完全重复的数据reviews = pd.read_csv( ......
SQL Server CONVERT() 函数以及MySQL--数据类型转换(CAST/CONVERT)、拼接(CONCAT)
SQL Server CONVERT() 函数 (w3school.com.cn) MySQL--数据类型转换(CAST/CONVERT)、拼接(CONCAT)_zhyueln的博客-CSDN博客_mysql类型转换 ......
评论数据分析
# -*- coding: utf-8 -*- # 代码12-1 评论去重的代码 import pandas as pdimport reimport jieba.posseg as psgimport numpy as np # 去重，去除完全重复的数据reviews = pd.read_csv( ......
体积小巧却功能强大，这款DTU给你的物联网数据传输带来更多可能
在物联网应用中，设备的数据传输是非常重要的一环。而在工业环境下，对于通信设备的要求极为苛刻。一方面是项目周边环境的会有温湿度、电磁干扰等，另一方面则是对于设备的防护要求及安装方式和体积大小的需求。在这样的背景下，找到一款性能卓越、质量过硬且体积小巧、安装灵活的工业通信设备非常困难。DTU是连接设备与 ......