数据库 数据docker redis

支持10倍订单增长,携程数据库架构升级实践

随着机票订单业务的不断增长,当前订单处理系统的架构已经不能满足日益增长的业务需求,系统性能捉襟见肘,主要体现在以下方面: 数据库CPU资源在业务高峰期经常达到50%以上,运行状况亮起了黄灯; 磁盘存储空间严重不足,需要经常清理磁盘数据腾挪可用空间; 系统扩容能力不足,如果需要提升处理能力只能更换配置... ......
架构 订单 数据库 数据

docker安装OP

docker pull xuanaimai/onecloud:21-03-05复制代码开启网卡混杂模式ip link set eth0 promisc on复制代码 创建网络docker network create -d macvlan --subnet=192.168.102.0/24 --ga ......
docker

安装 Docker 程序

安装 Docker 程序apt update && apt install docker.io 内置青龙面板的安装脚本install-qinglong.sh 内置了容器管理面板的安装脚本install-portainer.sh 内置了特斯拉监控程序的安装脚本install-teslamate1.sh ......
程序 Docker

docker常用命令

docker images 列出已安装的镜像docker ps 列出正在运行的容器docker ps -a 列出所有容器,包括未运行docker stop xxx 停止 xxx 容器docker rm xxx 删除 xxx 容器docker rmi mrdoc 删除 xxx 镜像 systemctl ......
命令 常用 docker

安装docker可视化管理工具 Portainer

可视化管理工具 Portainer 2023/1/13 17:17 拉取汉化版镜像docker pull 6053537/portainer-ce 创建数据卷docker volume create portainer_data 创建‎‏容器docker run -d--name portainer ......
管理工具 Portainer 工具 docker

docker容器更新

docker run -d--name watchtower-v /var/run/docker.sock:/var/run/docker.sockcontainrrr/watchtower 第二种命令 docker run -d \ --name watchtower \ --restart un ......
容器 docker

GFS数据抽取与导出至MYSQL

前言:近期,公司APP需要接入天气类数据,多方寻找,终于找到一个开源的且有较高权威的、免费的数据源,中间踩过的一些坑一一记录下来。 1.数据来源GFS(全球天气预报系统(Global Forecasting System)),该系统每天发布4次全球范围的气象数据,分辨率有四种:0.25° x 0.2 ......
数据 MYSQL GFS

nginx 进行tcpip 数据端口映射

TCP port mapping stream{ upstream tcpLink { hash $remote_addr consistent; server xxx:3306 weight=5 max_fails=3 fail_timeout=30s; } server { listen 700 ......
端口 数据 nginx tcpip

docker部署es与kibana

1. 搜索版本docker search elasticsearch 2. 拉取镜像docker pull elasticsearch:7.10.1 3. 创建目录mkdir -p /docker/elasticsearch/{logs,conf,data,plugins}# cd /docker/ ......
docker kibana

.NET 通过Word模板,使用AsposeWord进行数据动态导出Word

@ 先看一下导出的整体效果(如下图),其中标注的区域都是通过后台动态生成的: 一、先在Word中建立好表格模板 1.1、参数创建方法(Word和WPS) 1.1.1、Office中Word域的创建 1.1.1.1、选中指定的单元格 -> 点击头部工具栏中的”插入“ -> 选择 ”文档部件“ -> 选 ......
Word AsposeWord 模板 动态 数据

数据结构(1)

单链表 #include <iostream> using namespace std; const int N = 1e6+10; int shuzhi[N], next_position[N]; int head, idx ; //头结点下标、当前的下标 void init() { head = ......
数据结构 结构 数据

机器学习算法(五):基于企鹅数据集的决策树分类预测

决策树的主要优点: 1. 具有很好的解释性,模型可以生成可以理解的规则。 2. 可以发现特征的重要程度。 3. 模型的计算复杂度较低。 决策树的主要缺点: 1. 模型容易过拟合,需要采用减枝技术处理。 2. 不能很好利用连续型特征。 3. 预测能力有限,无法达到其他强监督模型效果。 4. 方差... ......
企鹅 算法 机器 数据

数据类型-Sorted Set(待补充)

Redis为什么使用skiplist而不是平衡树 Redis中的skiplist主要是为了实现sorted set相关的功能,红黑树当然也能实现其功能,为什么redis作者当初在实现的时候用了skiplist而不是红黑树、b树之类的平衡树? 而且显然红黑树比skiplist更节省内存啊! Redis ......
类型 数据 Sorted Set

CentOS7环境下数据库运维---主从复制、读写分离

1.理解MySQL主从复制原理 主服务器开启binlog日志,从库生成log dump线程,将binlog日志传给从库I/O线程,从库生成俩个线程,一个是I/O线程,一个是SQL线程,I/O线程去请主库的binlog日志,并将binlog日志中的文件写入relay log中,sql线程会读取rela ......
主从 CentOS7 环境 数据库 数据

redis

1.redis的应用场景 1.5大value类型: 2.基本上就是缓存。 ###2.redis是单线程还是多线程? 1.无论什么版本工作线程就是一个。 2.6.x版本出现了IO多线程。 3.单线程,满足redis的串行原子性,只不过IO多线程后,把输入和输出放到更多的线程里面去并行,好处:1.执行时 ......
redis

数据结构-跳表

数据结构 /* ZSETs use a specialized version of Skiplists */ typedef struct zskiplistNode { sds ele; double score; struct zskiplistNode *backward; struct z ......
数据结构 结构 数据

数据结构(第二章)

数据结构(第二章) 一、线性表 概念:线性表是具有相同数据类型的n(n>0)个数据元素的有序数列。 第一个元素没有直接前驱,最后一个元素没有直接后继。 表中元素的个数有限 表中元素具有逻辑上的顺序性,表中元素有其先后顺序。 表中元素都是数据元素,每个元素都是单个元素。 表中元素的数据类型相同,这意味 ......
数据结构 结构 第二章 数据

前端用户图像传递给后端数据库

在业务中,我们将图片上传到服务器之后,需要将图片保存地址返回给前端和保存在数据库中,那么怎么获得这个地址呢? 图片上传到哪里了??? 上传到什么服务器??? 前端上传 后端获取URL地址,保存数据库 数据库查询,返回URL地址前端,显示 ......
前端 图像 数据库 数据 用户

ghidra---导出数据到文件

Ghidra里,没有比较方便的方法直接导出数据到文件,可以执行python脚本实现。 写了一个Ghidra用的脚本: https://github.com/qux-bbb/ghidra-scripts/blob/master/export_data_to_file.py, 可以复制直接用了,下面... ......
文件 数据 ghidra

Redis的基本知识

##基础 端口号6379 redis共有16个数据库,默认使用的是第一个。 切换数据库命令:select 2 数据库的大小DBSIZE 设定值:set key value 取值:get key value 查看数据库所有的 key: keys* 清空当前数据库:flushdb 清楚所有数据库:FLU ......
基本知识 知识 Redis

docker-compose部署elk并设置账户密码

docker-compose部署elk并设置账户密码系列 最近因为在搭建微服务环境所以要用到elk首先介绍一下什么是elk,以及负责的功能模块(部署的过程比较坎坷我尽量把遇到的坑,以及如何排查问题的方式顺便介绍一下) ELK是Elasticsearch、Logstash、Kibana三大开源框架首字 ......
docker-compose 账户 密码 compose docker

批量删除和如何进行部分字段修改数据

1.单个删除和批量删除: 2.url 3.单个删除:将id为1的is_delete改成True(即1) 4.批量删除:会将包含在列表中的ID进行删除_即is_delete改为1 5.添加partial=True可以在传参的时候只传需要修改的部分字段 5_1.添加partial=True响应测试 ......
字段 部分 数据

如何快速实现数据库读写分离

实现读写分离可以使用AOP(面向切面编程)思想,通过划分事务的读写属性,将其分别交由读写数据库实例来处理。下面是实现读写分离的代码示例:```using System;using System.Linq;using System.Transactions;using System.Collectio ......
数据库 数据

wsl 中 docker-compose 搭建 kafka 集群出现的外部访问错误

在 wsl 中用 docker-compose 搭建了一台 zookeeper + 三台 broker 的 kafka 集群,使用的镜像是 bitnami/kafka,在按照镜像文档运行容器后,发现运行在宿主机里的客户端程序无法正确的推送/消费消息,研究后发现镜像文档只适用于客户端程序和 kafka ......
集群 docker-compose 错误 compose docker

数据从业者成长的5个阶段

数据从业者的使命是用数据驱动业务,但数据本身无法直接驱动业务,因此必然要经历从数据到信息、从信息到知识,再从知识到智慧的过程。 数据从业者的成长要起于数据,终于业务,让数据产生真正的智慧。 参考链接:数据从业者成长的五个阶段 ......
从业者 阶段 数据

你能说一下Redis的常见应用场景吗?

Redis是一个key-value型的数据库(相比较之下,MySQL是关联数据库),所有数据在使用时都存放在内存中。 这包含了两层含义: 单台Redis能存放多少数据,取决于其内存的大小(假设所有内存都给Redis用)。如果需要存放更多数据,可以增加内存或做集群。 Redis支持将数据持久化到磁盘中 ......
场景 常见 Redis

mysql数据库备份与恢复

环境:CentOS7.9 mysql-5.7 1.数据库准备,建表 create database school; CREATE TABLE student ( id INT(10) NOT NULL UNIQUE PRIMARY KEY , name VARCHAR(20) NOT NULL , ......
备份 数据库 数据 mysql

kubernetes failed to create kubelet: misconfiguration: kubelet cgroup driver: "cgroupfs" is different from docker cgroup driver: "systemd"

错误原因 kubernetes 的文件驱动与 docker 不一致,导致镜像无法启动。 docker info 可以看到驱动方式 Cgroup Driver: systemd。 解决方案 统一资源管理,一致使用 systemd 或者 cgroupfs。 在 Linux 上,控制组(CGroup)用于 ......
quot kubelet cgroup driver misconfiguration

数据类型-Hash

参考数据类型与底层数据结构,Hash类型存在压缩列表和哈希表两种数据结构。 当Hash中节点比较少的情况下,底层才用压缩列表ziplist进行存储数据,随着数据的增加,底层的ziplist就可能会转成哈希表hashtable,具体配置如下: 元素个数小于 hash-max-ziplist-entri ......
类型 数据 Hash