集群 可靠性kubernetes实战
Java 并发编程在生产应用场景及实战
背景介绍 为什么需要学习 Java 并发？ 从提升性能角度来说 提升了对 CPU 的使用效率：目前生产的服务器大多数都是多核，标配的机器都是 8C/16G。操作系统会将不同的线程分配给不同的核心处理，理论上，有多少核心就有多少个线程并行执行。如果没有并发编程，CPU 的利用率将极大的浪费，假设当前正 ......
Flink 在风控场景实时特征落地实战
背景介绍 风控简介 二十一世纪，信息化时代到来，互联网行业的发展速度远快于其他行业。一旦商业模式跑通，有利可图，资本立刻蜂拥而至，助推更多企业不断的入场进行快速的复制迭代，企图成为下一个“行业领头羊”。 带着资本入场的玩家因为不会有资金的压力，只会更多的关注业务发展，却忽略了业务上的风险点。强大如拼 ......
【Pytorch基础实战】第二节，卷积神经网络
项目地址 https://gitee.com/wxzcch/pytorchbase/tree/master/leason_2 源码 import torch from torch import nn, optim from torch.autograd import Variable from to ......
Unity 3D定点数物理引擎实战系列1.1BEPUphysicsint 3D定点数物理引擎介绍
1.1BEPUphysicsint 3D定点数物理引擎介绍 对惹，这里有一个游戏开发交流小组，希望大家可以点击进来一起交流一下开发经验呀 帧同步的游戏中如果用物理引擎，为了保证不同设备上的结果一致,需要采用定点数来计算迭代游戏过程中的物理运算。也就是我们通常说的定点数物理引擎(确定性物理引擎)。本系 ......
C++聊天集群服务器解决客户端注销登录问题
客户端如何处理注销登录问题？ 问题描述: 在客户端登录后进行注销选择，然后重新登录刚才注销的账号，直接卡死。注意这是概率发生，因为是主线程和子线程抢服务器发送的信息，只有子线程抢到才会发生卡死 问题产生原因分析： 前置条件：主线程循环等待用户输入选择（第一张图是死循环，send后立马recv ......
Kubernetes基础总结
一、 k8s简介kubernetes——容器、分布式架构 kubernetes本质是一组服务器集群，可以在集群的每个节点上运行特定的程序，来对节点中的容器进行管理。 主要功能： 自我修复 弹性伸缩——自动调整运行的容器数量 服务发现——自动找依赖 负载均衡——自动实现请求的负载均衡 版本退回 存储编 ......
kubernetes（k8s）Gitlab CI Runner 的安装
kubernetes（k8s）Gitlab CI Runner 的安装 简介 从 Gitlab 8.0 开始，Gitlab CI 就已经集成在 Gitlab 中，只要在项目中添加一个.gitlab-ci.yml文件，然后添加一个Runner，即可进行持续集成。在介绍 Gitlab CI 之前，先看看 ......
集群模式
一、Redis Cluster 1、Redis集群方案的演变 大规模数据存储系统都会面临的一个问题就是如何横向拓展。 当你的数据集越来越大，一主多从的模式已经无法支撑这么大量的数据存储，于是你首先考虑将多个主从模式结合在一起对外提供服务，但是这里有两个问题就是如何实现数据分片的逻辑和在哪里实现这部分 ......
MySQL集群
一、MySQL集群方案 1、常见MySQL集群方案 1.1、Replication 特点： 速度快 弱一致性 适用于低价值数据： 日志 新闻 帖子 1.2、PXC 特点： 速度慢 强一致性 适用于高价值数据： 订单 账户 财务 1.2.1、PXC原理 全称（Percona XtraDB Cluste ......
《业务安全实战演练》业务数据安全测试
一、业务数据安全测试 1、商品支付金额篡改 案例1 靶场链接地址：Dashboard | Web Security Academy - PortSwigger。 使用提供的用户名和密码进行登录 wiener:peter 登录后查看我们的余额现在是100元 然后回到主页选择夹克进行购买 将夹克先添加到 ......
《业务安全实战演练》业务安全测试流程梳理
一、业务安全测试 1、 业务安全测试流程 1.1 测试准备 准备阶段主要包括对业务系统的前期熟悉工作，以了解被测试业务系统的数量、规模和场景等内容。 针对白盒测试，可以结合相关开发文档去熟悉相关系统的业务。 针对黑盒测试，可通过实际操作还原业务流程的方式理解业务。 1.2 业务调研 业务调研阶段主 ......
Redis 主从集群搭建并使用 RedisTemplate 实现读写分离
单机版的 Redis 能够承载并发访问的能力有限，对于绝大多数的系统而言，都是读多写少，系统之所以宕机，一般都是因为并发读操作太高导致的宕机，因此搭建 Redis 主从集群，实现读写分离，是一种有效的提高并发访问能力的方案。 本篇博客介绍在一台虚拟机上，使用 docker-compose 模拟搭建一 ......
node.js - yarn 1.x 快速可靠安全的包管理工具
1. 安装 yarn 1 npm install -g yarn 2. 管理yarn设置 yarn config list # 查看当前设置 yarn config get <key> # 查看某项配置 yarn config delete <key> # 删除某项配置 yarn config se ......
prometheus监控k8s集群信息（通过kube-state-metrics）
prometheus监控k8s集群信息（通过kube-state-metrics） 因为通过k8s集群中kubelet和apiserver自带的一些接口来获取的信息太少，当然如果只需要监控POD的cpu、内存等信息，可能使用kubelet也够了，但是更多的信息还需要其他的工具，这里使用kube-st ......
Kubernetes集群存储解决方案GlusterFS
1、工具简介 1.1、GlusterFS 是一个开源的分布式文件系统 具有强大的横向扩展能力 通过扩展能够支持数PB存储容量和处理数千客户端 将物理分布的存储资源聚集在一起，使用单一全局命名空间来管理数据 1.2、Heketi 是一个基于RESTful API的GlusterFS卷管理框架 可以方便 ......
Linux系统下kafka集群安装部署
Linux系统下kafka集群安装部署 Linux系统下kafka集群安装部署 | 系统运维 (osyunwei.com) 2023年05月01日 ⁄ kafka ⁄ 暂无评论 ⁄ 被围观 1,254次+ Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。 操 ......
Request+Python微博爬虫实战
1 Request爬虫基础 Request爬虫基本步骤：1、构造URL；2、请求数据；3、解析数据；4、保存数据 例：爬取豆瓣某图片 import requests # 第1步：构造URL url = 'https://img3.doubanio.com/view/photo/s_ratio_pos ......
ES集群架构
一、集群节点 一个ES集群可以有多个节点构成 一个节点就是一个ES服务实例，通过配置集群名称cluster.name加入集群 那么节点是如何通过配置相同的集群名称加入集群的呢？要搞明白这个问题，我们必须先搞清楚ES集群中节点的角色。 ES中节点有角色的区分的，通过配置文件conf/elasticse ......
集群模式
一、Redis Cluster 1、Redis集群方案的演变 大规模数据存储系统都会面临的一个问题就是如何横向拓展。 当你的数据集越来越大，一主多从的模式已经无法支撑这么大量的数据存储，于是你首先考虑将多个主从模式结合在一起对外提供服务，但是这里有两个问题就是如何实现数据分片的逻辑和在哪里实现这部分 ......
MySQL集群
一、MySQL集群方案 1、常见MySQL集群方案 1.1、Replication 特点： 速度快 弱一致性 适用于低价值数据： 日志 新闻 帖子 1.2、PXC 特点： 速度慢 强一致性 适用于高价值数据： 订单 账户 财务 1.2.1、PXC原理 全称（Percona XtraDB Cluste ......
day16监控体系部署管理-K8S集群层面监控-基于Prometheus的HPA自动伸缩 (7.1-7.2)
一、打造基于Prometheus的全方位监控平台 1.1 前言 官网：https://prometheus.io/docs/prometheus/latest/getting_started/ 灵活的时间序列数据库 定制各式各样的监控规则 Prometheus的开发人员和用户社区非常活跃 独立的开源 ......
云原生周刊：Kubernetes v1.29 正式发布 ｜ 2023.12.18
开源项目推荐 Robusta KRR Robusta KRR（Kubernetes Resource Recommender）是一个用于优化 Kubernetes 集群中资源分配的 CLI 工具。它从 Prometheus 收集 Pod 使用数据，并建议 CPU 和内存的请求和限制。这降低了成本并提 ......
hadoop集群常见错误
虚拟及没有启动任何服务器查看jps会显示jps，如果没有显示任何东西 [root@slave2 ~]# jps 9647 Jps 解决方案 # 进入/tmp查看 [root@slave1 dfs]# cd /tmp [root@slave1 tmp]# ll 总用量 48 drwxr-xr-x. 2 ......
Kubernetes管理应用程序、服务常用命令、集群监视
1、如何使用Kubernetes管理应用程序 1.1 查看集群信息： kubectl cluster-info: 显示集群信息。 kubectl config view: 显示当前kubectl配置信息。 1.2 查看资源状态： kubectl get pods: 查看所有Pod的状态。 kubec ......
grid布局实战
1、grid布局两端对齐,最后一行左对齐。 display: grid; // grid-template-columns: 1fr 1fr 1fr 1fr; // 简写： grid-template-columns: repeat(4, 1fr); gap: 30px; 2、响应式布局：auto- ......
Kubernetes v1.28安装手册 - 基于Ubuntu22.04
2023年12月17日，目前k8s社区的kubernetes更新到了1.29.0版，但国内阿里云等镜像服务器，k8s软件还在1.28.2版本，k8s组件的镜像为1.28.4版。基于此，本次使用Ubuntu22.04.3+k8s1.28.2版本，在虚拟机上搭建一个3master、3worker的k8s... ......
什么是集群,什么是负载均衡
tags: 集群 负载均衡 author: zhanglei data: 2023-11-29 什么是集群？什么又是负载均衡？你说得清楚吗？ - 知乎 (zhihu.com) ......
实战 | 数据战略指导下的数据资产运营思考
“数据是企业的核心战略资产”已然成为共识。企业以数据驱动实现数字化转型，实现数据资产价值的充分释放。在明确的数据战略指导下，从数据的业务供给端出发，数据资产运营通过构建起全面有效的数据资源转化路径，提升数据质量，保障数据安全，提高业务数据化效率。从业务的数据需求端出发，数据资产运营通过拉通企业内外部 ......