集群postgresql实战patroni
java接口自动化测试实战003----fastjson处理传入参数为JSON格式数据
一、fastjson概述 1、概述 fastjson是阿里爸爸开发的一款专门用于Java开发的包，可以方便的实现json对象与JavaBean对象的转换，实现JavaBean对象与json字符串的转换，实现json对象与json字符串的转换。 2、常用API fastjson API 入口类是com ......
java接口自动化测试实战004----分表存储接口信息和用例信息之CaseUtil和RestUtil
一、分表存储用例信息和接口信息 1、实现思想 将用例相关信息存储在用例表单中，将接口信息存储在接口信息表单中，创建对应的类存储表单中的信息。 2、实现步骤 （1）修改表格文件，分表存储用例信息和接口信息，如下图所示： （2）修改ExcelUtil中的读取函数datas，让表单名称以参数形式传入，如下 ......
YARN集群中应用程序的执行流程
Hello，各位“极客”好，上一篇文章中介绍了YARN集群架构的基本内容，那么，在YARN集群中应用程序的执行流程是怎样的呢？这个问题很重要，就要好好说道说道了...... 客户端提交应用程序（可以是MapReduce程序、Spark程序等）到ResourceManager。 ResourceMan ......
前端监控系统Sentry企业级实战
一、前端监控系统 1. 什么是监控系统？为什么要对项目监控？ 在IT界内，监控系统指对项目运行的各项指标的实时记录的系统或服务，旨在提升项目质量和量化项目的各项指标，为项目发展提供可量化的依据。 一般来说项目监控是为了： 更快的发现和解决线上问题； 做产品和制定需求的决策依据； 为业务扩展提供了更多 ......
k8s集群搭建-2
一、前面做过k8s的集群搭建主要是1.24版本一下的，1.24版本后"弃用docker"改用CRI了。所以这里就之前的集群安装做一下补充。 老版集群地址：https://www.cnblogs.com/ll409546297/p/16718681.html 二、k8s版本选择：docker-ce:2 ......
SAP-DB-服务器组-003-pacemaker集群-在AWS平台里-创建及配置-SAPHanaTopology资源及SAPHana及VIP
关于基础环境的安装，还是可以参考笔者另一篇文章，APP的部分 《SAP-APP-服务器组-001-pacemaker集群的基础环境的安装部署》 https://www.cnblogs.com/5201351/p/17899446.html 1、DB需要多安装 resource-agents-sap- ......
zabbix5.0监控postgresql13.6
环境描述 zabbix版本：5.0.12 PG版本：13.6 监控需求 监控postgresql运行情况（非核心业务，主要监控挂没挂） 监控流复制运行情况 如有异常，则告警 具体步骤 在postgresql上创建监控用户， 授权， 并配置pg_hba.conf 文件允许通过该用户去访问 到zabbi ......
Zookeeper-快速入门、服务搭建、集群搭建教程
官网：https://zookeeper.apache.org/ zookeeper常用用途： 集群管理，zookeeper作为注册中心，管理服务提供方的ip地址端口号url信息，并在服务消费方请求需要时发送给服务消费方。 配置中心（不过一般用阿波罗apollo或者阿里的Nacos来做） 多个app ......
ceph集群搭建详细教程（ceph-deploy）
ceph-deploy比较适合生产环境，不是用cephadm搭建。相对麻烦一些，但是并不难，细节把握好就行，只是命令多一些而已。 实验环境 服务器主机 public网段IP（对外服务） cluster网段IP（集群通信） 角色 deploy 192.168.2.120 用于部署集群、管理集群 cep ......
PostgreSQL的安装和卸载
一、PostgreSQL的卸载 查看版本号和系统类别： cat /etc/redhat-release 如果是redhat/centos:(yum install) yum 删除软件包： yum remove postgresql* 删除相关目录文件： rm -rf /var/lib/pgsql r ......
postgresql13.6流复制主从同步
安装好PG之后，如果给线上业务使用，至少得弄个主从，否则主库挂了，就可能导致业务长时间受影响。下面来看看怎么配置PG主从。 环境描述： PG版本：13.6 主库IP：172.16.103.225 从库IP：172.16.103.226 数据目录：/postgresql/pgdata 搭建主从（流复制 ......
搭建ceph集群
本文完全拷贝出处：https://www.cnblogs.com/qiuhom-1874/ 前文我们了解了Ceph的基础架构和相关组件的介绍，回顾请参考https://www.cnblogs.com/qiuhom-1874/p/16720234.html；今天我们来部署一个ceph集群； 部署工具介 ......
YARN集群架构
玩Hadoop的不知道YARN？这简直是天大的笑话！之前介绍Hadoop核心组件的时候（详见《Hadoop的“前世今生”》那篇博文）就曾提到过“YARN是实现了集群资源管理以及作业调度的框架”，那么本文就对YARN集群架构做进一步的介绍。 YARN集群总体上是经典的Master/Slave架构，主要 ......
JVM实战-G1参数调优
G1简介 G1 GC，全称Garbage-First Garbage Collector，在JDK1.7中引入了G1 GC，从JAVA 9开始，G1 GC是默认的GC算法。通过-XX:+UseG1GC参数来启用。 G1收集器有分区概念，是工作在堆内不同分区上的收集器。G1的分区既可以是年轻代也可以是 ......
Hive和Spark生产集群搭建
1.环境准备 1.1 版本选择 序号 bigdata-001 bigdata-002 bigdata-003 bigdata-004 bigdata-005 MySQL-8.0.31 mysql Datax Datax Datax Datax Datax Datax Spark-3.3.1 Spar ......
Hadoop生产集群搭建
1.环境准备 1.1 集群规划 序号 bigdata-001 bigdata-002 bigdata-003 bigdata-004 bigdata-005 IP x x x x x x xxx xxx xxx 组件 hadoop1 hadoop2 hadoop3 hadoop4 hadoop5 节 ......
PostgreSQL从入门到精通教程 - 第39讲：数据库完全恢复
PostgreSQL从小白到专家，是从入门逐渐能力提升的一个系列教程，内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容，希望对热爱PG、学习PG的同学们有帮助，欢迎持续关注CUUG PG技术大讲堂。 第39讲：数据库完全恢复 PostgreSQL第39讲：12月23日(周 ......
centos7上源码安装postgresql 13.6
1 环境描述 操作系统:Centos7.6 postgresql:13.6 安装方式：源码安装 2 创建用户 # groupadd -g 2000 pgsql # useradd -u 2000 -g pgsql pgsql 3 目录规划 # mkdir -p /postgresql/{pgdata ......
Maven-Introduction to the Dependency Mechanism | Maven实战--- dependencies与dependencyManagement的区别
Maven – Introduction to the Dependency Mechanism https://maven.apache.org/guides/introduction/introduction-to-dependency-mechanism.html#:~:text=The de ......
postgresql常用创建用户和授权
需求 （1）给用户a创建一个数据库，并且给a用户对这个库有所有权限 （2）给read_a用户对这个数据库有只读权限 步骤 1.创建用户a 2.创建数据库db_a， 并设置owner为a 3.回收默认的public schema create权限 4.设置db_a的public schema 默认的o ......
【业务安全实战演练】业务接口调用模块测试9
业务接口调用模块 1，接口调用重放测试 测试方法：接口调用重放测试可以理解成重放测试，接口也就是数据请求，功能很多，例如发布文章，发布评论，下订单，也可以理解成只要请求有新的数据生成，能重复请求并成功，都可以算请求重放，也就是接口重放测试。 修复方法：对生成订单缓解可以使用验证码，防止生成数据的业务 ......
《Java架构师的第一性原理》26Java基础之Netty源码剖析与实战（极客时间 傅健）
极客时间 98.Netty源码剖析与实战 课程名称：极客时间《Netty源码剖析与实战》 讲师简介 傅健，Netty 源码贡献者。 思科中国研发中心平台软件工程师，毕业后一直在思科工作，已有 9 年。做过很多项目，从移动端应用到文档存储系统、从消息系统到电话接入系统，接触过很多不同类型的开源软件且很 ......
K8S的污点和容忍度(理论+实战)
5分钟搞懂K8S的污点和容忍度(理论+实战) 不焦躁的程序员 软件开发行业 研发总监 3 人赞同了该文章 本文主要快速讲解Kubernetes的污点和容忍度，一句话总结：如果Pod能容忍某个节点上的污点，那么Pod就可以调度到该节点。 在K8S中，如果Pod能容忍某个节点上的污点，那么Pod就可 ......
《业务安全实战演练》时效绕过测试10
一、大多有利用的案例发生在验证码以及业务数据的时效范围上，在之前的总结也有人将12306的作为典型，故，单独分类。 1、时间刷新缺陷 12306网站的买票业务是每隔5s，票会刷新一次。但是这个时间确实在本地设置的间隔。于是，在控制台就可以将这个时间的关联变量重新设置成1s或者更小，这样刷新的时间就会 ......
【业务安全实战演练】密码找回模块测试08
一、验证码客户端回显测试 典型场景： 任意用户登录 使用验证码的场景： 人机验证：防止机器操作，爆破表单。唯一凭据：唯一性判断，任意账户登录。 找回密码测试中要注意验证码是否会回显在响应中，有些网站程序会选择将验证码回显在响应中，来判断用户输入的验证码是否和响应中的验证码一致，如果一致就会通过校验 ......
Apache Kyuubi 讲解与实战操作
目录一、概述二、Spark Kyuubi 架构三、Hadoop 基础环境安装1）hadoop 下载部署包2）创建网络3）部署MySQL4）部署 Hadoop Hive四、Spark Kyuubi 安装1）下载 Kyuubi2）下载 Spark32）配置 Kyuubi （Spark3）3）启动 Kyu ......
风控决策引擎——决策流构建实战
引言 本篇主要聚焦介绍风控决策引擎中决策树编排能力的构建。决策引擎是风控的大脑，而决策树的编排能力和体验是构建大脑的手段，如何构建高效、丝滑、稳定可靠的决策树编排能力，是对风控决策引擎的一大挑战，本篇文章和大家分享一下过往构建心得。 背景 任何系统在初期构建肯定不是往“一步到位”的方向去构建的，只是 ......
【业务安全实战演练】业务流程乱序测试07
一、流程乱序测试 1 、测试原理和方法 该项测试主要针对业务流程的处理流程是否正常，确保攻击者无法通过技术手段绕过某些重要流程步骤，检验办理业务过程中是否有控制机制来保证其遵循正常流程。例如业务流程分为三步：第一步，注册并发送验证码；第二步，输入验证码；第三步，注册成功。在第三步进行抓包分析，将邮箱 ......
Java 并发编程在生产应用场景及实战
背景介绍 为什么需要学习 Java 并发？ 从提升性能角度来说 提升了对 CPU 的使用效率：目前生产的服务器大多数都是多核，标配的机器都是 8C/16G。操作系统会将不同的线程分配给不同的核心处理，理论上，有多少核心就有多少个线程并行执行。如果没有并发编程，CPU 的利用率将极大的浪费，假设当前正 ......