银行业 架构 银行 数据
一文搞定接口幂等性架构设计方案
幂等性介绍 现如今很多系统都会基于分布式或微服务思想完成对系统的架构设计。那么在这一个系统中，就会存在若干个微服务，而且服务间也会产生相互通信调用。那么既然产生了服务调用，就必然会存在服务调用延迟或失败的问题。当出现这种问题，服务端会进行重试等操作或客户端有可能会进行多次点击提交。如果这样请求多次的 ......
19 18 | 架构设计，专业分工和协作精神的体现
你好，我是乔新亮。今天，我想和你聊聊，关于架构设计的一些认知和体会。 作为技术人，最常接触的概念，恐怕就是架构设计了。即便是初出茅庐的新手程序员，可能也听说过 6 大设计原则与 23 种设计模式。因为，要成为管理者或技术专家，架构设计绝对是你绕不开的槛。 因此，关于架构设计的书和课程非常多，多到简直 ......
18 17 | 架构决策，是技术管理者最重要的能力
你好，欢迎来到我的专栏：「乔新亮的 CTO 成长复盘」第三章 —— 也是最后一章：「对专业成长的复盘」，我是乔新亮，很高兴能见到你。 说起来真的有点感慨，自从 10 月 26 日专栏上线起，眨眼间，我们共同度过了一月有余的时光。 在这段时间里，有超过 3500 人加入课程，与你我一起成长。专栏共发布 ......
09-内置对象扩展：Set数据结构
title: 09-内置对象扩展：Set数据结构 publish: true Set 数据结构 Set 数据结构的介绍 ES6 提供了 新的数据结构 Set。Set 类似于数组，但成员的值都是唯一的，没有重复的值。 Set 的应用有很多。比如，在 H5 页面的搜索功能里，用户可能会多次搜索重复的关键 ......
Vue3+TS+Node打造个人博客（后端架构）
在使用 Express 搭建后端服务时，主要关注的几个点是： 路由中间件和控制器 SQL处理 响应返回体数据结构 错误码 Web安全 环境变量/配置 路由和控制器 路由基本上是按模块或功能去划分的。 首先是按模块去划分一级路由，各个模块的子功能相当于是用二级路由处理。 简单举个例子，/article ......
根据EXCEL数据自动生成WORD文档
如何通过excel批量生成word文件？大家应该都有批量生成word文件的工作经历。 相信有很多小伙伴都遇到过，一个excel表格里有一批明细数据，然后需要一次性把这些明细数据生成对应的word文件，这项工作如果手动做，一个一个的创建word文件，那工作效率会非常的低。有没有高效快捷的办法批量生成呢 ......
Python常用数据结构之元组
前面的两节课，我们为大家讲解了 Python 中的列表，它是一种容器型的数据类型，通过列表类型的变量，我们可以保存多个数据并通过循环实现对数据的批量操作。当然，Python 中还有其他容器型的数据类型，接下来我们就为大家讲解另一种容器型的数据类型，Python常用数据结构之元组（tuple）。 元组 ......
每个节点上的cadvisor采集数据后通过aggregate api将转换交给 metric-server
metric-server主要用来通过aggregate api向其它组件（kube-scheduler、HorizontalPodAutoscaler、Kubernetes集群客户端等）提供集群中的pod和node的cpu和memory的监控指标，弹性伸缩中的podautoscaler就是通过调用 ......
数据库 分表分库
一、分表分库 1、垂直分区： 根据数据库里面数据表的相关性进行拆分。 例如，用户表中既有用户的登录信息又有用户的基本信息，可以将用户表拆分成两个单独的表，甚至放到单独的库做分库。 简单来说垂直拆分是指数据表列的拆分，把一张列比较多的表拆分为多张表。 垂直拆分的优点： 可以使得行数据变小，在查询时减少 ......
数据库 锁
一、行级锁，表级锁和页级锁 在关系型数据库中，可以按照锁的粒度把数据库锁分为行级锁(INNODB引擎)、表级锁(MYISAM引擎)和页级锁(BDB引擎 )。 MyISAM和InnoDB存储引擎使用的锁： MyISAM采用表级锁(table-level locking)。 InnoDB支持行级锁(ro ......
数据库 事务
一、事务 概念 事务是一组可执行的操作单元。访问并可能更新数据库中各种数据项的一个程序执行单元(unit)。 特性： 事务是恢复和并发控制的基本单位。事务具备四个属性 ACID 1. 原子性（Atomicity） 事务被视为不可分割的最小单元，事务的所有操作要么全部提交成功，要么全部失败回滚。 回滚 ......
DQL(数据查询)
DQL(数据查询) 基础查询 不推荐 select * from 表名; -- 查询所有列的所有数据，列名的列表可以使用*代替，但是以后在公司是不让使用的 为了语法规范 建议一个个写 推荐 select 列名1,列名2,... from stu; select id,name,age,sex,add ......
1688中国站按关键字搜索新品数据API接口
阿里巴巴(1688.com)是全球企业间(B2B)电子商务的著名品牌,为数千万网商提供海量商机信息和便捷安全的在线交易市场,也是商人们以商会友、真实互动的社区平台。 新品数据关键词搜索操作如下： 参数说明 version:API版本 key:调用key,测试key:test_api_key api_ ......
挂载新数据盘
1.lsblk查看可用磁盘设备及其挂载点,如下图vdb盘没有挂载点 sudo lsblk NAME MAJ:MIN RM SIZE RO TYPE MOUNTPOINT vda 253:0 0 50G 0 disk └─vda1 253:1 0 50G 0 part / vdb 253:16 0 5 ......
jmeterGUI页面数据分析
转载：http://www.cnblogs.com/leeboke/p/5238269.html 参考资料：https://girliemangalo.wordpress.com/2009/10/29/jmeter-run-scripts-from-the-console/ 结果分析参见：http: ......
数据库3.49到3.68例程
3.49 查询每个学生及其选修课程的情况 3.50 对[例33]用自然连接完成 3.51 查询选修2号课程且成绩在90分以上的所有学生的学号和姓名。 3.52 查询每一门课的间接先修课（即先修课的先修课） 3.53 改写[3.49 查询每个学生及其选修课程的情况 3.54 查询每个学生的学号、姓名、 ......
心法|大型高并发系统的逃生能力架构要如何设计
故障是无法避免的，所以作为一个大型互联网系统，逃生能力的架构设计尤其重要，一个具备优秀逃生能力的系统，在故障发生后，可以把用户影响降到最低甚至无损，多年在小爱/米家一次次大小故障的处理和复盘中，慢慢形成了一些经验和方法的思考。 大型互联网系统，模块多、依赖关系和运行环境复杂，逃生能力一定是要拿出来当 ......
记录一次使用 表达式引擎 自定义注解 还有 sql union all 实现对数据库数据提取、重组、计算的业务 mybatis-plus + SpringBoot
这样编写减少了前后端很多没必要的遍历，以及if判断并最大限度提高了代码的可变通性 额外需要学习的是ORM框架下，如何接收多表（各表结构不同）操作后，sql返回的新结构的临时表问题 表达式引擎用到的依赖 <dependency> <groupId>org.apache.commons</groupId ......
电子表格 VS 数据网格，你的React应用程序应该怎么选？
电子表格和数据网格：乍一看他们似乎是可互换的组件，由于两者都是用表格显示来格式化大量数据，因此很难知道应该为React应用程序选择哪个选项。 尽管它们的外观相似，但提供了非常不同的功能——选择错误的一个将对用户体验产生负面影响，了解两者之间的差异，以及它们最能解决哪些问题，将帮助您为React应用程 ......
大型互联网系统技术架构设计的4个基本要素
作为一名大厂SRE，对什么是好产品（技术架构角度）有深刻的感悟。一个好产品的技术架构不仅在优秀的代码本身，更体现在后期的易运维性、可扩展性、高可用性上。随着用户体量、产品功能、IaaS、PaaS的变化甚至员工的离职，随时需要动态调整架构改变策略来应对各种问题，而这些场景都是对技术架构是否优秀、是否有 ......
认知|运维中数据的认识和应用——数据驱动运维
随着行业的发展，运维职能在发生微妙的变化，现在谈大厂SRE的方向，其实我觉得更像是技术运营，通过运营的方式技术的手段牵头协同各部门来保证产品的SLA（服务质量），控制产品的成本，提高管理的效率，从传统运维转身至SRE，SRE慢慢从后台部门走向前台，从成本部门走向生产力部门，从系统稳定性走向用户稳定性 ......
padans关于数据处理的杂谈
情况：业务数据基本字段会有如下： Index(['时间', '地区', '产品', '字段', '数值'], dtype='object') 这样就会引发一个经典“三角不可能定理”，如何同时简约展现分时序、分产品、分字段数据。）一般来说， 1、时序为作为单独的分类， 2、然后剩下两个标签就是，要么： ......
关于DB2数据库基本信息查询语句
1.1 数据库的启停启动数据库： db2start关闭数据库： db2stop（在关闭前先执行db2 force application all(关闭所有正在执行的连接)）或者直接执行db2stop force(不是优先选择))# --有时候db2 force application all关闭不了 ......
界面控件DevExpress WinForm的垂直网格组件，让数据展示更灵活！
DevExpress WinForm Vertical Grid（垂直网格）组件设计用于提供UI灵活性，它允许显示数据集中的单个行，或在其90度反向网格容器中显示多个数据集行。此外，开发者还可以将其用作属性网格，就像在Visual Studio IDE中找到的那样。 PS：DevExpress Wi ......
从Pandas快速切换到Polars ：数据的ETL和查询
对于我们日常的数据清理、预处理和分析方面的大多数任务，Pandas已经绰绰有余。但是当数据量变得非常大时，它的性能开始下降。 我们以前的两篇文章来测试Pandas 1.5.3、polar和Pandas 2.0.0之间的性能了，Polars 正好可以解决大数据量是处理的问题，所以本文将介绍如何将日常的 ......
Python数据挖掘之关联规则学习
一、关联算法应用介绍 关联规则分析是数据挖掘中最活跃的研究方法之一，目的是在一个数据集中找出各项之间的关联关系，而这种关系并没有在数据中直接表示出来。常见于与购物篮分析。 常用关联算法表如下，简单理解的话，就是测算某几项东西一起出现的概率。比如：如果测算得出，大量订单中出现面包、牛奶这两个东西，那么 ......
虹科干货 | 打破传统！金融界黑科技—虹科Redis企业版数据库
许多传统金融机构面临的“老年病”问题仍在阻碍其数字化转型之路。针对这一挑战，一些具有前瞻眼光的金融初创企业开始采用高性能、高可用的虹科Redis企业版数据库来应对海量实时数据和复杂查询需求，提升服务质量和客户满意度。这不仅有助于金融机构应对数字化变革带来的挑战和压力，更能够满足客户的期望，促进金融行... ......
【获奖案例巡展】信创先锋之星——云上贵州信创工程中心大数据中台
为表彰使用大数据、人工智能等基础软件为企业、行业或世界做出杰出贡献和巨大创新的标杆项目，星环科技自2021年推出了“新科技 星力量” 星环科技科技实践案例评选活动，旨在为各行业提供更多的优秀产品案例，彰显技术改变世界的力量，目前已成功举办两届，收到了来自各界的积极参与。 第二届星环科技科技实践案例评 ......
使用存储过程自动备份数据库
一、创建存储过程完全备份数据库 USE [某某数据库]GO/****** Object: StoredProcedure 某某数据库 Script Date: 2023/4/20 9:30:38 ******/SET ANSI_NULLS ONGOSET QUOTED_IDENTIFIER ONGO ......