分布式 业务 问题 历史
TOP N问题
已知用户浏览商品的浏览日志表（visit_table）: 求2月份每个商品浏览次数Top 3。 select name ,userid ,visit_cnt from ( select * ,row_number(position by name order by visit_cnt desc) a ......
盘点一个Pandas取值的问题（下篇）
大家好，我是皮皮。 一、前言 前几天在Python白银交流群【上海新年人】问了一个Pandas数据提取的问题，上一篇文章我们介绍了基础篇，这一篇文章我们来延伸下，你想象下，我想要14和15行该怎么写？ 二、实现过程 后来【论草莓如何成为冻干莓】给了一份代码，print(df.loc[[14, 15] ......
用户次留问题
已知某款应用的用户登录日志表（login_table）： 求此应用2月份用户的次留，3日、7日用户留存率。 select user_login_date ,retained_1_uv / retained_uv as retained_1_ctr --次留率 ,retained_3_uv / ret ......
02_回归问题
回归问题 回归问题为监督学习问题，大多数是以已有的数据建立模型来预测准确的值，一般分为线性回归和非线性回归 一、线性回归 1、举个栗子 以银行贷款额度为例 工资 年龄 额度 4000 25 20000 8000 30 70000 5000 28 35000 7500 33 50000 12000 4 ......
时间工具类之“LocalDateTime方案转换地域性时差问题->自定义时间 转 UTC时间
一、使用方法 1.这里有使用LocalDateTime，Date, 2.直接使用LocalDateTime来将输入时间转为UTC还是没有摸索到，看了下源码发现根据偏移量去处理的，但是没有测试成功所以换了一种方案 二、代码 测试方案 @Test public void wzwLocalDateTime ......
Docker+SEATA+Nacos+SpringBoot实现分布式事务
Docker+SEATA+Nacos+SpringBoot实现分布式事务 1. 服务端 示例SEATA版本：1.6.1 1.1. 配置的创建 docker pull seataio/seata-server:1.6.1 # 这里的运行只是为了获取里面的配置，将配置拿出来到宿主机后进行配置再删除容器再 ......
Config：Spring Cloud分布式配置组件
Config：Spring Cloud分布式配置组件 问题总结 Spring Cloud Config? Spring Cloud Config工作原理？ Spring Cloud Config 的特点？ Config+Bus 实现配置的动态刷新？ 问题答案 Spring Cloud Config ......
[go 面试] 为并发加锁：保障数据一致性（分布式锁）
原创 TimLiu 爱发白日梦的后端 2023-12-01 08:01 发表于广东 爱发白日梦的后端 专注 Go 语言领域的发展，学习成为更牛逼的架构师，日常分享 Go 语言、架构、软件工具的使用。 159篇原创内容 公众号 在单机程序中，当多个线程或协程同时修改全局变量时，为了保障数据一致性，我们 ......
履机乘变，轻舟便楫：源启分布式PaaS深度赋能企业级技术平台建设
导语 源启分布式PaaS平台围绕应用视角为用户提供应用运行的全生命周期管控能力，提供注册中心、服务路由、网关、服务治理等中间件技术支持，实现应用之间的联通，解决客户多厂商产品不兼容、产品组合不可选择、孤岛效应等问题，满足企业级应用集成需要，实现降本增效。 在《洞若观火，明察秋毫：源启一体化监控平台构 ......
记一次安服面试问题
1. 自我介绍 巴拉巴拉，自我介绍，感觉像是在推销自己，叫什么名字，来着哪个学校，读的什么专业，主修课程有哪些，学习成绩好的可以说排名，不好的可以省略，在校期间都学习到了什么，掌握了什么技能，获得了哪些认证，熟悉什么安全工具，最后个人的优势。 2. windows主机安全加固 这个就比较简单了，使用 ......
你尚未连接--代理服务器可能会有问题，或地址不正确
这种情况可能是自动开启了代理服务器； 解决方法： 1、控制面板->网络和Internet 2、Internet选项； 3、连接->局域网设置 4、把代理服务器的沟沟取消，点击确定 这样就解决了 原文链接：你尚未连接--代理服务器可能有问题，或地址不正确。-CSDN博客 (baidu.com) ......
pip：离线安装第三方包时出现的一系列问题
1、第三方包离线下载时，如何选择正确的包？包名中的各项是什么意思？ 学习自：python下载包的时候，如何选择是win32，还是amd64的，其中的cp又是什么意思？-CSDN博客 `cp37-cp37m-win_amd64`是什么？-CSDN博客 1）计算机架构 32位的Windows，称作Win ......
vue使用问题记录:父组件通过props传给子组件数据,后改变数据,要使用nextTick,否则修改滞后,可能造成bug
问题如标题所写 代码示例: 父组件: <template> <div class=""> <div class=""> <t-form ref="formData" :data="data.formData" colon label-width="100px" label-align="right" ......
《中国人民银行业务领域数据安全管理办法》与个人信息保护关键技术研究 | 京东云技术团队
在大数据环境下，通过个人用户网络活动产生的数据，可以清晰地分析出用户的年龄、职业、行为规律和兴趣爱好。特别是随着电子商务和移动网络的应用和普及，个人用户的地址、联系方式和银行账户信息也可以通过大数据挖掘或网络爬虫等手段获取。因此，个人信息安全管理压力增大，用户个人信息泄露事件时有发生。莫名其妙的销售 ......
Win11环境Mecab日语分词和词性分析以及动态库DLL not found问题(Python3.10）
日语因为存在假名，会导致翻译软件进行翻译时机翻味道过重的问题，比如積ん読（つんどく）这个词，大多数软件会翻译成：堆积的读，但其实是明明买了书却不读，光放着的意思。有时候也需要单独查句子中的单词释义来理解句子的意思，但一看下去全是假名，无法像中文或者英文那样进行简单的分词操作。 本次我们基于Pytho ......
解决 FastApi 响应体中 datetime 时间格式化问题 ISO 8601: "T"
现象描述 当 FastApi 访问数据库或其他遇到 datetima 时间场景时，若直接返回响应结果，时间会被自动格式为："2024-01-01T09:30:14",而不是 "2024-01-01 09:30:14" 本文包含2种处理方法，分别对应2种响应模型，解决办法，看这里 解决方法 第1种，直 ......
中间件 ZK分布式专题与Dubbo微服务入门 1-3 分布式系统的瓶颈以及zk的相关特性
0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12661 1 重点关注 1.1 zk的相关特性 2 课程内容 2.1 zk的相关特性 一致性:数据一致性，数据按照顺序分批入库原子性:事务要么成功要么失败，不会局部化 单一视图:客户端连接集群中 ......
前端开源项目UIRecorder录制脚本遇到的一些问题
D:\nodejs\node_global>uirecorder init __ ______ ____ __ / / / / _/ / __ \___ _________ _________/ /__ _____ / / / // / / /_/ / _ \/ ___/ __ \/ ___/ __ ......
identityserver4 安装证书遇到的问题
1、自己生成证书，需要用到openssl，官方下载地址 https://slproweb.com/products/Win32OpenSSL.html 2、到安装目录：C:\Program Files\OpenSSL-Win64\bin打开cmd，或配置class环境变量 3、创建密钥（zamone ......
Bean无法注入问题 NoSuchBeanDefinitionException: No qualifying bean of type 'Service.UserService' available: expected at least 1 bean which qualifies as autowire candidate
运行@Test时 UserService 无法完成注入 @SpringBootTest//自动创建Spring上下文环境class MybatisPlusApplicationTests { @Resource private UserService userService; @Test void ......
如何使用Redisson实现分布式锁？
在分布式系统中，当多个线程（或进程）同时操作同一个资源时，为了保证数据一致性问题，所以就需要一种机制来确保在同一时间只有一个线程（或进程）能够对资源进行修改，这就是分布式锁的作用。 分布式锁是一种在分布式环境下的锁实现，它允许在多个进程或服务器之间协调对共享资源的访问或操作。分布式锁的关键特性是它能 ......
什么是正态分布?
正态分布（Normal distribution），又名高斯分布（Gaussian distribution），简称正态曲线（Normal curve），是统计学中一种常见的连续概率分布，在许多自然现象中都十分常见。正态分布曲线呈钟形，两头低而中间高，左右对称。正态分布曲线的均值、中位数和众数都重合 ......
Unity3D在做性能优化方面需要注意的问题和技术细节 详解
Unity3D是一款强大的游戏开发引擎，它提供了丰富的功能和工具，使开发者能够轻松创建高质量的游戏。然而，随着游戏的复杂性和规模的增长，性能优化变得尤为重要。在本文中，我们将详细讨论在Unity3D中进行性能优化时需要注意的问题和技术细节。 对啦！这里有个游戏开发交流小组里面聚集了一帮热爱学习游戏的 ......
一个关于多层级排序的问题
比如我们在设计架构的时候，或者权限，菜单的时候一般有多层级的概念，这个时候要排序就有点困难了！这里引入另外一个字段，然后按照自己的层级进行排序！ /// <summary> /// 添加一个权限列表 ///</summary> /// <param name="input"></param> /// ......
分布式ID生成
王富贵 (lmlx66.top) 为什么要用分布式 ID 随着业务数据量的增长，存储在数据库中的数据越来越多，当索引占用的空间超出可用内存大小后，就会通过磁盘索引来查找数据，这样就会极大的降低数据查询速度。如何解决这样的问题呢？一般我们首先通过分库分表来解决，分库分表后就无法使用数据库自增 ID 来 ......
凸优化问题的对偶
Lagrange Duality(拉格朗日对偶) 对于在\(g_i(x)=0,h_i(x)\leq 0\)的约束下最小化\(f(x)\)的问题（并不要求convex），我们有Lagrange函数\(L(\vec x,\vec \lambda,\vec \mu)=f(\vec x)+\vec\lamb ......
docker 解决nginx 缓冲区权限问题
错误信息: NET::ERR_INCOMPLETE_CHUNKED_ENCODING 200 (OK) 错误背景: api接口在手机端访问时报错上述错误 NET::ERR_INCOMPLETE_CHUNKED_ENCODING 200 (OK)。 经过排查确认问题在于nginx 没有缓冲区权限。但又 ......
Irwin-Hall 分布
Irwin-Hall 分布 对于 \(n\) 个均匀分布于 \([0,1]\) 的连续随机变量 \(X_1,X_2,\dots,X_n\)，其和的随机变量 \(X\) 满足： \[P(X\le x)=\sum _{k=0}^{\lfloor x\rfloor}(-1)^k\binom nk\frac ......
问题记录：MySQL查询第一次后获得结果后，再进行多次查询发现返回结果不变，执行到dao层不再执行sql
问题描述：查询MySQL数据库实时更新的数据，查询第一次后获得结果后，再进行多次查询发现返回结果不变，执行到dao层不再执行sql，问题原因是mapper文件中开启了二级缓存，获取一次结果后再次调用查询时直接从缓存中取，导致返回结果不能实时更新 直接放结论，是mybatis中的二级缓存问题 二级缓存 ......
ElasticSearch更新延迟问题记录
问题描述：使用ElasticSearch做个大数据实时更新接口，接口实际效果字段更新后页面调用查询不及时显示更新 通过查阅资料，es在更新之后并不是立即可见(可查询)的，会有1s的延迟，可以通过设置refresh_interval参数来修改刷新的间隔。 但是在实际应用中，1s的延迟已经算是很久了，在 ......