物流技术 高性能 实战 索引

这样delete居然不走索引

背景 由于业务变迁,合规要求,我们需要删除大量非本公司的数据,涉及到上百张表,几个T的数据清洗。我们的做法是先从基础数据出发,将要删除的数据id收集到一张表,然后再由上往下删除子表,多线程并发处理。 我们使用的是阿里的polardb,完全兼容mysql协议,5.7版本,RC隔离级别。删除过程一直很顺 ......
索引 delete

处理不平衡数据的过采样技术对比总结

在不平衡数据上训练的分类算法往往导致预测质量差。模型严重偏向多数类,忽略了对许多用例至关重要的少数例子。这使得模型对于涉及罕见但高优先级事件的现实问题来说不切实际。 过采样提供了一种在模型训练开始之前重新平衡类的方法。通过复制少数类数据点,过采样平衡了训练数据,防止算法忽略重要但数量少的类。虽然存在 ......
数据 技术

性能测试基础之 性能测试指标

性能测试指标 常见性能测试指标 响应时间 吞吐量(TPS,网络吞吐量、磁盘吞吐量) 吞吐量如果用于描述服务器处理请求能力时,叫做TPS 如果用户描述网络流量时,网络吞吐量 用于描述磁盘流量(读/写),叫做磁盘吞吐量(IOPS) 服务器资源使用率错误率 运营指标 PV UV 并发数 响应时间 就是指客 ......
性能 指标 基础

利用地面控制点实现倾斜摄影三维模型数据的几何坐标纠正技术方法分析

三维工厂K3DMaker是一款三维模型浏览、分析、轻量化、顶层合并构建、几何校正、格式转换、调色裁切等功能专业处理软件。可以进行三维模型的网格简化、纹理压缩、层级优化等操作,从而实现三维模型轻量化。轻量化压缩比大,模型轻量化效率高,自动化处理能力高;采用多种算法对三维模型进行几何精纠正处理,精度高,... ......
控制点 坐标 几何 模型 地面

MySQL-索引数据结构

B Tree B-树 即B树。 指的是 Balance Tree,也就是平衡树,平衡树是一颗查找树,并且所有叶子节点位于同一层。 每个结点存储M/2到M个关键字,非叶子结点存储指向关键字范围的子结点。 所有关键字在整颗树中出现,且只出现一次,非叶子结点可以命中。 B+ Tree 是 B 树的一种变形 ......
数据结构 索引 结构 数据 MySQL

electron 技术架构

Electron核心组成 核心总结 Chromium:支持最新特性的浏览器(支持ES6及其他版本的新语法) Node.js: Javascript 运行时,可实现文件读写等(本地命令调用和执行操作) Native APIs:提供统一的原生界面能力(与操作系统通信,如操作系统的通知、快捷键、获取底层硬 ......
架构 electron 技术

MySQL索引-索引结构

索引是什么 索引是帮助 MySQL 高效获取数据的数据结构(有序)。在数据之外,数据库系统还维护着满足特定查找算法的数据结构,这些数据结构以某种方式引用(指向)数据,这样就可以在这些数据结构上实现高级查询算法,这种数据结构就是索引。 优缺点: 优点: 提高数据检索效率,降低数据库的IO成本 通过索引 ......
索引 结构 MySQL

盘点一个Python自动化办公实战案例(二)

大家好,我是皮皮。 一、前言 前几天在Python最强王者交流群【钟爱一生】问了一个Python自动化办公的问题,一起来看看吧。 【温馨提示】 遇到表达不清的,能稍微描述下,想要达成的结果吗?在excel上,或者画图也行。最好是把你想要的结果展示在excel中,另外,你展示的这个表格最好做个小的de ......
实战 案例 Python

Java技术得这样进阶,天天CRUD就完蛋了

Java天天CRUD,技术没提高怎么办?技术进阶得这么搞,才能进阶为高级开发和架构师! 资料地址:自学精灵 - IT技术星球(也可以百度搜:自学精灵)。 首先点明,只写业务代码是无法成长技术的。提升技术的两个方法是: 有技术大佬带 有技术大佬的资料 本文介绍靠谱的技术进阶资料,让你比其他人更有... ......
技术 Java CRUD

计算机基础补充:电子技术基础 - 术语整理

这篇文章也是一时兴起,这几天我继续自己原来的计划,将 计算机组成原理、数据结构、操作系统 ,全部都再刷一遍,所有的真题,全都放到博客上来。 Q1:至于为什么这么干? 一方面,我们依托于 王道单科书 ,本来也没打算挑战现有的已经很流行的考研复习资料,基于这些材料, 我们 进一步理解、整理、精简,用于自 ......
基础 术语 电子技术 计算机 电子

使用nginx搭建creates.io镜像(稀疏索引)

在Rust开发中,经常需要使用Cargo从crates.io下载依赖,而国内几乎没有好用的crates.io镜像,大多都只对crates.io-index和crates.io进行了镜像,而最重要的static.crates.io却没有镜像。迫不得已只能自己搭建。众所周知,Cargo下载依赖,实际分为 ......
索引 镜像 creates nginx io

智慧幼儿园视频监管方案及实施建议:AI智能技术构建新引擎

通过智能分析网关内置的算法模型,利用AI视频分析技术,可以及时发现异常行为,如孩子跌倒、打架、闯入危险区域等,并触发报警。值班人员可以迅速获取报警信息并做出响应,确保孩子的安全。 ......
幼儿园 幼儿 智慧 建议 引擎

C++ 核心指南 —— 性能

C++ 核心指南 —— 性能 阅读建议:先阅读 《性能优化的一般策略及方法》 截至目前,C++ Core Guidelines 中关于性能优化的建议共有 18 条,而其中很大一部分是告诫你,不要轻易优化! 非必要,不优化 Per.1: 不要无故优化 Per.2: 不要过早优化 Per.3: 只优化少 ......
核心 性能 指南

金蝶云·苍穹技术开放日第十期|赋能开发者,提升项目质量

金蝶云·苍穹技术开放日,旨在为开发者们提供一个交流、学习与成长的平台,现迎来了2023年的收官之战!感谢大家在过去一年中的陪伴与支持,我们携手走过7场技术交流活动,与一万多名开发者一起走在技术成长之路上。 第十期:《赋能开发者,提升项目质量》 1. 开发助手:高效开发神器 金蝶云苍穹平台生态部架构师 ......
开放日 苍穹 开发者 质量 项目

电子秤方案主控芯片SIC8833的技术应用

电子秤是一种利用电子技术实现物体重量测量的设备。它是现代生活中不可缺少的日常用品之一。本文将从产品介绍、结构设计、工作原理、功能设计和特点优势五个方面来介绍电子秤方案产品。 首先,电子秤方案的产品介绍。 电子秤是一种便携式的设备,由主体、显示屏和称量平台组成。它广泛应用于家庭、商店、市场等场合,可用 ......
电子秤 技术应用 芯片 方案 电子

王者荣耀采用了一些什么技术开发的?

前言《王者荣耀》属于典型的Moba类游戏,和《英雄联盟》属于同一种游戏类型,那么《王者荣耀》这种游戏是如何制作的?又需要学习哪些技术点呢?今天我们一起来分析一下。对惹,这里有一个游戏开发交流小组,希望大家可以点击进来一起交流一下开发经验呀! Moba游戏是什么? 帧同步是什么 帧同步比状态同步获得更 ......
王者 技术开发 技术

性能测试的定义和流程什么是软件登记测试?软件产品登记测试报告办理流程复杂吗?

软件产品登记测试报告 一、软件登记测试 软件产品登记测试是指检测机构按照委托方提供的测试功能点,对其指定的软件产品进行功能性的检测和验证,确保这些功能都得以实现并能正常运行 二、软件产品登记测试报告办理流程? 在软件产品开发完成后,需要进行登记测试并办理相关手续的流程。 该流程包括以下几个步骤: 1 ......

制造业数字化转型的核心不止是技术

一、制造业的数字化转型意味着什么?在当今的制造业领域,数字化转型意味着通过集成数字技术来增强传统的制造方法、产品和劳动力的过程。这些技术包括一系列创新,如自动化软件、电子商务系统、传感器、工业机器人等。 二、制造业数字化转型的主要目标如下:1、提高运营效率,降低运营成本,优化收益产生。 2、提高产品 ......
制造业 核心 数字 技术

HBase深度历险 | 京东物流技术团队

简介 HBase 的全称是 Hadoop Database,是一个分布式的,可扩展,面向列簇的数据库,是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案。本文会像剥洋葱一样,层层剥开她的心,直到一丝不挂。 特点 首先我们看一下hbase有哪些特点: •高性能 基于LSM树的数 ......
物流技术 深度 团队 物流 HBase

对国内机构使用区块链技术应用的一些猜测

相关: 募捐机构:甘肃省红十字会 —— 为中国红十字人道事业捐赠20元 ......
区块 技术应用 机构 技术

【技术探讨】无线通信中如何排查电磁波干扰?

很多客户反映无线电通信中的电磁波干扰,看不见,摸不到,也无法呈现,有时会碰到这样的问题:同一组设备、在相同的环境中,有的时间段无线通信很好,有的时间段突然无线通信的信号质量严重下降,这个是怎么回事? 由于目前市面上的无线电通信设备种类很多,WiFi,ZigBee,LoRa,对讲机,无线电台等等,电磁 ......

既然来骗我了,那就站在技术角度给你分析一波这个诈骗信息。

你好呀,我是歪歪。 事情是这样的,前段时间有个人加我微信,说有个文案想要找我帮他们推广一下: 链接点进去后,我一看标题是这样的: 心里就有数了,知道这个相关的内容肯定是诈骗信息。 整个文案的内容大概是这样的: 关键的点在于文案中他提供的二维码和 PC 端投递地址确实是真实的地址: 上面的网页地址打开 ......
角度 技术 信息

《技术洞察高级实务》课程大纲

【课程背景】 所谓技术洞察,简称(TI, Technology Insight),是根据市场发展趋势和客户需求,以及技术的生命周期,对某项技术发展趋势进行判断和预测,并明确未来3~5年的技术战略和战略控制点、重大的技术投资方向,完成技术战略规划的制订,并最终进行技术战略解码,为公司整体战略创造价值。 ......
大纲 实务 课程 技术

解决网络协议服务器问题的关键:定位能力与抓包技术

本文分享自华为云社区《提升网络协议服务器的定位能力》,作者:张俭。 近期,我再次涉足于协议服务器相关的工作领域,致力于定位并解决各种问题。简单总结一些心得给大家。如果想要定位出协议服务器的问题,那么这些能力可能至关重要。 注:我这里比较偏向协议本身的问题,不涉及一些通用的网络问题(如网络吞吐量上不去 ......
关键 能力 服务器 问题 技术

大数据从业者必知必会的Hive SQL调优技巧 | 京东云技术团队

摘要:在大数据领域中,Hive SQL被广泛应用于数据仓库的数据查询和分析。然而,由于数据量庞大和复杂的查询需求,Hive SQL查询的性能往往不尽人意。本文针对Hive SQL的性能优化进行深入研究,提出了一系列可行的调优方案,并给出了相应的优化案例和优化前后的SQL代码。通过合理的优化策略和技巧 ......
从业者 团队 技巧 数据 技术

性能测试:通过简单的例子理解并发量,线程数,吞吐量,TPS

看个简单的例子 ①老王开了家餐厅 我们的主角老王,在M市投资新开业了一家,前来用餐的顾客络绎不绝: 餐厅里有4种不同身份的人员: 用户一次完整的用餐流程如下: 1.顾客到店小二处付款点餐 => 2.小二将订单转发给后厨 => 3.后厨与备菜工配合,取材完成烹饪后交给小二 => 4.小二上菜,顾客用餐 ......
吞吐量 线程 例子 性能 TPS

一线管理者的实战指南

传达需求:准确具体要求复述:对齐信息探讨目的:思辨执行(这么做,就是为了让他主动思考:要达到目的,那么要做哪几件事?具体该怎么干?有什么路径?在工作的过程,是充满着变化的,必须要有思辨的执行力。所以,你一定要告诉他,做这件事的目的和意义。)确认边界:合理授权(核心就是你要告诉他,什么是可以授权的,哪 ......
管理者 实战 一线 指南

iOS技术博客:App备案指南

📝 摘要 本文介绍了移动应用程序(App)备案的重要性和流程。备案是规范App开发和运营的必要手段,有助于保护用户权益、维护网络安全和社会秩序。为了帮助开发者更好地了解备案流程,本文提供了一份最新、最全、最详的备案指南,包括备案目的、好处、对象、时间、流程、条件和注意事项等内容。 📖 引言 在中 ......
指南 技术 博客 iOS App

被面试官PUA了:创建索引时一定会锁表?

索引主要是用于提高数据检索速度的一种机制,通过索引数据库可以快速定位到目标数据的位置,而不需要遍历整个数据集,它就像书籍的目录部分,有它的存在,可以大大加速查询的效率。 那么问题来了:在创建索引时一定会锁表吗? 如果你看的是网上的一些资料,或者是通过 chatgpt,那么很可能得到的结果是这样的“是 ......
被面 索引 PUA

MYSQL 索引

索引 索引是一个排序的列表,包含索引字段的值和其对应的行记录的数据所在的物理地址 作用 加快表的查询速度,还可以对字段排序 设置了合适的索引之后,数据库利用各种快速定位技术,能够大大加快查询速度,这是创建索引的最主要的原因。 当表很大或查询涉及到多个表时,使用索引可以成千上万倍地提高查询速度。 可以 ......
索引 MYSQL