思路 数据 问题
python删除数据库表中全部内容
import pymysql # 创建连接 conn = pymysql.connect(host='127.0.0.1', port=3306, user='root', passwd='1234567890', db='studentmemo') # 创建游标 cursor = conn.cur ......
大数据经典论文解读 - MapReduce
MapReduce 使用MapReduce框架只要实现一个Map函数和一个Reduce函数，Map函数实现映射，接受一个key-value并转换为多个键值对；Reduce是一个化简函数，接收一个key和对应的vallue，然后组成一组新的value输出出去。 map(k1, v1) -> list( ......
pandas写入数据库
import pandas as pd from sqlalchemy import create_engine import numpy as np w=np.array([1,2,3]) datas = pd.DataFrame(w) print(datas) engine = create_e ......
Beego查数据库数据panic问题
一开始没发现问题所在，请了位大佬帮忙排查错误逐步确定问题所在。问题起源于我查数据库没有得到正确的数据开始。一开始发现是数据类型问题，改过之后还是存在问题，于是debug一下，一步一步看问题出在哪里，结果走进了锁，就没仔细看，哪知在这中间出现了一个panic问题。 但是这个panic没有打印在控制台， ......
缓存行与伪共享问题
局部性原理 时间局部性：如果数据正在被访问，那么在近期它很可能还会被再次访问。比如循环、方法的反复调用等。 空间局部性：如果存储器的位置被引用，那么将来他附近的位置也会被引用。比如顺序结构、数组。 CPU缓存 执行程序是靠CPU执行主存中代码，但是CPU和主存的速度差异是非常大的，为了降低这种差距， ......
布隆过滤器解决缓存击穿导致消息堆积的问题（无代码，讲思路）
问题描述。 周末消费者所在的服务出现了挂掉的问题，导致网关队列中出现了消息堆积的问题。 要么就是消费者服务挂掉，要么高并发导致消费的线程出现阻塞。 查看了日志得出是消费的线程多次去查询缓存和数据库都没有数据id，且数据杂乱无规律。导致缓存击穿，进而导致高并发查询数据库。 解决： 增加一个hutool ......
oracle 自动生成填充数据
Oracle提供的数据生成工具（Data Generator） 建表语句 CREATE TABLE "FDM"."HYRK_GIM_RENKOU" ( "XM" VARCHAR2(200), "SFZH" VARCHAR2(50), "LXFS" VARCHAR2(50), "ZY" VARCHAR ......
关于误操作覆盖原系统数据库，重装数据库遇到的问题以及解决方案
起因是因为我想直接拷贝阿伟师兄的数据库，（想偷懒）不想自己去建立库。在拷贝过程中我把所有数据库覆盖掉了，自己电脑的master数据库也被覆盖了，导致SSMS工具连接不上数据库，无奈只能选择重装数据库。（不要点覆盖，重名的点跳过，在操作之前，先拷贝自己的数据库，做好最坏打算） 首先是卸载数据库，之前有 ......
防火墙开启端口EasyCVR平台依然不能访问的问题排查与解决
EasyCVR平台的高可用、高可靠、高拓展性等特点，可为城市“一网统管”服务平台建设提供能力层平台支撑，协助推动城市治理智慧化建设。感兴趣的用户可以前往演示平台进行体验与部署、测试。 ......
SSTI之细说jinja2的常用构造及利用思路
现在关于ssti注入的文章数不胜数，但大多数是关于各种命令语句的构造语句，且没有根据版本、过滤等具体细分，导致读者可能有一种千篇一律的感觉。所以最近详细整理了一些SSTI常用的payload、利用思路以及题目，谨以结合题目分析以及自己的理解给uu们提供一些参考，如有写错的地方，还望大佬们轻喷。 ......
视频融合平台EasyCVR设备录像因时间导致播放异常问题的排查与解决
基于云-边-端的计算及资源共享与调度能力，EasyCVR平台可以实现海量资源的接入、汇聚、计算、存储、处理等，解决视频监控场景中海量设备接入、边端资源异构、网络通信不稳定、统一运维管理复杂等难题。同时，借助智能分析网关的AI智能检测能力，可实现人脸、人体、车辆、烟火、物体、行为等识别、抓拍、比对、告... ......
Python 数据类型转换 All In One
Python 数据类型转换 All In One Python 3 数据类型转换 |函数 | 描述| -- | -- int(x [,base]) | 将x转换为一个整数 float(x) | 将x转换到一个浮点数 complex(real [,imag]) | 创建一个复数 str(x) | 将对 ......
AI智能视频融合平台EasyCVR视频调阅播放缓存记录异常问题优化
将EasyCVR平台与智能分析网关结合使用，可以实现基于云、边、端协同架构的AI智能检测分析及算力的精细化调度等能力，该方案的应用场景也十分广泛，包括：通用安防、智慧安监、明厨亮灶、智慧景区、区域安全监测等。感兴趣的用户可以前往演示平台测试与部署。 ......
Golang 包相关问题
gopath、vendor、dep 、go module 的区别 gopath：要设置环境变量，然后执行执行 go install进行安装 vendor: 将第三方依赖完全和工程整合且本地化，构建项目速度快，但冗余度很高。很万能的方法 dep可以直接给引入的第三方包一个专门的目录，并且可以专门制定一 ......
手机投屏处理音频流转问题
背景 公司项目中有手机投屏平板，声音默认是在手机端播放，也可以切换到平板上播放，这里使用的是反射android.media.AudioSystem类的setDeviceConnectionState方法实现的，这个在低于Android13的版本是没有问题的，然而到了Android13手机上确出现了问 ......
网页接口偶发性502的问题
现象： 网页接口一直偶发性502，概率大概20%左右 排查过程： 架构是用户->WAF->lvs->NGINX->后端 1、尝试减少接口请求，依然会502，可知和接口服务能力无关。 2、WAF侧，更换服务IP，依然不行，可知不是WAF某个节点网络有问题。 3、Nginx侧，查看日志，并未发现502日 ......
约瑟夫问题/扔鸡蛋问题
故且也算是两种特殊的dp问题？感觉一般也就是应用在一些板子题上（ 约瑟夫问题 有 $n$ 个人排成一个环，从 $0$ 到 $n - 1$ 编号，从 $0$ 开始报数，每数到 $k$ 就枪毙一个人，问最后剩的人的编号。 法一： 嗯暴力 $+$ 队列直接扫过去。 法二： 一个 $O(n)$ 的 $dp$ ......
查询Postgres数据库中每个表的数据量大小
select relname as TABLE_NAME, reltuples as rowCounts from pg_class where relkind = 'r' and relnamespace = ( select oid from pg_namespace where nspname ......
CAD格式的数据如何导入和卫星图叠加
在城市规划、道路管线、林业、农业、地质和环境监测等各行各业的国民经济建设中，一般都会需要将CAD与卫星影像无偏移叠加配准。因为影像地图具有影像内容、线划要素、数学基础等，拥有比单纯的矢量线划地图丰富得多的信息量，具有直观易读的特点，从而提高了地理信息为人们的视觉直接感知的可视化表达程度及辅助决策的准 ......
redis cluster 故障后，主从位于相同节点的修复（丢失了部分数据）【转】
今天机房出现故障，有一个机器启动不起来，redis cluster集群丢失了一部分数据，拓扑图如下： 通过上图可以看到，192.168.1.122启动不起来后，其上的主1和从1因为在一个机器上，就全部丢失了。 这个布局非常危险，主和从不应该放在一个机器上。 我找运维，运维给我分配了一个全新的机器，并 ......
pandas中数据的删除
数据的删除 #删除空值所在的行 df = df.dropna(axis = 0,subset = ['测温探头编码'])#删除空值的行，不加subset就是删除所有的行或列 #del #使用del, 一次只能删除一列，不能一次删除多列 import pandas as pd data = pd.re ......
vue模板语法中能否用??的三目运算简写的问题
使用双问号（??）的三目运算可以在 JavaScript 中使用，但在 Vue 模板语法中不支持。Vue 模板语法中的三目运算仍然使用单个问号（?）和冒号（:）的标准形式。例如： {{ condition ? true_value : false_value }} 如果你想在 Vue 模板中使用类似 ......
大数据经典论文解读 - GFS
GFS 重点是：高可用、可扩展性、透明 几个设计理念： 故障很常见，而非意外 存储内容为大文件，通常在几个GB 文件的修改方式是追加而非随机写，读多写少 增加系统灵活性，如放松对GFS的一致性要求 架构 GFS包括单节点Master、备用的shadow master、多个chunkserver、多个 ......
js中使用linq，为什么在groupBy之后看不到具体数据
1、js 中 let a = linq.from(Datas).groupBy(({ DeclineType }) => DeclineType) groupby分组之后是什么数据集合，为什么在a变量中看不到数据呢？ groupBy方法会将数据集合按照指定条件进行分组，返回一个键值对的集合。其中，键 ......
Windows服务器高物理内存占用问题排察
我经常在手中拿着一个内存条手链，以彰显我是计算机深入挖掘专家，它就是一个象征，类似摸金符，有它代表你有资格可以探墓了。 同事找到我说：“我们有一台服务器，内存资源持续高位运行，经常浮动在80%左右，系统重启后会好一些，不过持续不了太久。” 服务器是云服务器：8G内存，发生问题时，大约5GB内存消失了 ......
一个诡异的Python小问题
一个诡异的Python小问题 问题 来自一个基础偏弱的学员，但不知道如何去解释 >>> '' is not None <stdin>:1: SyntaxWarning: "is not" with a literal. Did you mean "!="? True # 注意结果是会出现的，其实不影 ......
Flask框架 之flask_migrate数据库迁移
注意：flask_script与flask2.0不再兼容 一、安装 flask_migrate pip install flask-migrate==2.5.3 二、示例代码 flask：1.0.2 flask-migrate：2.5.3 from flask import Flask from f ......
云图说 | MSSI之应用业务模型ABM，搭建业务与技术的数据治理桥梁
摘要：应用业务模型ABM（Application Business Model）是MSSI为客户提供的统一模型管理服务。 本文分享自华为云社区《【云图说】 | 第274期 MSSI之应用业务模型ABM，搭建业务与技术的数据治理桥梁》，作者：阅识风云。 应用业务模型ABM（Application Bu ......