爬虫 数据分析 数据 小说
二、排序数据
2.1 按单个列排序>>> select * from trade order by trade_time;2.2 按多个列排序>>> select * from trade order by trade_time,book_name;返回结果先按trade_time排序，再对trade_time相 ......
三、过滤数据
数据表中的数据一般都是非常大，我们一般只需要查询特定的数据3.1 where单一子句>>> select * from trade WHERE trade_date='20230313'; #匹配查询>>> select user_id,product_id,order_id form trade ......
六、分组数据
6.1 创建分组 group bygroup by规定：1).group by 可以包含任意数目的列，所以可以对分组进行嵌套；2).若group by 中嵌套了分组，数据将在最后规定的分组上进行汇总；3).group by 子句中列出的每个列都必须是检索列或有效表达式（不能是聚集函数）；4).如果分 ......
node_exporter是怎么获得数据的
exporter分为两类：独立 和 集成到应用，集成到应用的方式侵犯业务逻辑代码 独立式数据流： [目标系统] ->(采集监控数据、规范数据格式) [exporter] ->(http轮询获取数据) [Prometheus] 常见的exporter数据采集方式： 1）文件方式：例如node expo ......
图数据库驱动的基础设施运维实操
本文系图技术在大型、复杂基础设施之中 SRE/DevOps 的实践参考，并以 OpenStack 系统之上的图数据库增强的运维案例为例，揭示图数据库、图算法在智能运维上的应用。 ......
实验三 软件项目案例分析（团队作业）
| 项目 | 内容 | | | | | 课程班级博客链接 |2023年春软件工程（2020级计算机科学与技术） | | 这个作业要求链接 | 实验三 软件项目案例分析 | | 团队名称 | 踏马逐尘 | | 团队的课程学习目标 | 1. 组建软件项目研发团队2. 加强团队合作 | | 这个作业在哪些 ......
mall--订单模块数据库表解析
本文主要对购物车功能相关表进行解析，介绍从商品加入购物车到下单的整个流程，涉及购物车优惠计算流程、确认单生成流程、下单流程及取消订单流程。 购物车表 用于存储购物车中每个商品信息，可用于计算商品优惠金额。 create table oms_cart_item ( id bigint not null ......
dpt-shell 抽取壳实现原理分析(加壳逻辑)
开源项目位置(为大佬开源精神点赞) https://github.com/luoyesiqiu/dpt-shell 抽取壳分为两个步骤 加壳逻辑: 一 对apk进行解析,将codeItem抽出到一个文件中,并进行nop填充 二 对抽取后的apk进行加密 三 注入壳程序相关文件即配置信息 执行逻辑: ......
pymysql操作数据库入门
1. python操作数据库 pymysql PyMSQL是一个纯的python的MySQL客户端。 pip install PyMySQL 使用步骤 创建连接(修高速公路) 创建游标(运输车) 执行sql(提货单) 获取结果(卸货) 关闭游标(车退掉) 关闭连接(路也断掉) import pymy ......
爬虫问题报错总结
报错 selenium.common.exceptions.ElementNotInteractableException: Message: element not interactable 可能是代码中没有全屏，元素没有加载全 baiduweb = webdriver.Chrome(servic ......
搭建rabbix监控Redis数据库
服务端节点：192.168.30.100 客户端节点：192.168.30.110 部署 zabbix 服务端 systemctl disable --now firewalldsetenforce 0hostnamectl set-hostname zbx-server //获取 zabbix 的 ......
记一次排程未重定向导致var目录不足的分析与处理
1.现象 有多台服务器，只有其中一台var目录增长很快，肯定有问题 2.排查 cd /var # 执行下面的命令迟迟得不到结果 du -sh *|grep G # 没办法，只能一个目录一个目录的看大小 cd /var ls du -sh ftp du -sh log # 在计算spool目录大小的时 ......
ubuntu 使用xshell5连接跳板机，出现问题： “服务器发送了一个意外的数据包”received:3,expected:20
xshell5访问报错，“服务器发送了一个意外的数据包。received:3,expected:20” 1、排除了网络、防火墙等因素 2、查看sshd服务状态： 3、在/etc/ssh/sshd_config配置文件最后面添加下面一行： KexAlgorithms curve25519-sha256 ......
PyQuery数据解析
PyQuery数据解析 1、导入 from pyquery import PyQuery 2、创建PyQuery对象 p = PyQuery("页面源代码") 3、定位 # 用法 a = p("css选择器") a = p("a") # 选择a标签 a = p("li")("a") # 选择li下的 ......
FART 脱壳机原理分析
FART是一个基于Android 源码修改的脱壳机 可以脱整体壳和抽取壳 FART脱壳的步骤主要分为三步： 1.内存中DexFile结构体完整dex的dump 2.主动调用类中的每一个方法，并实现对应CodeItem的dump 3.通过主动调用dump下来的方法的CodeItem进行dex中被抽取的 ......
针对近日ChatGPT账号大批量封禁的理性分析
文 / 高扬 这两天不太平。 3月31号，不少技术圈的朋友和我闲聊说，ChatGPT账号不能注册了。 我不以为然，自己有一个号足够了，并不关注账号注册的事情。 后面又有不少朋友和我说ChatGPT账号全部不能注册了，因为老美要封锁我们。 越听越离谱，颇有狼来了之势。 作为一个程序员，这些传闻听多了， ......
用 Windows 自带刻录软件刻录数据到光盘
1、工具 刻录光驱 空白光盘 2、在电脑上连接光驱并将空白光盘放入光驱 3、在“此电脑”下找到“DVD RW 驱动器”，右键“打开” 4、选择“用于 CD/DVD 播放机”，然后下一步 5、将需要刻录的数据拖拽到“DVD RW 驱动器” 6、右键选择“刻录到光盘”，然后下一步开始刻录数据，刻录完成后 ......
加密木马分析
前言 记一次恶意代码分析 教程：《恶意代码分析实战》第九章实验Lab9-1 恶意代码样本：https://github.com/mikesiko/PracticalMalwareAnalysis-Labs 实验环境（虚拟环境） Windows XP：Ollydbg 1.1 Windows 10：ID ......
Sql Server 连接读取access数据库
IF EXISTS (SELECT srv.name FROM sys.servers srv WHERE srv.server_id != 0 AND srv.name = N'ACCESSTEST') exec sp_dropserver 'ACCESSTEST', 'droplogins'Go ......
C#请求访问HTTP+JSON数据的解析
一、前言最近工作客户需要一个HTTP的Mes需求，所以自己去学习了C#请求HTTP的方法以及JSON数据的解析方法，总结出了点经验，以便后续自己找起来方便一点，故在此写一篇文章。 二、准备工作下面我用一个聚合数据提供的天气预报API接口来阐述请求HTTP和JSON数据解析的功能； 先看API文档这么 ......
开发手记-前端发送请求返回数据为空
问题描述 发送请求获取到数据并传递给组件，但是组件第一次获取到的数据为空导致报错 猜测可能的原因 react有一个机制会导致两次渲染 axios异步请求，在没有去的结果前就返回 解决组件首次渲染时，数据还未到达，导致错误的情况 这边又分两种情况 组件自己发送请求获取数据 可以在组件中使用 useSt ......
Visual Studio C盘数据迁移，解决C盘空间不足的问题
迁移原理： 将Visual Studio比较占用磁盘空间的 “C:\Program Files (x86)\Microsoft SDKs\” 目录和 “C:\Program Files (x86)\Windows Kits\” 目录移动到D盘， 然后通过mklink命令建立C盘和D盘的软连接 然后在 ......
django-rest-framework-从零开始-11-定义数据源不来自于数据库的视图
django-rest-framework-从零开始-11-定义数据源不来自于数据库的视图 1、前言 我们之前定义视图，数据源都是来源于数据库，从数据库中获取数据，然后序列化。那么，如果数据源不来自于数据库，而是来自于其他途径，比如requests请求，这时候，序列化类就用不上ModelSeri ......
APISIX 是怎么保护用户的敏感数据不被泄露的？
本文以 APISIX 作为例子，为大家介绍了如何借助 Global Data Encryption 功能来保护敏感数据，确保不会有任何敏感数据进行明文存储，这样即使 etcd 中所有存储的数据都被盗取，也不会造成敏感数据泄露，从而有效提升了 APISIX 的安全性。 作者刘维，API7.ai 技术工 ......
云图说｜云数据库GaussDB如何做到卓越性能
摘要：对于数据库来说，性能一直被视为最关键的部分。GaussDB作为华为自主创新研发的分布式关系型数据库，那么华为云数据库GaussDB在提升数据库性能方面都有哪些黑科技呢？ 本文分享自华为云社区《【云图说】第275期 云数据库GaussDB如何做到卓越性能》，作者：阅识风云。 对于数据库来说，性能 ......
基于chunjun纯钧的增量数据同步问题排查【博客园-实习小生】
基于chunjun纯钧的增量数据同步 目前我司的大数据平台使用的是flink技术栈，底层的连接器插件使用的是国产的chunjun插件，在使用chunjun的过程中也遇到了很多问题，本次记录下在SQL模式的情况下怎么支持增量的数据同步 chunjun的官网文档对增量同步已经做出了一定的说明 纯钧官方 ......
Hive元数据信息表
--Hive元数据表 1.表信息 （1）TBLS--记录数据表信息，可作为左表，关联其他表信息 （2）TABLE_PARAMS—存储Hive表的属性信息 具体数据内容： （3）COLUMNS_V2—保存表的字段信息 2.分区信息 （1）PARTITIONS （2）PARTITIONS_PARAMS— ......
假设检验之 ：单因素方差分析
导入数据处理常用相关包 import numpy as np import pandas as pd from scipy.stats import describe from scipy.stats import normaltest from scipy.stats import levene ......
【随手记】解决mybatis返回List<map>类型的数据时 无序 并且 不能返回空值
#返回结果无序 希望表格的列能根据数据库查出来的数据保持一致，但是返回页面的结果集是无序 在mybatis中使用List<Map>结构接收数据，发现输入的sql语句结果并不是按照输入的字段名顺序返回的。 例如输入 select col1,col2,col3 from table 却返回 | col2 ......
python爬取股票数据
import json import os import requests import time def save_data(data, date): if not os.path.exists(r'stock_data_%s.csv' % date): with open("stock_data ......