数据分析 数据 爬虫appstore
普通css实现table表格过长数据隐藏，鼠标停留显示全部
在<style></style>中添加下面代码 table { table-layout: fixed; /* 只有定义了表格的布局算法为fixed，下面td的定义才能起作用。 */ } table td { position: relative; /*width: 80px;*/ height: ......
探究分析热水器的水流量状况
import pandas as pd import matplotlib.pyplot as plt inputfile = 'D:\Python\数据处理/original_data.xls' data = pd.read_excel(inputfile) lv_non = pd.value_c ......
SQL SERVER 数据库查询包含某个字符串的所有物理表
create PROCEDURE [dbo].[SP_FindValueInDB] ( @value VARCHAR(1024) ) AS BEGIN -- SET NOCOUNT ON added to prevent extra result sets from -- interfering w ......
nodejs处理一段redis获取集合，数组的代码优化(其中包含:es6同步返回数据的处理,new Promise)
从异步，用延时来处理，改成同步获取数据 获取数据主要分2步: 1.从redis集合中获取数组； 2.遍历数组，抓取其中字符串，解析，拼接成需要的数据，返回给前端 原代码,用sleep方法，避免异步数据处理带来的提前返回数据的问题; (缺点:时间比较久，逻辑中是有问题的) // 获取线路上公交的位置信 ......
《渗透测试》JS架构&框架识别&泄漏提取&API接口枚举&FUZZ爬虫&插件项目 Day14
0、什么是JS渗透测试？ 在Javascript中也存在变量和函数，当存在可控变量及函数调用即可参数漏洞 JS开发的WEB应用和PHP，JAVA,NET等区别在于即没有源代码，也可以通过浏览器的查看源代码获取真实的点。获取URL，获取JS敏感信息，获取代码传参等，所以相当于JS开发的WEB应用属于白 ......
团队作业 分析原因
在今天上课我和我的cp没有演示，主要是那个换乘的那个查询没能写出来，还有就是页面设计的也不是特别好，所有就没有上台展示，那个换乘和最短路线想了很久的算法设计，没能想出来，接下来我和我的cp就是要把功能实现把页面设计一下，最后在安卓上展示。 ......
爬虫selenium模块
selenium基本使用 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 可以直接用代码模拟真实的浏览器操作，每一步的点击 输入等 selenium本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入、点击、下拉 ......
DRS无法连接ECS自建的MySQL数据库
转自: https://bbs.huaweicloud.com/blogs/266749 iptables --list iptables -L IN_HIDS_MYSQLD_DENY_DROP --line-numbers iptables -D IN_HIDS_MYSQLD_DENY_DROP ......
Android数据结构-SparseArray实现原理
SparseArray家族 SparseArray基于键值对存储数据，key为int，value为object，简单使用如下： //声明 SparseArray<String> sparseArray= new SparseArray<>(); //增加元素，append方式 sparseArray ......
数据库
数据、数据库、数据库管理系统、数据库应用系统、数据库系统？ 数据库的三级数据模式结构？ 数据库的设计步骤？ 关系数据库、元组、属性、候选码、主码、全码、实体完整性、主属性和非主属性？ 数据库常用的数据模型？三要素？ 关系模型的完整性规则？ ......
【SQL】查询存在于一个表而不存在于另外一个表的数据
需求描述：A、B两表，找出ID字段中，存在A表，但是不存在B表的数据。 -- 1、方法一（推荐）：使用not exists函数，括号内select 1查A与B的id能关联上的，然后查A表not exists的 select * from A a where not exists (select 1 ......
mysql数据库无法录入汉字问题
1.插入数据出现错误 show full columns from 表名;//查看数据表列编码 2. alter table 表名 change 列名 列名 varchar(自己设置) character set utf8 collate utf8_unicode_ci not null defau ......
php栈的数据结构
<?php class Stack{ const MAXSIZE = 4;// 栈最大容量 private $top = -1; private $stack = array();// 利用数组存储数据 public function __construct(){ $this->stack = ar ......
redis 10大数据类型
Redis 10大数据类型 这里说的数据类型是value的数据类型，key的类型都是字符串。 Redis key Redis key是String类型，也是二进制安全的，我们可以使用任何二进制序列作为键，从像“foo”这样的字符串到 JPEG 文件的内容。 关于Redis的key有以下规则和建议： ......
asp.net core EF 连接数据库进行交互
1. 安装包 Microsoft.EntityFrameworkCoreMicosoft.EntityFrameworkCore.RelationalMicrosoft.EntityFrameworkCore.SqlServerMicrosoft.EntityFramerworkCore.Tools ......
4-springboot多数据源配置报错Cause: java.lang.IllegalArgumentException: jdbcUrl is required with driverClassName
springboot2.0版本以上的多数据源配置改成: spring.datasource.refunddb.url=jdbc:mysql://refund地址spring.datasource.refunddb.username=uatspring.datasource.refunddb.pass ......
什么是主数据？（转载）
什么是主数据？ 主数据是一组用于提供有关业务数据（如位置、客户、产品、资产等）情境的标识符。它是企业或单位内运行业务必不可少的核心数据。否则，将无法统一比较系统之间的数据。但是，并非所有主数据都是一样的。被指定为主数据的数据类型可能因行业而异。即使在同一行业的不同业务实体中，主数据的示例也可能是离散 ......
大数据平台-元数据详情字段乱码问题排查过程
问题背景： 大数据平台中，数据资产(表、字段都属于资产)存储在Hive数据库中。用户可以搜索、点击查看元数据列表、详情等操作。 问题现象： 点击元数据详情，查看字段信息时，展示出的字段信息出现乱码现象。 问题原因： 初步分析大致又两种可能： 平台后端服务获取到数据时，无乱码问题，经由平台服务处理后展 ......
Framework升级到Core以及Dapper支持达梦数据库
.NET Framework 升级到 .NET Core 尝试使用try-convert工具没有成功 手动处理 类库将原有csproj文件内容替换如下 <Project Sdk="Microsoft.NET.Sdk"> <PropertyGroup> <TargetFrameworks>net452 ......
Kingst 和 DSLogic 逻辑分析仪对比
1、实际项目中，使用 DSLogic 抓去MIPI信号没有影响，但换成 Kingst 就不行了，对画面干扰较大。 2、查了数据：Kingst的输入阻抗是 220KΩ/15pF;DSLogic 的输入阻抗是：250KΩ/13pF，参数比Kingst 好了一丁点儿，总体来说还是半斤对八两。 3、Sale ......
TheadLocal源码分析
TheadLocal源码分析 源码思维导图:https://www.processon.com/view/link/64194d2bc707d756390b0e40 demo案例 @Test public void testThread() throws InterruptedException { ......
Sql Server数据库(可疑)解决办法
解决： 方法一： 重新还原数据库 方法二： 1、修改数据库为紧急模式ALTER DATABASE Zhangxing SET EMERGENCY2、使数据库变为单用户模式ALTER DATABASE Zhangxing SET SINGLE_USER（用时可能教长）3、修复数据库日志重新生成，此命令 ......
Sql Server数据库恢复挂起
第一种解决办法： 权限问题，把SQL Server启动账号改为具有完全控制权限的本地账号，停止SQL服务并重新启动 ctrl+r运行 输入services.msc，进入服务！然后找到具有完全控制权限的本地管理员用户帐号，如图！ 右击它，点击它的属性，然后点击登录按钮，见里面的密码，改成你进入sql ......
mybatis数据层的三种实现方式(xml、@Select注解、代码实现)
mybatis数据层的三种实现方式(xml、@Select注解、代码实现) 引言 在平常的日常java开发过程中，功能之间的交互，不可避免的要与数据库打交道，这中间就涉及到数据层的实现问题，有xml、@Select注解、Java代码三种实现方式，具体的可以根据自己的业务难易程度来选择某个实现方式，接 ......
scrapy架构介绍、scrapy解析数据、scrapy解析数据、持久化方案、全站爬取cnblogs文章、爬虫和下载中间件、加代理，cookie，header，加入selenium
# 1 selenium -登录cnblogs，拿到cookie，再打开cnblogs，写入cookie，它就是登录状态 -半自动点赞 》selenium生成的cookie，给requests用 -selenium操作浏览器，速度慢 -requests速度快 -动作链 -自动登录12306 # 2 ......
【数据模型】 与 【数据库英语】随笔
数据库管理系统 DBMS （DataBase-Management System） 数据库 database 文件处理系统 file-processing system 数据的冗余和不一致 data redundancy and inconsistency 数据访问困难 difficulty in ......
数据库连接池
数据库连接行为 redis好就好在他是单进程单线程IO多路复用的，所以连接一直不关闭也不会有什么大的影响。 Mysql是多线程的，线程开多了不关，问题肯定还是比较严重的。 连接池技术 那有没有办法可以弄一个来管理这些长连接的，让他一直不要关闭，答案就是连接池。 原理： 连接池基本的思想是在系统初始化 ......
上课用数据库
/* Navicat MySQL Data Transfer Source Server : kuyu Source Server Version : 50622 Source Host : localhost:3306 Source Database : wgj Target Server Typ ......
将数据转换为树形结构格式
addarrdata (data) { if (!Array.isArray(data)) {//验证data是不是数组类型 return [] } data.forEach(item => { item.parentId = item.fid item.label = item.typeName ......