redis day 03
爬虫----day05（）
上节回顾 # 1 selenium -登录cnblogs，拿到cookie，再打开cnblogs，写入cookie，它就是登录状态 -半自动点赞 》selenium生成的cookie，给requests用 -selenium操作浏览器，速度慢 -requests速度快 -动作链 -自动登录12306 ......
day22 打卡235. 二叉搜索树的最近公共祖先 701.二叉搜索树中的插入操作 450.删除二叉搜索树中的节点
day22 打卡235. 二叉搜索树的最近公共祖先 701.二叉搜索树中的插入操作 450.删除二叉搜索树中的节点 235. 二叉搜索树的最近公共祖先 235题目链接 1.递归法。利用二叉搜素树中间节点肯定大于左子树，小于右子树的特征。 class Solution { public TreeNod ......
2023.03.22 - npx的基本概念
npx 是 npm 5.2.0 版本引入的一个命令行工具。它的作用是执行 npm 包里的命令。 通常情况下，我们使用 npm 全局安装一个命令行工具（例如 webpack），然后就可以在终端里直接使用 webpack 命令了。但对于只需要偶尔使用的命令行工具来说，这种方式就显得有些浪费了。npx 解 ......
redis监控
redis监控主要是使用两种方式 一、使用info命令 1、首先保证redis服务是启用状态 2、使用命令redis-cli -a 密码（有密码就加上-a参数，没有就不用啦） 3、使用info命令，使用之后就长这个样子 4、在这中方式下我主要关注的点： ClIent指标： 下面的connected_ ......
Redis和Mysql如何保持数据一致性
导致不一致原因： 在高并发的场景下，大量的请求直接访问MySQL很容易造成性能问题。所以，我们都会用Redis来做数据的缓存，削减对数据库的请求。但是，MySQL和Redis是两种不同的数据库，如何保证不同数据库之间数据的一致性就非常关键了。 1、在高并发的业务场景下，数据库大多数情况都是用户并发访 ......
《渗透测试》主机架构&蜜罐识别&WAF识别&端口扫描&协议识别&服务安全 2023 Day15
端口 服务 渗透用途 tcp 20,21 FTP 允许匿名的上传下载,爆破,嗅探,win提权,远程执行(proftpd 1.3.5),各类后门(proftpd,vsftp 2.3.4) tcp 22 SSH 可根据已搜集到的信息尝试爆破,v1版本可中间人,ssh隧道及内网代理转发,文件传输等等 tc ......
《渗透测试》WEB攻防-ASP安全&MDB下载植入&IIS短文件名&写权限&解析 2022 Day18
1 ➢ ASP-数据库-MDB默认下载 ➢ ASP-数据库-ASP后门植入连接 ➢ ASP-中间件-IIS短文件名探针-安全漏洞 ➢ ASP-中间件-IIS文件上传解析-安全漏洞 ➢ ASP-中间件-IIS配置目录读写-安全配置 ......
python redis使用介绍
1.安装 redis 模块 Python 要使用 redis，需要先安装 redis 模块： sudo pip3 install redis 或 sudo easy_install redis 或 sudo python setup.py install 源码地址：https://github.co ......
Centos7实现Redis主从模式搭建
1、假设在四个虚拟机分别安装redis；ip地址分别为： A: 192.168.2.66 (主机) B: 192.168.2.67 C: 192.168.2.67 D: 192.168.2.67 2、四个虚拟机全部开启防火墙6379端口 # firewall-cmd --zone=public -- ......
Day 18 18.1 并发爬虫之协程实现
并发爬虫之协程实现 协程，又称微线程，纤程。英文名Coroutine。一句话说明什么是线程：协程是一种用户态的轻量级线程。 协程拥有自己的寄存器上下文和栈。协程调度切换时，将寄存器上下文和栈保存到其他地方，在切回来的时候，恢复先前保存的寄存器上下文和栈。因此： 协程能保留上一次调用时的状态（即所有局 ......
redis stream 命令行客户端和java客户端使用
redis stream 是发布订阅机制的升级版本，或者说是 redis pub/sub 的升级版，是redis 5的新增特色，redis的 stream就是一个简单的消息队列。 redis 的发布订阅极度不可靠，它不支持持久化，不管是消费者下线，还是消息积压都会导致消息丢失 消息积压的默认处理方式 ......
redis rejson 命令行客户端使用和java客户端使用
下载rejson插件 地址Releases · RedisJSON/RedisJSON (github.com) 1.04版本下面有直接编译号的，别的版本需要手动编译 下载以后吧文件放到 redis-6.0.9/module 目录下面 module 需要自己创建，放在别的地方也可以 需要修改权限: ......
C语言词频统计[2023-03-22]
C语言词频统计[2023-03-22] 程序将从文本文件输入(.txt文件扩展名)中读取单词。 当程序运行时，程序将向用户请求输入文件。 程序应将从文件中读取的字存储到合适的数据结构中。 程序将计算输入文件中有多少个单词。 程序将计算输入文件中有多少个不同的单词。 程序将计算每个出现单词的频率。 程 ......
C/C++手机通信录[2023-03-22]
C/C++手机通信录[2023-03-22] 程序设计题目5：手机通信录 【问题描述】 用C/C++设计出模拟手机通信系统，能实现对手机中的通信录进行添加、修改、查询等功能。 【基本要求】 用C/C++设计出模拟手机通信录系统，实现对手机中的通信录进行管理。 将通讯录用文件存储，人员信息包括：姓名、 ......
Redis跟MySQL的双写问题
本文已收录至Github，推荐阅读 👉 Java随想录 微信公众号：Java随想录 项目中有遇到这个问题，跟MySQL中的数据不一致，研究一番发现这里面细节并不简单，特此记录一下。 写在前面 严格意义上任何非原子操作都不可能保证一致性，除非用阻塞读写实现强一致性，所以缓存架构我们追求的目标是最终一 ......
爬取的数据，存到mysql中、爬虫和下载中间件、加代理，cookie，header，加入selenium、去重规则源码分析（布隆过滤器）、scrapy-redis实现分布式爬虫
# 1 scrapy架构 -爬虫：写的一个个类 -引擎： -调度器：排队，去重 -下载器 -pipline -下载中间件 -爬虫中间件 # 2 命令 -scrapy startproject 项目名 -scrapy gensipder 爬虫名 网址 -scrapy crawl 爬虫名字 -run.p ......
代码随想录算法训练营Day50 动态规划
#代码随想录算法训练营 代码随想录算法训练营Day50 动态规划| 123.买卖股票的最佳时机III 188.买卖股票的最佳时机IV 123.买卖股票的最佳时机III 题目链接:123.买卖股票的最佳时机III 给定一个数组，它的第 i 个元素是一支给定的股票在第 i 天的价格。 设计一个算法来计算 ......
SpringMVC-lesson03-hellospringmvc-原理图分析-2023-03-22
图为SpringMVC的一个较完整的流程图，实线表示SpringMVC框架提供的技术，不需要开发者实现，虚线表示需要开发者实现。 简要分析执行流程 1\DispatcherServlet表示前置控制器，是整个SpringMVC的控制中心。用户发出请求，DispatcherServlet接收请求并拦截 ......
0 爬取的数据，存到mysql中 、1 爬虫和下载中间件、 2 加代理，cookie，header，加入selenium、3 去重规则源码分析（布隆过滤器） 、4 scrapy-redis实现分布式爬虫
0 爬取的数据，存到mysql中 # 存到mysql中 class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', pass ......
进制表示-03 浮点数-随笔
#未来可期 昨天看了很多软考心得，有些博主让我钦佩不已，同时也体现出这一段路不好走， 对于软考架构也有了一定的了解$\Longrightarrow$程序员(初级)$\Longrightarrow$软件设计师(中级)$\Longrightarrow$系统架构设计师(高级) 思维导图 #浮点数 特点： ......
【结对作业】第一周 | 学习体会day06
初步做了app的页面 change作为mysql的关键字，不可以作为命名，否则报错做了两条线路的中转初步学习了frame标签，打算明天实现页面的部分切换 ......
Day13-文件操作
一、 文件基本操作 1、 打开、读写、关闭 open(file=,mode=,encoding=) # open 操作文件数据 open(file=文件所在位置, # mode=操作文件的模式, # encoding=以什么编码读取文件 二进制数据不需要设置编码) 绝对路径(一个完整的路径) #F: ......
Redis基本问题二
问题十一： Redis集群策略 问题十二： Redis如何设置key的过期时间 问题十三：Redis有哪些数据结构? 分别有哪些典型.. 问题十四：redis主从复制的核心原理 Redis的主从复制是提高Redis的可靠性的有效指施，主从复制的流程如下:1，集群启动时，主从库间会先建立连接，为全量量 ......
【2023-03-21】动态发展
20:00 二气莫交争，春分雨处行。雨来看电影，云过听雷声。山色连天碧，林花向日明。梁间玄鸟语，欲似解人情。 ——《咏二十四气诗·春分二月中》 在工作上，有时候事情一多，实在忙不过来时，我就会考虑捉大放小。在管理域，我时常听到“捉大放小”这个说法。可是，多大才算大，多小才算小呢。 从业多年，我听到过 ......
Redis 如何实现库存扣减操作和防止被超卖？
本文已经收录到Github仓库，该仓库包含计算机基础、Java基础、多线程、JVM、数据库、Redis、Spring、Mybatis、SpringMVC、SpringBoot、分布式、微服务、设计模式、架构、校招社招分享等核心知识点，欢迎star~ Github地址：https://github.c ......
机器学习基础02DAY
数据的特征预处理 单个特征 （1）归一化 归一化首先在特征（维度）非常多的时候，可以防止某一维或某几维对数据影响过大，也是为了把不同来源的数据统一到一个参考区间下，这样比较起来才有意义，其次可以程序可以运行更快。 例如：一个人的身高和体重两个特征，假如体重50kg，身高175cm,由于两个单位不一样 ......