location规则 经验nginx
Linux操作系统之locate命令详解：通过文件名称来查找文件（与find命令进行全局搜索不同，locate命令是读取数据文件（/var/lib/locatedb）进行查找；由于缩小了查找的范围，因此locate命令查找文件会比find命令速度快很多）
https://blog.csdn.net/yspg_217/article/details/122113017 https://www.cnblogs.com/liujiaxin2018/p/16211758.html http://www.hnwypx.com/zhishi/284406.htm ......
爬取的数据，存到mysql中、爬虫和下载中间件、加代理，cookie，header，加入selenium、去重规则源码分析（布隆过滤器）、scrapy-redis实现分布式爬虫
# 1 scrapy架构 -爬虫：写的一个个类 -引擎： -调度器：排队，去重 -下载器 -pipline -下载中间件 -爬虫中间件 # 2 命令 -scrapy startproject 项目名 -scrapy gensipder 爬虫名 网址 -scrapy crawl 爬虫名字 -run.p ......
第八天（nginx第二篇）
4. 正向代理实现 在前面的案例中， 我们了解了nginx作为静态服务器时的应用，如果作为静态服务器，则nginx也只是起到了 运行静态资源的用。如何通过nginx实现正向代理呢？ 比如：我想百度点隐私问题- -！，想通过nginx正向代理实现对百度的访问，这样百度向上记录ip的时候就只 能记录ng ......
0 爬取的数据，存到mysql中 、1 爬虫和下载中间件、 2 加代理，cookie，header，加入selenium、3 去重规则源码分析（布隆过滤器） 、4 scrapy-redis实现分布式爬虫
0 爬取的数据，存到mysql中 # 存到mysql中 class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', pass ......
访问nginx报错502日志：failed (13: Permission denied)
1.错误问题 nginx启动成功，但是访问nginx报错502。检查后台项目，使用IP+端口可以正常访问项目的，这说明项目启动成功了。那就是nginx的问题。检查了nginx.conf文件发现配置的反向代理没有问题。最后查看了nginx日志信息，报错信息如下： 13889#13889: *54 co ......
Calibre规则名词解释
设计规则检查：Design Rule Check，DRC 版图 & 原理图一致性检查：Layout Versus Schematics，LVS 天线效应检查：Antenna effect，ANT 电学规则检查： Electrical Rule Checking，ERC 寄生参数提取 ：Layout ......
五线谱规则
临时： 小节是什么？ 两条竖线分隔出一个小节，如： 1. 高音谱号的下加一线 == 低音谱号的上加一线 2. 几分音符表示音符的演奏时值，对于四四拍而言，以四分音符为一拍，每小节四拍；一个全音符的时值是4拍，一个二分音符的时值是2拍，一个四分音符的时值是1拍，一个八分音符的时值是半拍。音符的时值要跟 ......
反调试手段检测——基于yara规则引擎
在软件开发中，反调试技术是一种保护软件免受恶意用户攻击的重要手段。它可以帮助开发人员防止黑客、逆向工程师和其他恶意用户试图使用调试工具来修改软件或者窃取敏感信息。但当反调试技术被一些恶意程序，如病毒木马所使用时，这就会增大安全人员分析其的难度。 Yara规则引擎是一个基于Yara语言的软件工具，可以 ......
Nginx异常信息 upstream timed out (110: Connection timed out) while reading response header from upstream
upstream timed out (110: Connection timed out) while reading response header from upstream Nginx代理配置如下： ###proxy settings start proxy_http_version 1.1 ......
Python中使用正则表达式以及正则表达式匹配规则
1 导库 import re 2 使用模板 re_pattern = re.compile(pattern, flags=0) result = re.findall(re_pattern,string) 3 说明 参数 描述 pattern 匹配的正则表达式，如 r'abc' 可用来匹配abc ......
Nginx反向代理与负载均衡
一、Nginx反向代理 代理分两类：正向代理和单向代理 正向代理：帮助客户访问服务器、缓存服务器内容。 1. 什么是Nginx反向代理 反向代理：reverse proxy，指的是代理外网用户的请求到内部的指定的服务器，并将数据返回给用户的一种方式，这是用的比较多的一种方式。 Nginx 除了可以在 ......
keepalived+nginx 搭建
0x00 环境说明 1.系统环境：centos7.9 2.主机规划 主节点：site1，IP地址：10.20.140.9 备节点：site2，IP地址：10.20.140.10 VIP地址：10.20.140.188 3.带安装软件清单 nginx：主备节点都需安装 keepalived：主备节点都 ......
【经验总结】idea中使用@Test注解没有显示启动按钮
1.pom.xml中添加依赖 <dependency> <groupId>org.junit.jupiter</groupId> <artifactId>junit-jupiter-api</artifactId> <version>5.3.1</version> </dependency> 2.启 ......
nginx课堂笔记
课堂笔记 内容介绍 nginx 1 、 nginx简介 （ 1 ） 什么是nginx和可以做什么事情 （ 2 ） 正向代理 （ 3 ） 反向代理 （ 4 ） 动静分离 2 、 Nginx的安装 （ 1 ） 在linux系统中安装nginx 3 、 Nginx的常用命令和配置文件 4 、 Nginx配 ......
CentOS下如何安装Nginx
1、下载nginx 官方网站 http://nginx.org 下载链接：http://nginx.org/download/ 下载完成后的安装包： 2、使用解压命令进行解压 tar -zxvf nginx-1.13.7.tar.gz 3、在安装所需的安装环境 安装gcc环境 yum install ......
离线安装 Nginx 1.18
离线安装 Nginx 1.18 安装依赖：gcc、gcc-c++、ssl、pcre、zlib。注意：一定要先安装gcc，再安装gcc-c++。然后再安装其他，其他的没有先后顺序。 一、安装依赖 gcc、gcc-c++等依赖需要根据linux版本选择安装，现场根据部署环境自行安装，（系统安装镜像，pa ......
1688商品发布框架升级，海量规则如何覆盖
1688商品发布框架升级，海量规则如何覆盖？ https://mp.weixin.qq.com/s/1pU36WazmxglJHC7T_fmXQ 1688商品发布框架升级，海量规则如何覆盖？ 原创 阿里巴巴技术质量 阿里巴巴技术质量 2023-03-17 10:00 发表于北京 阿里QA导读：168 ......
Linux系统下配置nginx执行vim nginx.conf后出现一片空白的原因
Linux系统下配置nginx执行vim nginx.conf后出现一片空白，如下图： 上网查了有几个相同情况的都是输错文件名造成的， 1、https://www.imooc.com/qadetail/352451 2、https://www.imooc.com/qadetail/292654 我也 ......
第七天（Nginx第一篇）
Nginx由浅到深 前言 在我们的开发过程中，Nginx是经常使用到的工具，我们常常用来做反向代理、负载均衡等，由于没有系统的学习，对nginx的使用和理解都停留在表面，因此，在这里将nginx进行一次系统的学习，并记录学习过程，本文没有进行实际操作，某些步骤可能存在差错一、nginx的基本概念 n ......
nginx配置小技巧
rewrite location ~ ^/file/ { rewrite "^/file/(.*)$" /$1 break; #proxy_pass_request_headers on; proxy_pass http://172.25.114.5:19000; # minio服务地址 } 实现效 ......
经验+10：7-zip使用
下载安装：刚才去官网看到百度提示被黑客攻击，所以还是自行去应用商店下载 美化：知乎教程 美化工具下载地址：7ztm 美化包：百度网盘、蓝奏云见知乎教程 密码：SmartZip（可以实现自动填充密码，保存密码，对于那些常用的密码可以导入进去，以后就不用每次都输了） ......
nginx 将http的请求转发为https
使用 nginx 实现 原 http的请求 转发为 https 的请求 我使用的版本为 nginx-1.22.1 修改 nginx.conf server { listen 80; server_name localhost; #charset koi8-r; #access_log logs/ho ......
hash模式下前后端路径相同时，nginx如何转发
背景：前期没有进行前后端分离，前端页面由后端转发，即路由的前缀由后端的接口前缀决定；现在想要做到不改变路径做前后端分离且容器化。 前后端分离后，前后端的转发要根据路径前缀做转发，假如项目没有对外开放，内部使用，前端直接在router添加baseUrl,url会自动带上这个路径，以后访问路径需要更改； ......
NGINX配置SSL支持
前言 在文章-腾讯云申请免费SSL证书中, 我们已经申请好了SSL证书. 那么现在, 我们就要配置全站SSL了! :muscle::muscle::muscle: 这次的工作主要是NGINX的配置, 同时会有一些我的博客本身的配置. 博客本身配置更改包括: (这篇文章就先不细说了) 网页内链接全部从 ......
Nginx + Keepalived 高可用集群部署
负载均衡技术对于一个网站尤其是大型网站的web服务器集群来说是至关重要的！做好负载均衡架构，可以实现故障转移和高可用环境，避免单点故障，保证网站健康持续运行。在使用 Nginx 做反向代理或者负载均衡的时候，都是以 Nginx 为入口，如果 Nginx 宕机了，那么所有的服务都无法正常提供，影响非常 ......
Nginx如何升级Openssl
1. 什么是Openssl？ 在计算机网络上，OpenSSL是一个开放源代码的软件库包，应用程序可以使用这个包来进行安全通信，避免窃听，同时确认另一端连线者的身份。这个包广泛被应用在互联网的网页服务器上。 其主要库是以C语言所写成，实现了基本的加密功能，实现了SSL与TLS协议。OpenSSL可以运 ......
Nginx如何配置HTTPS详解
1. 什么是HTTPS？ HTTPS(全称：Hypertext Transfer Protocol Secure),是以安全为目标的 HTTP 通道,在HTTP的基础上通过传输加密和身份认证保证了传输过程的安全性。HTTPS在HTTP的基础下加入SSL,HTTPS的安全基础是SSL,因此加密的详细内 ......
使用Ingress-Nginx来暴露ArgoCD Web-UI
未安装ArgoCD参考GitOps实践之kubernetes部署Argocd 1. 查看Argocd Service 可以看到是ClusterIP，因此不能从外部直接访问Argocd的WEB-UI # kubectl get svc -n argocd NAME TYPE CLUSTER-IP EX ......