单向https
http 和 https区别,自动携带cookie的session对象，响应response，下载图片视频到本地，编码问题，解析json，ssl认证，使用代理，超时设置，异常处理，上传文件，代理池搭建，爬取某视频网站
# 1.1 自动携带cookie 的session对象 ```python # session对象 》已经模拟登录上了一些网站 》单独把cookie 取出来 -res.cookies -转成字典 res.cookies.get_dict() #请求头和数据 import requests heade ......
https://www.zhihu.com/tardis/bd/art/627016379?source_id=1001
1、ODS原始数据层 ODS层保存所有操作数据，不对原始数据做任何处理。在业务系统和数据仓库之间形成一个隔离，源系统数据结构的变化不影响其他数据分层。减轻业务系统被反复抽取的压力，由ODS统一进行抽取和分发。记住ODS层数据要保留数据的原始性。 处理原则： 根据源业务系统表的情况以增量或全量方式抽取 ......
LRU 力扣 146 https://leetcode.cn/problems/lru-cache/
一道经典题目，用双向链表去做能够满足O1的复杂度 核心代码如下 class LRUCache { MyLinkedList myLinkedList; int size; int capacity; HashMap<Integer, MyNode> map; public LRUCache(int ......
BurpSuite抓取HTTPS数据包
获取证书 注意：首先使用火狐浏览器设置代理为本机的Burpsuite所指定的IP和端口。 然后通过浏览器访问网址http://burp，并下载证书。 安装证书 注意：证书要在Burpsuite和浏览器中都要安装。首先在火狐浏览器中安装： 选择下载的证书 点击确认后，浏览器的证书安装就结束了。接下来， ......
C# HTTPS路径的pdf文件下载
public void ces2() { try { var url = "https://116.204.71.115/httpsCs.pdf";//路径地址 string fileName = "D:\\替换文件\\files.pdf";//下载路径地址 //ServicePointManage ......
常见抓包工具配置抓取HTTPS
一、wireshark 抓取 https 1.配置SSLKEYLOGFILE环境变量 2.关闭Chrome浏览器后重新打开，确认sslkey.log文件已经添加 3.配置wireshark 编辑–首选项–protocols–TLS 4.开启wireshark抓包 二、Fiddler抓取 https ......
nginx设置强制域名访问https
先配置ssl的server段，再追加： server { listen 80; server_name www.xxx.com; rewrite ^(.*)$ https://$host$1 permanent; } ......
Jmeter学习之六_进行https证书处理的工作
# Jmeter 进行https证书处理的工作 ## 背景 ``` 继续学习中,想着能够抓取一下https相关的信息 所以计划些一下处理过程 但是感觉自己这一块比较薄弱. 场景设计这一块应该是专业人去搞, 我这边先只是简单学习了解一下. ``` ## 创建证书 ``` 要使用 keytool 工具创 ......
nginx的https配置
#user nobody;worker_processes 1; #error_log logs/error.log;#error_log logs/error.log notice;#error_log logs/error.log info; #pid logs/nginx.pid; event ......
解决浏览器SSL缓存,自动将http跳转至https导致无法访问的问题
PHP交流群 656679284 为PHP广大爱好者提供技术交流，有问必答，相互学习相互进步！ 这里汇总一下几大常见浏览器 HSTS 的关闭方法。 Safari 浏览器 完全关闭 Safari 删除 ~/Library/Cookies/HSTS.plist 这个文件 重新打开 Safari 即可 极 ......
debian_ubuntu配置sock/socks5h/http/https代理
编辑用户变量 ```sh vi ~/.bashrc ``` 添加以下代码 ```sh # set proxy function proxy_set() { export MY_PROXY=socks5h://192.168.10.25:1080 export no_proxy="localhost, ......
接口测试（3）--HTTPS协议
HTTPS HTTPS是HTTP协议+SSL/TLS（Secure Sockets Layer/Transport Layer Security ）认证，是一个基于安全套接字的 超文本传输协议 HTTP与HTTPS的区别 HTTP 的 URL 以 http:// 开头，而 HTTPS 的 URL 以 ......
Could not fetch URL https://pypi.org/simple/keras-bert/: There was a problem confirming the ssl certificate: HTTPSConnectionPool(host='pypi.org', port=443):
pip下载包的时候报错 Could not fetch URL https://pypi.org/simple/keras-bert/: There was a problem confirming the ssl certificate: HTTPSConnectionPool(host='pyp ......
如何强制访问无https的网站
## 提问 如何强制访问无https的网站 ## 回答 快捷方式目标增加如下项 ``` --test-type --ignore-certificate-errors ``` 。转发到kkFileView启动的默认端口。 总结 ：要用到 nginx + https证书+kkFileView配置 nginx kkfileview ......
app之抓取https包的配置
# 使用charles抓取HTTPS包 - 安卓7以上，将证书安装在**系统**级别，才能抓https的包。 - 安卓7以下，将证书安装在**用户**级别，就可以抓https的包。 ## 安卓7以下（模拟器） ```python # 1.打开模拟器，打开charles; # 2.在charles中找 ......
每日一题 力扣 445 https://leetcode.cn/problems/add-two-numbers-ii/
可以直接用栈去做就行，逆序想到栈的做法 然后算完一个就直接赋值给答案数组 我用的是常见 public ListNode addTwoNumbers(ListNode l1, ListNode l2) { int sizeA=0; int sizeB=0; ListNode start=l1; Lis ......
Tomcat 域名、Supmap iServer服务与nginx代理SSL证书，启用Https
背景 使用iServer发布服务的时候经常会涉及到nginx代理，负载集群或者反向代理，都是常见的使用场景，下面就nginx代理iServer服务的一些问题做个简单总结。 一、Tomcat 配置业务系统，一级域名，正常启用Http协议，自定义内部端口，端口可以不开放公网： Tomcat 8.5.x\ ......
浅谈HTTPS理解
## 为什么要HTTPS 1. 提高数据加密性 HTTPS协议通过使用对称加密+非对称加密的模式，这种混合加密的模式，充分利用两方的优势，让网站的数据能够在传输过程中不被破解，同时提高数据的解密效率。这个方法的原理是，首先，使用非对称加密的方法，确保数据的密钥在安全的前提下进行交换，然后，使用对称加 ......
nginx http to https
server { listen 80; server_name xxx.cn www.xxx.cn; return 301 https://$server_name$request_uri; } server { listen 443 ssl http2; server_name xxx.cn ww ......
生成https证书
# 生成HTTPS证书 # 1. 使用loge命令的方式生成HTTPS证书 参数说明： 1. *.domain.com 替换为你的域名，支持所有子域名 2. -- dns 是指域名在哪个云厂商，支持的云厂商有alidns/cloudflare aws;详细参考github官方文档 ``` CLOUD ......
关于HTTPS与HTTP的区别
超文本传输协议（Hypertext Transfer Protocol，HTTP）是一个简单的请求-响应协议，它通常运行在TCP之上。它指定了客户端可能发送给服务器什么样的消息以及得到什么样的响应。请求和响应消息的头以ASCII形式给出；而消息内容则具有一个类似MIME的格式。这个简单模型是早期We ......
https://leetcode.cn/ 第9题 判断回文数
# 回文数 121 是； 123 不是 #定义一个函数 判断是否是回文数 def get_Hui(num): #将整数num转字符串 str_num = str(num) str_num_change = str_num[::-1] num2 = int(str_num_change) #判断整数n ......
Python错误：requests请求https网站报错SSLError
问题描述： 用requests包请求https的网站时，经常会遇到证书问题，也就是常见的SSLerror： requests.exceptions.SSLError: HTTPSConnectionPool(host='www.xxx.com', port=443): Max retries exc ......
Nginx http重定向https
Nginx配置同一个域名http与https两种方式都可访问,证书是阿里云上免费申请的 server{listen 80;listen 443 ssl;ssl on;server_name 域名;index index.html index.htm index.php default.html de ......
Nginx 配置HTTP跳转到HTTPS
https 访问我们的测试域名 https://www.xxx.com 站点，但是当我们直接在浏览器地址栏中直接输入 www.xxx.com 的时候却发现进入的是 http 协议的网站，这与我们的初衷不一致。 由于浏览器默认访问域名使用的是80端口，而当我们使用SSL证书后，网站的端口就变成了443 ......
Taurus .Net Core 微服务开源框架：Admin 插件【4-1】 - 配置管理-Kestrel【含https启用】
继上篇：Taurus .Net Core 微服务开源框架：Admin 插件【3】 - 指标统计管理，本篇继续介绍下一个内容：系统配置节点：App - Config 界面... ......
Kong入门学习实践(6)HTTPS与TCP流代理
最近在学习Kong网关，因此根据老习惯，我会将我的学习过程记录下来，一来体系化整理，二来作为笔记供将来翻看。由于我司会直接使用Kong企业版，学习过程中我会使用Kong开源版。 本篇，我们学习快速配置HTTPS跳转 与 TCP流代理。 HTTPS跳转配置 HTTP协议虽然应用广泛，简单易用，但存在着 ......