爬虫request网站
学习网站
学习网站 markdown语法： https://markdown.com.cn/basic-syntax/ 菜鸟教程： https://www.runoob.com/ w3cshool： https://www.w3cschool.cn/ https://www.w3school.com.cn/ ......
Tpon 1.0 一键查询网站存在过的路径
Tpon 1.0 寻找网站存在过的路径 该工具能够让你发现意料之外的路径 工具描述 编写该工具旨在寻找网站存在过的网站路径，这个地址可能是机器爬下来的也可能是某些人访问过的，在表面你可能看不到它的入口，但它确实存在。 工具下载 https://github.com/mt0u/Tpoh 工具使用 打开 ......
关于网站配置域名通配证书
摘要 域名证书申请通常用certbot和acme.sh https://zhuanlan.zhihu.com/p/347064501 两种 acme.sh 安装 curl https://get.acme.sh | sh 或者 wget -O - https://get.acme.sh | sh 本 ......
开源算命网站源码php搭建下载|占卜运势付费测算源码系统开发
占卜算命是人类历史上流传下来的一种古老的文化和传统。人们常常追寻各种吉凶祸福的预测和解读，以求知己知彼，预测未来，寻找人生的方向和答案。随着科技的发展，人们开始利用计算机编程和算法来开发占卜算命的相关工具。本文将探讨占卜算命源码开发的方法和技术。 一、源码开发背景和原理 占卜算命的起源可以追溯到古代 ......
Nginx部署网站&Docker&自动更新部署
一 搭建web服务器 lsb_release -a # 查看Linux版本 Linux不同版本的操作方式会有所不同，注意区分。我是在阿里云买的，用的是AlibabaCloud，所以文章的大部分命令会以这个系统为准。 1.1 安装与启动Nginx # Debian/Ubuntu apt install ......
python爬虫示例-2
import time import os import requests as re from tqdm import tqdm from bs4 import BeautifulSoup download_src = "https://m.tuiimg.com/" #网站url now_file ......
python爬虫示例-1
1 import os 2 from bs4 import BeautifulSoup 3 import requests as re 4 import time 5 6 download_url_1= "https://umei.net/i/" 7 # print(download_url[:-5 ......
h5ai--目录下载网站部署
1.说明 容器化部署，在docker hub上找h5ai的镜像，本文使用的是awesometic/h5ai的镜像进行部署 参考：https://hub.docker.com/r/awesometic/h5ai 2.部署 2.1 创建文件下载目录 mkdir -p /data/h5ai/_h5ai/p ......
云数据库与Web网站：构建高效、可扩展的网络应用
云数据库与Web网站的关系
云数据库与Web网站之间存在着密切的关系。Web网站需要数据库来存储和管理用户数据、交易信息、内容资料等关键信息。而云数据库提供的弹性和可扩展性，使得Web网站能够根据业务需求快速地增加或减少存储资源，从而更加高效地应对用户访问和数据增长。
同时，云数据库还为Web网站提... ......
Scrapy爬虫学习
目录Scrapy基本功能Scrapy Shell用法XPATH语法及用法null Scrapy基本功能 Scrapy Shell用法 XPATH语法及用法 参考资料： 基础入门：https://zhuanlan.zhihu.com/p/35355747 https://www.w3school.co ......
白嫖的在线图片压缩网站
压缩或者转换图片不想看到付费字眼的来这里，白嫖 1、Caesium Image Compressor 网址：https://caesium.app/ 允许使用 JPG、PNG 或 WebP 格式 一次最多 5 个文件 每个文件最大 20 Mb 图片永远不会离开您的设备 2、比特虫 网址：https: ......
企业网站上线前需要做安全测试吗？
软件安全测试报告 是的，企业网站上线前需要进行安全测试。安全测试是确保企业网站能够抵御各种网络攻击和保护用户数据的重要环节。 以下是为什么企业网站需要进行安全测试的几个原因： 1. 防止数据泄露：企业网站通常会收集和存储大量用户的个人数据，如姓名、地址、联系方式等。这些数据如果遭到黑客入侵，将可 ......
爬虫实战 - 微博评论数据可视化
简介： 我们都知道在数据比较少的情况下，我们是可以很轻易的获取到数据中的信息。但是当数据比较庞大的时候呢，我们就很难看出来了。尤其是面对现如今数以万计的数据，就更了。 不过好在我们可以通过计算机来帮我们进行分析，其中比较高效的手段便是数据可视化了。通过将数据进行可视化，我们可以让数据开口说话。进而有 ......
美食管理与推荐系统Python+Django网站开发+协同过滤推荐算法应用【计算机课设项目推荐】
一、介绍 美食管理与推荐系统。本系统使用Python作为主要开发语言开发的一个美食管理推荐网站平台。 网站前端界面采用HTML、CSS、BootStrap等技术搭建界面。后端采用Django框架处理用户的逻辑请求，并将用户的相关行为数据保存在数据库中。通过Ajax技术实现前后端的数据通信。 创新点： ......
requests库实现接口测试
requests库安装 pip install requests requests库查验 pip show requests/pip list cookie+session认证方式 例子：获取验证码+商城登录+订单查询（涉及到cookie） # 方法一：从获取验证码请求中提取cookie，然后携带到 ......
Dynamics 365 导入Excel报错：Server was unable to process request.
Dynamics 365 导入Excel报错：Server was unable to process request. F12查看调用，发现是调用GetImportMapXml报错，于是到高级设置-数据管理-导入去试试，提示字段Industry未找到，后来找一下字段Industry，居然又3个，一 ......
Java学习网站，哪个最靠谱？
简介 Java学习网站有很多，哪个最靠谱呢？本文对Java学习网站进行对比。 第1类：大型培训机构(黑马等) 典型机构 黑马、尚硅谷、动力节点、白马、千锋、达内。 优点 知名度高。 教程齐全（Java、前端、Python等都有） 省心（跟着培训的进度走，不需要自己找资料） 缺点 学习成本高。（几 ......
源码学习 出现彻底解决unable to find valid certification path to requested target
说明：很久前spring 5.1X源码搭建成功，近阶段看源码发现更新类库出现 “：unable to find valid certification path to requested target 原因是：源码更新的是官网类库，官网需要国外我网站不能实时访问很慢，所以映射需要执行ali 服务器， ......
如何在GitHub正确提PR(Pull Requests),给喜欢的开源项目贡献代码
最好的中文TTS项目Bert-vits2更新了中文特化分支，但可能由于时间仓促，代码中存在不少的bug，作为普通用户，有的时候也想为自己喜欢的开源项目做一点点贡献，帮助作者修改一些简单的bug，那么该如何开始？ 本次我们以Bert-vits2项目为例子，分享正确提交PR(Pull Requests) ......
爬虫
（２）请用requests库的get()函数访问必应主页２０次，打印返回状态，text()内容，计算text()属性和content属性所返回网页内容的长度 import requests for i in range(20): r = requests.get("https://cn.bing.c ......
还在用Python爬虫？教你一招，摆脱选择元素位置的烦恼！使用Node.js大杀器，并且无需使用cheerio 库~
咱们以豆瓣历史250最佳电影为例。 豆瓣说，>_< 你不要过来啊！ 第一步：打开网页源代码 第二步：选择你想要爬虫的元素，右键复制获取JS路径 document.querySelector("#content > div > div.article > ol > li:nth-child(3) > ......
Python爬虫01
Python爬虫 01 爬虫是一种自动化的数据收集系统中的一种，写网络爬虫的目的在于高效、快速的收集网络上自己所需要的数据或者基于爬虫技术编写网站自动测试脚本。 学习爬虫需要的前置技术：html、JavaScript、http协议、一门编程语言。 为什么需要htnml、JavaScript、http ......
免费ip代理网站
【全球代理IP免费用】！免费用！免费用！ 全球200+国家，9000w+动态IP，没任何费用！ 动态住宅IP/静态住宅IP/机房IP等，永久免费！ https://my.socks5.io#NKLCBHHR 点击注册，永久免费海外IP. 免费的，但是要拉一个人才能用。 ......
建立了一个粤语发音网站
起因是在跟朋友聊天的时候，说到一些人名的时候，只会普通话的发音，想用粤语来说时，居然不知道怎么读。想来也的，现在官方推广普通话，导致说粤语的人越来越少了，一些生僻字，由于说得少，都不知道怎么说了。另外，还有一些生活在广东的朋友，来了十几年都没有学会粤语，所以就想做一个工具，可以把普通话翻译成粤语，还 ......
微信公众号网站授权配置
1 拿到 AppID 与 AppSecret 填到插件配置 设置与开发-》基本配置 2 添加IP白名单 设置与开发-》基本配置-》IP白名单 3 添加业务域名、JS接口安全域名、网页授权域名 设置与开发-》公众号设置 到此就可以~ ......
在线客服插件 https网站添加代理
Nginx服务器： location /wss { proxy_pass http://localhost:8282; proxy_http_version 1.1; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connectio ......
如何在Windows电脑上使用多开器同时阅读多个网站
如何在Windows电脑上使用多开器同时阅读多个网站 在日常生活和工作中，我们经常需要处理多项任务，同时浏览多个网站来获取信息。然而，传统的浏览器标签页方式可能会显得有些不够便捷。为了提高效率，使用多开器软件可以让您在同一台电脑上同时打开多个浏览器窗口，这样您就可以轻松地在不同的窗口中阅读多个网站。 ......
记一次对菠菜网站渗透攻击
我们找到一个带有有漏洞的QP后台框架的后台这个框架有很多的漏洞，比如用户遍历，我们如果输入一个存在的用户，密码错误时，就会提示用户或密码错误，如果我们输入一个不存在的用户，就会提示用户不存在除此之外，网站还会存在SQL注入漏洞，我们只需要抓一个提交账号密码的POST包粘贴好一个txt文档然后丢进sq ......
09--requests-02
三 requests请求库--02 1 处理cookie相关的请求 学习目标：掌握requests处理cookie的三种方法 1.1 爬虫中使用cookie 为了能够通过爬虫获取到登录后的页面，或者是解决通过cookie的反扒，需要使用request来处理cookie相关的请求 1.1.1 使用co ......