爬虫request网站
使用HHDESK部署网站
上篇文章讲述了，使用HHDESK图形化功能管理服务器。 本篇接着这个思路，详细讲述一下网站部署，一个原本麻烦，但通过HHDESK的处理之后变得简单的工作。 网上搜索一下网站部署，首先出现的便是各个收费广告——说明这是一项具有一定难度且麻烦的工作。 本篇将用最精简的文字和步骤，讲述一下，如何通过HHD ......
微信公众号_爬虫_fiddler_抓包_python
# `wechat_python/run.py` ```py from sqlalchemy import Column, Integer, String, create_engine from sqlalchemy.orm import sessionmaker from sqlalchemy.e ......
实现 GitLab CI/CD 自动化发布网站至本地IIS服务器
下面列出我本次使用的环境： 操作系统：Windows 11 项目版本：.NET Core 6.0 脚本执行环境：PowerShell 5.1.22621.963 Web服务器：IIS 10.0 Gitlab：git.local 基本步骤 配置GitLab CI/CD Runner 首先，在本地或公司 ......
Django 网站允许外部访问的设置方法
Django学习过程中一般都是在本机上使用 manage.py runserver 命令启动开发用HTTP服务器，使用本机浏览器访问此服务器。那么如果需要在联网的其他电脑上访问这个Django服务器，则需要额外做一些设置，否则会显示无法连接或连接失败等错误。 #### 1.确认Django的开发 ......
功能性网站集合
**网站名称** 1. 视频片头动画模板 https://panzoid.com/ 2. 在线抠图 https://www.remove.bg/ 3. 字体下载 https://www.zitijia.com/ 4. p站 （二次元插画网站） https://www.pixiv.net/ 5. 论文 ......
爬虫-Scrapy框架安装使用2
Scrapy 框架其他方法功能集合笔记 ### 使用LinkExtractor提取链接 - 使用Selector ``` import scrapy from bs4 import BeautifulSoup class BookSpider(scrapy.Spider): name = "book ......
如何把自己的网站部署到公网上
1、下载ngrok https://ngrok.com/ 2、注册一个账号 3、打开 4、ngrok config add-authtoken 你自己账号的code 5、ngrok http 端口号 ......
利于搭建国内网站的免费CDN加速github和npm方式
记录下常用的免费cdn，以下链接可直接访问我部署的数据，那么根据这个格式可替换为你对应的数据仓库格式。 建议有回源选回源。 npm可用来加速访问npm包内资源 aliyun https://npm.elemecdn.com/hexo-theme-a4@latest/source/css/markdo ......
python + requests：请求头（'Content-Type': 'multipart/form-data'），并且files和其他参数均正确定义，但是文件上传一直失败，需要使用MultipartEncoder
### 解释 1. 在使用'Content-Type': 'multipart/form-data'上传文件时，你需要将文件作为请求体的一部分进行传输。而由于文件可能非常大，因此需要将文件分成多个部分进行传输。这就需要使用多部分编码（Multipart Encoding）来将文件分割成多个部分，并将 ......
记录--让整个网站界面无滚动条
这里给大家分享我在网上总结出来的一些知识，希望对大家有所帮助 界面无滚动条 滚动条的优化也有很多种，比如随便再网上搜索美化浏览器滚动条样式，就会出现些用css去美化滚动条的方案。 那种更好呢？ 没有更好只有更合适 像默认的滚动条的话，他能让你方便摁着往下滑动（他比较宽）特别省劲，不用担心美化过后变细 ......
Java 网络爬虫，就是这么的简单
是 Java 网络爬虫系列文章的第一篇，如果你还不知道 Java 网络爬虫系列文章，请参看 学 Java 网络爬虫，需要哪些基础知识。第一篇是关于 Java 网络爬虫入门内容，在该篇中我们以采集虎扑列表新闻的新闻标题和详情页为例，需要提取的内容如下图所示： 我们需要提取图中圈出来的文字及其对应的链接 ......
SPA单页面网站首屏加载优化
对于vue和react这些单页面应用都有一个弊端，首屏加载时间长，对于用户的使用体验很不好，我们这次的目标是把页面整体加载时间控制在800ms以内 首先说下我的项目情况是vite+vue3+ts 下面主要说说要做哪些事情： 一、开启gzip资源压缩 gzip需要后端配置，在nginx里面开启，ngi ......
视频直播网站源码，自定义矢量图层的样式
视频直播网站源码，自定义矢量图层的样式 var mystyle = new ol.style.Style({ image: new ol.style.Circle({ radius: 10, fill: new ol.style.Fill({ color: '#ffff00' }) }) });va ......
直播网站源码，背景色渐变
直播网站源码，背景色渐变 实现页面从白色背景过度到蓝色 var t = d3.transition() .duration(2000);d3.select("body").transition(t).style("background-color", "lightblue");const color ......
精品网站案例赏析，使用zblog制作的。
https://tnbzh.comhttps://dggaorong.comhttps://wodpe.comhttps://nxqli.comhttps://hzqsee.comhttps://dwpaopaa.comhttps://wodpp.comhttps://dwpaopao.comhtt ......
go爬虫 简单请求
demo1.go package main import ( "fmt" "io/ioutil" "net/http" ) func fech(url string) string { client := &http.Client{} req, _ := http.NewRequest("GET", ......
爬虫学习基础2
### ```selenium``` - 安装: ``` pip install selenium ``` - 安装浏览器驱动(各个浏览器的驱动是不一样的,推荐**chrome**) ``` - https://registry.npmmirror.com/binary.html?path=chro ......
PC网站如何实现微信扫码登录
不管你运营什么类型的网站，用户注册都是很重要的一个环节，用户注册的方式也是很多的，比如邮箱注册、手机号注册、第三方授权登录等。其中，第三方授权登录是最常用的一种方式，微信扫码登录是其中的一种，但是微信扫码登录的实现方式有很多种，比如公众号扫码，小程序扫码，网页扫码等。 本文将介绍一种简单的实现方式。 ......
无须 Flash 给网站添加 hone hone clock 数字人体时钟 的方法
hone hone clock 是来自日本博主的一款数字人体时钟，但需要flash支持。 很多年前，老殁网站就嵌套了 hone hone clock ，很可惜随着时代的发展，现在主流浏览器都放弃了 flash，所以 hone hone clock 也就无法显示了。 这里给各位站长免费提供一套 无需 ......
java爬虫--jsoup的使用
简介： jsoup 是一款基于 Java 的HTML解析器，它提供了一套非常省力的API，不但能直接解析某个URL地址、HTML文本内容，而且还能通过类似于DOM、CSS或者jQuery的方法来操作数据，所以 jsoup 也可以被当做爬虫工具使用。 Document ：文档对象。每份HTML页面都是 ......
【python爬虫案例】用python爬豆瓣音乐TOP250排行榜！
[toc] # 一、爬虫对象-豆瓣音乐TOP250 今天我们分享一期python爬虫案例讲解。爬取对象是，豆瓣音乐TOP250排行榜数据：https://music.douban.com/top250  今天，我再分 ......
记录pc网站微信登录(内嵌二维码方式)
官方文档地址：https://developers.weixin.qq.com/doc/oplatform/Website_App/WeChat_Login/Wechat_Login.html 第一步： 引入官方js http://res.wx.qq.com/connect/zh_CN/htmled ......
request模块
一、request模块介绍和安装 1.安装request模块： win+R 后出入cmd 打开命令行窗口：输入 pip install requests。 2.在pycharm中，设置--项目--Python解释器中选择新增request模块。 二、request模块请求 1.get请求，heade ......