爬虫 博客
笑死~我的博客美化脚本分享
笑死~我的博客美化脚本分享 前置提醒 本页面使用魔法代码，与其他页面的代码块不同，本页所有代码块不自动换行。 使用如下代码实现： <style> .cnblogs-markdown pre code, .blogpost-body pre code { white-space: nowrap !im ......
Python逆向爬虫入门教程: 酷狗音乐加密参数signature逆向解析
数据来源分析💥 网站链接: aHR0cHM6Ly93d3cua3Vnb3UuY29tLw== 歌曲下载 signature 💥 正常抓包分析找到音频链接地址 通过链接搜索找到对应的数据包位置 分析 signature 参数加密位置 通过 s 列表 合并成字符串, 传入d函数中进行加密, 返回32 ......
个人博客详细设计说明书
 ，# 的数量代表标题的级别，数量越低级别越高 Markdown 语法 HTML 预览效果 # 标题 1 <h1>标题 1</h1> 标题 1 ## 标题 2 <h2 ......
爬虫之短信验证码
处理短信验证码的思路就是手机端有一个可以转发短信到我们可以读取的地方。目前我的处理方式是将短信转发到邮箱，再读取邮箱中的邮件拿取验证码。 首先就需要下载转发工具：https://github.com/pppscn/SmsForwarder/releases/tag/v3.2.0 具体使用参考 ......
scrapy -- 暂停爬虫、恢复爬虫
1、启动爬虫 scrapy crawl spider -s JOBDIR=record/spider-1 record/spider-1表示一个路径，作用是记录爬虫状态2、暂停爬虫 终端输入Ctrl+C，此时爬虫并不会立即停止，需要等待一会 当终端出现可以敲击命令时，说明爬虫已暂停 3、恢复爬虫 s ......
如果有人在你的论坛、博客，乱留言、乱回复，怎么办？
作者：小傅哥 博客：https://bugstack.cn 沉淀、分享、成长，让自己和他人都能有所收获！😄 哈喽，大家好我是技术UP主小傅哥。 常听到一句话：你很难赚到你认知以外的钱💰，屁！不是很难，是压根赚不到。 你以为要是你做也能做，但其实除了你能看见的以外，还有很多东西都不知道。 我看过不 ......
【前端】统计博客园阅读总量
✨效果展示 在博客后台页面运行以下代码 截止2024-1-9，阅读总量已达28w！！ ✨代码实现 /** 输入别人的博客园地址名称 */ function countBlogReadings(CnblogsName){ console.log("正在统计 "+CnblogsName+" 的博客的总阅 ......
博客园页面定制-绿色简约风
效果图 博客侧边公告 <style> #back-top { position: fixed; bottom: 10px; right: 5px; z-index: 99; } #back-top span { width: 50px; height: 64px; display: block; b ......
python爬虫示例-2
import time import os import requests as re from tqdm import tqdm from bs4 import BeautifulSoup download_src = "https://m.tuiimg.com/" #网站url now_file ......
python爬虫示例-1
1 import os 2 from bs4 import BeautifulSoup 3 import requests as re 4 import time 5 6 download_url_1= "https://umei.net/i/" 7 # print(download_url[:-5 ......
博客澄清
从二分法开始，我都摘录了力扣和代码随想录的解法，CV的时候发现有“非商业用途请标注出处”，但是我自私了一下，觉得不美观，我写这个博客的初衷是总结给自己看的，所以接下来我复制下来都不会表明出处的哦，如果涉及到您的利益请联系我及时止损！谢谢！ ......
Scrapy爬虫学习
目录Scrapy基本功能Scrapy Shell用法XPATH语法及用法null Scrapy基本功能 Scrapy Shell用法 XPATH语法及用法 参考资料： 基础入门：https://zhuanlan.zhihu.com/p/35355747 https://www.w3school.co ......
爬虫实战 - 微博评论数据可视化
简介： 我们都知道在数据比较少的情况下，我们是可以很轻易的获取到数据中的信息。但是当数据比较庞大的时候呢，我们就很难看出来了。尤其是面对现如今数以万计的数据，就更了。 不过好在我们可以通过计算机来帮我们进行分析，其中比较高效的手段便是数据可视化了。通过将数据进行可视化，我们可以让数据开口说话。进而有 ......
我的第一篇博客（试验版）
一文读懂Docker原理 说起Docker，基本上就是指容器。许多同学熟悉Docker的操作，却搞不懂到底什么是容器。本文就来讲讲Docker容器到底是个啥。 容器被称为轻量级的虚拟化技术，实际上是不准确的。确切地说，容器是一种对进程进行隔离的运行环境。 由于生产环境的容器几乎都是运行在Linux上 ......
爬虫
（２）请用requests库的get()函数访问必应主页２０次，打印返回状态，text()内容，计算text()属性和content属性所返回网页内容的长度 import requests for i in range(20): r = requests.get("https://cn.bing.c ......
还在用Python爬虫？教你一招，摆脱选择元素位置的烦恼！使用Node.js大杀器，并且无需使用cheerio 库~
咱们以豆瓣历史250最佳电影为例。 豆瓣说，>_< 你不要过来啊！ 第一步：打开网页源代码 第二步：选择你想要爬虫的元素，右键复制获取JS路径 document.querySelector("#content > div > div.article > ol > li:nth-child(3) > ......
Python爬虫01
Python爬虫 01 爬虫是一种自动化的数据收集系统中的一种，写网络爬虫的目的在于高效、快速的收集网络上自己所需要的数据或者基于爬虫技术编写网站自动测试脚本。 学习爬虫需要的前置技术：html、JavaScript、http协议、一门编程语言。 为什么需要htnml、JavaScript、http ......
【永久置顶】博客说明&目录
本博客为very_easy的博客，洛谷的题解没有搬运，主要是因为没意义其实就是懒得搬，因此本博客记录本人新的题解（不一定 \(100\%\)），随笔（既杂文）以及一些其他的东西。 目录 题解 AT_abc335_a 题解 AT_abc335_b 题解 ......
模拟集成电路设计系列博客——5.2.2 二阶开关电容滤波器
5.2.2 二阶开关电容滤波器 类似于一阶的情况，二阶开关电容滤波器结构可以通过参考连续时间滤波器结构来实现。然而，和一阶滤波器一样，一旦确定滤波器结构，其精确的频率响应需要通过离散时间分析求得。使用精确的传输函数，或者是几个精确的近似，可以确定设计环节时所需要的电容比例。 一个二阶连续时间滤波器结 ......
我为博客园生商业化运营献计
时间过得真快，想想十年前还在dudu建的qq群里和大家谈笑风生，如何跟着大佬学习技术。 10 年过去了，我依然没有成为技术大佬，博客园也没有上市敲钟，大家都喜欢低调且平淡的生活，不得不感慨一下，世道艰难，苟着才能活得久。 这么多年，有很多博客类网站出现过，又都消失了，博客园还在，不得不说博客园还是很 ......
博客园音乐
一、网页内嵌音乐 如何在 markdown 中添加音频 转载来源：https://zhuanlan.zhihu.com/p/301744339 二、博客全局音乐 转载来源：https://echeverra.cn/aplayer 博客园页脚 HTML 代码中添加代码 单曲引入 <link rel=" ......
店铺宣传：博客园的官方淘宝店铺
店铺地址： https://shop329379219.taobao.com/ 店铺里面的东西确实有些少的可怜，目测只有会员充值业务，哈哈哈！！！ 不过也是要支持支持的嘛。 ......
大三上学期加分博客
1-本学期成功谈恋爱 申请加分10分; 2-参与大创并结项 申请加分10分;(部分内容涉及隐私，故截图上传) 3-参与的团队已成功申请软件著作权 暂未有证书文件~ 申请加分10分; ......
模拟集成电路设计系列博客——5.2.1 一阶开关电容滤波器
5.2.1 一阶开关电容滤波器 在上一节我们讨论过，低频时，开关电容可以等效为电阻。利用这个等效，可以通过有源RC结构来推理设计出开关电容滤波器。然而，尽管这两种结构在低频输入信号（与时钟信号相比）时有着非常相似的表现。但是对于频率靠近时钟信号频率的输入信号来说。开关电容电路只能够通过\(z\)域的 ......
爬虫中scrapy管道的使用
来源：http://www.shanhubei.com/archives/8595.html 一、pipeline中常用的方法 1. process_item（self，item，spider） 管道类中必须有的函数 实现对item数据的处理 必须return item 2. open_spider ......