爬虫 深度request问题
记一次安服面试问题
1. 自我介绍 巴拉巴拉，自我介绍，感觉像是在推销自己，叫什么名字，来着哪个学校，读的什么专业，主修课程有哪些，学习成绩好的可以说排名，不好的可以省略，在校期间都学习到了什么，掌握了什么技能，获得了哪些认证，熟悉什么安全工具，最后个人的优势。 2. windows主机安全加固 这个就比较简单了，使用 ......
你尚未连接--代理服务器可能会有问题，或地址不正确
这种情况可能是自动开启了代理服务器； 解决方法： 1、控制面板->网络和Internet 2、Internet选项； 3、连接->局域网设置 4、把代理服务器的沟沟取消，点击确定 这样就解决了 原文链接：你尚未连接--代理服务器可能有问题，或地址不正确。-CSDN博客 (baidu.com) ......
pip：离线安装第三方包时出现的一系列问题
1、第三方包离线下载时，如何选择正确的包？包名中的各项是什么意思？ 学习自：python下载包的时候，如何选择是win32，还是amd64的，其中的cp又是什么意思？-CSDN博客 `cp37-cp37m-win_amd64`是什么？-CSDN博客 1）计算机架构 32位的Windows，称作Win ......
vue使用问题记录:父组件通过props传给子组件数据,后改变数据,要使用nextTick,否则修改滞后,可能造成bug
问题如标题所写 代码示例: 父组件: <template> <div class=""> <div class=""> <t-form ref="formData" :data="data.formData" colon label-width="100px" label-align="right" ......
Win11环境Mecab日语分词和词性分析以及动态库DLL not found问题(Python3.10）
日语因为存在假名，会导致翻译软件进行翻译时机翻味道过重的问题，比如積ん読（つんどく）这个词，大多数软件会翻译成：堆积的读，但其实是明明买了书却不读，光放着的意思。有时候也需要单独查句子中的单词释义来理解句子的意思，但一看下去全是假名，无法像中文或者英文那样进行简单的分词操作。 本次我们基于Pytho ......
解决 FastApi 响应体中 datetime 时间格式化问题 ISO 8601: "T"
现象描述 当 FastApi 访问数据库或其他遇到 datetima 时间场景时，若直接返回响应结果，时间会被自动格式为："2024-01-01T09:30:14",而不是 "2024-01-01 09:30:14" 本文包含2种处理方法，分别对应2种响应模型，解决办法，看这里 解决方法 第1种，直 ......
前端开源项目UIRecorder录制脚本遇到的一些问题
D:\nodejs\node_global>uirecorder init __ ______ ____ __ / / / / _/ / __ \___ _________ _________/ /__ _____ / / / // / / /_/ / _ \/ ___/ __ \/ ___/ __ ......
01-认识爬虫
requests模块快速使用 #介绍：使用requests可以模拟浏览器的请求，比起之前用到的urllib(内置模块)，requests模块的api更加便捷（本质就是封装了urllib3） # 注意：requests库发送请求将网页内容下载下来以后，并不会执行js代码，这需要我们自己分析目标站点然后 ......
02-爬虫的高阶使用
代理池的搭建 # 搭建步骤 -1、git clone git@github.com:jhao104/proxy_pool.git -2、在pycharm中打开项目 -3、创建虚拟环境，并且安装依赖 pip install -r requirements.txt -4、修改配置文件：DB_CONN = ......
identityserver4 安装证书遇到的问题
1、自己生成证书，需要用到openssl，官方下载地址 https://slproweb.com/products/Win32OpenSSL.html 2、到安装目录：C:\Program Files\OpenSSL-Win64\bin打开cmd，或配置class环境变量 3、创建密钥（zamone ......
Bean无法注入问题 NoSuchBeanDefinitionException: No qualifying bean of type 'Service.UserService' available: expected at least 1 bean which qualifies as autowire candidate
运行@Test时 UserService 无法完成注入 @SpringBootTest//自动创建Spring上下文环境class MybatisPlusApplicationTests { @Resource private UserService userService; @Test void ......
深度学习上课内容大纲
1.背景知识：回归与分类 2.intro:全连接神经网络 3.卷积神经网络（CNN） 4.循环神经网络（RNN） 5.特殊的RNN：LSTM 6.自注意机制（self-attention）与transformer 7.对抗神经网络（GAN） 8.模型攻防（model attack & model d ......
Unity3D在做性能优化方面需要注意的问题和技术细节 详解
Unity3D是一款强大的游戏开发引擎，它提供了丰富的功能和工具，使开发者能够轻松创建高质量的游戏。然而，随着游戏的复杂性和规模的增长，性能优化变得尤为重要。在本文中，我们将详细讨论在Unity3D中进行性能优化时需要注意的问题和技术细节。 对啦！这里有个游戏开发交流小组里面聚集了一帮热爱学习游戏的 ......
一个关于多层级排序的问题
比如我们在设计架构的时候，或者权限，菜单的时候一般有多层级的概念，这个时候要排序就有点困难了！这里引入另外一个字段，然后按照自己的层级进行排序！ /// <summary> /// 添加一个权限列表 ///</summary> /// <param name="input"></param> /// ......
凸优化问题的对偶
Lagrange Duality(拉格朗日对偶) 对于在\(g_i(x)=0,h_i(x)\leq 0\)的约束下最小化\(f(x)\)的问题（并不要求convex），我们有Lagrange函数\(L(\vec x,\vec \lambda,\vec \mu)=f(\vec x)+\vec\lamb ......
docker 解决nginx 缓冲区权限问题
错误信息: NET::ERR_INCOMPLETE_CHUNKED_ENCODING 200 (OK) 错误背景: api接口在手机端访问时报错上述错误 NET::ERR_INCOMPLETE_CHUNKED_ENCODING 200 (OK)。 经过排查确认问题在于nginx 没有缓冲区权限。但又 ......
深度优先搜索（DFS）和广度优先搜索（BFS）
深度优先搜索（DFS）和广度优先搜索（BFS），都是图形搜索算法，相似又却不同，在应用上也被用到不同的地方。 一、深度优先搜索（DFS） 深度优先搜索属于图算法的一种，是一个针对图和树的遍历算法，英文缩写为DFS即Depth First Search。深度优先搜索是图论中的经典算法，利用深度优先搜索 ......
python爬虫环境配置
环境配置 python3/请求库/解析库/数据库/存储库/web库/app爬取库/爬虫框架库 python3 win11下可以直接商店下载了（ Linux下apt-get install python3 请求库 requests pip3 install requests selenium pip ......
08--请求库：urllib、requests-01、代理
一 urllib请求库 学习目标：了解urllib的基本使用 1 urllib介绍 除了requests模块可以发送请求之外, urllib模块也可以实现请求的发送，只是操作方法略有不同! urllib在python中分为urllib和urllib2，在python3中为urllib 下面以pyth ......
问题记录：MySQL查询第一次后获得结果后，再进行多次查询发现返回结果不变，执行到dao层不再执行sql
问题描述：查询MySQL数据库实时更新的数据，查询第一次后获得结果后，再进行多次查询发现返回结果不变，执行到dao层不再执行sql，问题原因是mapper文件中开启了二级缓存，获取一次结果后再次调用查询时直接从缓存中取，导致返回结果不能实时更新 直接放结论，是mybatis中的二级缓存问题 二级缓存 ......
ElasticSearch更新延迟问题记录
问题描述：使用ElasticSearch做个大数据实时更新接口，接口实际效果字段更新后页面调用查询不及时显示更新 通过查阅资料，es在更新之后并不是立即可见(可查询)的，会有1s的延迟，可以通过设置refresh_interval参数来修改刷新的间隔。 但是在实际应用中，1s的延迟已经算是很久了，在 ......
TF246017: Team Foundation Server 未能连接到数据库。 请验证是否 已正确指定实例，承载数据库的服务器是否能够正常运行，且没有网络 问题阻止与服务器通信
最近在工作中使用TFS中突然遇到TFS未能连接到数据库的问题，当初TFS服务是自己部署的，问题也得自己解决。下面是当时在VS和TFS服务器管理工具上的错误截图。 经过一番查找，是运维那边改服务器管理员账号administrator的密码了，刚好之前部署TFS服务的时候是把服务器的administra ......
问题汇总
项目问题汇总 一、客户端消息如何按序显示？ 先讲用时间戳来解决的缺点，再讲用序列号实现。 每一条消息添加序列号seq 二、怎么保证消息的可靠传输 业务层实现消息确认机制 为什么tcp的消息确认机制不能保证消息可靠传输 三、这个项目中，除了使用redis，你还知道其它组件吗？能完成同样的功能吗 ......
浅谈一类状态转移依赖邻项的排列计数问题 - 连续段 dp
UPD 2023.12.31：失手把原来的博文删掉了，这篇是补档。 引入 在一类序列计数问题中，状态转移的过程可能与相邻的已插入元素的具体信息相关（e.g. 插入一个新元素时，需要知道与其插入位置相邻的两个元素的值是多少，才可进行状态转移，如「JOI Open 2016」摩天大楼）。这类问题通常的特 ......
浅谈一类状态转移依赖邻项的排列计数问题 - 连续段 dp
UPD 2023.12.31：失手把原来的博文删掉了，这篇是补档。 引入 在一类序列计数问题中，状态转移的过程可能与相邻的已插入元素的具体信息相关（e.g. 插入一个新元素时，需要知道与其插入位置相邻的两个元素的值是多少，才可进行状态转移，如「JOI Open 2016」摩天大楼）。这类问题通常的特 ......
07--爬虫入门概念
一 web请求全过程剖析 我们浏览器在输入完网址到我们看到网页的整体内容, 这个过程中究竟发生了些什么? 我们看一下一个浏览器请求的全过程 接下来就是一个比较重要的事情了. 所有的数据都在页面源代码里么? 非也~ 这里要介绍一个新的概念 那就是页面渲染数据的过程, 我们常见的页面渲染过程有两种 服务 ......
c++_shared库引入的问题
项目组提供了一个AAR文件供下游业务团队集成。 某天，下游团队反馈了一个紧急的问题，最终客户的开发者使用Android Studio打包时，构建工具提示构建失败，原因是存在重复的c++_shared库文件，建议使用pickFirst命令来修复。 最终客户的开发者查阅了一些资料，按照帖子的建议，在项目 ......
【Python爬虫课程设计】大数据分析——东方财富石头科技股市数据分析
一、选题课程背景 在当今信息化时代，数据已成为驱动各行各业发展的重要力量。股市作为经济的晴雨表，其数据更是备受关注。东方财富网作为国内知名的财经网站，拥有海量的股市数据。随着大数据技术的不断发展，数据在各行各业的应用越来越广泛。股市作为经济的核心，其数据的价值不言而喻。然而，获取股市数据并非易事，尤 ......
编译cuttlefish内核遇到的问题
参考 https://source.android.google.cn/docs/setup/create/cuttlefish-kernel-dev?hl=zh-cn 我使用的是common-android13-5.10，在编译的时候使用的是build.sh的方法，在实际编译的时候遇到System ......