爬虫 恶意 隐私 用户
用户行为分析模型实践（三）——H5通用分析模型
本文从提升用户行为分析效率角度出发，详细介绍了H5埋点方案规划，埋点数据采集流程，提供可借鉴的用户行为数据采集方案；且完整呈现了针对页面分析，留存分析的数仓模型规划方案。 ......
Golang如何实现节假日不打扰用户？
想象下以下场景，嘿嘿...！
> 一个iphone用户，闹钟是可以按节假日不响的！
> 每日新闻机器人，节假日是可以不打扰我的！
> 我的业务，节假日是可以... ......
【ASP.NET Core】按用户角色授权
上次老周和大伙伴们分享了有关按用户Level授权的技巧，本文咱们聊聊以用户角色来授权的事。 按用户角色授权其实更好弄，毕竟这个功能是内部集成的，多数场景下我们不需要扩展，不用自己写处理代码。从功能语义上说，授权分为按角色授权和按策略授权，而从代码本质上说，角色权授其实是包含在策略授权内的。怎么说呢？ ......
.Net开发的系统安装或更新时如何避免覆盖用户自定义的配置
我们开发的系统，有时候会包含一些配置信息，需要用户在系统安装后自己去设置，例如我们有一个GPExSettings.xml文件，内容如下。 <GPExSettings ArcPythonPath="C:\Python27\ArcGIS10.8\python.exe" IsUseArcPython="F ......
C#爬虫开发小结
前言 2023年以来一直很忙，临近春节，各种琐事更多，但鸽了太久没写文章总是不舒坦，忙中偷闲来记录下最近用C#写爬虫的一些笔记。 爬虫一般都是用Python来写，生态丰富，动态语言开发速度快，调试也很方便 但是 我要说但是，动态语言也有其局限性，笔者作为老爬虫带师，几乎各种语言都搞过，现在这个任务并 ......
在 NGINX 中根据用户真实 IP 进行限制
需求 需要根据用户的真实 IP 进行限制, 但是 NGINX 前边还有个 F5, 导致 deny 指令不生效. 阻止用户的真实 IP 不是 192.168.14.* 和 192.168.15.* 的访问请求. 实现 最简单的实现如下: :notebook: 前置条件: 需要 nginx 前边的 lo ......
【ASP.NET Core】按用户等级授权
验证和授权是两个独立但又存在联系的过程。验证是检查访问者的合法性，授权是校验访问者有没有权限查看资源。它们之间的联系——先验证再授权。 贯穿这两过程的是叫 Claim 的东东，可以叫它“声明”。没什么神秘的，就是由两个字符串组成的对象，一曰 type，一曰 value。type 和 value 有着 ......
【爬虫+数据分析+数据可视化】python数据分析全流程《2021胡润百富榜》榜单数据！
用python爬取并分析《2021胡润百富榜》的榜单数据！
1、python爬虫讲解（requests向接口请求）。
2、python数据分析讲解（pandas数据分析及可视化画图）含：直方图、柱形图、饼图、词云图等。 ......
前端程序员学python（爬虫向）(一文修到筑基期) （本文不含知识诅咒）
我踏马来辣 还有一件事： 本教程配合c语言中文网 python爬虫 教程 食用 本教程不适用于未成年人 一定要刷牙 本教程不存在知识诅咒 学完本教程即可进入筑基期 js 基础和本教程学习效率成正比 不要笑 暂时不要驾驶你的行李箱 本教程是针对前端程序员制定的 vscode是IDE大王，什么？你说vs ......
Python异步爬虫（aiohttp版）
异步协程不太了解的话可以去看我上篇博客：https://www.cnblogs.com/Red-Sun/p/16934843.html PS：本博客是个人笔记分享，不需要扫码加群或必须关注什么的（如果外站需要加群或关注的可以直接去我主页查看） 欢迎大家光临ヾ(≧▽≦*)o我的博客首页https:// ......
如何防止用户重复提交订单？（上）
一、摘要 对于投入运营的软件系统，最近小编在巡检项目数据库的时候，发现某些表存在不少的重复数据，对于这样的脏数据，初步分析大致的来源有以下可能： 1.由于用户误操作，多次点击表单提交按钮 2.由于网速等原因造成页面卡顿，用户重复刷新提交页面 3.黑客或恶意用户使用 postman 等网络工具，重复恶 ......
如何防止用户重复提交订单？（中）
一、摘要 在上一篇文章中，我们详细的介绍了对于下单流量不算高的系统，可以通过请求唯一ID+数据表增加唯一索引约束这种方案来实现防止接口重复提交！ 随着业务的快速增长，每一秒的下单请求次数，可能从几十上升到几百甚至几千。 面对这种下单流量越来越高的场景，此时数据库的访问压力会急剧上升，上面这套方案全靠 ......
如何防止用户重复提交订单？（下）
一、摘要 在上一篇文章中，我们详细的介绍了随着下单流量逐渐上升，为了降低数据库的访问压力，通过请求唯一ID+redis分布式锁来防止接口重复提交，流程图如下！ 每次提交的时候，需要先调用后端服务获取请求唯一ID，然后才能提交。 对于这样的流程，不少的同学可能会感觉到非常鸡肋，尤其是单元测试，需要每次 ......
Linux面试题1：用户态和内核态
内核态和用户态 我们开发的服务代码，都是基于操作系统抽象提供的功能接口，进而操作相应的硬件资源。而硬件资源对于安全性要求非常高，所以对于安全性和系统稳定性而言，需要划定不同的应用程序运行级别。 Intel对于CPU的权限划分了四个等级0 ~ 3，linux采用了其中的0和2这两个等级。运行在0级别的 ......