爬虫 神器requests工具
Scrum看板工具Leangoo轻量级协作使用场景
国内目前有很多看板工具，我也一直在探索的路上，试用多种工具下来，我个人还是比较推荐leangoo领歌，看板式的管理方式，列表、泳道的多维度，直观透明的特点来呈现敏捷团队的进展，促进团队高效协作。 通过看板共享和实时同步团队工作以实现高效协同, 团队工作体现为任务卡片，而卡片上的内容可以是需求、任 ......
【工具软件】Postman 设置登陆全局 token
先设置 Tests 脚本 const res = pm.response.json() pm.globals.set('token', res.data.token) 使用 ......
生命周期管理工具
生命周期管理工具 当数仓中表过于多的时候，生命周期管理就成了比较大的问题。在表里面自己去手动删除分区，表过多的时候，修改就成了很大的问题。这时候就可以做一个脚本：每天定时去删除过期的数据，不仅仅能处理这个问题，还可以减少成本 方案 hive 提供了可以自定义表属性的空间TBLPROPERTIES，我 ......
从零开始量化交易 - 工具选择与第一个策略
在学习了一定的理论知识之后，需要对其进行模拟练习以加深理解。 量化交易的核心在于如何构建自己的策略，以及对于构建的策略进行验证。就好像写代码一样，首先要配置代码的编写缓解，以及代码的运行测试环境。 因此，首先进行工具或平台的选择，以及编写策略的必要配置。 平台的选择 对于一窍不通的我来说，这一步首先 ......
如何用看板工具做任务管理
利用Leangoo领歌看板管理工作和任务，可以让团队更高效，也可以一目了然的了解任务进度及问题 1、首先创建一个任务看板 进入Leangoo系统，使用轻量级项目模板创建一个任务看板。 任务看板内包含：列表和任务卡片，列表一般代表任务流程及状态（可自定义任务流程），一张卡片为一个任务 拖动任务卡片到 ......
这8个摸鱼神器，千万别让你老板知道！
工欲善其事，必先利其器，对于程序员来说也是如此，想早点下班就不能死脑筋，必须借助于一些开发工具来提高自己的工作效率，小编选取了8款任务/项目管理工具，能助你[打通任督二脉]，工作效率大大提升。 C2F，快速入门lutter 对于初学者来说，flutter widget的复杂样式代码真的很难记。我们想 ......
还不知道怎么 Mock ，用这 6款工具！
以下是几个常用的国外可以mock测试的工具，供参考： MockServer: MockServer 是一个开源的 API mock 测试工具，提供了强大的模拟服务器和 mock 服务功能。MockServer 支持多种语言和格式，包括 Java、.NET、REST、SOAP 等。 WireMock: ......
nacos报错：Nacos cluster is running with 1.X mode, can't accept gRPC request temporarily
nacos报错：Nacos cluster is running with 1.X mode, can't accept gRPC request temporarily nacos报错如下： Caused by: com.alibaba.nacos.api.exception.NacosExcep ......
MissingServletRequestParameterException: Required request parameter 'xxx' for method parameter type String is not present异常处理
关于简单参数传递的一个异常 先前情提要一下,在练习一个带分页的员工查询请求功能,接口文档描述如下 其中页码跟记录数是必须参数,然后有个按姓名模糊查询,这个参数是可有可无的 然后我最初写的代码长这样 用@RequestParam注解来获取这个url中携带的简单参数 然后测试页面的时候数据出不来,ide ......
[中] API开发中的种类、工具及最佳实践指南
引言 1.1. 何为API? 1.2. API在现代软件开发中的重要性 API 开发类型 2.1. RESTful APIs 2.2. GraphQL APIs 2.3. gRPC APIs 2.4. SOAP APIs 2.5. WebSockets 和 Real-time APIs 2.6. A ......
Jsoup java android 爬虫 直接解析网页内容 记录
前一段时间遇到一个直接请求网页的需求，然后查了下真理出来分享给大家。 使用jsoup方法直接访问网页地址 //解析网页代码compile 'org.jsoup:jsoup:1.10.2'Document document = Jsoup.connect("http://。。。/info.html") ......
7个AI绘画工具Prompt站
ChatGPT 的流行使得 AI 成为 2023 最大的科技风口，同时驱动了各种类型的 AI 发展。这些 AI 正在改变甚至颠覆很多行业的业务模式。ChatGPT 推动了 生成式 AI 革命的到来，这正在彻底颠覆内容的生产方式。自PGC、UGC 之后，内容生成终于迎来下一个发展阶段—— AIGC。 ......
pymongo工具类
from itemadapter import ItemAdapter import pymongo class Mongo_Client(object): def __init__(self,collection_name): self.clinet = pymongo.MongoClient(" ......
Arrays工具类和数学工具类Math
Arrays工具类和数学工具类Math Arrays数组工具类 这个一个静态方法是用于操作数组的而且不需要生成对象就可以使用 Arrays里面的内容 toString()方法().返回值类型是String sort()方法 代码示例 import java.sql.SQLOutput; import ......
python爬虫——爬取壁纸网站
爬取壁纸网站和爬取其他的网站没有太大的区别。 这里爬取的是Wallhaven壁纸网站。Awesome Wallpapers - wallhaven.cc 步骤1 准备第三方库 import requests from bs4 import BeautifulSoup import os impor ......
推荐两个AI神器：ChatGPT只需1个标题，2分钟全自动生成PPT！
今天给大家分享两个工具，帮助你全自动生成PPT，接下来以自动化测试为主题，教大家如何2分钟生成好PPT。 1、第一个工具：ChatGPT 1、打开ChatGPT页面，输入prompt，告诉它，让它帮你生成一份自动化测试为主题的PPT，如： 帮我生成一个自动化测试为主题 的PPT，内容不少于10页，用 ......
c语言和python语言写爬虫哪个更好 ？
c语言和python语言写脚本那个更好？这取决于具体的应用场景和需求。 C语言是一种高效、灵活的编程语言，适合于底层系统开发、操作系统、嵌入式开发等领域。C语言可以直接操作内存，因此可以更好地控制程序的性能和资源利用。 Python语言则是一种高级编程语言，具有简洁、易读、易写等特点，适合于数据科学 ......
应用scrapy爬虫框架
Scrapy是一个基于Python的开源网络爬虫框架，它可以帮助我们快速、高效地抓取网页数据，并支持数据的自动化处理、存储和导出。Scrapy提供了丰富的扩展机制，可以轻松地实现各种自定义需求。 Scrapy的基本使用流程： 1、安装Scrapy框架 2、创建一个Scrapy爬虫项目 3、编写爬虫代 ......
最容易上手的爬虫项目
今天和大家分享一个爬取项目，那就是爬取自己博客的项目。 1、确定爬取的目标 开始之前我们需要确定一个爬取的目标，从我自己博客的首页进入。在这个例子里面我们要写一个爬虫将我的的文章列表拉出来，保存在一个JSON的文件里面。 2、“种子”的分析，生成爬虫入口 在谷歌浏览器中，打开开发者选项（F12），如 ......
How to use axios.js instead of request.js to get data as a buffer All In One
How to use axios.js instead of request.js to get data as a buffer All In One
如何使用 axios.js 代替 request.js 获取数据作为缓冲区 ......
原型设计工具对比及实践
一、原型设计工具对比 墨刀 适用领域：墨刀是一款打通产设研团队，实现原型，设计，流程，思维导图一体化的在线协同工具。 优点：1.丰富的元件，无需自己编写直接使用。 2.非常方便分享给他人，预览速度非常快。 3.提供非常多的元件，使用户可以快速创作原型。 缺点：1.交互比较复杂 2.安全性和封闭性没有 ......
原型设计实践与原型设计工具比较
目录 一、原型设计工具比较 墨刀 Axure Mockplus 二、原型设计实践 1.原型设计主题 2.原型设计构思 3.原型设计实现 (1).工具选择原因 (2).软件功能实现 商品展示首页 点击鞋类 点击短裤 点击手机 4.界面交互 5.界面切换流程 一、原型设计工具比较 墨刀 优点 较为丰富的 ......
OkHttp 工具类
OkHttp 工具类 OkHttp依赖包： <dependency> <groupId>com.squareup.okhttp3</groupId> <artifactId>okhttp</artifactId> <version>3.8.1</version> </dependency> <dep ......
原型设计工具比较及实验
原型设计工具比较 1.墨刀： 简介：墨刀是一款在线原型设计与协同工具，借助墨刀，产品经理、设计师、开发、销售、运营及创业者等用户群体，能够搭建为产品原型，演示项目效果。墨刀同时也是协作平台，项目成员可以协作编辑、审阅，不管是产品想法展示，还是向客户收集产品反馈，向投资人进行Demo展示，或是在团队内 ......
原型设计工具比较及实践
目录 一、原型设计工具比较 1. 墨刀 2. Axure 3. Mockplus 二、原型设计 1.主题名称 2.功能 3.界面设计考虑因素 4.切换界面 5.界面切换流程 一、原型设计工具比较 1. 墨刀 适用领域 墨刀适用于需要设计和原型制作的领域，从最初的草图到高保真的用户界面设计和交互式原型 ......
gitleaks 保护以及发现安全key的工具
gitleaks 可以方便的扫描git 项目，发现潜在的key 泄漏问题，可以方便的集成到我们的ci/cd 中 说明 对于需要发现代码中安全key 的问题，gitleaks 是一个值得使用的工具 参考资料 https://github.com/gitleaks/gitleakshttps://git ......
原型设计工具比较及实践
一.原型设计工具比较 墨刀 使用领域： 墨刀有PC端、手机端、网页版等各种版本，适合项目经理设计师，开发人员等使用 优点： 自带成熟的组件，使用方便 产品界面简洁易用，学习成本和切换成本低 APP原型可以下载到手机，方便用户预览原型 原型可以分享网页链接 缺点： 不能画流程图，相较其他工具功能不全面 ......
Bean和Map转换的工具类
Bean和Map转换的工具类 依赖包： 基于Spring的cglib 实现。如果是Spring项目，可以不引入依赖。 ``` <dependency> <groupId>org.springframework</groupId> <artifactId>spring-core</artifactId ......
python打包工具-Nuitka
nuitka将python源码转成C++（这里得到的是二进制的pyd文件，防止了反编译），然后再编译成可执行文件。提高安全性和运行速度。 github：https://github.com/2267770481/cython_test 安装 pip install nuitka pip instal ......
原型设计工具比较及实践
一、原型设计工具比较 1.墨刀 适用领域 墨刀为北京磨刀刻石科技有限公司旗下一款在线原型设计与协作工具产品，用户群体包括：产品经理、设计、研发、运营销售、创业者等 优点 .近乎完美的原型演示效果，几乎可以以假乱真，适合产品设计确认与交互验证。 .丰富的元件，无需自己编写直接使用。 .非常方便分享给他 ......