python3 python linux 9.0
Python抓取数据如何设置爬虫ip
在写爬虫爬取github数据的时候，国内的ip不是非常稳定，在测试的时候容易down掉，因此需要设置爬虫ip。本片就如何在Python爬虫中设置爬虫ip展开介绍。 也可以爬取外网 爬虫编写 需求 做一个通用爬虫，根据github的搜索关键词进行全部内容爬取。 代码 首先开启爬虫ip，在设置中修改HT ......
全网最详细中英文ChatGPT-GPT-4示例文档-从0到1快速入门条目分类应用——官网推荐的48种最佳应用场景（附python/node.js/curl命令源代码，小白也能学）
ChatGPT可以根据条目的特征或属性，将它们分成不同的类别或组别。比如，ChatGPT可以将水果按照颜色、形状、口味等分类；或者将动物按照种类、食性、栖息地等分类。这样，ChatGPT可以帮助用户更好地理解和组织条目的信息，以及发现条目之间的相似性和差异性。 ......
全网最详细中英文ChatGPT-GPT-4示例文档-从0到1快速入门解析非结构化数据应用——官网推荐的48种最佳应用场景（附python/node.js/curl命令源代码，小白也能学）
ChatGPT可以利用自然语言理解和生成的能力，来处理非结构化数据。非结构化数据是指没有预定义的数据模型，不方便用数据库二维逻辑表来存储和查询的数据。ChatGPT可以将非结构化数据解析成结构化数据，例如表格、图表、列表等，从而方便用户进行分析和决策。例如，ChatGPT可以从一篇文章中提取出关键信... ......
linux程序运行结果在打印到屏幕的同时写入文件
1、使用script工具 script工具是一个非常使用的工具，可以把输出到终端的信息记录下来。使用方法如： （1）输入 script log.txt命令开始保存终端输出的信息 ，其中log.txt为需要写入的log文件，可随意命名。 （2）输入exit退出保存。 实例解析: 2、使用tee工具 t ......
Python爬虫 Pyppeteer模拟登录（带验证码识别）
Python爬虫 Pyppeteer模拟登录（带验证码识别） 需求 绕过登录验证码或自动登录 参考 主流网站 Python 爬虫模拟登陆方法汇总 - 知乎 (zhihu.com) python爬虫_hwwaizs的博客-CSDN博客 技术路线 1 request 本地请求 实现基于python的We ......
[Linux] ubuntu系统使用zfs记录
关于zfs 之前从B站视频里面了解到了btrfs这个文件系统，说是能够实现cow，然后我第一时间觉得这是个极好的特性，结果后来才发现，使用的时候并不多，而且只能通过cp --reflink的方式使用，但是绝大多数情况下的复制都是伴随着修改的。所以这个功能并不常用，能够节省的空间也确实有限。 然后无意 ......
[Linux] rockylinux9.1 的部署使用过程 -- ZFS 虚拟机 cockpit podman samba
备选镜像 | Rocky Linux rocky linux 使用记录 - 个人文章 - SegmentFault 思否 # https://blog.csdn.net/NeverGUM/article/details/128812445 sed -e 's|^mirrorlist=|#mirror ......
Linux 查询文件夹名称命令（全称&模糊）
全称查询 如pdf全称文件名查询 find -name filename.pdf 举例 txt文件名查询 find -name filename.txt finalshell中使用Linux命令操作 模糊查询 find -name '//文件名关键字//' ......
在 Arch Linux 中安装 GNOME 桌面所需步骤介绍
本指南解释了在 Arch Linux 中安装 GNOME 桌面所需的步骤。 本指南有两部分：第一部分是关于安装基本的 Arch 系统；第二部分是在 Arch Linux 基础上安装完整的 GNOME 桌面环境。 什么是 GNOME 桌面？ GNOME 是一个流行的桌面环境，是如 Ubuntu 和 F ......
Linux线程 | 创建 终止 回收 分离
一、线程简介 线程是参与系统调度的最小单位。它被包含在进程之中，是进程中的实际运行单位。 一个进程中可以创建多个线程，多个线程实现并发运行，每个线程执行不同的任务。 每个线程都有其对应的标识，称为线程 ID，线程 ID 使用 pthread_t 数据类型来表示。 二、线程的创建 线程是轻量级的并发执 ......
设置python环境变量的三种方法（pycharm）
问题描述： 有一些特殊的api key,不允许直接放到代码里面，只能通过函数调用的方式获取。 总体方法： 方法1：设置系统环境变量 方法2：设置pycharm环境变量 方法3：设置这个脚本的环境变量 下面详细介绍这3种方法： ......
[Python]第二章（废弃）
Python基础知识 Python的基础简介 数值类型 具备大部分语言都有的数据类型，整数、小数、复数。 带有非零实部的复数记为"(real+imagj)"，虚部由一个后缀"j"或者"J"来表示。 同一个值可以赋给几个变量： x=y=z=0 也可以分别赋值 a,b,c=4,5,6 字符串 ''或者" ......
[Python]第三章（废弃）
Python的内置类型 Python的类型分类 Py不同于其他语言的一个重要概念是：Py中的一切均为对象，Python面对对象的原理与其他语言不同： 所有数值都封装到特定的对象中，Python不存在C中int这样的简单类型。 所有东西都是对象，包括代码本身也被封装到对象中。 Py的解释器内建数个大类 ......
[Python]第一章（废弃）
Python简介 python语言特性 Python的缩进 Python缩进要使用Emacs的Python-mode默认值：4个空格or一个制表符 Python的序列 Python含有多种序列字符串，也是序列、列表、元组（tuple）、字典。特色是：可以做运算，包括加、乘，也可以做切片，支持复制、负 ......
Python实现多维列表的排列组合
最近在用python实现一个基础的数据挖掘功能，其中有一个场景是要将多个不同类型的因子，放到一起，并且根据因子的不同条件(正向排序、反向排序)，列出所有可能的排列组合。 这里的类型记为 typelist=['type_a','type_b','type_c'...] 每一个类型下有多个因子： typ ......
国内免费ChatGPT接口（Java及Python调用示例）
一、接口信息 接口地址：https://www.1bit.asia/openai/api/ask类型：POST参数：{ "prompt": "写一个修仙小说目录", "userName":"apiuser002", "token":"链接页面获取"} 说明：userName参数和token需要对应。 ......
Hyper-V中Linux虚拟机无法和宿主机连接
在关闭Hyper-V虚拟机的情况下，选择Hyper-V管理界面中的“虚拟交换机管理器”。 创建一个连接方式为“内部网络”的虚拟交换机 此时，在控制面板-网络和Internet-网络和共享中心中，可以看到如下： 这就是刚刚创建出来的虚拟交换机 虽然有了虚拟设备，但是此时虚拟机仍不能正常链接 在网络与共 ......
python的浅拷贝和深拷贝& is 和==的区别
一、python中变量的赋值 python中的数据类型分为可变数据类型（字符串、数值、布尔型）、不可变数据类型（列表、字典、集合）。 不可变数据类型的赋值，都只是对象的引用，不会开辟新的内存空间；可变数值类型的赋值，则会开辟新的内存空间。如果可变数据类型中包含有不可变数据类型，则可变数据类型部分也不 ......
Python里参数是如何传递的？
如果接触过其他的编程语言，比如 C/C++，很容易想到，常见的参数传递有 2 种：值传递和引用传递。 所谓值传递，通常就是拷贝参数的值，然后传递给函数里的新变量。这样，原变量和新变量之间互相独立，互不影响。 所谓引用传递，通常是指把参数的引用传给新的变量，这样，原变量和新变量就会指向同一块内存地址。 ......
Python基础之sorted()函数用法
1、简单的排序 sorted函数可以对可迭代类型的容器内的数据进行排序 lst1 = (5,4,3,2,1) lst2 = ('F','D','Y','e','a','v')#字符串类型的排序按照ASCII的大小进行比较 L1 = sorted(lst1) L2 = sorted(lst2) pri ......
Linux文件操作
Linux文件操作 Linux的文件 Linux中对目录和设备的操作都是文件操作，文件分为普通文件，目录文件，链接文件和设备文件 普通文件：也称磁盘文件，并且能够进行随机的数据存储(能够自由seek定位到某一个位置) 管道：是一个从一端发送数据，另一端接收数据的数据通道 目录：也称为目录文件，它包含 ......
python if
''' if判断语句 ''' age=18; age2=10; if age>=18: print("成年人") ''' if判断语句 ''' age=input("请输入你的年纪"); if int(age) <=18: print(f"你{age}岁了,免费玩耍") print("大于18岁,收 ......
【Python】批量提取Fibersim xml文件中的节点网格数据
程序功能： 输入需求： fibersim导出的ply 的xml文件，可以很多个也没问题。但名字要有规律，不然没法循环读写。比如我自己用的就是x1.xml、x2.xml、Y1.xml......的文件名 定义一些需要的变量，看名字都可以知道什么意思 输出： 程序会输出每个xml文件中每个ply对应的n ......
python 中实现文件的复制
001、 (base) [root@PC1 test3]# ls ## 测试数据及脚本 a.txt test.py (base) [root@PC1 test3]# cat test.py ## 复制程序 import os os.popen('cp a.txt b.txt') (base) [ro ......
深入理解 Python 虚拟机：字典（dict）的实现原理及源码剖析
在本篇文章当中主要给大家深入介绍一下在 cpython 当中字典的实现原理，在本篇文章当中主要介绍在早期 python3 当中的版本字典的实现，现在的字典做了部分优化，我们在后面的文章当中再介绍。 ......
Python系列001
1.注意缩进 //会引起代码逻辑异常 2.字符串的一些方法 方法title() //以首字母大写的方式显示每个单词 name = "ada lovelace" print(name.title()) 方法upper() //将字符串全部改为大写 方法lower() //将字符串全部改为小写 方法rs ......
python处理kafka数据
1、程序作用：从多个topic中读取数据--处理数据--写入新的kafkatopic中 pip3 install kafka-python import json from kafka import KafkaProducer from kafka import KafkaConsumer #消费者 ......
python hmac.new示例
hmac是Python中的一个模块，它提供了一个类和一些函数，用于使用密钥对消息进行哈希处理。哈希处理是一种将任意长度的消息转换为固定长度哈希值的方法。哈希值通常用于验证消息的完整性和身份验证。hmac模块使用标准库中的哈希函数（如SHA1和MD5）来计算哈希值。它还使用密钥来增加哈希值的安全性。以 ......
Linux的3个文件时间
导读 文件时间是文件的访问时间、修改时间、和改变时间。atime在Linux的文件系统中被称为访问时间，当文件的内容被访问时，就会更新这个时间，mtime指的是当“内容数据”被修改时，Linux系统会去更新这个时间，ctime是Linux系统中的状态时间，当文件的状态即文件的属性被改变是就会更改这个 ......