命令 参数python getopt
python 批量爬取邮箱
python 批量爬取邮箱地址 #coding: utf-8 import requests import bs4 #解析网页 import lxml import re headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; ......
python超时处理方法eventlet的eventlet.Timeout
一、前言 在使用python进行接口自动化测试、脚本编写、执行sql的时候，如果遇到以下问题的，都可以用eventlet.timeout这个方法。 执行下载数据的接口，数据量较大导致后面接口一直等待； 执行sql，sql数据因外界原因导致数据一直加载没查询出来； 编写抢票脚本，抢第一个条数据的时候， ......
用Python和Pytorch使用softmax和cross-entropy
softmax激活函数 softmax激活函数将包含K个元素的向量转换到（0，1）之间，并且和为1，因此它们可以用来表示概率。 python: def softmax(x): return np.exp(x) / np.sum(np.exp(x), axis=0) x=np.array([0.1, ......
linux环境下离线安装python3
1、卸载旧的python3 rpm -qa|grep python3|xargs rpm -ev --allmatches --nodeps whereis python3|xargs rm -frv 2、安装python3 http://npm.taobao.org/mirrors/python/ ......
opencv-python 3 图像的算术运算
图像的加法 你可以使用OpenCV的cv.add()函数把两幅图像相加，或者可以简单地通过numpy操作添加两个图像，如res = img1 + img2。两个图像应该具有相同的大小和类型，或者第二个图像可以是标量值。 注意：OpenCV加法和Numpy加法之间存在差异。OpenCV的加法是饱和操作 ......
python stata转mysql
import numpy as np import pyreadstat as pyreadstat import json,re,random,pymysql,configparser,sys import pandas as pd from duconfig import read_ini de ......
【spring】RequestMapping参数说明
背景：HTTP协议Header中的两个东西 ContentType 和Accept - ContentType： 告诉服务器当前发送的数据是什么格式 - Accept ： 用来告诉服务器，客户端能认识哪些格式,最好返回这些格式 @RequestMapping(value = "/api/user/i ......
来说一个技术点，List作为参数数据丢失问题
下面方法，执行foo1，结果会是什么？ private void foo1() { List<String> list =new ArrayList<>(); foo2(list); System.out.println(" outside="+list); } private void foo2( ......
python 进程、线程、协程之间的区别
看文字实在是太枯燥了，我整点儿花里胡哨的的颜色，希望看起来能轻松一点。 1. 概念（绕口） 进程： 进程是具有一定独立功能的程序关于某个数据集合上的一次运行活动，进程是系统进程资源分配和调度的一个独立单位。每个进程都有自己的独立空间，不同进程通过进程间通信来通信。由于进程比较重量，占据独立内存，所以 ......
python基础
以#开头的语句是注释，注释是给人看的，可以是任意内容，解释器会忽略掉注释。其他每一行都是一个语句，当语句以冒号:结尾时，缩进的语句视为代码块。 按照约定俗成的惯例，应该始终坚持使用4个空格的缩进。在文本编辑器中，需要设置把Tab自动转换为4个空格，确保不混用Tab和空格。 缩进的坏处就是“复制－粘贴 ......
3 - 线程 - Windows 10 - Python - 守护线程 _ 后台线程 _ 精灵线程
@(目录) 测试环境： 操作系统： Window 10 工具：Pycharm Python: 3.7 一、守护线程 / 后台线程 / 精灵线程 首先讲解守护线程。 有一种线程，它是在后台运行的，它的任务是为其他线程提供服务，这种线程被称为“后台线程（Daemon Thread）”，又称为“守护线程” ......
5 - 线程 - Windows 10 - Python 的 5 种线程锁 - 控制线程切换
@(目录) 测试环境： 操作系统： Window 10 工具：Pycharm Python: 3.7 一、线程安全 一个程序运行，指的是运行一个可执行文件，这里我们是介绍python，就指py脚本文件吧。 在运行py文件的过程中，系统为了执行这个py脚本文件，会为这个py脚本文件开一个进程，也就是赋 ......
2 -进程-Windows 10 -Python - multiprocessing 两种方法实现多进程 - 进程池 _ 简单Process _ -守护进程堵塞join 与 sleep()线程睡眠堵塞
@(目录) 测试环境： 操作系统： Window 10 工具：Pycharm Python: 3.7 一、进程池 其实在使用多进程的时候，感觉使用pool是最方便的，在多线程中是不存在pool的。 在使用pool的时候，可以限制每次的进程数，也就是剩余的进程是在排队，而只有在设定的数量的进程在运行， ......
JVM 内存区域大小参数设置
需要提前了解的知识点： JVM内存模型 JVM垃圾回收算法 下图是JVM内存区域划分的逻辑图 JVM内存区域逻辑图 从图中我们大概了解JVM相关的内存区域。 JVM内存包括区域 Heap（堆区）: New Generation（新生代） Eden Survivor From Survivor To ......
linux抓包命令收集
抓包 tcpdump tcpdump - dump traffic on a network tcpdump是一个用于截取网络分组，并输出分组内容的工具。凭借强大的功能和灵活的截取策略，使其成为类UNIX系统下用于网络分析和问题排查的首选工具 tcpdump 支持针对网络层、协议、主机、网络或端口的 ......
Python数据库操作—— PostgreSQL
使用pip3安装psycopg2 pip install psycopg2 增删改查（CRUD）新建数据库PostgreSQL不支持"SHOW DATABASES"语句，需要使用"SELECT * FROM PG_DATABASE;"进行查询，才能获取当前数据库列表，由于这里只需要做创建数据库前后的 ......
1 - Windows 10 - Python 类的常用高级系统函数(方法)通识
@(类的系统函数目录) 测试环境： 操作系统： Window 10 工具：Pycharm Python: 3.7 一、系统函数__init__() 初始化类函数 功能： 使用该__init__()类系统方法可以在创建类的实例化对象时，可以初始化对象 —— 传递参数(该类的全局变量)，参数可以是函数对 ......
1 - 进程 - Windows 10 - Python - multiprocessing - 简单多进程切换、进程传参、异步进程、守护进程(进程睡眠_堵塞和线程堵塞的区别)、主_子进程区分
@(目录) 测试环境： 操作系统： Window 10 工具：Pycharm Python: 3.7 一、单进程 一般来说我们运行可执行文件，如脚本文件等，就相当于是在运行一个进程，系统会自动分配资源给这个文件运行，而这个进程就是父进程，或者说是主进程，跟线程差不多，有主线程和子线程，所以有了主进程 ......
ulimit文件限制命令
当进程打开现有文件或创建新文件时，会受到文件描述符的限制。 Linux系统中经常出现错误too many open files ，说明你打开的文件数量超过文件描述符的限制。 查看文件描述符大小： [root@centos7-190:mysql]$ ulimit -n102412修改文件描述符大小： ......
Linux终端命令相关
匹配F:\ 不要用双引号 grep -nr 'F:\\' xargs xargs可以把前面的结果传递到后面，就不用``，更好用 find -name 'file' | xargs grep -rl 'keyword' | xargs sed -i 's/keyword/replaceword/g' ......
C/CPP在命令行中生成DLL文件
简单的写一个C调用DLL（动态链接库）的例子。 创建3个.c文件备用 test.c 1 #include <stdio.h> 2 3 //这里声明，表示来自dll文件。 4 extern int Add(int,int); 5 extern int Square(int); 6 extern int ......
linux命令
文件管理 目录操作 切换目录 cd 查看目录 ls -l 列出文件详细信息 或者直接ll -a 列出当前目录下所有文件及目录，包括隐藏的a(all) 创建目录 mkdir -p 创建目录，若无父目录，则创建p(parent) 输出信息 echo 打印文件到命令行(查看文件) cat 改变文件所属用户 ......
参数合法性校验JSR303
JSR303校验 前端请求后端接口传输参数，是在controller中校验还是在Service中校验？ 答案是都需要校验，只是分工不同。 Contoller中校验请求参数的合法性，包括：必填项校验，数据格式校验，比如：是否是符合一定的日期格式，等。 Service中要校验的是业务规则相关的内容，比如 ......
sql预编译参数设置为null导致空指针异常
编写的公共查询方法 在Dao层调用我们的公共查询方法并将params设置为了null 报错空指针异常 解决方法：将params设置为一个空的数组 ......
Python 自动识别并批量转换文本文件编码
如题，很简单，就是先用chardet 库识别文件编码，解码之后再输出成目标编码。算是个偶尔能用上的小工具，要用的时候万一没有就很难受的那种，比如，网上下载了别人的项目文件，一打开全是乱码…… 代码 加了比较详细的注释~~ 看懂的要求应该不高，平时用过Python，知道几个常用库就行。 from pa ......
Linux操作命令（N）
1、输出图形文字 banner 可以先使用如下命令安装： sudo apt-get update sudo apt-get install sysvbanner 例1：banner shiyanlo 例2：printerbanner -w 50 B 2、查看文件权限 2.1修改文件权限 3、看当前登 ......
WebApi控制器方法接受参数的位置
FromBody //application/json FromForm //前端的默认消息类型 FromHeader //从请求头里获取 FromQuery //从Url路径中提取 FromRoute //从路由中获取 FromServices //这个Jwt篇讲解 ......
Python 离线环境
一、应用场景 比如：对于数据安全要求比较严格的机房，服务器是不允许上网的。那么我现在开发了一套python程序，需要一些模块，怎么运行？ 二、离线包制作 有2个解决方案： 1. 使用requirement.txt离线安装打包好的包whl 请参考链接：https://blog.csdn.net/wan ......
python gevnt实现协程
gevent 也是第三方库，自行调度协程，自动试别程序的耗时操作。比如读文件，等待时间。 代码举了个栗子 from gevent import monkey monkey.patch_all() import time import gevent def work1(): while True: p ......
Python小练习：Sinkhorn-Knopp算法
Python小练习：Sinkhorn-Knopp算法 作者：凯鲁嘎吉 - 博客园 http://www.cnblogs.com/kailugaji/ 本文介绍Sinkhorn-Knopp算法的Python实现，通过参考并修改两种不同的实现方法，来真正弄懂算法原理。详细的原理部分可参考文末给出的参考文 ......