elasticsearch笔记python
【多进程】python多进程CPU密集型任务的进程数选择
实验思路 从1加到100000000， 分别用单进程，多进程方案去做。 实验代码 from multiprocessing import Pool, Process, Queue import os, time, random def test_func(left, right): res = 0 ......
python学习----编程题02
题目:企业发放的奖金根据利润提成。利润(0)低于或等于 10万元时，奖金可提 10%;利润高于 10 万元，低于 20 万元时，低于 10万元的部分按 10%提成，高于10万元的部分，可可提成7.5%;20万到40万之间时，高于20万元的部分，可提成540万60万之间时高于40万元的部分,可提成3% ......
架构整洁之道笔记4
软件架构 架构师的定位 工作实质：规划如何将系统切分为组件，并安排好组件之间的排列关系，以及组件之间互相通信的方式。 目的：更好地对组件开发、部署、运行、维护。 如果想设计一个更方便推进各项工作的系统，策略就是在设计中尽可能长时间地保留尽可能多的可选项。 开发的角度 难以开发的系统也不会健康长久。 ......
opencv库图像基础3直方图-python
opencv库图像基础3直方图-python 直方图是什么 OpenCV 中的直方图是图像中像素值分布情况的统计表示。它是图像空间域内像素值分布的图形表示，以便更好地理解颜色分布。 灰度直方图是图像中每个像素灰度值出现的次数或频数的统计结果。它只反映该图像中灰度值出现的频率，而未反映某一灰度值像素所 ......
知识管理方案探讨及主流笔记软件体验
前言 平常本人使用hexo博客系统，用于记录学习笔记、生活随笔等，但是随着笔记的增多，一些碎片化的、不成体系的知识点又不足以单独发文章，了解到双链类笔记对知识体系的串联，于是开始寻找更好的知识管理方案。 以下体验仅代表个人意见。 软件体验 可以看看下了31个markdown编辑器，我就不信选不出一个 ......
Python - 列表切片 与 深拷贝、浅拷贝
1.列表list常用的方法： lst = [1,2,3] # append(new_item)方法相当于在列表末尾追加一个元素，相当于 lst[len: ] = new_item lst.append(4) print(lst) # extend(iterable) 方法，将iterable中的每个 ......
[NLP复习笔记] N-gram 及基本平滑方法
1. N-gram 模型 1.1 N-gram 模型介绍 \(\text{N-gram}\) 是一种基于统计语言模型的算法，用于预测文本中的单词，其中 \(\text{N}\) 一般指的是序列中的单词数量。其基本思想是将文本内容进行大小为 \(\text{N}\) 的滑动窗口操作来计算概率。 例如： ......
Python+Requests+PyTest+Excel+Allure 接口自动化测试实战
本文主要介绍了Python+Requess+PyTest+Excel+Allure 接口自动化测试实战，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧 Unittest是Python标准库中自带的单元测试框架，Unittest有时 ......
020 数据库学习笔记--group by
实现查询列不分组 select t.OrganizationCode,(t.OrganizationName) from DictOrganization t select t.OrganizationCode,max(t.OrganizationName)OrganizationName from ......
python面向对象之派生、组合、抽象类、反射
【派生】在子类派生的新方法中如何重用父类的功能？ 【组合】 （定义） （案例） （组合和继承的区别） 【抽象类】 （定义） （案例） 实例化 （总结） 【反射】 什么是反射 如何反射 实现反射机制的步骤 解决办法 ......
python内置函数
内置函数 一.数据类型转换： 1.整数类型转换(int) 2.浮点数类型转换(float) 3.字符串类型转换(str) 4.布尔类型转换(bool) 5.列表类型转换(list) 6.元祖类型转换(tuple) 7.字典类型转换(dict) 8.集合类型转换(set) 二.数学进制转换 1.十进制 ......
python操作mogodb实现类似于SQL的In方法
1. 使用python操作mogodb实现类似于SQL的In方法： 相关示例代码如下 from pymongo import MongoClient # 连接到MongoDB数据库 client = MongoClient('mongodb://localhost:27017/') # 选择数据库和 ......
Python 字符串与十六进制字符串相互转换
Python字符串与十六进制字符串相互转换 在编程中，有时候我们需要将字符串与十六进制字符串之间进行转换。下面我们将展示如何使用Python实现这两个功能。 1. 将字符串转换为十六进制字符串 我们可以创建一个函数 ascii_to_hex_string 来实现这个功能。该函数将输入的字符串转换为对 ......
C语言学习笔记2
7. 控制语句 if 语句 不推荐用else，虽然符合业务逻辑，但是不够直观，需要将前面 N 个条件判断看懂，才能明白何种条件下才能进入else语句块中。 因此，下面代码中最好用 else if (data % 3 == 2) int data = 0; cout << "请输入一个int数值："; ......
C语言学习笔记
1. 数据类型 重点 return 先返回函数结果，后结束当前函数 返回函数结果：返回值放在eax寄存器中，然后ret返回 功能不同的代码之间要空行 一份代码注释风格不要多样化 /**/ 块注释不能嵌套 long long 是C99里面定义的 extern int data; 编译器理解为：该变量是 ......
python相关配置
anaconda which conda //anaconda的位置 conda info -e conda create -n your_env_name python=x.x -y conda create -n yolov5 python=3.7 -y //创建虚拟环境 conda activ ......
python使用Scrapy插入数据到MySql报错 Incorrect string value: ‘\\xF0\\x9F\\"错误
👍🏻这样的字符，插入失败 这个问题，原因是UTF-8编码有可能是两个、三个、四个字节。Emoji表情或者某些特殊字符是4个字节，而Mysql的utf8编码最多3个字节，所以数据插不进去。 Window下phpstudy 1、设置服务端，编码为utf8mb4 2、设置数据库和表字符校对为utf8m ......
Python工具箱系列(四十七)
如何操作docx文档(上) 微软最近几年，积极投身开源运动，不仅购买了github震惊世界，还在自家操作操作系统上实现了WSL，与Linux实现了一家亲。除此之外，还将vscode开源，并且投放出了一项又一项的性价比极高的免费软件产品。之所以微软如此大手笔，原因之一就是微软的Office贡献了大把的 ......
Linux系统上安装python详细步骤
1、默认情况下，Linux会自带安装Python，可以运行python --version命令查看，如图： 启动python，使用命令：python: Ctrl+D退出python 2、查看Linux默认安装的Python位置 3、安装python3 （1）登录Python Source Relea ......
书生·浦语大模型全链路开源体系——学习笔记
学习来源：https://www.bilibili.com/video/BV1Rc411b7ns/ 资料来源：https://github.com/InternLM/tutorial/discussions/36 （有同学发pdf，还有其他同学的笔记） 俺没啥知识积累，很多信息不太会折叠。姑且做个笔 ......
Mac安装Python3.12开发环境
官网 https://www.python.org/downloads/ 下载安装后一直下一步即可 验证是否安装成功，执行python3命令和pip3命令 配置环境变量 获取python3安装位置并配置在.bash_profile which python3 open -e .bash_profil ......
安装Python3的pjsua2库
安装Python3的pjsua2库，首先需要确保已经安装了pjsip。可以在pjsip的官方网站下载最新版本的源代码进行安装。安装步骤可能因所使用的操作系统而异。 接下来，需要安装swig，因为pjsua2需要swig来生成Python绑定代码。可以从swig的官方网站上下载并安装最新版本的swig ......
Python_Gradio与前端开发
Gradio Blocks是Gradio的低级API，它允许你创建比Interfaces更多的自定义web应用程序和演示。 简单来说就是比Interfaces更灵活。 一般使用上下文管理，示例代码如下： 代码 import gradio as gr with gr.Blocks() as demo: ......
9解决elasticsearch深度分页问题
前面说到，分页可以使用from和size参数，类似于mysql的分页offset和limit。但是如果数据量比较大时，elasticsearch会对分页做出限制，因为此时会比较消耗性能。 为什么要限制 分页的时候，elasticsearch会根据查询条件到每个分片取出数据来，然后再由coordina ......
7.elasticsearch重建索引
什么时候需要重建索引 索引的mappings发生变更 索引的setting发生变更 集群内，集群间，需要做数据迁移 update by query 在现有索引重建 比如需要给一个text新增一个子字段，用english分词器。那么新添加的数据会被索引，之前的数据不会被索引。此时可以用_update_ ......
4.elasticsearch中查询条件
目录一、URI查询指定字段、泛查询分组和phraseBool条件must条件范围查询通配符查询正则表达式模糊匹配与近似查询二、RequestBody&DSLignore_unavailableprofileexplainqueryfrom、sizesort_sourcescript_fieldsma ......
5.elasticsearch中聚合查询
elasticsearch聚合查询 什么是聚合，就是目的不是查询具体的文档，而是查询文档的相关性，此外还可以对聚合的文档在按照其他维度再聚合。 包含以下四种聚合 Bucket Aggregation 一些列满足特定条件的文档的集合 terms 对某个字段统计每个不同的内容，以及出现文档的个数 ran ......
6.elasticsearch中search template和alias
什么是search template 顾名思义，查询模版，就是提前设定好查询的DSL，再次查询时，只需要指定对应的模版，然后传入相应的参数就好。一是可以每次不用构建复杂的DSL，二是可以供开发直接使用查询DSL模版，减少学习和对接成本。 有如下两种方法 一、创建脚本_script/template, ......
1.elasticsearch运行
在docker中运行elasticsearch、kibana 一、MacOs 首先需要安装doceker，提供两种方式，选一种方便的就好 1.命令行安装方式 安装命令行 xcode-select --install 安装homebrew /usr/bin/ruby -e "$(curl -fsSL ......