乱码pandas to_csv csv
使用pandas操作excel
参考： https://www.php.cn/faq/630018.html https://blog.csdn.net/weixin_42575020/article/details/128850513?utm_medium=distribute.pc_relevant.none-task-blo ......
软件测试/测试开发全日制|Pytest结合CSV实现测试的数据驱动
前言 数据驱动测试是一种有效的测试方法，可以使用不同的输入数据运行相同的测试用例。结合pytest和CSV文件可以方便地实现数据驱动测试，相比于yaml以及Excel，使用CSV实现数据驱动不需要借助其他的第三方库，可以直接使用Python读取数据。在这篇文章中，我们将介绍如何使用pytest和CS ......
[转帖]idea配置tomcat参数，防止nvarchar保存韩文、俄文、日文等乱码
描述下我的场景： 数据库服务器在远程机器上，数据库使用的Oracle，字符集是ZHS16GBK，但保存韩文、俄文、日文等字段A的数据类型是nvarchar(120)，而nvarchar使用的是Unicode 编码，有点乱。。 遇到的问题： 我在本地机器idea上配置的tomcat9.0.52，启动项 ......
pandas修改json数据结构
需求 { "sex": { "tome": "male", "jack": "female" }, "age": { "tome": 18, "jack": 20 } } 转换成 {'tome': {'sex': 'male', 'age': 18}, 'jack': {'sex': 'female ......
关于对pandas.DataFrame的二维表格数据排序后-再写入到Excel表格的方法
关于 pandas.DataFrame 可以将一个大列表-多个子列表的数据整理出来，最后通过.to_excel 写入到Excel表格，代码如下： Writer=pandas.ExcelWriter(ResultExcelFile) EC2_RI_Data=pandas.DataFrame(EC2_R ......
数据处理神器可不止 Pandas 哦，还有 Polars，全方位解析 Polars
楔子 Python 在数据处理领域有如今的地位，和 Pandas 的存在密不可分，然而除了 Pandas 之外，还有一个库也在为 Python 的数据处理添砖加瓦，它就是我们本次要介绍的 Polars。和 Pandas 相比，Polars 的速度更快，执行常见运算的速度是 Pandas 的 5 到 ......
pandas单独设一个新列，譬如从2023-11-1到2023-11-31怎么搞法？
大家好，我是皮皮。 一、前言 前几天在Python白银交流群【上海新年人】问了一个Pandas日期数据生成的问题，问题如下：大佬们，如果我想单独设一个新列，譬如从2023-11-1到2023-11-31怎么搞法？或者这个数据有11行，可不可以自行设置成2023-11-15到2023-11-26这样子 ......
Nginx搭建web静态服务器之页面格式乱码
背景: 公司有个需求,要把产品的原型变成静态web发布到内网以供大家观看,这样就不用每个人都把原型拉下来然后再进行预览了.经过讨论决定使用nginx来做. 问题: 在实操的过程中发现确实可以发布成web静态页面,但是有个问题,页面格式是不正确的,打开后根本无法使用,使用F12开发者工作台调试发现js ......
Pandas - 按照指定顺序排序
import pandas as pd file = rf"C:\Users\root\Desktop\文档\2024\01\08\975.xlsx" data = pd.read_excel(file, converters={ '约定采购总量': int, '实际采购总量': int, '完成率 ......
read_excel_pandas.py
import pandas as pdimport matplotlib.pyplot as pltplt.rcParams['font.sans-serif']=['SimHei']plt.rcParams['axes.unicode_minus']=False df = pd.read_exce ......
Python Pandas 数据可视化
1、Pandas 的绘图功能 Pandas 内置的绘图功能进行数据可视化是一种快速且有效的方法，它主要依赖于 Matplotlib 库。Pandas 提供了多种绘图类型，适用于不同的数据分析和可视化需求。 1）折线图 使用plot()绘制拆线图，常用参数如下， 参数 描述 x 一维数组或列表，表 ......
idea properties文件乱码解决
java文件是好的，但是遇到properties文件，默认就成了iso制式乱码了。 虽说不影响程序执行，但是看起来真的让人心烦。 问题点是出在properties文件是GBK的，需要单独设置一下。 解决方法： IDEA- File->Settings->Editor->File Encodings ......
Apache服务器打开网页是乱码解决方案
当 Apache 服务器显示乱码时，可以使用两种方法解决： 1. 服务器端 可以在 Apache 的配置文件中添加以下内容来设置默认编码为UTF-8： AddDefaultCharset utf-8 修改完成后，重启 Apache 服务器即可。 Apache 配置文件 在 Ubuntu 20.04. ......
Python Matplotlib 设置显示中文(中文乱码)
Matplotlib中文显示问题通常与字体设置和系统环境相关。本文主要介绍Python Matplotlib 设置中文字体的方法，以及相关的示例代码。 1、使用font_manager的FontProperties解决 通过FontProperties来设置字符及大小，来解决中文显示的问题，代码 ......
pandas基础操作
### 为什么学习pandas- numpy已经可以帮助我们进行数据的处理了，那么学习pandas的目的是什么呢？ - numpy能够帮助我们处理的是数值型的数据，当然在数据分析中除了数值型的数据还有好多其他类型的数据（字符串，时间序列），那么pandas就可以帮我们很好的处理除了数值型的其他数据！ ......
Thymeleaf中文乱码问题，热部署问题
跟着Spring in action这本书使用java配置方式搭Thymeleaf环境遇到中文乱码问题。在web.xml和WebConfig.java中设置编码格式都不能解决。最后使用了如下方面成功解决了：在ViewResolver中.setCharacterEncoding("UTF-8");在T ......
Python Pandas 数据整合
1、数据合并 数据合并是指将两个数据集合并为一个数据集的过程。数据集的列名和数据类型是否一致。如果不一致，需要进行数据类型转换或重命名。数据集的索引是否一致。如果不一致，需要进行索引重置或合并。数据集的缺失值处理。可以使用均值、中位数或众数填充缺失值，也可以删除缺失值。 1）merge() 根据 ......
pandas -- Dataframe 初步使用
Dataframe 的读取 (1) 直接声明 ## 先是一个字典的形式 data = { "keyname1": [ "elem1", "elem2" ], "keyname2": [ "elem3", "elem4" ] } df = pd.DataFrame(data, index = [ <c ......
Python Pandas 数据清洗
1、处理缺失数据 处理缺失数据是数据清洗过程的一个重要部分。缺失数据可以以多种方式出现，最常见的是作为 NaN（Not a Number）。处理缺失数据涉及使用 isna() 或 isnull() 检测缺失值，fillna() 填充缺失值，dropna() 删除包含缺失值的行或列，以及 inte ......
Mysql导入csv文件
需要将csv的数据导入mysql，最简单的方式就是使用navicat导入，方便快捷，适用于数据量较小的场景，但是如果碰到GB级别的大文件，直接通过navicat导入十分低效，可以采用mysql 提供的LOAD DATA语法进行导入，具体使用方式如下： LOAD DATA INFILE '/path/ ......
Python Pandas NumPy NaN和Inf简介及常用操作
NumPy（Numerical Python）是一个用于科学计算的库，它提供了对多维数组（例如矩阵）和一系列数学函数的支持。NumPy 中包含了处理 NaN（Not-a-Number）和 Inf（Infinity）等特殊值的功能。本文主要介绍一下Python Pandas NumPy 中 NaN ......
python从tr、td中拿文字并存入csv
这是标准的tr 、td格式 <table> <tr> <td>第一行第一列</td> <td>第一行第二列</td> </tr> <tr> <td>第二行第一列</td> <td>第二行第二列</td> </tr> <tr> <td>第三行第一列</td> <td>第三行第二列</td> </tr> ......
Python Pandas 数据选择与过滤
Python的Pandas库是一个强大的数据处理和分析工具，其中数据选择与过滤是其核心功能之一。这些功能使用户能够高效地访问、修改、筛选出数据集中的特定部分。数据选择与过滤功能提供了数据操作的强大灵活性，使得数据分析工作流程变得更加高效和精确。本文主要介绍Python Pandas 数据选择与过 ......
laravel8+达梦数据库插入数据在DM管理工具显示中文乱码
再DM管理工具存进去显示中文乱码，但是直接在DM工具执行insert sql存入的数据不会乱码，乱码的数据查询出显示正确的中文 解决办法： 中文乱码只有一种情况，字符集不匹配， php环境，php文件，php编辑器，数据库编码（达梦数据库编码只能在新建的时候选择，并且不可以更改），达梦数据库在操作系 ......
shell - mysqldump导出数据库中文乱码解决
加入参数 --default-character-set=utf8mb4 --hex-blob 完整指令 mysqldump --default-character-set=utf8mb4 --hex-blob db1 > /xx/db1.sql ......
Python Pandas 基本概念
1、DataFrame 和 Series 的基本概念 DataFrame 和 Series 是Pandas中两种最基本的数据结构，它们为数据分析和处理提供了强大的功能。 Series 是一种一维数组结构，类似于 Python 中的列表或者 NumPy 的数组。每个 Series 对象都有一个索引 ......
pandas day01
一、什么是数据分析： 数据分析是指对数据进行收集、处理、转换和挖掘，以发现数据中的规律、趋势和关联性，为决策提供支持和指导的过程。数据分析涵盖了数据预处理、数据建模、数据可视化、数据挖掘等多个方面的技术和方法。 二、pandas的初步使用： 2.1 安装模块 # 安装第三方库 pip install ......
python3之pandas库
pandas中有两类非常重要的数据结构，即序列Series和数据框DataFrame。 Series类似于numpy中的一维数组；DataFrame类似于numpy中的二维数组。 DataFrame创建 # 通过二维数组创建数据框 df1 = pd.DataFrame(np.arange(12).r ......
Java公众号开发，推送消息出现中文乱码
问题描述 使用wx-java-mp-spring-boot-starter做微信公众号开发，推送中文消息的时候，发现推送消息的文字都变成了问号， 推送文字代码： WxMpXmlOutMessage.TEXT().content(""登录成功"").fromUser(wxMessage.getToUs ......
IDEA解决中文乱码方案
IntelliJ IDEA 如果不进行相关设置，可能会导致控制台中文乱码、配置文件中文乱码等问题，非常影响编码过程中进行问题追踪。本文总结了 IDEA 中常见的中文乱码解决方法，希望能够帮助到大家。 解决方案 一、设置字体为支持中文的字体 点击菜单 File -> settings -> appea ......