dataframe pandas iloc loc
Pandas 加载数据的方法和技巧
哈喽大家好，我是咸鱼 相信小伙伴们在学习 python 数据分析的过程中或多或少都会听说或者使用过 pandas pandas 是 python 的一个拓展库，常用于数据分析 今天咸鱼将介绍几个关于 pandas 导入数据的方法和技巧 ## 从 URL 获取 csv 数据 关于 pandas 导入 ......
DataFrame转为数组Array
#### DataFrame转为数组Array 有文本数据如下：  目标：将文本数据以数组形式呈现 - 步1：读入 ......
【pandas基础】--数据类型
数据类型是计算机编程中将不同类型的数据值分类和定义的方式。 通过数据类型，可以确定数据的存储方式和内存占用量，了解不同类型的数据进行各种运算的能力。 使用`pandas`进行数据分析时，最常用到的几种类型是： 1. 字符串类型，各类文本内容都是字符串类型 2. 数值类型，包括整数和浮点数，可用于计算 ......
dataframe分组与聚合
```python import pandas as pd ``` ```python # 准备数据集 df = pd.read_excel('https://www.gairuo.com/file/data/dataset/team.xlsx') df.head() ``` name team Q ......
Pandas数据框去重复（AB、BA类型）
从string-db下载蛋白质相互作用的信息，在处理时发现蛋白A与B互作被记录了两次比如下边的例子（即AB、BA） ```Bash df.drop_duplicates() # Symbol1 Symbol2 # Gnai3 Pdcl2 # Pdcl2 Gnai3 # Gm4340 Gm3376 # ......
使用pandas 实现 python读取xlsx文件，并替换掉对应json文件里的内容
需求：读取下面图1格式的xlsx，将图2里面的SKU_name替换成图一对应标签名称的产品名称，也就是将英文替换成中文，然后将该SKU_name对应的SKU_code替换成图一里的编码 1. 2. 代码如下： import jsonimport osimport pandas as pdxlsx_f ......
dataFrame['col_name'].str.contains(str_name,case=False)用法
#### dataFrame['col_name'].str.contains(str_name,case=False)用法 主要功能：在`dataframe`某一列中找到包含特定字符串的`dataframe` 例如：  data：一组数据(ndarray 类型)。 in ......
pandas 笔记
1.pandas 两列取最小值，如果其中一列为nan, 会取另外一列 >>> df3 a b c 0 1 1 1.0 1 1 1 2.0 2 1 1 2.0 3 2 2 NaN 4 3 2 NaN >>> df3['d'] = df3[['a', 'c']].min(axis=1) >>> df3 ......
pandas方式遍历日志文件
import pandas as pd import csv f = open(r'C:/Users/will/Desktop/log-2023-05-22.log',encoding='utf-8') data = pd.read_csv(f,sep='\n',header=None) for i ......
【PYTHON】pandas字符替换
处理文本数据时，常见的存储格式为 textfile 格式，对应行分隔符为"\n"，列分隔符为"\t"。 而大家往往不会直接使用txt格式文件进行日常操作，Excel 更为简便通用。 因此，如果我们需要处理的 Excel 数据中，某个字段内出现了"\t"或"\n"或"\r\n"符号，转为 txt 格式 ......
pandas
转载于： http://c.biancheng.net/pandas/ pandas主要特点 提供一个简单、高效、带有默认标签（也可以自定义标签）的DataFrame对象； 能够快速得从不同格式的文件中加载数据（如：Excel、CSV、SQL文件），然后将其转换为可处理的对象； 能够按照数据的行、列 ......
【pandas基础】--数据排序
`pandas`的数据排序可以帮助我们更好地理解和分析数据。 通过对数据进行排序，我们可以提取出特定的信息，例如最大值、最小值、中位数、众数等等，从而更准确地识别数据的特征和特点。 此外，数据排序还可以帮助我们更好地进行数据可视化，例如绘制直方图、箱线图等等，进一步帮助我们对数据进行解读和分析。 总 ......
python pandas 数据处理str.replace()，替换异常双括号，字符类似字段重新添加双括号
import pandas as pd import csv file = 'd:/raw_data.txt' new_file="d:/new_data.csv" data = pd.read_csv(file,delimiter=',',quoting=csv.QUOTE_NONE,names= ......
python -- pandas常见的一些行、列操作方法（感兴趣的，可以跟着一起练练手）
这篇文章分享一下pandas常见的一些行、列操作方法，比较基础，感兴趣的童鞋可以看看。 首先，我们用 “random.seed(int i)” 生成一组测试数据。 对于random.seed()有兴趣进一步了解的，可以前往阅读 python -- numpy.random.seed() 如果“pip ......
pandas使用
使用笔记 基于某列concat或 df = pd.merge(df_raw, df_ret, on="text") 交集 df_join = df1.merge(df2, how="inner", left_on="key1", right_on="key2") 差集 df_diff = df1[~ ......
通俗易懂！像使用SQL一样使用Pandas进行数据筛选等复杂操作
相对于学习Pandas各种数据筛选操作，SQL语法显得更加简洁清晰，若能够将SQL语法与Pandas中对应的函数的使用方法关联起来，对于我们应用Pandas进行数据筛选来讲无疑是一个福音。 本文通过Pandas实现SQL语法中条件过滤、排序、关联、合并、更新、删除等简单及复杂操作，使得我们对方法的理 ......
Python数据离散化指南：手写if-elif语句与pandas中cut()方法的实现
当我们进行数据分析时，有时候需要对数值型数据进行离散化，将其划分为不同的标签或类别。这样做可以方便我 ......
【pandas基础】--数据修改
pandas 作为一种常用的数据分析工具，提供了广泛的数据修改方法。 既可以针对行或者列的数据进行修改，也可以对具体单个元素进行修改，还可以基于条件选择要修改的行或者列的数据。 1. 增加数据 1.1 增加行数据 pandas的DataFrame增加一行或者多行数据之前是使用append方法。 im ......
python -- 解决"pip install pandas"时遇到的几个小问题
今天使用pandas进行数据读取，遇到几个小问题，记录一下，备忘~ 由于用了部新电脑，需要重新install，所以输入以下命令 >> pip install pandas 结果报错，显示以下错误信息 Could not find a version that satisfies the requir ......
【pandas基础】--核心数据结构
pandas中用来承载数据的两个最重要的结构分别是： Series：相当于增强版的一维数组 DataFrame：相当于增强版的二维数组 pandas最大的优势在于处理表格类数据，如果数据维度超过二维，一般我们会使用另一个 python的库 numpy。 本篇主要介绍这两种核心数据结构的创建方式。 1 ......
Pandas内置函数方法
1.导入数据： pd.read_csv(filename)：从CSV文件导入数据 pd.read_table(filename)：从限定分隔符的文本文件导入数据 pd.read_excel(filename)：从Excel文件导入数据 pd.read_sql(query, connection_ob ......
python3 pandas
Pandas 教程 | 菜鸟教程 (runoob.com) 1、介绍 Pandas 是一个开放源码、BSD 许可的库，提供高性能、易于使用的数据结构和数据分析工具。 Pandas 可以从各种文件格式比如 CSV、JSON、SQL、Microsoft Excel 导入数据。 2、Series类 这是一 ......
Pandas 百题大冲关-基础部分
1、查看版本信息：print(pd.__version__) Series 基本操作 1、创建Series的3种方式，1）列表 2）ndarray 3）字典 2、修改 Series 索引：s1.index=['A','B','C','D','E'] 3、Series 纵向拼接：s4 = s3.app ......
修改Pandas数据表的列名
一、修改列名 1. 全部修改 直接以属性赋值的方式，一次将全部的列名进行重新定义 data.columns = ['city','name','post','pay','request','number'] df.columns的附加用法 df.columns = df.columns.str.st ......
pandas
Table of Contents 1 Set-up2 Intro3 Pandas Data Structures - 2 Types3.1 Series3.2 DataFrame3.3 Series VS DataFrame4 Dropping5 Sort & Rank6 I/O6.1 CSV6. ......
Python+Pandas批量合并大量excel文件
requirments.txt et-xmlfile==1.1.0 numpy==1.24.3 openpyxl==3.1.2 pandas==2.0.1 python-dateutil==2.8.2 pytz==2023.3 six==1.16.0 tzdata==2023.3 main.py i ......
Python教程：pandas读写txt文件——DataFrame和Series
大家用pandas一般都是读写csv文件或者tsv文件，读写txt文件时一般就with open了，其实pandas数据类型操作起来更加方便，还是建议全用pandas这一套。 读txt文件代码如下，主要是设置正则表达式的分隔符（sep参数），和列名取消（header参数），以及不需要列索引（inde ......