推荐收藏!10个相见恨晚的Pandas函数,太好用了
wptr33 2024-11-23 23:31 16 浏览
Pandas是Python最主要的数据分析库之一,它提供了大量数据结构和函数,能快速对数据进行处理和分析。
Pandas函数有很多,但在处理和分析数据的过程中,有的函数使用频率会更高一些。本篇就分享10个使用频率非常高的Pandas函数。
assign
assign直接向DataFrame对象添加新的一列,可以创建常数列、指定序列数据以及由已知列通过一定计算产生。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
df.assign(C=[1,2,3,4]) #指定序列数据
df.assign(C=df.A+df.B) #根据已知列数据计算
eval
eval执行类似SQL语法中的计算,对已知列执行一定的计算时可用eval完成适用于数据量大的时候,效率会非常高。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
df.eval('C=A+B') #根据已知列数据计算
add = pd.Series([1,2,3,4])
df.eval('C=A+@add') #通过@符号使用Python的局部变量,@符号表示其后紧随的是一个变量名称而不是列名称
query
query类似于SQL中where关键字的语法逻辑,按照DataFrame中某列的规则进行过滤操作,可以说是一个使用最频繁的数据筛选函数了。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
df.query('A==15') #查询A列数值为5的行
df.query('A<15') #查询A列数值小于5的行
apply
apply函数本身不处理数据,而是作为处理数据的调度器。当我们使用for循环遍历DataFrame或Series,数据量大的话会非常慢。而用apply函数会非常快,它自动根据function遍历每一个数据,然后返回一个数据结构为Series的结果。
import pandas as pd
df = pd.DataFrame({'A':['bob','sos','bob','sos','bob','sos','bob','bob'],
'B':['one','one','two','three','two','two','one','three'],
'C':[3,1,4,1,5,9,2,6],
'D':[1,2,3,4,5,6,7,8]})
grouped = df.groupby('A')
for name,group in grouped: #用for遍历
print(name)
print(group)
d = grouped.apply(lambda x:x.describe()) #用apply函数
print(d)
insert
insert函数可以在指定位置插入一列数据。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
add = pd.Series([1, 2, 3, 4])
df.insert(1, 'X', add) #插入列
print(df)
sample
当我们只需要DataFrame中的一部分时,就可以用sample函数从DataFrame中随机选取若干个行或列。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[22,23,24,25]}
df = pd.DataFrame(data)
df
df.sample(2) #随机抽取2行
df.sample(frac=0.8) #随机抽取数据的80%
explode
当DataFrame中某一行其中一个元素包含多个同类型数据时,就可以用explode函数将一行数据展开成多行,只要一行代码,非常方便。
import numpy as np
import pandas as pd
data = {'A':[12,13,14,15],'B':[[21,22],23,24,[25,26,27]]}
df = pd.DataFrame(data)
df
df.explode('B') #将B列中有多个元素的数据拆分成多行
nunique
nunique函数用于计算行或列上唯一值的数量,即去重后计数。这个函数在实际的数据分析中,非常实用。
import numpy as np
import pandas as pd
data = {'name':['A','B','C','D','A','B'],'age':[21,22,23,23,21,22]}
df = pd.DataFrame(data)
df
df.name.nunique() #对name列进行唯一值计数 结果为:4
replace
replace函数是用来替换DataFrame中的值,赋以新的值。
import numpy as np
import pandas as pd
data = {'name':['A','B','C','D','A','B'],'age':[21,22,23,23,21,22]}
df = pd.DataFrame(data)
df
df.replace(['A','B'],['E','F'],inplace=True) #如果没有inplace=True的话,原数据不会改变
df
melt
melt函数是pivot函数的逆转操作函数,用于将宽表变成窄表,即将列名转换为列数据,重构DataFrame。这个操作我们在做数据分析时经常需要用到。
import numpy as np
import pandas as pd
data = {'city':['A','B','C','D'],
'2018data':[22,33,44,55],
'2019data':[12,34,67,89],
'2020data':[80,90,100,110],
'2021data':[120,132,144,178]}
df = pd.DataFrame(data)
df
pd.melt(df,id_vars=['city'],value_vars=['2018data','2019data','2020data','2021data'])
以上所说的10个Pandas函数,你最需要哪一个呢?或者还有其他想要实现的功能,可以评论区说给我听哦,下一次说不定就有相关的干货啦!
码代码不易,帮忙留下一个小反馈吧~~
- 上一篇:SQL中的正则表达式
- 下一篇:ORACLE数据库SQL缓存自动智能清理
相关推荐
- 一篇文章带你了解PHP的学习使用(php的教程)
-
ThinkPHP5实战...
- 在memcached管理php的session(memcached libevent)
-
PHP的session(会话管理)一般是以文件形式进行,而在多个Web服务器之间进行session管理时memecached会比文件管理方式更加方便。在这里介绍如何使用memcached管理PHP的s...
- php传值和传引用的区别(php 传值和传引用)
-
php传值:在函数范围内,改变变量值得大小,都不会影响到函数外边的变量值。PHP传引用:在函数范围内,对值的任何改变,在函数外部也有所体现,因为传引用传的是内存地址。传值:和copy是一样的。【打个比...
- PHP 常量详解教程(php常量和变量)
-
常量类似变量,但是常量一旦被定义就无法更改或撤销定义。PHP常量常量是单个值的标识符(名称)。在脚本中无法改变该值。有效的常量名以字符或下划线开头(常量名称前面没有$符号)。注释:与变量不同,常...
- php自学零基础入门小知识(php新手入门教程)
-
我们就把PHP入门当成一个苹果吧!一口一口的吃掉他!不啰嗦了!开始了1、嵌入方法:类似ASP的<%,PHP可以是<?php或者是<?,结束符号是?>,当然您也可以自己指定。2、...
- PHP 语法详解(php语法大全)
-
PHP脚本在服务器上执行,然后向浏览器发送回纯HTML结果。基础PHP语法PHP脚本可放置于文档中的任何位置。PHP脚本以<?php开头,以?>结尾:<?php...
- PHP笔记(一)PHP基础知识(php必背知识点)
-
创建PHP程序PHP代码框架<?php>2.文件命名规则...
- PHP 8新特性之Attributes(注解),你掌握了吗?
-
PHP8的Alpha版本,过几天就要发布了,其中包含了不少的新特性,当然我自己认为最重要的还是JIT,这个我从2013年开始参与,中间挫折无数,失败无数后,终于要发布的东东。不过,今天呢,我不打算谈J...
- PHP基本语法之标记与注释(php注释规范)
-
1、标记由于PHP是嵌入式脚本语言,它在实际开发中经常会与HTML内容混在一起,所以为了区分HTML与PHP代码,需要使用标记对PHP代码进行标识。如:<html>...
- php注解(PHP注解 性能)
-
目标了解和使用php注解,如果你已经掌握其他一种具有注解的语言,例如:java、python等,你在本文中只需要了解点语法就行。示例php8以前的版本,注解写在注释里,如果你掌握其他语言的注解,你是不...
- 数据丢失?别慌!MySQL备份恢复攻略
-
想象一下,某个晴朗的午后,你正享受着咖啡,突然接到紧急电话:你的网站或APP彻底挂了!系统崩溃,界面全白。虽然心头一紧,但你或许还能安慰自己:系统崩溃只是暂停服务,数据还在,修复修复就好了。然而,如果...
- MySQL 日志:undo log、redo log、binlog
-
今天来和大家分享MySQL的三个日志文件,可以说MySQL的多数特性都是围绕日志文件实现,而其中最重要的有以下三种:...
- MySQL三大日志:binlog、redolog、undolog全解析
-
binlog概述在MySQL数据库中,binlog可是个相当重要的存在,它的全称为binarylog,也就是二进制日志。它就像是数据库的“记忆本”,记录了所有的DDL(数据定义语言)和...
- 1、MySQL数据库介绍(mysql数据库简单介绍)
-
1.1数据库的核心定义数据库的本质数据库乃存储数据对象之容器,涵盖如下关键组件:表(Table)...
- MySQL 日志双雄:实时监控与历史归档实战优化
-
MySQL日志双雄:实时监控+历史归档实战用这招让你家日志系统再也不卡不爆炸MySQL十亿级日志处理:从洪峰到归档全攻略手把手教你用MySQL搞定ELK级日志监控在微服务架构大行其道的今天,日志系统早...
- 一周热门
-
-
C# 13 和 .NET 9 全知道 :13 使用 ASP.NET Core 构建网站 (1)
-
因果推断Matching方式实现代码 因果推断模型
-
git pull命令使用实例 git pull--rebase
-
面试官:git pull是哪两个指令的组合?
-
git 执行pull错误如何撤销 git pull fail
-
git pull 和git fetch 命令分别有什么作用?二者有什么区别?
-
git fetch 和git pull 的异同 git中fetch和pull的区别
-
git pull 之后本地代码被覆盖 解决方案
-
还可以这样玩?Git基本原理及各种骚操作,涨知识了
-
git命令之pull git.pull
-
- 最近发表
- 标签列表
-
- git pull (33)
- git fetch (35)
- mysql insert (35)
- mysql distinct (37)
- concat_ws (36)
- java continue (36)
- jenkins官网 (37)
- mysql 子查询 (37)
- python元组 (33)
- mybatis 分页 (35)
- vba split (37)
- redis watch (34)
- python list sort (37)
- nvarchar2 (34)
- mysql not null (36)
- hmset (35)
- python telnet (35)
- python readlines() 方法 (36)
- munmap (35)
- docker network create (35)
- redis 集合 (37)
- python sftp (37)
- setpriority (34)
- c语言 switch (34)
- git commit (34)