百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

python 数据处理库中库,增强pandas功能的库有什么特别之处

suiw9 2025-02-18 13:22 20 浏览 0 评论

前言

最近有小伙伴推荐我多写写一个增强 pandas 功能的库—— pyjanitor 。他提供了许多实用功能,结合 pandas 使用能够大大提升我们的代码效率,那么我就针对这个库做一个系列教程。

不过,我不喜欢只是到官网抄一下例子,把英文翻译成中文,草草了事。我也不希望大家只是记住了 pyjanitor 的一些方法名字,只会简单套用。

因此,这个系列的文章我会挑选 pyjanitor 的一些方法做讲解,同时会给出 pandas 的实现,还教你怎么自己封装函数。

本系列文章的基本结构:

  1. pyjanitor 函数讲解
  2. pandas 原生实现
  3. 自己封装一个函数

pyjanitor 安装:

pip install pyjanitor

今天的主题是多条件判断,分支判断取值是数据处理的高频操作。往往初学者会使用 apply 遍历每一行,使用 python 的 if else 语法完成需求。如下:

数据:

代码:

  • 新增一列 value,里面就是一大堆的逻辑判断

代码倒是不复杂,但是条件很多,数据也多的情况下,代码就会难看,并且代码的执行速度也不行。


pyjanitor 的 case_when

代码来自于官网

结果是对了,但是感觉 case when 方法里面的东西很乱呀

我来标注一下:

  • 红色框是条件,绿色框是返回值

但是,我们不是一定要使用 janitor 才能做到这一切。结合 numpy 我们也能轻易做到


numpy 也有 case when

如果你学过我的 pandas 专栏,那么就一定听过 numpy 的两个条件函数,这里我们只需要用 select 就可以轻易做到多条件分支

关于 np.select 详细讲解,可以查看专栏文章


那么,我们该如何自己写一个类似 janitor 的函数,方便以后重复使用?


自己写一个也不难

首先,不管三七二十一,定义一个函数,把之前的 numpy 实现代码复制进去:

这里有几个问题:

  1. 参数有哪些
  2. 尽量不要直接修改数据源,现在我们是直接赋值一列到 df 里面

先加上参数:

  • 参数 df:总要传入数据吧
  • *conditions:分支条件的数量是无限的,所以需要使用 * ,表示不管你传入多少个参数,我都接下来,放进去 conditions 这个变量里面。所以,conditions 是一个元组
  • col_name:新列的名字

现在再来看 np.select 是需要把所有的条件给放一起,但现在 conditions 是每隔一个位置才是分支条件,利用 python 的切片功能就可以轻易分开:

  • 行2,3:利用切片的最后一个参数 step ,让其每隔2个位置取出元素,配合开始位置,就可以取出所有的奇数位置或偶数位置的元素

最后,我们不希望修改了源数据,可以使用 pandas 提供的方法做到:


有没有觉得 janitor 很好用,评论区说说你的感受

记得关注、点赞、转发

相关推荐

俄罗斯的 HTTPS 也要被废了?(俄罗斯网站关闭)

发布该推文的ScottHelme是一名黑客,SecurityHeaders和ReportUri的创始人、Pluralsight作者、BBC常驻黑客。他表示,CAs现在似乎正在停止为俄罗斯域名颁发...

如何强制所有流量使用 HTTPS一网上用户

如何强制所有流量使用HTTPS一网上用户使用.htaccess强制流量到https的最常见方法可能是使用.htaccess重定向请求。.htaccess是一个简单的文本文件,简称为“.h...

https和http的区别(https和http有何区别)

“HTTPS和HTTP都是数据传输的应用层协议,区别在于HTTPS比HTTP安全”。区别在哪里,我们接着往下看:...

快码住!带你十分钟搞懂HTTP与HTTPS协议及请求的区别

什么是协议?网络协议是计算机之间为了实现网络通信从而达成的一种“约定”或“规则”,正是因为这个“规则”的存在,不同厂商的生产设备、及不同操作系统组成的计算机之间,才可以实现通信。简单来说,计算机与网络...

简述HTTPS工作原理(简述https原理,以及与http的区别)

https是在http协议的基础上加了一层SSL(由网景公司开发),加密由ssl实现,它的目的是为用户提供对网站服务器的身份认证(需要CA),以至于保护交换数据的隐私和完整性,原理如图示。1、客户端发...

21、HTTPS 有几次握手和挥手?HTTPS 的原理什么是(高薪 常问)

HTTPS是3次握手和4次挥手,和HTTP是一样的。HTTPS的原理...

一次安全可靠的通信——HTTPS原理

为什么HTTPS协议就比HTTP安全呢?一次安全可靠的通信应该包含什么东西呢,这篇文章我会尝试讲清楚这些细节。Alice与Bob的通信...

为什么有的网站没有使用https(为什么有的网站点不开)

有的网站没有使用HTTPS的原因可能涉及多个方面,以下是.com、.top域名的一些见解:服务器性能限制:HTTPS使用公钥加密和私钥解密技术,这要求服务器具备足够的计算能力来处理加解密操作。如果服务...

HTTPS是什么?加密原理和证书。SSL/TLS握手过程

秘钥的产生过程非对称加密...

图解HTTPS「转」(图解http 完整版 彩色版 pdf)

我们都知道HTTPS能够加密信息,以免敏感信息被第三方获取。所以很多银行网站或电子邮箱等等安全级别较高的服务都会采用HTTPS协议。...

HTTP 和 HTTPS 有何不同?一文带你全面了解

随着互联网时代的高速发展,Web服务器和客户端之间的安全通信需求也越来越高。HTTP和HTTPS是两种广泛使用的Web通信协议。本文将介绍HTTP和HTTPS的区别,并探讨为什么HTTPS已成为We...

HTTP与HTTPS的区别,详细介绍(http与https有什么区别)

HTTP与HTTPS介绍超文本传输协议HTTP协议被用于在Web浏览器和网站服务器之间传递信息,HTTP协议以明文方式发送内容,不提供任何方式的数据加密,如果攻击者截取了Web浏览器和网站服务器之间的...

一文让你轻松掌握 HTTPS(https详解)

一文让你轻松掌握HTTPS原文作者:UC国际研发泽原写在最前:欢迎你来到“UC国际技术”公众号,我们将为大家提供与客户端、服务端、算法、测试、数据、前端等相关的高质量技术文章,不限于原创与翻译。...

如何在Spring Boot应用程序上启用HTTPS?

HTTPS是HTTP的安全版本,旨在提供传输层安全性(TLS)[安全套接字层(SSL)的后继产品],这是地址栏中的挂锁图标,用于在Web服务器和浏览器之间建立加密连接。HTTPS加密每个数据包以安全方...

一文彻底搞明白Http以及Https(http0)

早期以信息发布为主的Web1.0时代,HTTP已可以满足绝大部分需要。证书费用、服务器的计算资源都比较昂贵,作为HTTP安全扩展的HTTPS,通常只应用在登录、交易等少数环境中。但随着越来越多的重要...

取消回复欢迎 发表评论: