Python自动化办公篇—pandas操作Excel:读取+查看+选择+清洗+排序+筛选+函数+写入

本文主要是介绍Python自动化办公篇—pandas操作Excel:读取+查看+选择+清洗+排序+筛选+函数+写入,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

目录

  • 专栏导读
  • 库的介绍
  • 库的安装
  • 1、读取数据
  • 2、查看数据
  • 3、选择数据
  • 4、数据清洗
  • 5、数据排序
  • 6、数据筛选
  • 7、数据操作
  • 8、数据写入
  • 总结

专栏导读

文章名称链接
Python自动化办公—pyautogui图像定位\点击功能,实现自动截取当前屏幕并检索点击(可制作为游戏点击脚本)点我进行跳转
Python办公自动化—openpyxl获取Excel某列的批注信息自动插入到旁边一列点我进行跳转
Python链接MySQL(三)—mysql-connector-python实现—增—删—查—改点我进行跳转
Python办公MySQL(二):Python连接MySQL实现简单的—增—删—查—改(详细教程)点我进行跳转
Python提取PDF中的图片并保存点我进行跳转
Python将图片以超链接形式插入Excel表格且以相对路径插入(发给任何人都能打开)点我进行跳转
Python办公—openpyxl合并单元格点我进行跳转
Python100个库分享第21个—xlsxwriter (办公库篇)点我进行跳转
python+selenium判断【加载中】元素在就一直等待不在就点击下载(非常好用)点我进行跳转
Python提取PDF中的表格写入Excel点我进行跳转
pandas读取Excel将某列为键某列(可多列)为值—写入字典(json)(键不可重复如重复保留最后有一个键值对)点我进行跳转
Python读取超大Excel表格(100万行x30列)三种方法点我进行跳转
Python如何将Excel转CSV(3种常见方法+时间测试)点我进行跳转
Python+smtplib库实现Foxmail自动批量给客户发送账单点我进行跳转
Python实现Excel\CSV文件的双重分组求汇总(在Excel中也称之为透视)点我进行跳转
Python+tkinter自制一对多多对多匹配GUI工具(CSV版—可改写Excel版)附完整代码点我进行跳转
Python+PySimpleGUI实现一个选择文件并做处理的GUI办公小工具(完整代码)点我进行跳转
Python+sentence-transformers框架实现相似文本识别(附完整代码+保姆教学)点我进行跳转
Python+PySide6实现一个选择文件并做处理的GUI办公小工具(完整代码)点我进行跳转
Python+docx2pdf批量将word转pdf点我进行跳转
Python对账单中某些跨账单重复的单号进行获取点我进行跳转
Python+pandas读取Excel中的每一个sheet中的每一行点我进行跳转
CSV转Excel文件(适合大文件转VBA语言)点我进行跳转
Python读取Excel每一行为列表—大PK(openpyxl\pandas\xlwings\xlrd\Spire.XLS\python_calamine)看谁用时少?点我进行跳转
Python之Spire.XLS进行Excel与CSV文件互转换点我进行跳转
利用python将Excel文件拆分成100行为一个的小文件(行数可自己设置)点我进行跳转
Python递归—求一组数字的指定和多少种组合方式点我进行跳转
Python看板—python+plotly+streamlit实现简易看板(附完整版代码)点我进行跳转
pandas读取Excel统计每一个文件的行数点我进行跳转
Python+pyautogui自动选择附件并上传点我进行跳转
Python+PIL计算两个图像的相似度并返回第一个不匹配的像素的x坐标(附完整版代码)点我进行跳转
Python+openpyxl将Excel的某一列转成文本格式点我进行跳转
Python对csv文件的某一列进行拆分+再写入保存点我进行跳转
Excel转CSV文件(适合大文件转VBA)点我进行跳转
Python+selenium+PIL实现网页自动截图点我进行跳转
Python批量读取csv(xlsx)文件指定表头获取内容(表头可乱序)点我进行跳转
Python将Excel数字对应列的字母写成字典(json)—如1为A列,2为B列以此类推(更新与2024-4-3)点我进行跳转
Python+openpyxl读取Excel(每一行为列表)点我进行跳转
Python如何批量将图片以超链接的形式插入Excel点我进行跳转
利用Python批量压缩图片大小(不改变图片尺寸,不改变图片格式)点我进行跳转
  • 🌸 欢迎来到Python办公自动化专栏—Python处理办公问题,解放您的双手

  • 🏳️‍🌈 博客主页:请点击——> 一晌小贪欢的博客主页求关注

  • 👍 该系列文章专栏:请点击——>Python办公自动化专栏求订阅

  • 🕷 此外还有爬虫专栏:请点击——>Python爬虫基础专栏求订阅

  • 📕 此外还有python基础专栏:请点击——>Python基础学习专栏求订阅

  • 文章作者技术和水平有限,如果文中出现错误,希望大家能指正🙏

  • ❤️ 欢迎各位佬关注! ❤️

库的介绍

库的安装

pip install xxx -i https://pypi.tuna.tsinghua.edu.cn/simple/

1、读取数据

  • pd.read_csv(): 从CSV文件读取数据

  • pd.read_excel(): 从Excel文件读取数据

  • pd.read_sql(): 从SQL数据库读取数据

  • pd.read_json(): 从JSON文件读取数据

  • pd.read_html(): 从网页读取HTML表格

2、查看数据

  • df.head(n): 显示前n行数据(默认是5行)

  • df.tail(n): 显示后n行数据(默认是5行)

  • df.info(): 显示DataFrame的信息(包括列名、数据类型、非空值数量等)

  • df.describe(): 显示数值列的统计信息(如计数、均值、标准差等)

3、选择数据

  • df[column_name]: 选择单列数据

  • df[[column1, column2]]: 选择多列数据

  • df.loc[row_indexer, column_indexer]: 基于标签选择数据

  • df.iloc[row_indexer, column_indexer]: 基于整数位置选择数据

  • df.at[row_label, column_label]: 选择单个值(基于标签)

  • df.iat[row_position, column_position]: 选择单个值(基于整数位置)

4、数据清洗

  • df.dropna(): 删除包含缺失值的行或列

  • df.fillna(value): 用指定的值填充缺失值

  • df.replace(to_replace, value): 替换值

  • df.astype(dtype): 更改列的数据类型

  • df.duplicated(): 显示重复的行

  • df.drop_duplicates(): 删除重复的行

5、数据排序

  • df.sort_values(by=column_name, ascending=True): 对指定列进行排序

  • df.sort_index(): 对索引进行排序

  • df.rank(): 对数据进行排名

6、数据筛选

  • df[condition]: 使用条件表达式筛选数据

  • df.query('column_name > value'): 使用字符串表达式筛选数据

7、数据操作

  • df.apply(function): 对DataFrame的每个元素、行或列应用函数

  • df.applymap(function): 对DataFrame的每个元素应用函数

  • df.map(function): 对Series的每个元素应用函数

  • df.groupby(by): 根据列的值对数据进行分组

  • df.merge(other_df, on=column_name): 根据列的值合并两个DataFrame

  • df.concat([df1, df2], axis=0): 连接多个DataFrame(沿行或列)

  • df.pivot(index=None, columns=None, values=None): 创建一个透视表

8、数据写入

  • df.to_csv(file_path): 将DataFrame写入CSV文件

  • df.to_excel(file_path): 将DataFrame写入Excel文件

  • df.to_sql(name, con, if_exists='fail', index=True): 将DataFrame写入SQL数据库

  • df.to_json(file_path): 将DataFrame写入JSON文件

文章名称链接
Python自动化办公—pyautogui图像定位\点击功能,实现自动截取当前屏幕并检索点击(可制作为游戏点击脚本)点我进行跳转
Python办公自动化—openpyxl获取Excel某列的批注信息自动插入到旁边一列点我进行跳转
Python链接MySQL(三)—mysql-connector-python实现—增—删—查—改点我进行跳转
Python办公MySQL(二):Python连接MySQL实现简单的—增—删—查—改(详细教程)点我进行跳转
Python提取PDF中的图片并保存点我进行跳转
Python将图片以超链接形式插入Excel表格且以相对路径插入(发给任何人都能打开)点我进行跳转
Python办公—openpyxl合并单元格点我进行跳转
Python100个库分享第21个—xlsxwriter (办公库篇)点我进行跳转
python+selenium判断【加载中】元素在就一直等待不在就点击下载(非常好用)点我进行跳转
Python提取PDF中的表格写入Excel点我进行跳转
pandas读取Excel将某列为键某列(可多列)为值—写入字典(json)(键不可重复如重复保留最后有一个键值对)点我进行跳转
Python读取超大Excel表格(100万行x30列)三种方法点我进行跳转
Python如何将Excel转CSV(3种常见方法+时间测试)点我进行跳转
Python+smtplib库实现Foxmail自动批量给客户发送账单点我进行跳转
Python实现Excel\CSV文件的双重分组求汇总(在Excel中也称之为透视)点我进行跳转
Python+tkinter自制一对多多对多匹配GUI工具(CSV版—可改写Excel版)附完整代码点我进行跳转
Python+PySimpleGUI实现一个选择文件并做处理的GUI办公小工具(完整代码)点我进行跳转
Python+sentence-transformers框架实现相似文本识别(附完整代码+保姆教学)点我进行跳转
Python+PySide6实现一个选择文件并做处理的GUI办公小工具(完整代码)点我进行跳转
Python+docx2pdf批量将word转pdf点我进行跳转
Python对账单中某些跨账单重复的单号进行获取点我进行跳转
Python+pandas读取Excel中的每一个sheet中的每一行点我进行跳转
CSV转Excel文件(适合大文件转VBA语言)点我进行跳转
Python读取Excel每一行为列表—大PK(openpyxl\pandas\xlwings\xlrd\Spire.XLS\python_calamine)看谁用时少?点我进行跳转
Python之Spire.XLS进行Excel与CSV文件互转换点我进行跳转
利用python将Excel文件拆分成100行为一个的小文件(行数可自己设置)点我进行跳转
Python递归—求一组数字的指定和多少种组合方式点我进行跳转
Python看板—python+plotly+streamlit实现简易看板(附完整版代码)点我进行跳转
pandas读取Excel统计每一个文件的行数点我进行跳转
Python+pyautogui自动选择附件并上传点我进行跳转
Python+PIL计算两个图像的相似度并返回第一个不匹配的像素的x坐标(附完整版代码)点我进行跳转
Python+openpyxl将Excel的某一列转成文本格式点我进行跳转
Python对csv文件的某一列进行拆分+再写入保存点我进行跳转
Excel转CSV文件(适合大文件转VBA)点我进行跳转
Python+selenium+PIL实现网页自动截图点我进行跳转
Python批量读取csv(xlsx)文件指定表头获取内容(表头可乱序)点我进行跳转
Python将Excel数字对应列的字母写成字典(json)—如1为A列,2为B列以此类推(更新与2024-4-3)点我进行跳转
Python+openpyxl读取Excel(每一行为列表)点我进行跳转
Python如何批量将图片以超链接的形式插入Excel点我进行跳转
利用Python批量压缩图片大小(不改变图片尺寸,不改变图片格式)点我进行跳转

总结

  • 希望对初学者有帮助

  • 致力于办公自动化的小小程序员一枚

  • 希望能得到大家的【一个免费关注】!感谢

  • 求个 🤞 关注 🤞

  • 此外还有办公自动化专栏,欢迎大家订阅:Python办公自动化专栏

  • 求个 ❤️ 喜欢 ❤️

  • 此外还有爬虫专栏,欢迎大家订阅:Python爬虫基础专栏

  • 求个 👍 收藏 👍

  • 此外还有Python基础专栏,欢迎大家订阅:Python基础学习专栏

这篇关于Python自动化办公篇—pandas操作Excel:读取+查看+选择+清洗+排序+筛选+函数+写入的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1072546

相关文章

一文带你搞懂Python中__init__.py到底是什么

《一文带你搞懂Python中__init__.py到底是什么》朋友们,今天我们来聊聊Python里一个低调却至关重要的文件——__init__.py,有些人可能听说过它是“包的标志”,也有人觉得它“没... 目录先搞懂 python 模块(module)Python 包(package)是啥?那么 __in

使用Python实现图像LBP特征提取的操作方法

《使用Python实现图像LBP特征提取的操作方法》LBP特征叫做局部二值模式,常用于纹理特征提取,并在纹理分类中具有较强的区分能力,本文给大家介绍了如何使用Python实现图像LBP特征提取的操作方... 目录一、LBP特征介绍二、LBP特征描述三、一些改进版本的LBP1.圆形LBP算子2.旋转不变的LB

Python中__init__方法使用的深度解析

《Python中__init__方法使用的深度解析》在Python的面向对象编程(OOP)体系中,__init__方法如同建造房屋时的奠基仪式——它定义了对象诞生时的初始状态,下面我们就来深入了解下_... 目录一、__init__的基因图谱二、初始化过程的魔法时刻继承链中的初始化顺序self参数的奥秘默认

Python实现特殊字符判断并去掉非字母和数字的特殊字符

《Python实现特殊字符判断并去掉非字母和数字的特殊字符》在Python中,可以通过多种方法来判断字符串中是否包含非字母、数字的特殊字符,并将这些特殊字符去掉,本文为大家整理了一些常用的,希望对大家... 目录1. 使用正则表达式判断字符串中是否包含特殊字符去掉字符串中的特殊字符2. 使用 str.isa

python中各种常见文件的读写操作与类型转换详细指南

《python中各种常见文件的读写操作与类型转换详细指南》这篇文章主要为大家详细介绍了python中各种常见文件(txt,xls,csv,sql,二进制文件)的读写操作与类型转换,感兴趣的小伙伴可以跟... 目录1.文件txt读写标准用法1.1写入文件1.2读取文件2. 二进制文件读取3. 大文件读取3.1

使用Python实现一个优雅的异步定时器

《使用Python实现一个优雅的异步定时器》在Python中实现定时器功能是一个常见需求,尤其是在需要周期性执行任务的场景下,本文给大家介绍了基于asyncio和threading模块,可扩展的异步定... 目录需求背景代码1. 单例事件循环的实现2. 事件循环的运行与关闭3. 定时器核心逻辑4. 启动与停

基于Python实现读取嵌套压缩包下文件的方法

《基于Python实现读取嵌套压缩包下文件的方法》工作中遇到的问题,需要用Python实现嵌套压缩包下文件读取,本文给大家介绍了详细的解决方法,并有相关的代码示例供大家参考,需要的朋友可以参考下... 目录思路完整代码代码优化思路打开外层zip压缩包并遍历文件:使用with zipfile.ZipFil

Python处理函数调用超时的四种方法

《Python处理函数调用超时的四种方法》在实际开发过程中,我们可能会遇到一些场景,需要对函数的执行时间进行限制,例如,当一个函数执行时间过长时,可能会导致程序卡顿、资源占用过高,因此,在某些情况下,... 目录前言func-timeout1. 安装 func-timeout2. 基本用法自定义进程subp

Python实现word文档内容智能提取以及合成

《Python实现word文档内容智能提取以及合成》这篇文章主要为大家详细介绍了如何使用Python实现从10个左右的docx文档中抽取内容,再调整语言风格后生成新的文档,感兴趣的小伙伴可以了解一下... 目录核心思路技术路径实现步骤阶段一:准备工作阶段二:内容提取 (python 脚本)阶段三:语言风格调

Python结合PyWebView库打造跨平台桌面应用

《Python结合PyWebView库打造跨平台桌面应用》随着Web技术的发展,将HTML/CSS/JavaScript与Python结合构建桌面应用成为可能,本文将系统讲解如何使用PyWebView... 目录一、技术原理与优势分析1.1 架构原理1.2 核心优势二、开发环境搭建2.1 安装依赖2.2 验