Python pandas 数据无法正常分列

2023-11-01 23:20

本文主要是介绍Python pandas 数据无法正常分列,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在数据处理时,有时需要对数据进行分列,类似于Excel里面的分列功能,这个在pandas里面也可以实现,下面就来详细介绍相关的方法及注意点,前提是你已经对pandas有一定的了解

导入数据

这里介绍的是从Excel导入数据,当然也可以从其他文件导入、数据库查询后导入等,为了弄清楚里面的细节,本教程从Excel导入数据

import pandas as pd
import numpy as npdata=pd.read_excel('split.xlsx')

查看原始数据及各列数据类型,可以看到指标、选项都是object类型,其中选项列没有缺失值

原始数据.png

对选项列进行分列

对导入的原始数据进行分列,这里运用的是pandas.Series.str.split方法,可以理解为把Series作为字符串进行分列操作,分列都是对字符串进行操作的

split_data=data['选项'].str.split(':',expand=True)   #需要添加expand=True,使分列后的数据扩展为一个数据框
split_data
原始数据分列.png

可以明显看到分列后的数据,第1、5、6索引行全是缺失值,对比上面的原始数据,这些都是只有一个数字,难道分列方法split对只有一个数字不能分列吗?其实则并不然,实际的原因请往下看

寻找原因

查看Excel里面的数据寻找原因,发现选项所在列,单个数字在Excel单元格是数字,其他的都是文本,因Excel里面数字一般都是在单元格里面都是靠右对齐,而文本都是靠左对齐

Excel数据.png

但是pandas导入数据后,已经查看了选项列为object类型,难道判断的数据类型有问题?请继续往下看

强制转换数据类型,再次分列

data['选项']=data['选项'].astype('str')
#data['选项']=data['选项'].astype('object')     #这两个代码都可以转换split_data=data['选项'].str.split(':',expand=True)
split_data
数据类型转换后再分列.png

可以看到已经成功进行分列了, 说明pandas读取的数据,判断出来的数据类型并不一定是这一列所有数据的真实类型,而是能概括所有类型的一个较大的类型(兼容所有类型),并没有强制转换为同一个数据类型,比如选项列,里面有数值型、字符串型,那么较大的一个类型是object,pandas及认为该列数据类型是object

合并数据

split_data.columns=['s_1','s_2','s_3','s_4']
data.join(split_data)   #join比较方便,根据索引直接对两个表进行链接,而merge需要设置链接时的字段
成功分列后数据.png

分列时注意事项

1.导入数据后一定要检查数据类型,不要急着去处理
2.分列前检查该列数据类型,确保该列数据类型都是字符串类型,或者object类型,当数据量很大的时候这个很容易出错

pandas里面数据类型对照

详情请参考这篇博文,数据处理过程的数据类型

数据类型.jpg

http://www.taodudu.cc/news/show-8125954.html

相关文章:

  • 多级雷达图绘制python_多的解释|多的意思|汉典“多”字的基本解释
  • 计算机和医学交叉的研究方向,医学3D计算机视觉:研究进展和挑战
  • 基于ESP32与AD9850的信号发生器
  • AD9208/AD9689/AD6688采集和AD9172/AD9174/AD9176回放FMC
  • 大数据面试题目汇集
  • BloomFilter 简介及在 Hadoop reduce side join 中的应用
  • Hive 基础之:分区、桶、Sort Merge Bucket Join
  • 分区、桶、Sort Merge Bucket Join
  • Go 微服务基础:Protobuf gRPC
  • VS Code 整活:100行代码写一个悬浮翻译插件
  • 新简历欢迎有经验者拍砖
  • 0-1规划下的数独问题
  • c++程序求解9X9数独
  • MySQL需要掌握到什么程度,才有机会进入大厂?来看清华大佬推荐文档
  • 35岁程序员的毕业季?大厂花式裁员着实厉害……
  • 又一家在线教育巨头要裁员跑路?
  • 如何面对“裁员门” ——IT雇员保住工作的十条黄金法则
  • 如何面对“裁员门” ——IT雇员保住工作的十条黄金法则 【转】
  • 如何面对裁员门:IT雇员保住工作的十条黄金法则
  • 百度裁员门:裁员过程录音曝光
  • 即使与大众合作,陷入“裁员门”的滴滴仍然前途未卜
  • 与计算机安全相关的是,计算机信息安全与保密工作论文
  • 公司员工薪资保密的重要性
  • 计算机信息安全保密审计,审计处网络信息安全保密管理工作细则
  • 计算机安全与保密技术论文,计算机信息安全与保密工作论文.doc
  • 绘本图书租售小程序版v1.0.0绘本 绘本馆 图书借阅
  • 【独家源码】ssm绘本馆管理系统n5wn5应对计算机毕业设计困难的解决方案
  • 儿童绘本馆图书借阅租赁知识付费小程序源码交流
  • 详解DevOps 在企业云安全管理中发挥作用的8大方式
  • 计算机毕业设计ssm钓鱼爱好者交流平台4qn0e系统+程序+源码+lw+远程部署
  • 这篇关于Python pandas 数据无法正常分列的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



    http://www.chinasem.cn/article/326467

    相关文章

    使用Java解析JSON数据并提取特定字段的实现步骤(以提取mailNo为例)

    《使用Java解析JSON数据并提取特定字段的实现步骤(以提取mailNo为例)》在现代软件开发中,处理JSON数据是一项非常常见的任务,无论是从API接口获取数据,还是将数据存储为JSON格式,解析... 目录1. 背景介绍1.1 jsON简介1.2 实际案例2. 准备工作2.1 环境搭建2.1.1 添加

    MySQL中删除重复数据SQL的三种写法

    《MySQL中删除重复数据SQL的三种写法》:本文主要介绍MySQL中删除重复数据SQL的三种写法,文中通过代码示例讲解的非常详细,对大家的学习或工作有一定的帮助,需要的朋友可以参考下... 目录方法一:使用 left join + 子查询删除重复数据(推荐)方法二:创建临时表(需分多步执行,逻辑清晰,但会

    Java实现任务管理器性能网络监控数据的方法详解

    《Java实现任务管理器性能网络监控数据的方法详解》在现代操作系统中,任务管理器是一个非常重要的工具,用于监控和管理计算机的运行状态,包括CPU使用率、内存占用等,对于开发者和系统管理员来说,了解这些... 目录引言一、背景知识二、准备工作1. Maven依赖2. Gradle依赖三、代码实现四、代码详解五

    使用Python绘制蛇年春节祝福艺术图

    《使用Python绘制蛇年春节祝福艺术图》:本文主要介绍如何使用Python的Matplotlib库绘制一幅富有创意的“蛇年有福”艺术图,这幅图结合了数字,蛇形,花朵等装饰,需要的可以参考下... 目录1. 绘图的基本概念2. 准备工作3. 实现代码解析3.1 设置绘图画布3.2 绘制数字“2025”3.3

    详谈redis跟数据库的数据同步问题

    《详谈redis跟数据库的数据同步问题》文章讨论了在Redis和数据库数据一致性问题上的解决方案,主要比较了先更新Redis缓存再更新数据库和先更新数据库再更新Redis缓存两种方案,文章指出,删除R... 目录一、Redis 数据库数据一致性的解决方案1.1、更新Redis缓存、删除Redis缓存的区别二

    Redis事务与数据持久化方式

    《Redis事务与数据持久化方式》该文档主要介绍了Redis事务和持久化机制,事务通过将多个命令打包执行,而持久化则通过快照(RDB)和追加式文件(AOF)两种方式将内存数据保存到磁盘,以防止数据丢失... 目录一、Redis 事务1.1 事务本质1.2 数据库事务与redis事务1.2.1 数据库事务1.

    python使用watchdog实现文件资源监控

    《python使用watchdog实现文件资源监控》watchdog支持跨平台文件资源监控,可以检测指定文件夹下文件及文件夹变动,下面我们来看看Python如何使用watchdog实现文件资源监控吧... python文件监控库watchdogs简介随着Python在各种应用领域中的广泛使用,其生态环境也

    Python中构建终端应用界面利器Blessed模块的使用

    《Python中构建终端应用界面利器Blessed模块的使用》Blessed库作为一个轻量级且功能强大的解决方案,开始在开发者中赢得口碑,今天,我们就一起来探索一下它是如何让终端UI开发变得轻松而高... 目录一、安装与配置:简单、快速、无障碍二、基本功能:从彩色文本到动态交互1. 显示基本内容2. 创建链

    element-ui下拉输入框+resetFields无法回显的问题解决

    《element-ui下拉输入框+resetFields无法回显的问题解决》本文主要介绍了在使用ElementUI的下拉输入框时,点击重置按钮后输入框无法回显数据的问题,具有一定的参考价值,感兴趣的... 目录描述原因问题重现解决方案方法一方法二总结描述第一次进入页面,不做任何操作,点击重置按钮,再进行下

    Java调用Python代码的几种方法小结

    《Java调用Python代码的几种方法小结》Python语言有丰富的系统管理、数据处理、统计类软件包,因此从java应用中调用Python代码的需求很常见、实用,本文介绍几种方法从java调用Pyt... 目录引言Java core使用ProcessBuilder使用Java脚本引擎总结引言python