《Excel数据可视化:一样的数据不一样的图表》——1.2 数据的清洗

简介: 本节书摘来自华章计算机《Excel数据可视化:一样的数据不一样的图表》一书中的第1章,第1.2节,作者 恒盛杰资讯,更多章节内容可以访问云栖社区“华章计算机”公众号查看。

本节书摘来自华章计算机《Excel数据可视化:一样的数据不一样的图表》一书中的第1章,第1.2节,作者 恒盛杰资讯,更多章节内容可以访问云栖社区“华章计算机”公众号查看。

1.2 数据的清洗


screenshot

对于一份庞大的数据来说,无论是手动录制还是从外部获取,难免会出现无效值、重复值、缺失值等情况。在Excel 2007以前的版本中,想要删除或更正这些不符合要求的数据,需要先将其筛选出来,之后再批量删除或修改,是一项很繁重的工程。随着Microsoft Excel组件的不断更新,功能的适应性也越来越高,对于这种常见的问题也有了新的处理方法,如批量删除重复值。

不符合要求的数据主要有缺失的数据、错误的数据、重复的数据三大类。面对这样的数据,就需要进行清洗,还包括数据一致性的检查,将其更正为有实际意义的数据。

screenshot

想要清除这些有缺陷的数据,就需要根据它们的类型从不同角度进行操作,如填补遗漏的数据、消除异常值、纠正不一致的数据等。

在实际的数据收集中,数据项的缺失是很常见的。比如工作人员因为疏忽在统计数据时漏写了某个时期内的数据,或者是人为原因导致在某些时间段内传感器无法正常工作等,这些都会造成数据项的缺失。

实例 4寻找误删的数据

有一张员工表,第一列为员工编号,后面为员工信息。员工离职后就直接删除了该员工信息所在行,结果现在的员工编号不完整。比如被删除的 AE104、AE109、AE112,怎样添加这些缺失的员工编号呢?

screenshot

screenshot

在输入公式的时候经常会出现一些错误的信息,这些错误值通常是因为公式不能正确地计算结果或公式引用的单元格有错误造成的。下面列出Excel中错误值的类型、产生的原因及解决方法。

screenshot
screenshot

实例 5 将错误值显示为0

在实际工作中,由于对公式的不熟悉、单元格引用不当、数据本身不满足公式参数的要求等原因,难免会出现上述错误。但是有些情况出现的错误类型并不影响计算结果,即允许出现那样的错误形式。此时,就需要将错误值进行深度处理,可显示为空白或用0代替,以方便领导查阅。

screenshot

screenshot

重复值一般都是多余的数据,在数据统计过程中,要确保数据的唯一性,只有这样才能确保统计结果的正确性和可靠性。如果忽视了这一要点,所做的任何结果都将无济于事。

实例 6 删除重复值

现有一张客户考核统计表,因不同员工对相同客户进行了考核,导致出现了一样的客户编码,如果要统计月底对客户的考核覆盖率,统计有重复值的记录就是不正确的,需要将其删除。
screenshot

screenshot

screenshot

目录
打赏
0
0
0
0
1408
分享
相关文章
利用Python自动化处理Excel数据:从基础到进阶####
本文旨在为读者提供一个全面的指南,通过Python编程语言实现Excel数据的自动化处理。无论你是初学者还是有经验的开发者,本文都将帮助你掌握Pandas和openpyxl这两个强大的库,从而提升数据处理的效率和准确性。我们将从环境设置开始,逐步深入到数据读取、清洗、分析和可视化等各个环节,最终实现一个实际的自动化项目案例。 ####
543 10
Probly:开源 AI Excel表格工具,交互式生成数据分析结果与可视化图表
Probly 是一款结合电子表格功能与 Python 数据分析能力的 AI 工具,支持在浏览器中运行 Python 代码,提供交互式电子表格、数据可视化和智能分析建议,适合需要强大数据分析功能又希望操作简便的用户。
277 2
从Excel到Hadoop:数据规模的进化之路
从Excel到Hadoop:数据规模的进化之路
51 10
自动化数据处理:使用Selenium与Excel打造的数据爬取管道
本文介绍了一种使用Selenium和Excel结合代理IP技术从WIPO品牌数据库(branddb.wipo.int)自动化爬取专利信息的方法。通过Selenium模拟用户操作,处理JavaScript动态加载页面,利用代理IP避免IP封禁,确保数据爬取稳定性和隐私性。爬取的数据将存储在Excel中,便于后续分析。此外,文章还详细介绍了Selenium的基本设置、代理IP配置及使用技巧,并探讨了未来可能采用的更多防反爬策略,以提升爬虫效率和稳定性。
361 4
招行面试:100万级别数据的Excel,如何秒级导入到数据库?
本文由40岁老架构师尼恩撰写,分享了应对招商银行Java后端面试绝命12题的经验。文章详细介绍了如何通过系统化准备,在面试中展示强大的技术实力。针对百万级数据的Excel导入难题,尼恩推荐使用阿里巴巴开源的EasyExcel框架,并结合高性能分片读取、Disruptor队列缓冲和高并发批量写入的架构方案,实现高效的数据处理。此外,文章还提供了完整的代码示例和配置说明,帮助读者快速掌握相关技能。建议读者参考《尼恩Java面试宝典PDF》进行系统化刷题,提升面试竞争力。关注公众号【技术自由圈】可获取更多技术资源和指导。
使用OpenPyXL在Excel中创建折线图:数据可视化入门
本文介绍了如何使用Python的`openpyxl`库在Excel中创建折线图,包括安装库、加载Excel文件、定义数据范围、设置图表属性(如标题、轴标签)及保存文件等步骤,适合数据可视化初学者。
145 15
Python实用记录(十):获取excel数据并通过列表的形式保存为txt文档、xlsx文档、csv文档
这篇文章介绍了如何使用Python读取Excel文件中的数据,处理后将其保存为txt、xlsx和csv格式的文件。
332 3
Python实用记录(十):获取excel数据并通过列表的形式保存为txt文档、xlsx文档、csv文档
SpringBoot中大量数据导出方案:使用EasyExcel并行导出多个excel文件并压缩zip后下载
在SpringBoot环境中,为了优化大量数据的Excel导出体验,可采用异步方式处理。具体做法是将数据拆分后利用`CompletableFuture`与`ThreadPoolTaskExecutor`并行导出,并使用EasyExcel生成多个Excel文件,最终将其压缩成ZIP文件供下载。此方案提升了导出效率,改善了用户体验。代码示例展示了如何实现这一过程,包括多线程处理、模板导出及资源清理等关键步骤。
不通过navicat工具怎么把查询数据导出到excel表中
不通过navicat工具怎么把查询数据导出到excel表中
81 0
使用Python读取Excel数据
本文介绍了如何使用Python的`pandas`库读取和操作Excel文件。首先,需要安装`pandas`和`openpyxl`库。接着,通过`read_excel`函数读取Excel数据,并展示了读取特定工作表、查看数据以及计算平均值等操作。此外,还介绍了选择特定列、筛选数据和数据清洗等常用操作。`pandas`是一个强大且易用的工具,适用于日常数据处理工作。

热门文章

最新文章

AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等