【python数据分析】—练习01商铺数据清洗

最新推荐文章于 2023-04-17 11:59:26 发布

找工作的J同学

最新推荐文章于 2023-04-17 11:59:26 发布

阅读量3.9k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： python数据分析文章标签：数据分析 python

本文链接：https://blog.csdn.net/J358935/article/details/107272335

本文介绍了如何使用Python进行商铺数据的清洗和处理。内容包括读取CSV文件，清洗comment和price字段为数字，处理缺失值，将commentlist拆分为多个字段并转换为数字，最终将处理后的数据存储为pkl文件。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

【项目01】商铺数据加载及存储

数据集及源码https://github.com/JCATHoney/python-data-analysis

作业要求：

1、成功读取“商铺数据.csv”文件
2、解析数据，存成列表字典格式：[{‘var1’:value1,‘var2’:value2,‘var3’:values,…},…,{}]
3、数据清洗：
① comment，price两个字段清洗成数字
② 清除字段缺失的数据
③ commentlist拆分成三个字段，并且清洗成数字
4、结果存为.pkl文件

源数据格式

在这里插入图片描述

1、读取数据

# 设置路径，方式，编码
f=open('C:/Users/Away/Desktop/data/商铺数据.csv','r',encoding='utf8')
#前10行数据
for i in f.readlines()[:10]:
#     print(i.split(',')[-1])
#整体按照逗号划分，最后一个字段为commentlist,再将其按照空格划分成3个字段
    print(i.split(',')[-1].split('                                '))
f.seek(0)

2、数据清洗和排除缺失数据

整体思路：
对不同的字段的处理写对应函数，对于缺失数据给统一标记最后一起处理。
在这里插入图片描述

#处理点评条数
def fcm(s):
    if '条' in s:
        return

最低0.47元/天解锁文章

新学期VIP享超值加赠