Mongo入门基础（三）csv数据上传到mongo上

最新推荐文章于 2024-06-08 11:26:48 发布

933711

最新推荐文章于 2024-06-08 11:26:48 发布

阅读量200

点赞数

CC 4.0 BY-SA版权

分类专栏： Mongo入门文章标签： python 开发语言后端

本文链接：https://blog.csdn.net/qq_40933711/article/details/121272193

Mongo入门专栏收录该内容

2 篇文章

订阅专栏

该篇博客介绍了如何利用Python的pandas库和MongoDB客户端进行数据处理和存储。首先，从CSV文件中读取数据并转换为字典格式，接着通过遍历字典将数据插入MongoDB的集合中，过程中先删除已有相同_id的数据以确保数据的唯一性。此方法适用于数据更新和迁移场景。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

思路：把每行的数据换成dict，然后合成一个大dict，再一行行加入进去

import pandas as pd
import numpy as np
from pymongo import MongoClient

#登录mongo
host = ['localhost:27017']
client = MongoClient(host=host)

#读取数据，转置后转为dict
df = pd.read_csv("FactorReturn_2021009-20211029.csv")
df = df.rename({'Unnamed: 0':"_id"},axis = 'columns')
df = df.T.to_dict()

#一行行insert
for i in range(len(df)):
    client.mydb.test_set.remove({"_id":df[i]["_id"]})
    client.mydb.test_set.insert_one(df[i])