数据库 - python数据处理,数据入库问题
怪我咯
怪我咯 2017-04-18 10:10:51
[Python讨论组]

数据格式为
http://titie1
key1 value1
key2 value2
key3 value3
key4 value4
http://title2
key1 value1
key2 value2
key3 value3
key4 value4
key5 value5
http://title3
key1 value1
key2 value2
key3 value3
key4 value4
key5 value5
http://title4
key1 value1
key2 value2
key3 value3
key4 value4
key5 value5
key6 value6

需要把这种格式的数据导入mongodb,类似这样

每个title下的key和value的数量都不一样,比如有的是5组数据,有的是10组数据
应该怎么处理这些数据来入库。

怪我咯
怪我咯

走同样的路,发现不同的人生

全部回复(1)
PHP中文网

本子上没装mongodb, 所以我只帮你处理数据, 怎么插入你自己搞定~

按照你的设定, 我有一个名为test的文本, 内容长这样

http://titie1
key1 value1
key2 value2
key3 value3
key4 value4
http://title2
key1 value1
key2 value2
key3 value3
key4 value4
key5 value5
http://title3
key1 value1
key2 value2
key3 value3
key4 value4
key5 value5
http://title4
key1 value1
key2 value2
key3 value3
key4 value4
key5 value5
key6 value6

直接放码

lst = []
with open('test', 'r') as fh:
    line = fh.readline().strip()
    while line:
        item = {
            'title': '',
            'data': []
        }
        if line.startswith("http://"):
            item['title'] = line.split("//")[-1]
            line = fh.readline().strip()
        while line and not line.startswith("http://"):
            _dic = {}
            _k, _v = line.split()
            _dic[_k] = _v
            item['data'].append(_dic)
            line = fh.readline().strip()
        else:
            lst.append(item)

print(lst)

运行结果

[{'title': 'titie1', 'data': [{'key1': 'value1'}, {'key2': 'value2'}, {'key3': 'value3'}, {'key4': 'value4'}]}, {'title': 'title2', 'data': [{'key1': 'value1'}, {'key2': 'value2'}, {'key3': 'value3'}, {'key4': 'value4'}, {'key5': 'value5'}]}, {'title': 'title3', 'data': [{'key1': 'value1'}, {'key2': 'value2'}, {'key3': 'value3'}, {'key4': 'value4'}, {'key5': 'value5'}]}, {'title': 'title4', 'data': [{'key1': 'value1'}, {'key2': 'value2'}, {'key3': 'value3'}, {'key4': 'value4'}, {'key5': 'value5'}, {'key6': 'value6'}]}]

剩下写入mongodb你看着办吧

热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习
PHP中文网抖音号
发现有趣的

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号