如何从包含多列数据的 CSV 文件中合并特定列并计算各个选项出现的比例?

心靈之曲
发布: 2024-10-29 16:34:51
原创
854人浏览过

如何从包含多列数据的 csv 文件中合并特定列并计算各个选项出现的比例?

csv 文件合并与内容比例计算

问题:

如何从包含多列数据的 csv 文件中读取内容并合并特定的列,同时计算各个选项出现的比例?

解决方案:

使用 python 的 pandas 库来处理 csv 文件:

import pandas as pd
from collections import Counter

# 读取 CSV 文件
df = pd.read_csv('test.csv', encoding='cp932')

# 获取 CMD 列作为主键
index_list_cmd = df['cmd'].tolist()

# 计算 CMD 出现的次数
idxLstCmd_cnt = Counter(list(index_list_cmd))

# 去除重复的 CMD
index_list_cmd = sorted(set(index_list_cmd), key=list(index_list_cmd).index)

# 计算每个 CMD 出现的次数
cntLst = []
for lst_i in range(len(index_list_cmd)):
    cntLst.append(idxLstCmd_cnt[index_list_cmd[lst_i]])

# 合并 OPT 列
index_list_opt_idx = []

# 删除之前保存的文件
if os.path.isfile(useRateF):
    os.remove(useRateF)

# 遍历 CMD
for cmd_i in range(len(index_list_cmd)):
    # 获得 OPT 列的 index
    index_list_opt_idx = list(df['opt'][df['cmd'] == index_list_cmd[cmd_i]].index.values)

    index_list_opt = []

    # 遍历 OPT
    for opt_i in range(len(index_list_opt_idx)):
        try:
            index_list_opt.append(df.loc[int(index_list_opt_idx[opt_i]), 'opt'])
        except:
            print(index_list_cmd[cmd_i])
            print(index_list_opt_idx[opt_i])
            print(opt_i)

    # 列表转字符串
    str_idxLstOpt = ' '.join(index_list_opt)

    # 字符串转回列表
    lst_idxLstOpt = str_idxLstOpt.split(' ')

    # 计算 OPT 出现的比例
    for tag in sorted(set(lst_idxLstOpt), key=lst_idxLstOpt.index):
        with open(useRateF, 'a', encoding='utf-8_sig') as uf:
            uf.writelines(str(index_list_cmd[cmd_i]) + ',' + tag + ',' + str(lst_idxLstOpt.count(tag)/cntLst[cmd_i]))
            uf.writelines('\n')
登录后复制

这个脚本将读取 csv 文件,合并 opt 列,并输出每个 cmd 选项出现的比例。

以上就是如何从包含多列数据的 CSV 文件中合并特定列并计算各个选项出现的比例?的详细内容,更多请关注php中文网其它相关文章!

最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。

下载
相关标签:
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习
PHP中文网抖音号
发现有趣的

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号