关于优化IDS入侵检测系统告警误报的措施

P粉084495128
发布: 2025-07-18 15:10:59
原创
977人浏览过
由于网络环境的复杂性和数据的海量性,多数安全产品都面临着误报率较高的问题,这些不可避免的误报不仅会消耗一定的资源和时间进行处理,还会降低安全分析人员对告警的铭感度,分散其处理真正安全威胁的精力。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

关于优化ids入侵检测系统告警误报的措施 - php中文网

背景

由于网络环境的复杂性和数据的海量性,多数安全产品都面临着误报率较高的问题,这些不可避免的误报不仅会消耗一定的资源和时间进行处理,还会降低安全分析人员对告警的铭感度,分散其处理真正安全威胁的精力

意义

本项目意在优化IDS入侵检测系统的算法,使其降低误报率,现提供如下标准化IDS日志数据,其中参有人工标注报错,通过对数据的挖掘训练找到其中最优的解决算法

数据分析

    1. 对训练数据集各字段进行统计分析,包括字段类型、缺失值情况 对于这样的数据我们认为可能不影响训练的结果,对于这样的特征可进行忽略或写0,使用data.info()查看数据中有字符型数据和浮点型数据还有汉字,catboost可以完美预处理类似数据。关于优化IDS入侵检测系统告警误报的措施 - php中文网                    
  • 3.其中发现srcAddress字段的分布情况差异很大,因此断定该字段是一个特别重要的特征关于优化IDS入侵检测系统告警误报的措施 - php中文网            
In [1]
!pip install catboost ##下载catboost算法模块
登录后复制
   

1.特征工程

对于非字符字段我们使用one-hot编码

AGI-Eval评测社区
AGI-Eval评测社区

AI大模型评测社区

AGI-Eval评测社区 63
查看详情 AGI-Eval评测社区
In [ ]
##categorical_features_indices = np.where(X_train.dtypes != np.float)[0] #预处理
登录后复制
   

2.模型训练

In [3]
# -*- coding: utf-8 -*-import pandas as pdimport numpy as npimport csvimport joblibfrom catboost import CatBoostClassifierfrom sklearn.model_selection import train_test_splitdef train_func(train_path):#请填写训练代码
    #数据导入
    data=pd.read_csv(train_path,encoding='utf-8')
    y_train = data.label
    data = data.fillna(0)
    
    X_train, X_validation, y_train, y_validation = train_test_split(data.iloc[:,:-1],data.iloc[:,-1], random_state=1234) #分割
    categorical_features_indices = np.where(X_train.dtypes != np.float)[0] #预处理
    #定义模型
    model = CatBoostClassifier(iterations=807, 
                               depth = 6,
                               cat_features = categorical_features_indices,
                               loss_function = "Logloss",
                               l2_leaf_reg =  4.0, 
                               learning_rate = 0.1501330270208967, 
                               border_count = 217,
                               thread_count = 43,
                               random_strength = 3.164261174069972)
    
    
    model.fit(X_train,y_train)#训练模型
    #导出模型
    joblib.dump(filename='my_model.kpl',value=model)
    joblib.dump(filename='..\predict_code\my_model.kpl',value=model)    passif __name__ == '__main__':
    train_path = '/home/aistudio/data/train.csv'
    train_func(train_path)
登录后复制
   

3. 特征重要性

通过查看特征重要性我们发现单一数据对于结果的影响 关于优化IDS入侵检测系统告警误报的措施 - php中文网        

模型验证:将训练集以0.75:0.25的比例划分为训练集和验证集,在验证集上的F1分数为:0.9925

4. 模型预测

In [6]
# -*- coding: utf-8 -*-import numpy as npimport pandas as pdimport joblibdef test_func(test_path,save_path):# 请填写测试代码
    test = pd.read_csv(test_path,encoding='utf-8')    # 选手不得改变格式,测试代码跑不通分数以零算
    test = test.fillna(0)
    
    model = joblib.load(filename="/home/aistudio/my_model.kpl")
    x=test
    t=model.predict(x)    # #####选手填写测试集处理逻辑,在指定文件夹下生成可提交的csv文件
    data_df = pd.DataFrame(t)
    submission = test[['eventId']]
    submission['label'] = data_df
    submission.to_csv(save_path + 'DKsec_ad_submission_1030.csv',index = False,encoding='utf-8')    # demo#if __name__ == '__main__':
    test_path = '/home/aistudio/data/test_1.csv'
    sava_path = '/home/aistudio/result/'
    test_func(test_path,sava_path)
登录后复制
   

以上就是关于优化IDS入侵检测系统告警误报的措施的详细内容,更多请关注php中文网其它相关文章!

最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。

下载
来源:php中文网
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
开源免费商场系统广告
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号