(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210316006.4 (22)申请日 2022.03.29 (71)申请人 河南经贸职业学院 地址 450046 河南省郑州市郑东 新区龙子 湖高校园区龙子湖北路 (72)发明人 余勇　刘丽萍　孙秋云　 (51)Int.Cl. G06F 16/215(2019.01) G06F 16/23(2019.01) G06F 16/26(2019.01) G06F 11/30(2006.01) G06F 11/32(2006.01) (54)发明名称 一种基于大数据安全精确分析与应用的方 法 (57)摘要 本发明涉及大数据安全技术领域， 具体为一 种基于大数据安全精确分析与应用的方法， 包括 大数据构架、 数据预处理模块、 数据告警处理模 块、 复审模块和人机交互模块， 所述大数据构架 采用多元兼容平台并利用计算引擎进行数据处 理， 所述数据预处理模块包括数据接入模块、 问 题预处理模块和数据整合模块， 该基于大数据安 全精确分析与应用的方法， 大数据架构的多元兼 容平台采用spark计算引擎， 兼容性好， 效率高， 稳定性好， 在进行数据问题筛分时通过二级筛 分， 保证筛分准确性， 设备可处理多源异构平台 数据， 构建可迭代平台， 实时更新， 减少人工筛 分， 提高筛分效率和筛分的准确性。 权利要求书1页 说明书3页 附图1页 CN 114780524 A 2022.07.22 CN 114780524 A 1.一种基于大数据安全精确分析与应用的方法， 包括大数据构架、 数据 预处理模块、 数 据告警处理模块、 复审模块和人机交互模块， 其特征在于： 所述大数据构架采用多 元兼容平 台并利用计算引擎进行数据 处理， 所述数据预处理模块包括数据接入模块、 问题预处理模 块和数据整合模块， 所述数据告警处理模块包括算法组件模块、 过滤筛选模块和训练模型 模块， 所述人机交互模块、 大数据构架、 数据预处理模块、 数据告警处理模块和复审模块依 次连接。 2.根据权利要求1所述的一种基于大数据安全精确分析与应用的方法， 其特征在于： 所 述数据接入模块、 问题预处理模块和数据整合模块依 次连接， 所述问题预处理模块包括威 胁情报预警、 漏洞情 报预警和资产情 报预警。 3.根据权利要求1所述的一种基于大数据安全精确分析与应用的方法， 其特征在于： 所 述算法组件 模块包括主流 算法模块和拓展算法模块。 4.根据权利要求1所述的一种基于大数据安全精确分析与应用的方法， 其特征在于： 所 述训练模型模块采用TensorFl ow模型。 5.根据权利要求1所述的一种基于大数据安全精确分析与应用的方法， 其特征在于： 所 述计算引擎采用spark计算引擎。 6.根据权利要求1所述的一种基于大数据安全精确分析与应用的方法， 其特征在于： 所 述人机交互模块包括基础平台模块和功能平台模块， 所述基础平台模块包括建模引导模块 和建模辅助模块， 所述功能平台模块包括模型数据平台、 数据资产平台、 结果可视化平台、 数据资源平台、 业 务建模平台、 案例示范平台、 自定义组件平台和系统管理平台。 7.根据权利要求1所述的一种基于大数据安全精确分析与应用的方法， 其特征在于， 包 括如下步骤： 步骤1、 大数据构架通过探针与各个平台的数据接入模块连接， 在接入数据的同时对数 据进行筛 选， 对问题数据进行整合并提交至数据告警处 理模块； 步骤2、 通过采用合适的主流算法对初步筛选的问题数据进行进一步的过滤筛选， 当遇 到没有合适的算法时， 采用拓展算法模块自行构建算法， 然后再对初步筛选的问题数据进 行进一步的过滤筛选， 并构建TensorFl ow模型进行深度学习； 步骤3、 将二级筛选过得数据进行复审模块复审， 复审模块包括其他模型算法复审和人 工复审； 步骤4、 将复审模块后的信息通过 结果可视化平台进行展示。权　利　要　求　书 1/1 页 2 CN 114780524 A 2一种基于大数据安全精确分析与应用的方 法 技术领域 [0001]本发明涉及大数据安全技术领域， 具体为一种基于大数据安全精确分析与应用的 方法。 背景技术 [0002]众所周知， 大数据时代来临， 各行业数据规模呈TB级增长， 拥有高价值数据 源的企 业在大数据产业链中占有至关重要的核心地 位。 [0003]在实现大数据集中后， 如何确保网络数据的完整性、 可用性和保密性， 不受到信息 泄漏和非法篡改的安全威胁影响， 已成为政府机构、 事业单位信息化健康发展所要考虑的 核心问题。 [0004]大数据安全的防护技术有： 数据资产梳理(敏感数据、 数据库等进行梳理)、 数据库 加密(核心数据存储加密)、 数据库安全运 维(防运维人员恶意和高危操作)、 数据脱 敏(敏感 数据匿名化)、 数据库漏扫(数据安全脆弱性检测)等 [0005]现有的大数据安全精确分析在使用中发现， 其兼容性差， 不具备机器学习， 深度学 习的功能， 依赖人工 筛选， 人工作量大， 工作效率低， 导 致其使用局限性较高。 发明内容 [0006](一)解决的技 术问题 [0007]针对现有技术的不足， 本发明提供了一种基于大数据安全精确分析与应用的方 法。 [0008](二)技术方案 [0009]为实现上述目的， 本发明提供如下技术方案： 一种基于大数据安全精确分析与应 用的方法， 包括大数据构架、 数据预处理模块、 数据告警处理模块、 复审模块和人机交互模 块， 所述大数据构架采用多元兼容平台并利用计算引擎进行数据 处理， 所述数据预处理模 块包括数据接入模块、 问题预处理模块和数据整合模块， 所述数据告警处理模块包括算法 组件模块、 过滤筛选模块和训练模型模块， 所述人机交互模块、 大数据构架、 数据预处理模 块、 数据告警处 理模块和复审模块依次连接 。 [0010]为了方便对数据进行预处理， 本 发明改进有， 所述数据接入模块、 问题预处理模块 和数据整合模块依 次连接， 所述问题预处理模块包括威胁情报预警、 漏洞情报预警和资产 情报预警。 [0011]为了保证对数据进行算法处理， 本发明改进有， 所述算法组件模块包括主流算法 模块和拓展算法模块。 [0012]进一步的， 为了方便温蒂的实现深度学习， 本发明改进有， 所述训练模型模块采用 TensorFl ow模型。 [0013]为了保证其兼容性， 高效性和 稳定性， 本发明改进有， 所述计算引擎采用sp ark计 算引擎。说　明　书 1/3 页 3 CN 114780524 A 3