国家标准网
文库搜索
切换导航
首页
频道
仅15元无限下载
联系我们
首页
仅15元无限下载
联系我们
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211218907.6 (22)申请日 2022.10.07 (71)申请人 北京中安星云软件技 术有限公司 地址 100000 北京市海淀区创业路8号5号 楼4层5-6-401 (72)发明人 唐更新 李希伟 宋辉 赵卫国 (74)专利代理 机构 成都鱼爪智云知识产权代理 有限公司 513 08 专利代理师 刘爱平 (51)Int.Cl. G06F 16/18(2019.01) G06F 16/174(2019.01) G06K 9/62(2022.01) G06F 40/205(2020.01) G06Q 10/06(2012.01) (54)发明名称 一种基于flink流式处理的SOM数据库动态 风险感知的实现方法 (57)摘要 本发明提出了一种基于flink流式处理的 SOM数据库动态风险感知的实现方法, 涉及数据 库技术领域。 该方法包括: 获取sql请求报文数 据, 并对sql请求报文数据进行解析, 以抽取数据 库访问相关日志, 同时对数据库访问相关日志进 行压缩存放。 利用Java程序对压缩存放的数据库 访问相关日志解析后, 放入kafka。 利用flink流 式处理从kafka中抽取多个访 问数据组, 并对各 个访问数据组进行计算, 得到各种维度的访问 值。 将所有访问值发送至SOM模型中进行分类, 得 到分类结果。 根据分类结果, 调用对应的告警或 者拦截操作。 通过SOM模型接收flink计算完成的 数据, 同时映射最新分类结果, 并迅速生成处置 方案进行风险处 理。 权利要求书2页 说明书9页 附图3页 CN 115510014 A 2022.12.23 CN 115510014 A 1.一种基于flink流式处理的SOM数据库动态风 险感知的实现方法, 其特征在于, 包括 如下步骤: 获取sql请求报文数据, 并对所述sql请求报文数据进行解析, 以抽取数据库访问相 关 日志, 同时对所述数据库访问相关日志进行压缩 存放; 利用Java程序对压缩 存放的数据库访问相关日志解析后, 放入kafka; 利用flink流式处理从kafka中抽 取多个访问数据组, 并对各个访问数据组进行计算, 得到各种维度的访问值, 其中, 任一访问数据组包 含至少一个访问数据; 将所有访问值发送至SOM模型中进行分类, 得到分类结果; 根据所述分类结果, 调用对应的告警或者 拦截操作。 2.根据权利要求1所述的基于flink流式处理的SOM数据库动态风 险感知的实现方法, 其特征在于, 所述 获取sql请求报文数据, 并对 所述sql请求报文 数据进行解析, 以抽取数据 库访问相关日志, 同时对所述数据库访问相关日志进行压缩 存放的步骤 包括: 对所述sql请求报文数据进行分析, 根据sql协议确定待解析sql报文; 基于sql协议, 对所述待解析sql报文 进行解析, 得到解析后的数据库访问相关日志; 按照字节码的方式, 对所述数据库访问相关日志进行压缩 存放。 3.根据权利要求1所述的基于flink流式处理的SOM数据库动态风 险感知的实现方法, 其特征在于, 所述利用flink流式处理从kafka中抽取多个访问数据组, 并对各个访问数据 组进行计算, 得到各种维度的访问值的步骤 包括: 从kafka中抽取一个访问数据组, 利用flink框架的内置函数计算该访问数据组对应的 各种维度的访问值; 利用flink的滑动窗口, 按照预设间隔时间再次从kafka中抽取访问数据组, 以计算预 设时间段内的各种维度的访问值。 4.根据权利要求1所述的基于flink流式处理的SOM数据库动态风 险感知的实现方法, 其特征在于, 所述从kafka中抽取一个访问数据组, 利用flink框架的内置函数计算该访问 数据组对应的各种维度的访问值的步骤 包括: 基于checkpoint机制, 存放该访问数据组对应的各种维度的访问值后, 再 次从kafka中 抽取访问数据组。 5.根据权利要求3所述的基于flink流式处理的SOM数据库动态风 险感知的实现方法, 其特征在于, 所述fl ink框架的内置函数至少包括count函数和sum函数中的一种或多种。 6.根据权利要求1所述的基于flink流式处理的SOM数据库动态风 险感知的实现方法, 其特征在于, 所述利用fl ink流式处理从kafka 中抽取多个访问数据组的步骤 包括: flink通过拆分的方式从kafka 中抽取访问数据组。 7.根据权利要求1所述的基于flink流式处理的SOM数据库动态风 险感知的实现方法, 其特征在于, 对所述数据库访问相关日志进行压缩 存放的步骤 包括: 将所述数据库访问相关日志压缩放入预置文件中, 当所述预置文件的大小达到预设大 小时, 重新创建一个新的文件。 8.根据权利要求1所述的基于flink流式处理的SOM数据库动态风 险感知的实现方法, 其特征在于, 所述访问值至少包括select请求数量、 update请求数量、 alter请求数量、 insert请求数量、 delete请求数量、 每一个客户端mac地址的sql请求数量和每一个客户端权 利 要 求 书 1/2 页 2 CN 115510014 A 2ip的请求数量中的一种或多种。 9.一种电子设备, 其特 征在于, 包括: 存储器, 用于存 储一个或多个程序; 处理器; 当所述一个或多个程序被所述处理器执行时, 实现如权利要求1 ‑8中任一项所述的方 法。 10.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 该计算机程序被 处理器执行时实现如权利要求1 ‑8中任一项所述的方法。权 利 要 求 书 2/2 页 3 CN 115510014 A 3
专利 一种基于flink流式处理的SOM数据库动态风险感知的实现方法
文档预览
中文文档
15 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 SC 于
2024-02-18 22:25:30
上传分享
举报
下载
原文档
(832.7 KB)
分享
友情链接
T-GDAQI 013—2019 生物质气化炉热工性能试验规程.pdf
信通院 白皮书-移动应用-App数据安全与个人信息保护白皮书-1225.pdf
DB12-T 1220-2023 固定资产投资项目节能后评价规范 天津市.pdf
GB-T 17694-2009 地理信息 术语.pdf
DB-T 39-2010 地震台网设计技术要求 重力观测网.pdf
GB-T 4734-2022 日用陶瓷材料及制品化学分析方法.pdf
系统安全等级保护备案表.docx
GB-T 10647-2008 饲料工业术语.pdf
GB-T 4086.2-1983 统计分布数值表 χ2分布.pdf
ISO IEC 27018-2019.pdf
GB-T 36633-2018 信息安全技术 网络用户身份鉴别技术指南.pdf
GB-T 20520-2006 信息安全技术 公钥基础设施 时间戳规范.pdf
DB43-T 1636-2019 法定计量检定机构服务规范 湖南省.pdf
GB-T 10233-2016 低压成套开关设备和电控设备基本试验方法.pdf
GB-T 41260-2022 数字化车间信息安全要求.pdf
众城智库 信创产业发展报告 2021.pdf
GB 21555-2008 烟花爆竹 双响(升空类产品).pdf
GB-T 9491-2021 锡焊用助焊剂.pdf
GB-T 39637-2020 金属和合金的腐蚀 土壤环境腐蚀性分类.pdf
DB65-T 4458-2021 南疆盐碱地土壤调理剂施用技术规程 新疆维吾尔自治区.pdf
1
/
15
评价文档
赞助2.5元 点击下载(832.7 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
点击进入官方售后微信群
支付 完成后 如未跳转 点击这里下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。