航天信息股份有限公司 访客留言 管理档案

信用网址: 12807357.11315.com   

其他股份有限公司(上市) 成立历史第25 

一种基于ClickHouse的高可用Kong网关日志分析方法及系统【异议或纠错】

档案编号: CQ-094-7012-1546
档案文号:
专利权人: 申请人 
发布时间: 发布时间 
档案分类: 专利权 
分 类 号: 第H04L41/0631;H04L41/069;H04L41/0813;H04L41/0823类
授权状态: 已授权
档案内容: 本发明公开了一种基于ClickHouse的高可用Kong网关日志分析方法及系统,包括:Kong网关利用Kafka组件确定获取的原始日志信息对应的第一主题,并将原始日志信息传入对应的第一主题中;基于Flume的source组件实时消费所述第一主题,以确定第二主题;编写ClickHouse的config.xml,进行ClickHouse的Kafka引擎表的创建,进行所述第二主题的配置,以实时消费所述第二主题中的数据,并在ClickHouse集群中各个节点创建本地表、每个本地表对应的分布式表和对应Kafka引擎表的物化视图;在ClickHouse中使用SQL脚本语句,对存储在分布式表的数据按实际需求进行聚合和分析。本发明在ClickHouse的基础上,将Kafka、Flume、Zookeeper等组件进行合理地搭配组合,使Kong网关实时产生的数据能够在第一时间完成采集、存储与分析,帮助使用者及时看到数据分析结果。
附件下载:  (原始资料备查)

相关专利信息信息

评论

您需要登录后才可以发表评论,请 登录注册

打分

说明:
一、所有信息力求客观、真实:以上信息由全国各级政府职能部门、各行业协会(社团组织)、金融机构、主流媒体、信息主体或实名制下的广大消费者(包括交易对方、员工等)客观提供,不含有本征信平台的任何主观评价;
二、信息异议机制:欢迎大家对有异议的信息及时提出,我们将按照《绿盾全国企业征信管理办法》规定对异议进行核实、修正,确保客观、公平;
三、尊重发布者权益,永不"删贴":对于符合国家法律、法规和本征信平台规定的每一条信息,都将客观记录于企业信用档案,参与信用分值计算,并长期保存。

分享到:
绿盾在线
×
=合作留言=
绿盾业务合作
×
  • 马先生
    15652211315
  • 黄先生
    15652011315