操作日志生成方法、装置、计算机设备及存储介质-豆柴文库

您所在位置：网站首页 / 操作日志生成方法、装置、计算机设备及存储介质.pdf / 文档详情

免费试读已结束，剩余 10 页请下载文档后查看

10 金币

下载文档

/ 15

下载提示

如果您无法下载资料，请参考说明：

1、部分资料下载需要金币，请确保您的账户上有足够的金币

2、已购买过的文档，再次下载不重复扣费

3、资料包下载后请先用软件解压，在使用对应软件打开

文本预览

本发明属于数据处理领域,公开了操作日志生成方法、装置、计算机设备及存储介质。该方法包括将数据库中的binlog数据同步到Kafka队列;根据事务类型对数据库中每一事务对应的GTID进行类型标记,并添加事务所属信息得到事务信息,将事务信息存入Kafka队列;消费Kafka队列中的binlog数据,并将binlog数据存储于ClickHouse数据库;从Kafka队列中读取事务信息,根据事务信息中的GTID从ClickHouse数据库查询对应的binlog数据,并根据事务信息中的事务类型和binlog数据生成对应的操作日志元数据,存储于ClickHouse数据库;从ClickHouse数据库中读取操作日志元数据,并根据对应的事务类型进行展示。该方法相比现有技术本方法无需依赖于数据库的开发语言,实现操作日志与业务的解耦。