热门标签
热门文章
- 1NPL预训练模型-GPT-3_npl大模型
- 2尼采：快乐的知识（上）_人言之未能言,人言之未敢言
- 38种常用的设计模式(9) —— 桥接模式bridge_桥接模式属于设计模式的哪种
- 4字符串常量池、class文件常量池和运行时常量池_类常量池、运行时常量池、字符串常量池
- 5Sarcasm detection论文解析 |利用分层融合模型在 twitter 中进行多模态讽刺检测_只涉及文本的sarcasm detection的最新论文
- 6centos7.9 安装使用kafka_centos7.9 安装kafka
- 7JDBC利用事务处理实现简单增删改查的详解及工具类的创建_如何启用事物,使用事物实现增删改查
- 8YOLOv5 分类模型的预处理（1） Resize 和 CenterCrop_yolov5 resize
- 9从外包到转岗华为正式员工月薪17K，这一百多天的心酸谁能懂.....
- 10Android Studio 实现app门户界面框架设计（移动开发技术第一次作业）_andriod studio哪个项目设计app局面
当前位置: article > 正文
Debezium系列之：基于Debezium实现高可靠性高实时性秒级别的数据响应系统_数据库实时响应
作者：我家小花儿 | 2024-05-17 13:29:12
赞
踩
数据库实时响应
一、高可靠性高实时性系统的需求背景
- 用户在APP更新数据后，数据插入mysql数据库后，debezium采集数据到Kafka，下游flink消费kafka topic中的数据后，插入到ElasticSearch数据库或Starrocks数据库后，业务能够在系统界面立即查询到用户的更新数据，整个过程要能够实现秒级别的响应。
- 对系统的要求是24小时高可靠性高实时性实现数据处理的秒级别响应。
二、具体实现的技术方案
-
Debezium基于Kafka Connect集群实现的数据采集会受到多种因素影响，例如kafka connect重平衡等，因此存在无法保证系统24小时实现数据处理的秒级别响应。
-
因此，需要考虑新的技术方案，这里有两种技术方案可以考虑：
声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/我家小花儿/article/detail/583787
推荐阅读
相关标签
