Kafka
Simon.m
这个作者很懒,什么都没留下…
展开
-
阿里开源组件Canal+消息队列Kafka构建ElasticSearch索引方案(一)
Canal前言最近工作中需要全新的构建一套微信小程序,在技术选型上思考很久,设计上需要满足以下条件:如何不依赖旧系统的数据源对旧的系统侵入最小异构出ElasticSearch索引,以API方式给微信小程序提供数据基于以上条件限制,我请教有架构经验的同学,推荐了一款非常棒的开源组件Canal,这让我如获至宝,于是有了目前的全新架构。这篇文章我想带领大家了解一下 Canal 开源中间件如何进行工作,以及应用场景,以及最终实现后的工作流程图(初篇先引用Canal官方说明,让大家可以先有一个了解,后原创 2020-05-13 22:22:36 · 862 阅读 · 0 评论 -
Kafka与传统消息队列优缺点
KafkaKafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统。Java和Scala编程语言编写消费模式:pull高吞吐量、低延迟:kafka每秒可以处理几十万条消息,它的延迟最低只有几毫秒可扩展性:kafka集群支持热扩展持久性、可靠性:消息被持久化到本地磁盘(zero-c...原创 2020-03-29 17:34:29 · 2896 阅读 · 0 评论