卡夫卡 - 镜像从一台服务器到另一台服务器
问题描述:
我试图将卡夫卡实时数据从一台服务器镜像到另一台服务器。卡夫卡 - 镜像从一台服务器到另一台服务器
在Apache网站上找到一个名为'Mirror Maker'的工具。
[阿帕奇卡夫卡镜象设备] [1] https://cwiki.apache.org/confluence/pages/viewpage.action?pageId=27846330#Kafkamirroring(MirrorMaker)-Howtosetupamirror
但描述过于简单,无需的consumer.config & producer.config文件的配置的细节。
如何部署以正确的配置文件,该工具用于镜像2和卡夫卡服务器之间的数据:
实时话题转移
容错下不稳定的网络
任何其他可能的方式来实现这一点也非常受欢迎。
感谢。
答
Apache的Mirror Maker是一个相对简单的工具,这就是为什么你阅读的所有文档看起来并不令人难以置信。没有太多的信息要提供。它所做的只是生成来自集群A的数据并消耗到集群B.镜像制造商确实提供实时主题传输,但就稳定性而言,您可能需要查看第三方工具,如https://eng.uber.com/ureplicator/。
您是否阅读过此文档:http://kafka.apache.org/documentation#basic_ops_mirror_maker –
还有:http://docs.confluent.io/current/kafka/deployment.html#mirroring-data-between-集群 –
@ MatthiasJ.Sax是的,我读过这些。但是与上面提供的URL相比,没有太大的区别?您提供的URL称为shell脚本内的镜像工具,并直接调用它。 而我的真实点是2.在网络不稳定的情况下容错。不管怎么说,还是要谢谢你。 – Val