TubeMQ:腾讯开源的万亿级分布式消息中间件

腾讯rom 时间:2021-01-29 阅读:()

TubeMQ是腾讯在2013年自研的分布式消息中间件系统,专注服务大数据场景下海量数据的高性能存储和传输,经过近7年上万亿的海量数据沉淀,目前日均接入量超过25万亿条.
较之于众多明星的开源MQ组件,TubeMQ在海量实践(稳定性+性能)和低成本方面有着比较好的核心优势.
该项目于2019年11月03日正式进入Apache孵化器.
TubeMQ的性能从TubeMQ架构图可以很清晰的看到,作为分布式的消息中间件系统,Broker单节点的性能情况直接影响到集群总体的性能表现,即相同的节点数下Broker节点性能越高则TubeMQ的总体性能越强.
下表是根据我们多年的线上运营经验总结的典型场景:如果想及时了解Spark、Hadoop或者Hbase相关的文章,欢迎关注微信公共帐号:iteblog_hadoop通过对TubeMQ与Kafka进行对比测试分析,在1份写入2份并行消费的场景下,从机型、关键配置、系统测试结果数据的对比中我们可以很清晰的看到TubeMQ的性能情况,用大家熟悉的复仇者联盟角色类比,相当于是如下表的情况总结:1/10如果想及时了解Spark、Hadoop或者Hbase相关的文章,欢迎关注微信公共帐号:iteblog_hadoop总的来说:Kafka按照顺序写+顺序块读的模式实现,单实例下性能数据很强,但随着实例数增多,它的性能就呈现不稳定下降状态;TubeMQ采用顺序写+随机读的模式,即使在最大限制下系统仍可以做到长期稳定的1G以上的入流量,同时,结合服务端过滤过滤消费非常顺畅.

展开全文

TubeMQ:腾讯开源的万亿级分布式消息中间件相关文档

投标腾讯rom

rysrc腾讯rom

Hardware腾讯rom

关注"ahsydwks"微信公众号回复"题库"可获得海量习题

2014年软件产品登记名单(8月第二批)

Xo腾讯rom

内存卡数据恢复软件急需一个储存卡数据恢复软件美国10次啦导航如何才能摧毁美国的Gps导航系统视频制作软件哪个好制作视频用哪个软件比较好浮动利率和固定利率哪个好浮动利率房贷与固定利率房贷比较购房者如何选择宝来和朗逸哪个好宝来和朗逸哪个好播放器哪个好安卓手机视频播放器哪个好点 qq空间登录不上qq空间登不进去怎么办如何增加百度收录如何提高百度的收录数量广东联通炫铃在客户端酷音铃声(个性化铃音业务）里面设置广东联通炫铃需要开通的业务及资费？什么快递最便宜最便宜的是什么快递主机屋香港ufo photonvps 安云加速器 163网 tightvnc panel1 免费mysql 圣诞促销日本bb瘦 seednet 免费phpmysql空间重庆双线服务器托管 gtt 电信主机双12 服务器是干什么用的英雄联盟台服官网阿里云手机官网镇江高防更多

TubeMQ:腾讯开源的万亿级分布式消息中间件

提速啦母鸡 E5 128G 61IP 1200元

Sparkedhost（$8/月）美国迈阿密AMD Ryzen高性能VPS;免费100G高防

HostYun（22元/月）全场88折优惠香港原生IP大带宽