TubeMQ:腾讯开源的万亿级分布式消息中间件

腾讯rom  时间:2021-01-29  阅读:()

TubeMQ是腾讯在2013年自研的分布式消息中间件系统,专注服务大数据场景下海量数据的高性能存储和传输,经过近7年上万亿的海量数据沉淀,目前日均接入量超过25万亿条.
较之于众多明星的开源MQ组件,TubeMQ在海量实践(稳定性+性能)和低成本方面有着比较好的核心优势.
该项目于2019年11月03日正式进入Apache孵化器.
TubeMQ的性能从TubeMQ架构图可以很清晰的看到,作为分布式的消息中间件系统,Broker单节点的性能情况直接影响到集群总体的性能表现,即相同的节点数下Broker节点性能越高则TubeMQ的总体性能越强.
下表是根据我们多年的线上运营经验总结的典型场景:如果想及时了解Spark、Hadoop或者Hbase相关的文章,欢迎关注微信公共帐号:iteblog_hadoop通过对TubeMQ与Kafka进行对比测试分析,在1份写入2份并行消费的场景下,从机型、关键配置、系统测试结果数据的对比中我们可以很清晰的看到TubeMQ的性能情况,用大家熟悉的复仇者联盟角色类比,相当于是如下表的情况总结:1/10如果想及时了解Spark、Hadoop或者Hbase相关的文章,欢迎关注微信公共帐号:iteblog_hadoop总的来说:Kafka按照顺序写+顺序块读的模式实现,单实例下性能数据很强,但随着实例数增多,它的性能就呈现不稳定下降状态;TubeMQ采用顺序写+随机读的模式,即使在最大限制下系统仍可以做到长期稳定的1G以上的入流量,同时,结合服务端过滤过滤消费非常顺畅.

pacificrack7月美国便宜支持win VPS,$19.99/年,2G内存/1核/50gSSD/1T流量

pacificrack发布了7月最新vps优惠,新款促销便宜vps采用的是魔方管理,也就是PR-M系列。提一下有意思的是这次支持Windows server 2003、2008R2、2012R2、2016、2019、Windows 7、Windows 10,当然啦,常规Linux系统是必不可少的!1Gbps带宽、KVM虚拟、纯SSD raid10、自家QN机房洛杉矶数据中心...支持PayPal、...

青云互联:洛杉矶CN2弹性云限时七折,Cera机房三网CN2gia回程,13.3元/月起

青云互联怎么样?青云互联是一家成立于2020年6月份的主机服务商,致力于为用户提供高性价比稳定快速的主机托管服务,目前提供有美国免费主机、香港主机、香港服务器、美国云服务器,让您的网站高速、稳定运行。目前,美国洛杉矶cn2弹性云限时七折,美国cera机房三网CN2gia回程 13.3元/月起,可选Windows/可自定义配置。点击进入:青云互联官网青云互联优惠码:七折优惠码:dVRKp2tP (续...

ParkInHost - 俄罗斯VPS主机 抗投诉 55折,月付2.75欧元起

ParkInHost主机商是首次介绍到的主机商,这个商家是2013年的印度主机商,隶属于印度DiggDigital公司,主营业务有俄罗斯、荷兰、德国等机房的抗投诉虚拟主机、VPS主机和独立服务器。也看到商家的数据中心还有中国香港和美国、法国等,不过香港机房肯定不是直连的。根据曾经对于抗投诉外贸主机的了解,虽然ParkInHost以无视DMCA的抗投诉VPS和抗投诉服务器,但是,我们还是要做好数据备...

腾讯rom为你推荐
马云将从软银董事会辞职马云离职??什么原因?????免费阅读小说app哪个好什么小说软件好用又免费少儿英语哪个好少儿英语哪个好朗逸和速腾哪个好大众速腾与朗逸哪个好浮动利率和固定利率哪个好银行贷款是选固定利率好还是浮动利率录音软件哪个好什么录音软件最好用手机音乐播放器哪个好手机音乐播放器什么的好?苹果手机助手哪个好最新版iphone助手 PP助手好用吗?电陶炉和电磁炉哪个好电磁炉与电陶炉有啥区别,哪个更好些?行车记录仪哪个好最好的行车记录仪是什么牌子
万网域名代理 秒解服务器 evssl ibrs idc是什么 流媒体加速 环聊 腾讯总部在哪 阿里云手机官网 卡巴斯基官网下载 hostease fatcow windowsserver2008r2 卡巴斯基官方下载 vim 报警主机 长沙服务器托管 护卫神主机管理系统 qq空间申请关闭 好看的空间留言 更多