TubeMQ:腾讯开源的万亿级分布式消息中间件

腾讯rom  时间:2021-01-29  阅读:()

TubeMQ是腾讯在2013年自研的分布式消息中间件系统,专注服务大数据场景下海量数据的高性能存储和传输,经过近7年上万亿的海量数据沉淀,目前日均接入量超过25万亿条.
较之于众多明星的开源MQ组件,TubeMQ在海量实践(稳定性+性能)和低成本方面有着比较好的核心优势.
该项目于2019年11月03日正式进入Apache孵化器.
TubeMQ的性能从TubeMQ架构图可以很清晰的看到,作为分布式的消息中间件系统,Broker单节点的性能情况直接影响到集群总体的性能表现,即相同的节点数下Broker节点性能越高则TubeMQ的总体性能越强.
下表是根据我们多年的线上运营经验总结的典型场景:如果想及时了解Spark、Hadoop或者Hbase相关的文章,欢迎关注微信公共帐号:iteblog_hadoop通过对TubeMQ与Kafka进行对比测试分析,在1份写入2份并行消费的场景下,从机型、关键配置、系统测试结果数据的对比中我们可以很清晰的看到TubeMQ的性能情况,用大家熟悉的复仇者联盟角色类比,相当于是如下表的情况总结:1/10如果想及时了解Spark、Hadoop或者Hbase相关的文章,欢迎关注微信公共帐号:iteblog_hadoop总的来说:Kafka按照顺序写+顺序块读的模式实现,单实例下性能数据很强,但随着实例数增多,它的性能就呈现不稳定下降状态;TubeMQ采用顺序写+随机读的模式,即使在最大限制下系统仍可以做到长期稳定的1G以上的入流量,同时,结合服务端过滤过滤消费非常顺畅.

tmhhost:暑假快乐,全高端线路,VPS直接8折,200G高防,美国gia日本软银韩国cn2香港cn2大带宽

tmhhost为2021年暑假开启了全场大促销,全部都是高端线路的VPS,速度快有保障。美国洛杉矶CN2 GIA+200G高防、洛杉矶三网CN2 GIA、洛杉矶CERA机房CN2 GIA,日本软银(100M带宽)、香港BGP直连200M带宽、香港三网CN2 GIA、韩国双向CN2。本次活动结束于8月31日。官方网站:https://www.tmhhost.com8折优惠码:TMH-SUMMER日本...

DediPath($1.40),OpenVZ架构 1GB内存

DediPath 商家成立时间也不过三五年,商家提供的云服务器产品有包括KVM和OPENVZ架构的VPS主机。翻看前面的文章有几次提到这个商家其中机房还是比较多的。其实对于OPENVZ架构的VPS主机以前我们是遇到比较多,只不过这几年很多商家都陆续的全部用KVM和XEN架构替代。这次DediPath商家有基于OPENVZ架构提供低价的VPS主机。这次四折的促销活动不包括512MB内存方案。第一、D...

CheapWindowsVPS:7个机房可选全场5折,1Gbps不限流量每月4.5美元

CheapWindowsVPS是一家成立于2007年的老牌国外主机商,顾名思义,一个提供便宜的Windows系统VPS主机(同样也支持安装Linux系列的哈)的商家,可选数据中心包括美国洛杉矶、达拉斯、芝加哥、纽约、英国伦敦、法国、新加坡等等,目前商家针对VPS主机推出5折优惠码,优惠后最低4GB内存套餐月付仅4.5美元。下面列出几款VPS主机配置信息。CPU:2cores内存:4GB硬盘:60G...

腾讯rom为你推荐
免费送q币活动那些免费送Q币的活动是不是假的啊???莫代尔和纯棉哪个好莫代尔和纯棉的区别,莫代尔和纯棉哪个好江门旅游景点哪个好玩的地方江门蓬江区有什么地方好玩?江门旅游景点哪个好玩的地方江门有那个地方好玩呢压缩软件哪个好压缩软件那个最好,360压缩软件好?还是快压、好压软件好呢?少儿英语哪个好少儿英语哪种的好?红茶和绿茶哪个好红茶和绿茶哪个好?网络机顶盒哪个好什么牌子的网络机顶盒最好美国国际集团全球500强有哪些企业是美国的网页qq空间登录网页查看qq空间
已备案域名出售 webhosting 香港主机 iisphpmysql 美国php空间 腾讯云分析 howfile 网站木马检测工具 什么是服务器托管 广州服务器 电信主机 免费网页申请 常州联通宽带 谷歌台湾 中国联通宽带测速 测速电信 服务器硬件配置 服务器托管价格 开心online phpinfo 更多