伍佰目录 短网址
  当前位置:海洋目录网 » 站长资讯 » 互联网资讯 » 文章详细 订阅RssFeed

中通消息服务运维平台实践

来源:本站原创 浏览:109次 时间:2021-08-06

儿童电影排行榜,河北霸州,工作总结及规划

  跟着互联网买卖的发展,中通快递每天有数千万的运单在各个环节运转,每个环节都有对应的多套买卖体系来支撑,买卖体系之间上下游关系较为密切,从上游的客户订单到下游转运、结算、阐发等每个环节都离不开消息中间件,它主要解决了体系之间的耦合、买卖的削峰填谷、异步通讯、内容同步和冗余存储等等功能需求,是现有体系架构中弗成或缺的紧张一环。

  在2015年中通起头大量采用消息中间解决一些特定的问题,跟着买卖的增长,各环节有了更邃密化的产物,我们消息中间件的内容体量越来越大,集群规模越来越多,中间件也越来越多样化,同一管理这些消息中间件变得尤为紧张,因此我们研发了中通消息中间件平台 ZMS,主要基于 RocketMQ+Kafka 两套业界对照主流消息中间件,供应了自动化布置、主题/消费者的申请审核、同一的SDK、管理掌握台、监指控警到无感知扩容迁移等一系列运维的功能,眼前ZMS管理了17个集群,包含 7个 Kafka 集群和 10个 RocketMQ 集群,主题近2000个,消费组3000+,消息存储空间跨越140TB,日均消息流转更是到达千亿级别。

  ZMS 从最初的版本演进到如今根基根据每个阶段的痛点分歧,解决分歧的问题。其发展阶段也许分为如下三个维度展开。

  

  经公司内部评估,ZMS 已经成长为一套相对成熟的消息中间件云平台化解决方案,能够正式对外开放,与社会上的同业共同打磨,故决意于2020年5月26号正式开源,将代码推送到 github 仓库。

  ★ 仓库地址:

  https://github.com/ZTO-Express/zms

  01 自动化运维与布置

  自动化运维布置,主要是方便运维人员能够快速通过ZMS平台向导式初始化一个集群,其架构设计如下图所示。

  

  zms-portal:zms 管理后台,可同时管理多个情况的资源,包含:添加主机、服务,消息集群状态监控、配置消息集群告警规则,消息集群资源管理等。

  备注:所谓的情况我们能够简洁当作是开发情况、测试情况、高保真情况、生产情况。

  在每台呆板上首先必要安装 zms-agent (代理服务)、supervisor 等根蒂组件,为了方便运维,ZMS 供应了一键初始化主机的剧本,自动在目标主机上安装根蒂服务组件,其操纵流程如下:

  

  运维人员只必要去指定的呆板上复制上述下令即可。这样实现的目的是 zms-portal 无需管理宿主呆板的用户名、暗码等敏感信息,做到平安可控。zms 能自动感知安装了 zms-agent 的呆板并将其纳入 zms-portal 的管理运维系统。

  在 ZMS 中我们同一将 Kafka、RocketMQ、ZK、监控指标采集、监指控警等同一当作是一个服务,在分歧的情况中能够选择性的安装,其操纵如下图所示:

  

  02 同一的客户端 SDK

  基于中通买卖的特点项目中主要采用了 Kafka 与 RocketMQ 两种分歧的消息中间件,如果买卖方在本身项目中既要使用 Kafka 的消息中间件,又要使用 RocketMQ 的消息中间件,对于消息中间件的使用来说要求非常高,因为必要认识这些相似又分歧的 API,分别认识其配置参数与其代表的寄义,因此为买卖方供应同一的 API 显得尤为紧张与急迫。

本文地址:http://www.wbwb.net/bianchengyuyan/213414.html 转载请注明出处!

  推荐站点

  • At-lib分类目录At-lib分类目录

    At-lib网站分类目录汇集全国所有高质量网站,是中国权威的中文网站分类目录,给站长提供免费网址目录提交收录和推荐最新最全的优秀网站大全是名站导航之家

    www.at-lib.cn
  • 中国链接目录中国链接目录

    中国链接目录简称链接目录,是收录优秀网站和淘宝网店的网站分类目录,为您提供优质的网址导航服务,也是网店进行收录推广,站长免费推广网站、加快百度收录、增加友情链接和网站外链的平台。

    www.cnlink.org
  • 35目录网35目录网

    35目录免费收录各类优秀网站,全力打造互动式网站目录,提供网站分类目录检索,关键字搜索功能。欢迎您向35目录推荐、提交优秀网站。

    www.35mulu.com
  • 就要爱网站目录就要爱网站目录

    就要爱网站目录,按主题和类别列出网站。所有提交的网站都经过人工审查,确保质量和无垃圾邮件的结果。

    www.912219.com
  • 伍佰目录伍佰目录

    伍佰网站目录免费收录各类优秀网站,全力打造互动式网站目录,提供网站分类目录检索,关键字搜索功能。欢迎您向伍佰目录推荐、提交优秀网站。

    www.wbwb.net