嘉为科技吴文豪重塑运维系统,跨越烟囱式建设的陷阱
企业运维系统建设经过多年演变,从以商业软件为主,到开源软件的百花齐放,极大的降低了成本,但是在建设过程中,却非常容易落入到烟囱式建设的陷阱,因此如何跨越它,成为了众多企业面临的难题。
今天,我将从嘉为科技WeOps产品研发部负责人的角度,和大家共同探讨如何重塑运维系统,跨越烟囱式建设的陷阱。接下来我将分为"开源的崛起"、"没有银弹"、"百花齐放"以及"融合联动,重塑运维工具"四部分来逐一详细介绍,希望能给大家带来一些思路与启发。
以下内容整理自:嘉为科技WeOps产品研发部负责人 吴文豪 于嘉为蓝鲸2022研运一体创新峰会的精彩分享——《重塑运维系统:跨越烟囱式建设的陷阱》。欢迎感兴趣的读者 关注公众号:嘉为蓝鲸 ,查看演讲回放 和下载演讲PPT 。
01
开源的崛起
在我刚进入运维软件开发领域的时候,开源软件并不像现在这么火热,绝大多数的企业使用的都是像Tivoli、微软的System Center这类商业级闭源产品,在当时,我们没法想象,一个非商业级的,没有经过大教堂式洗礼的软件能够像今天一样,给我们的整个行业带来如此大的冲击。
之后在开源运动崛起的大背景下,各领域的运维工具,都出现了优秀的挑战者,他们凭借着社区的力量大量吸收用户,飞速的迭代,对老牌的闭源商业软件发起了挑战。例如基础监控领域的Zabbix、自动化运维领域的Ansible、APM领域的SkyWalking。
开源运维软件的兴起为企业带来了诸多红利,使得建设成本高、技术黑盒、厂商捆绑等长期困扰我们的问题得到了很好的解决:
1.建设成本变低
曾经的闭源商业级产品大多都价格不菲,而开源软件免费使用的模式,使得运维系统首次建设成本得到了数十倍的下降。
2.技术变得透明
开源软件不仅免费,同时还开放源码,将技术完全透明化,我们可以看到开源软件的实现原理,并自行修改源码的逻辑,满足个性化业务需求。
3.避免厂商绑定
在源码完全开放的背景下,我们不再被厂商捆绑,并拥有了工具软件完全的掌控权。
02
没有银弹
神话中,银弹就是可以让强大的狼人被一击毙命的武器。而这里的银弹,指的是一招制敌,提高数量级的效能水平,而不只是效能有明显改观。
我们期望的运维系统,是能够通过开源运维软件的诸多优势,快速,低成本的建设一个个帮助我们更好保障业务连续性的工厂,工厂之间通过数据网关、业务总线、数据湖等方式进行联动,帮助我们更好的为业务提供服务。
例如:我们可以在收到告警之后,看到产生这个告警背后的指标和现场日志,告诉我们会影响到哪些业务,他们重不重要,我们应该通知谁。我们接收到工单后,能够快速的将工单对应的知识,可能使用到的运维脚本快速的找到,在我们尝试执行恢复动作之后,能够看到关联的指标、日志是否已经恢复正常。
可惜的是,没有银弹。而在实际实践过程中,我们也很容易就建设起一套一套的烟囱,这些运维系统之间并没有什么联系。例如:我们想让Zabbix的监控数据、ELK的日志数据、Data Gerry的CMDB数据组合在一起使用,我们将不得不在他们之上,重新搭建一套新的系统。
除了上述问题外,开源技术还给我们带来了许多新的考验:
逐渐黑盒化
由于大量开源项目缺少体系化的培训与规范的约束,随着一些关键人员的变动,整个运维体系的某些元素会出现黑盒化。
维护成本提升
由于开发框架多种多样,以及Golang、Ruby、PHP、Java等各种技术栈,开源漏洞,系统Bug等问题,虽然开源软件让企业的建设成本降低,但维护成本却急速提升。
数据联动困难
开源软件解决了单一领域的问题,但是没法很好的让数据进行联动,面向业务解决问题,需要独立开发一套软件来进行对接,过程中会出现非常多的API、表结构兼容性问题。
除此之外,随着新技术栈的出现,企业运维变得更加困难。我们不仅需要面对混合云、Serveless、AI、边缘计算等等新的技术,还要面对DevOps文化带来的研发运维体系变革。
企业的运维团队不仅需要思考对内保障稳定运行,为业务提供快速问题定位的能力、资产梳理的能力、标准化运维的能力等。对外要为组织提供IT价值帮助组织业务的发展,将IT能力自助化,提升组织的运转效率,将运维数据转变成能够帮助组织业务发展的运营数据等。
03
百花齐放
随着算力的突破,Deep Learning迎来了新的春天,大家的想法逐渐变得一致,我们都在思考,能不能在几乎不做改动的情况下,使用AIOps的方法,尽可能多的解决问题,例如把告警根因分析解决掉。
但是真正落地过AIOPS的企业,都会在开始的时候就碰到了困难,算法工程师会告诉我们,他们需要完整的数据(Log、Metric、Event、资产关联信息......)、规整的数据(清洗好的运维数据)以及先验知识(具体业务领域的知识),我们甚至没法用合适的成本解决告警根因分析这个场景。
于是我们开始思考,这可能并不是AIOPS这项技术的问题,而是烟囱式运维系统的设计与不断涌现的业务诉求之间的矛盾。
与此同时,在大洋的彼岸,有一批新兴的闭源软件企业开始用全新的架构,来重新塑造运维系统,例如我们耳熟能详的Splunk、Datadog、MoogSoft。
以Splunk为例,Splunk设计了一个强大的非结构化数据分析引擎,将所有的运维数据都存放在了一起,让上层的各个SaaS在一个统一的数据源上进行演进,出现了如UEBA、ITSI、SOAR、MLToolkit等等的SaaS,运维系统的建设逐渐迎来了百花齐放的时代。
04
融合联动,重塑运维工具
在商业级闭源软件再次崛起的过程中,开源社区也没有停下自己的脚步,蓝鲸平台通过构建PaaS底座,在设计之初就拒绝烟囱建设的思路,为我们提供了重塑运维系统的一种选择。
同时蓝鲸配套的社区、认证体系,让大家在同一套规则下进行SaaS的演进,使得我们可以避免运维系统的逐渐黑箱化。
而嘉为科技WeOps团队在社区版蓝鲸平台的基础上,进行了整合封装、提供了企业级的必备功能,并且提供了培训赋能、系统维保等服务。目标是帮助中型企业用最合适的成本,获得企业级的能力以及支撑,更好的应对新的IT环境与文化。
05
应对变化,伴随成长
WeOps规划了三个大的版本:
3.0(融合联动)
3.0 系列我们以融合联动为主题,主要提供:基础监控、资产管理、自动化运维以及运营服务等能力。
4.0(可观测)
4.0 系列将提供日志分析、APM、Log、RUM等板块。
5.0(智能化)
5.0 系列将通过Al技术,使整个运维效能得到更大幅度地提升。
WeOps采用订阅模式,帮助企业渐进使用,用更低的成本去获得一套一体化运维平台,渐进式模式可以使得企业根据自身需求,使用部分模块,提供更好的现金流保障。企业不再需要一次性投入大量成本进行运维系统的建设,使用较低成本与产品共同成长。而企业也可快速通过低成本去检验产品与自身的适配性,避免试错高风险。
WeOps产品始终坚持开源共建的思路,我们会不断对WeOps板块进行持续性开源,与蓝鲸社区进行生态共建,更好地回馈社区。
如果您的企业对WeOps平台、订阅制一体化运维平台感兴趣,欢迎联系我们,我们将为您提供专业的产品试用和产品演示等服务。
查看回放及下载PPT请关注公众号:嘉为蓝鲸
你见过最堕落的女生是怎样的?最堕落的女生,不一定表面能看出来,有许多女性,外表看起来一本正经,而背地里却做着许多不道德的事情!朋友邻居有一对母女,母亲是离婚的,离婚后就去了南方,具体做什么大家心知肚明,她女儿
吴亦凡会后悔当初没有直接支付都美竹800万吗?估计他会后悔的。如果吴亦凡或者他的团队能未卜先知,那他们别说800万,就是8000万也会赶紧付了。如果只是别人告诉他,你不付钱会坐牢,就算是古一法师告诉他们,他们估计也会当放屁。因
儿子每天玩游戏,是上瘾了吗?有什么方法让他少玩手机?子不孝父之过,小孩的培养,不能间单的靠学校,父母对孩子的教育更重要,小孩的天性就是好玩,任性,特别是任性父母决不能放任!良好的习惯靠点滴积累,坏的习惯是父母的忽视,放任而造成,孩子
修水电站会影响当地气候吗?会有一定影响。水力发电,为提高水能的利用率,需要修建拦河大坝,使水位升高,将水的动能转化为重力势能储存起来。发电时,是从高处落下,重力势能再转化为动能,并且,最大限度的冲击发电机的
你经历过或亲眼见到讹人的事吗?一个差点被性侵的姑娘,居然被施暴者的家属上门讨要说法,这样讹人的事情,大家听说过吗?最后这个姑娘又是如何化解的呢?下边我来详细的讲一下吧。那时候是五年前,在我们本地的一个老小区里面
报考公务员,已经签过三方协议的学生还可以报应届生岗位吗?三方到底签不签应届毕业时分为两种第一2019届应届(今年11月国考基本都要求这个)是指明年7月毕业第二应届毕业是指毕业两年没有工作,在择业期就算应届。判断标准为学信网显示待就业,签
为什么越来越多的人有2部手机?其实很多人问过我这个问题你为什么要用两部手机?首先说一下,我是一个手机控,从三年前开始同时拿两手机卡工作,倒也不是我业务有多忙。现在手机越做越大,电池却一点不让人省心。拿一部手机你
你如何看待人民日报批通信乱象?中国共产党的宗旨是为人民服务的。人民日报是党的喉舌,当然要为党和人民发声。近几年里,人民日报发表了很多关乎民生,关乎普通民众申张正义的评论,既接地气,又主导了舆论氛围,受到人民大众
你家的台式电脑是不是成了摆设?我家买过两次台式电脑,先后因电脑启动速度慢,长时间不用后彻底死机。我现在用笔记本电脑,万幸使用三年还没有淘汰掉。主要用于收看股票行情,网络学习,网络办公。目前正在利用电脑学习股票知
气虚多久可以调理好?谢谢邀请!题目气虚多久可以调理好?我的回答是,一般二至四周!具体介绍如下一,气虚的病因气虚多由先天禀赋不足,或后天失养,或劳伤过度而耗损,或久病不复,或肺脾肾等脏腑功能减退,气的生
新疆有哪些让你难忘的家常菜?有没有什么和家常菜相关的小故事?新疆人许多都是来自天南地北,饮食也就不能一概而论。记忆里难忘的不能算是一道菜,是妈妈做的炸假面条和青萝卜猪肉粉条包子。父亲是复员转业军人,响应祖国号召,来到祖国的最西北开发建设。母