首页 > 知识库 > 正文

论开发与运维冲突的根源、表现形式及其解决方案
2016-02-25 16:32:59   来源: 老王 互联网运维杂谈    评论:0 点击:

在一个企业内,开发和运维冲突的最直接表现形式就是抱怨,抱怨的最直接感受就是从自己的角度总是觉得对方不够好。因此,本文作者从整个软件或者特性交付的角度来分析,把过程分解成几个典型阶段,查看冲突表现及其抱怨来自何处,然后引导大家一起走向后面的解决方案。

 

\

一、冲突的根源

开发团队的目标:满足产品的功能需求,把用户的需求实现,发布到现网,交付到用户手里。

从之前的敏捷过程来看,其实开发/测试甚至是QA团队的目标是一致的。

运维团队的目标:质量永远是第一位的。这导致一个有意思的现象:

变更是主要的故障之源,你同意么?

之前在一篇论文中给出数据,无论是硬件的维护还是网站的维护,人为变更是引入故障的主要原因(如图1)。在没有找到有效的手段之前,特别是手工时代,运维一定是抗拒变更的,你同意么?

\

图1:由人主导的变化是故障主要的原因

但现实不是运维所设想的那样,特别是对于一些持续迭代的2C产品来说,”变化是唯一不变的规律“,那就意味着变更是常态。

此时,我们可以得出一个非常有用的结论,开发和运维的冲突在某些情况下会被放大,比如说运维能力很弱,部门墙的出现。图2进一步归纳和阐述了这种冲突的原因。

两个不同的团队把各自的目标和要求形成一定的推力推向对方团队,然而部门墙的存在,让这种推力存在阻隔。

\

图2:Dev/Ops的冲突之源

甚至,我有时候把这幅图比喻成一个舞台(生产环境)上两个击剑手,在进行一场对抗比赛。

二、冲突的表现形式

在一个企业内冲突的最直接表现形式就是抱怨,抱怨的最直接感受就是从自己的角度总是觉得对方不够好。

因此,我就从整个软件或者特性交付的角度来分析,把过程分解成几个典型阶段,来看这个抱怨是如何产生的。

大家也可以根据自己的经验,也总结一下自己感受到的冲突表现及其抱怨来自何处(尽量明确而具体),然后我们一起走向后面的解决方案。

2.1.程序发布前

开发的抱怨:

◆找运维要个资源,怎么那么难呢?

◆找运维要几台设备,要填写这么复杂的表格?研发内部都没这么复杂。

◆运维的资源交付流程太长了,能不能再快一些?

◆运维的交付流程是否可以透明一些,不要让我经常来提醒运维,进度怎么样了?

◆运维的流程太多了,走OA,走领导审批,就不能简单一点么?

◆运维对技术架构把握能力不够,架构评审给不出有用的建议!

◆感觉运维的第一要求永远盯着我们服务器是不是用多了?

运维的抱怨:

◆开发永远都是程序要发布了,才来告诉运维要怎么做怎么做?!

◆开发老拍脑袋告诉我要给多少资源,为什么不合理评估呢?!

◆开发的技术架构评审为什么不邀请运维参加?

◆开发的技术架构考虑运维的需求太少,很多研发是真正的程序研发。

◆开发把运维当作资源提供者/事务执行着,倒不如让他们自己做运维好了。

2.2.程序发布中

开发的抱怨:

◆运维的发布流程好复杂好暴力,不区分业务和发布类型,都必须走很多领导审批,并且是深夜发布。

◆我明明写了详细的部署文档,但每次部署为什么还需要研发深度参与?

◆运维的发布好慢,一个发布要搞半天,感觉比我们研发过程还长。

◆运维的部署不能自动化么?为什么这么久还是要人工?我都想自己做个发布平台了。

◆有些不重要的发布,是不是可以让研发自己来做?不想每次都去触碰运维复杂的流程。

运维的抱怨:

◆这个部署文档好复杂,里面那么多坑要注意,每次部署都要耗费很多时间。

◆研发这个程序写得够呛,之前和他们反馈过,把配置不要搞成每台不一样,还是没改过来。

◆研发有没有遵守运维的规范,不和我沟通,按照自己的方便写出业务程序,让我运维。

2.3.程序发布后

开发的抱怨:

◆程序出问题,为什么运维不能自己定位问题?都需要我深度参与。

◆程序发布后出现bug,这个时候需要走紧急流程,必须经过领导,是否真的需要这么麻烦?

◆程序发布后的状态没法看到,我只能找他们要账户登录去看,能不能做成一个系统给我看相关信息。

◆运维的监控能力感觉真的很弱,出问题都是靠用户或者我们看日志发现的。

运维的抱怨:

◆开发的程序好烂,刚刚发布了,就出bug了。

◆程序bug了,又在催我快速解决,连研发自己找bug都没那么快,我哪有那么快呀!

◆开发程序异常log输出太少了,非常不利于快速定位问题。

2.4.持续运营阶段

开发的抱怨:

◆运维为什么不能给一个帐号给我,让我登录服务器去看服务状态。

◆运维内的平台一些权限应该给我,我想看看服务的运行状况。注:很多企业估计研发都没有登录过监控系统,更别谈CMDB了。

◆运维的日志分析能力很弱,我自己要写临时程序来做日志分析。

◆不出故障,我是感觉不到运维存在的。

运维的抱怨:

◆开发写的程序又出bug了,又出重大故障,我又要救火了!

◆开发的程序架构设计好烂,这点技术问题都没有提前考虑,导致这个问题必须要靠人来解决。

◆开发的KPI体系里面应该包含运维的质量和成本指标,需要他们一起来抗,否则压力永远都是在我们运维。

◆我们搞了一些数据报告,开发根本不关心,他们只关心需求实现,不关心运维的需求。

进一步深入技术分析的话,可以找到一些冲突的根源:

◆研发和测试部门是以敏捷方法论来驱动的。

◆而运维部门是构建在ITIL体系上的ITSM管理的思路。

前者有一些管理工具(持续集成,看板)/实践(站立会议/测试驱动/极限编程)/文化(价值观/团队融合)等等。

后者所依赖的ITSM的流程体系明显是滞后于前者敏捷体系的能力。

也就是说,两个团队不同的IT思维/能力的不同,造就彼此的输出的不同,这才是冲突的技术之源。

所以要想解决问题,核心的思路是:要找到一个统一的方法论(DevOps?)来融合两个IT团队个字的目标和方法论,当然冲击最大的还是运维团队,需要把自己的流程能力转化成自动化平台的能力。

从方法论上看,我自己觉得DevOps是Agile方法论的一次很自然的延伸。

其实从各自的角度能看到大家彼此的关注点,这些关注点有些是重叠的,有些是完全不对焦的。

三、冲突的解决方案

寻求解决方案比抱怨更重要,在抱怨的地方,才有改进的机会。但我这个地方避免用DevOps这个词来笼统的寻求解决方案。

我个人觉得需要做一些转变,核心的转变是两点:第一是拆墙;第二是换舞台,如下图:

\

图3:拆墙和共同的价值支撑体系

拆墙,研发/运维团队把彼此的作用力触达到对方,感受到彼此的要求和能力。

换舞台,把底层的舞台给换了,“经济基础决定上层建筑”,底层换了,上面的思路也就随之变化。

措施1:共享一致的目标/价值/状态

对于研发/测试/运维团队来说,就需要把大家的目标/价值/状态做个对齐。之前写过IT运维的目标体系是质量/成本/效率/安全,其实这个可以传递到研发/测试团队,并且是和业务功能需求完全不冲突的。

从目标来说,分阶段性的目标和长远目标:

◆阶段性的目标其实可以看业务部门的短期需求和规划,从而反推IT能力的要求,比如说敏捷基础设施交付,持续发布。

◆长远的目标,其实是可以规划自己的IT能力主线,比如说容器化和架构服务化,然后分解到阶段性的目标上,这个目标是需要和研发对齐的。

我说的状态比较特殊。其实,我更希望运维把线上服务的运行状态进行透明化和可视化。然后交付给我们的研发/测试部门,不要让自己的能力成为黑盒子。这样:

一则,督促自己不断提升自己的能力。

二则,可以基于状态促进研测不断优化技术服务能力。所以更需要把这种思维传递给开发,让其去建设一个非黑盒子系统。

研发是有技术和责任辅助运维实现这一目标的。

状态的一致性,其实是具体的驱动措施了,俗称状态看板,它分业务价值看板BVD和服务状态看板,详细如交易看板,服务可用性看板,服务成本看板,服务性能看板,事件看板,问题看板等等。

措施2:IT能力的平台化驱动

在之前的篇幅中,我说过ITSM的运维体系能力是大大滞后的,明显不能满足当前业务快速迭代的需要,运维的问题还是必须要运维来挑头解决。

生产环境,运维是第一负责人,必须改变过去的流程思维,建立自动化和数据化的运维平台。

从环境管理的角度来看,需要以生产环境的平台管理能力覆盖为首先的灰度点,然后逐渐覆盖预发布/测试环境,最后才是开发环境。

有了平台化能力之后,运维的作用力才能顺利推进到研发和测试那边,否则就会出现制定了规范无法落地。

不信,你定义一个现网日志监控规范看看?

所以,我把图4中绿色部分的能力实现都认为是运维部的,有没有感觉到你在搭建一个舞台?的确如此!

\

图4:平台化是运维能力延伸的最好方式

措施3:“把想法装进别人的脑袋”

每个团队不能孤立的去看或者解决问题,当我们把能力延伸到对方之后,其实就是在干“把想法装进别人的脑袋”的事情,对两个团队来说都是难事。

之前讲过研发团队的Ops-friendly和运维团队的Dev-friendly,也在讲一定有照顾到别人的诉求才能friendly。

2014年的puppet报告,也在讲团队内培养DevOps是多么的重要,其实就是在讲理念和实践刷新成一致状态。

\

图5:多元化的思维,事半功倍

任务冲突不可避免,冲突的形式也是各式各样,冲突的解决方案也不尽相同。

本文是自己对该问题的一个整体思考思路,希望能触发我们一起来思考。最后引申一个话题——“NoOps”(无运维),大家也一起思考一下,是否有可能?其实本文也有一些答案。

【编辑推荐】

  1. 运维人,你应该具有的五大O2O思维
  2. 中小企业运维需要重视日志分析
  3. 运维中性能优化的常见模式及趋势
  4. DevOps高手的九项隐藏技能
  5. 大众点评高可用性系统运维经验分享
【责任编辑:火凤凰 TEL:(010)68476606】

相关热词搜索:DevOps 运维

上一篇:漫谈依赖管理工具:从Maven,Gradle到Go
下一篇:WOT2016黄继:小米运维发展中的关键节点有哪些?

分享到: 收藏