Tag Archives: DevOps

为什么软件开发方法论让你觉得糟糕?

围绕软件开发实践和方法论,总有很多教条式的口水仗。阶段式(phase-gate)方法能够有效管理软件开发过程的风险,还是说只是风险管理中的花哨噱 头?TDD真的能够促生出高品质软件?结对编程是代码评审的有效替代抑或只是增加了商议沟通代价?我想说,虽然缺乏证据判断这些论调的谬处,但有两条常用的法则能够帮助我们选择好的实践,同时,提升我们所提供软件的价值:划小开发周期以及提升反馈效率。 Michael Feathers给出了以下观点: 我认为,我们最终还是得倚重开发者的能力,这才是个更重要的考量因素,而非选择哪门语言或纠结于方法论间的细微差别。坦诚地说,我们都清楚这点,但我们看起来好像过度纠结于开发能力是关键因素这事儿上。或许这是个经济学里一个被广泛接受的观点的引申,要是人人都可以替代(随便找个人都能顶上),那该有多好呀?但事实并非如些。 问题是,我们怎样才能找到有(合适)技能的开发者?IT界从未很好地定义个体生产率,从这点来看,那么,要找到合适技能的开发者就是个很难解决的问题。代码行数(Lines of code) – 在现在仍然是一个主流的度量方法 – 深陷“一行代码一个责任”泥潭,这并不是一个好的方法。而度量工作小时数则是鼓励(个人)英雄式举动 – 经验表明,“英雄们”通常就是导致项目延期的人,依赖“英雄”往往是一开始就采取的不该采取的冒险行动,长时间工作导致人变得鲁钝,并导致低质量软件出 现。目前还没有被普遍接受的针对IT专业人才的专业要求系列标准和雇用范式,招聘好的人才,是一门(招聘)艺术,而非(招聘)工程。

Posted in 持续交付 | Tagged , , | 1 Comment

持续交付:价值主张​

过去十年中,一个划时代的改变就是:基于Web的业务模式对传统企业业务模式的冲击。亚马逊就是历史最长,也最明显的例子之一,而越来越多的公司(从航空到金融服务)开始依赖软件打造其竞争优势了。 ​依靠软件来运行的业务有两个关键组件:一是你想如何改变世界的愿景,二是尽早收集用户的反馈。精益创业运动特别强调反馈的重要性,这不仅仅体现在创业公司。像亚马逊、NetFlix、和脸谱这样的公司也持续不断地对其网站进行小步改进,从而增加收入,并改善网站用户的体验。 ​什么是持续交付? 想在用户与项目团队(包括客户或者Product Owner)之间建立紧密的反馈环,依赖于你是否有这样的能力,即:通过持续交付新的软件版本,验证新的想法和软件的改动,并能衡量这些改动对收入的影响。 对于很多需要几个月时间才能发布新版本的公司来说,在一天之内发布数次似乎是天方夜谭。然而,遵循《持续交付》一书中的原则与实践,一些原来一年才能发布几次新版本的公司,也已经能在一个月内发布数次,或者更频繁了。这是一种巨大的竞争优势,而且意味着,在时间和精力方面减少了大量的浪费。 实际上,持续交付有两个至关重要的业务收益: 第一,它让你能更快地验证新业务方案的结果,并根据真实的用户反馈进行调整。尤其是当业务方案有根本性缺陷时,你一定希望能尽早地发现,而不是花数月或数年的时间和大量的金钱来实施计划后,才知道存在问题。 第二,与项目结束后的一次性大版本发布相比,它能提供一种大幅降低交付风险的交付流程,而且成本的投入也更加具有可预见性。 另外,对于IT管理来说,它还提供另外两种好处: 第一,项目经理们能看到项目的真实进度,因为,此时的“完成”是指:运行于真实生产环境中的可工作的软件已经为用户带来价值。 第二,通过规律性增量发布,大大减少了每次发布的风险。 实现持续交付 为了能够成功实现持续交付,需要依赖于两个基础,一是技术基础,二是组织基础。而这两个基础有三大支柱:(1)全面的配置管理;(2)敏捷测试;(3)部署流水线。 配置管理: 就配置管理而言,为了实现持续交付,有四个关键点: 第一,要能以全自动化的方式,构建、测试并部署你的应用。为了做到这一点,源代码、测试脚本、构建与部署脚本、数据库迁移脚本等统统要纳入到版本管理。 第二,应用程序的部署时及运行时配置项需要以某种统一且集中地方式管理起来。 第三,要能用全自动化的流程在每种环境上创建或者进行配置变更。 第四,所有的开发工作必须在主干上完成,而且,能够对较大的特性或重构做增量实现,以便应用程序一直保持在可工作状态。如果必要的话,没有开发完的特性可以利用配置开关,使用户无法通过界面或公共接口使用它。 同时,有效的配置及发布管理也依赖于整个交付过程中开发团队与运维团队(包括DBA)之间的紧密合作。为了确保运维需求被纳入项目考虑范围,并让应用程序在开发初期就能部署到类生产环境中进行单一功能或跨功能测试,运维人员应在项目开始阶段就成为交付团队的一员。这种协作也正是DevOps运动所倡导的重要的文化转变之一。 敏捷测试 持续交付依赖的第二个支柱是敏捷测试方式。当然,它也同样包含技术和组织两方面。从工程角度来看,各个层次上的自动化测试是必不可少的,包括单元级别、组件级别,系统级别(功能与非功能测试)。要确保做到:如果自动化组合套件全部成功通过了,那软件本身就达到了可发布质量,即:在生产环境中没有回归缺陷,满足业务需要——包括容量和可用性方面的要求。 敏捷测试要求在整个交付过程中的质量内嵌。也就是说,测试不再是一个“阶段”,而应该是在整个交付过程中持续发生的一种活动。同样,软件的质量不再只是测试人 员或QA的责任,而是整个交付团队的责任。测试人员与分析人员应该在一起,共同创建可测试的验收条件。作为开发过程的一部分,测试人员与开发人员应该合作创建自动化的验收测试,用于验证所开发的内容满足验证标准,这叫做“验证测试驱动的开发(acceptance test-driven development)。开发人员要负责维护验收测试,并确保它们一直可以成功通过。 部署流水线 持续交付的第三个支柱是部署流水线。从本质上讲,部署流水线是现有交付过程的一个模型,是整个价值流的一部分,即从提交到发布的那一段价值流。可以用像Go这 样的工具对其进行建模。对于应用程序的任何修改(包括配置)都要从头到尾通过这个部署流水线,即先对系统进行构建,并基于该构建产物运行自动化测试,然后放到某处,以便后续部署到测试环境和生产环境。可以把部署流水线看做是持续集成的一个延伸,即:它将持续集成从开发团队扩展到了测试和运维团队。 用来建模和管理部署流水线的工具会记录每一次构建历史,它会记录每个构建所对应的版本控制库中的版本号,谁把它部署到了哪个环境,什么时候部署的,部署的结果是“成功”,还是“失败”。这个部署流水线应该强制你的部署工作流(包括认证和授权),并能对整个交付流程进行审计。由于这个流水线是对你的开发及部署过程进行建模,所以,它为发现流程瓶颈,持续改进交付过程提供了丰富的数据支持。 通过持续交付来管理项目 毫无疑问,对于刚刚接触持续交付的团队来说,对其所要求的纪律性会感到吃惊。很多直觉上应该如何管理项目的方式(包括团队成员之间如何互动)都需要改变。对团队来说,当实施持续交付时,和所有的敏捷方法一样,最重要的事情是通过回顾,持续反省他们正在做的事情,并对工作方式和过程做增量式的改变,并不断地改进它。 重新调整你的直觉 每个项目天生都有一种节奏和风格。传统的交付项目在项目开始和中期,总会有一个漂亮而体面的进度报告。然而,当到了某个时间点后,客户和管理层常常会有一些令其不悦的发现:尽管大部分内容都“开发完成”了,但在集成阶段,部署到具有现实负载的类生产环境中的应用程序总是不能工作得很好。 此时,这个项目就进行了所谓的“两难境地”,或叫“死亡行军”,人们在很大的压力上加班工作,试图修复整个系统。这令每个人都极不满意,而事实上, 在某些领域,这种失控模式已经成为一种家常便饭。 在那些实践持续交付的项目中,开始时进展可能比较慢。因为项目一开始要建立基础设施,对构建、测试和部署做自动化,并在得到成功构建的产品后,在类生产环境中执行验收测试。这让团队成员,尤其是刚接触它的管理者,感到不舒服。然而,这正说明它起作用了。持续交付的影响表现在它把痛苦提前了,从而让交付过程更加平稳、真实且可度量。 你原来体会到的是“开发完成“,与“真正完成”不一样。现实中,真正的“完成”是指发布给用户,或者至少在集成环境上严格地进行验收和回归测试后,在类生产环境中向客户演示。在新功能开发完后,其实还有很多工作要做:交付过程中的这部分被叫做最后一哩。持续交付坚持认为:“只有过了这一哩”,工作才算完成,根本就没有“完成了百分之五十”这个说法,所以,这让整个交付进度看上去比较慢。​ 然 … Continue reading

Posted in 持续交付 | Tagged , , , , | 1 Comment

围绕最终交付物,而不是角色来组织软件交付活动

——持续交付与跨功能团队 在实施持续交付的过程中,我们很容易聚焦于自动化和工具,因为作为起点,它们通常是最容易做的。然而,持续交付的成功实现,还依赖于根据最终交付物而对组织结构所做的优化。对于持续交付来说,最大的障碍是依据角色和分层结构来组织团队,而非业务上的最终交付物(即产品或服务)。

Posted in 持续交付 | Tagged , , , | 2 Comments

用veewee创建vagrant的虚拟机

感谢larrycai的投稿。 原文链接:https://github.com/larrycai/blog/blob/master/cn/veewee_create_vm.mkd 简介 虚拟机有很多好处,不仅仅节省硬件资源,而且还可以快速切换系统环境,会在软件开发中起到极大作用。 在上一篇vagrant和jenkins的文章中我们说到了vagrant这个工具,你必须要先有一个盒子:vagrant box,它是vagrant对virtualbox虚拟机的进一步封装。将virtualbox虚拟机转变成vagrant的盒子有点麻烦,可以参见vagrant的说明,所以,大家都是找一个现成的盒子来用。 但是,没有更好的办法了吗?现在网络的开放精神真是强大,你能想到的一般都存在了,它就是我要介绍的veewee,它的功能就是从你的ISO光盘开始,准备好你需要的vagrant虚拟机(盒子)。

Posted in Tools | Tagged , , , | 1 Comment

使用vagrant+jenkins来管理虚拟机的技巧

感谢larrycai的投稿。 简介 虚拟机有很多好处,不仅仅节省硬件资源,而且还可以快速切换系统环境,显然会在软件开发中起到极大作用。 在《持续交付》第十一章(11.7.1)中就提到了虚拟机环境的管理。如下图 它描述的是在你的持续集成的Jenkins CI服务器(以下简称jenkins)中,需要各种服务器来测试一个应用。我们可以快速的从虚拟机的VMM模板库中,启动需要的各种类型虚拟机,而不是每个都重新安装(省时),完成测试,产生报告后,也快速消失(省钱)。 让我们一起来看看一种漂亮的实现方案vagrant+jenkins实现技巧。

Posted in Tools | Tagged , , , | 2 Comments

持续交付成熟度模型更新,新版本v1.2发布

《持续交付》一书中提供的“持续交付成熟度模型”是1.0版本。 这是经过再次调整的改进版,更具有指导性和可操作性。 使用说明: 建议使用该模型进行现状分析,发现改进点,不建议将其作为绩效衡量的标准。 一、七个维度 它们分别是: 1. 持续集成(Continuous Integration) 2. 环境与部署(Environments and Deployments) 3. 可视化与可追踪性(Visibility and Traceability) 4. 测试(Testing) 5. 数据管理(Data Management) 6. 配置管理(Configuration Management) 7. 组织协调性(Organisational Alignment) 二、每个维度又分成五个级别,它们分别是: 一级:阻碍级(Regressive) 二级:可重复级(Repeatable) 三级:可定义级 四级:可定量级(Quantitatively managed) 五级:优化级(Optimizing) 其中,持续集成维度的五个级别分别是: 一级:阻碍级(Regressive) 1. 软件的构建过程是手工的。 2. … Continue reading

Posted in 持续交付 | Tagged , , , , , | 2 Comments

《走向持续交付》,AgileChina2011上的演讲

The way to continuous delivery View more presentations from Tony Qiao

Posted in 持续交付 | Tagged , , , | 1 Comment

ControlTier,基于命令的自动化部署工具

现在,服务器集群已经是司空见惯的事情了。随便一个小的互联网应用程序都需要用集群来支撑。而当采纳“持续集成”,尤其是“持续交付”实践时,在各种环境上的部署让你发疯。这些环境包括开发环境、测试环境(包括功能测试和非功能测试)、试运行环境和生产环境。而且,每种环境可能会有多套实例,而不只是一套实例。 曾经接触过的一个团队,其持续集成环境中就有260+台服务器,随着开发人员的提交,不同版本的应用程序在这些服务器上一遍又一遍地被部署、测试、卸载。而且,这些服务器的作用各不相同,有的是web服务器,有的是应用服务器,还有数据库服务器,也许还有消息服务器等等。想象一下,如果由你来管理这样一个团队中的服务器集群的部署,你的状态会是什么样子? 其实,当面对这么庞大的集群时,关键问题不仅在于知道每一步怎么做,而是:如何能够在所有的服务器上能够让所有的步骤都能够正确地被执行,而且要按照你期望的顺序,不至于各节点的执行步骤间互相受到影响。 其实,已经有很多工具解决这类问题了,ControlTier就是其中之一。它是一个跨平台软件系统,用于在多个服务节点中管理应用程序的相关操作。 它既有命令行工具,又有Web管理界面。用户可以自定义命令组,并重用它们。它与Puppet的一个区别在于:ControlTier是基于“对目标进行操作(Activity)”的工具,而Puppet则是基于“定义目标状态”的工具。所以,Puppet的“部署幂等性”在ControlTier里是很难办到的。它们在这一点上的区别也决定了它们使用层次上的不同。在《持续交付》的“环境管理”章节中,说环境配置管理的层次如下图所示: 而它们所服务的位置如下: 当然,你完全可以在系统层使用ControlTier,也完全可以在应用层使用Puppet,但是它们有各自的专长,在其它层次上使用意味着需要的定制工作量稍多一些而已。 你还等什么,赶快使用这些工具,去打造你的完美“持续交付”环境吧!   本文版权归作者乔梁所有,转载请包含作者签名和出处,不得用于商业用途,作者将保留“追究法律责任”的权利!

Posted in 持续交付 | Tagged , , , , | Leave a comment

配置与发布管理成熟度模型1.0版

在过去多年的持续集成咨询经历中,最常听到的一个问题是:如何来评估企业在配置与发布管理方面做得到底怎么样?还需要在哪些地方进行改进或提高? 两年前,CITCON的几个参与者给出了一个持续集成成熟度模型,聚焦于“持续集成实践”,而在《持续交付》一书中,Jez与Farley也结合ThoughtWorks在这方面的实践经验,总结了“配置与发布管理成熟度模型”,并在多个项目中进行了实际应用,效果不错。 由于这是通用模型,所以各等级中多为定性描述,在拿到具体企业使用时,可以根据实际情况,对其中一些定性描述进行量化,比如“提交不频繁”“定期沟通”等。 如何使用这个成熟度模型呢? 找出你所在团队在各维度上所处的级别。 找出你所在团队需要改进的维度,以及在该维度上的改进目标。 根据目标与现状,制定改进行动计划并实施。 重新评估,再制定下一个目标。 任何流程都是可以改进的,所以没有最好,只有更好。所以最高一级是“持续优化”。 模型内容可从以下地址下载: http://download.csdn.net/source/3454593

Posted in 持续交付 | Tagged , , , , | Leave a comment