随着云计算的迅猛发展,越来越多的业务迁移至云端,众多企业在审计成本的过程中发现,用来支撑业务的云成本并没有节省,费用支出反而比以前更大。如何降低云成本成为企业的核心诉求和通用诉求。
为此,Linux 基金会成立了专门的FinOps 基金会,致力于通过培训、方法论和最佳实践的输出,助力企业优化云成本。Cloud FinOps 正是这些云成本优化规则和最佳实践的集合。它提供了由中心化团队驱动,将云成本职责下发到分布式团队的实践方法。并由工程团队、财务团队、产品团队通过跨团队合作,保证成本在可预测、可管控的前提下,实现更快速的。
《FinOps云成本优化》是第一本系统性解读什么是FinOps,以及如何实施FinOps 的书:它定义了在云成本优化领域的众多技术术语、财务术语,分享了企业要推动云成本优化所必须完成的组织架构调整、流程推动、职责划分,以及所需要依托的常见技术手段,等等。本书收录了来自FinOps 基金会社区大量的实践案例,能让读者了解成功的云成本优化故事,以及背后成功的原因。此外,对主流云厂商提供的技术能力做了剖析,让读者在选择云技术解决成本优化问题时有所参照。
《FinOps云成本优化》适读的对象较广,包括使用云计算的企业中的各种角色,如决策层、运维工程师、财务和采购人员,以及提供云成本优化方案的云服务提供商和第三方集成商。本书包含大量财务术语和技术术语,如果你具备相关的财务或者技术知识,对阅读本书会有事倍功半的效果。
业内首次介绍FinOps的图书!云计算成本优化的利器,企业降本增效的法宝。不仅仅是省钱,Cloud FinOps,打造高效的云上成本管理体系。
作者简介
J.R. Storment 是Cloudability 公司(现为Apptio Cloudability)的联合创始人。在过去十年的大部分时间里,他与世界上数百家最大的云消费者—从GE 到Spotify 到BP 到Nike 到 Uber—一起帮助这些公司设计策略,通过技术、文化和流程来优化和分析这些公司的云支出。他现在是Apptio Cloudability 的FinOps 副总裁兼FinOps 基金会主席。J.R. 在美国、亚太地区、英国和欧盟的多个AWS re:Invents 和数十场会议上就云成本优化发表了演讲。
J.R. 出生于俄勒冈州,在夏威夷长大,曾在旧金山、巴塞罗那和伦敦生活和工作,现在与妻子杰西卡和儿子奥利弗一起居住在俄勒冈州的波特兰。他是八岁双胞胎男孩的父亲,其中一个在本书写作期间去世。
Mike Fuller 过去七年一直在Atlassian 公司的澳大利亚悉尼总部工作,目前担任云研发团队(云卓越中心)的首席系统工程师。因为职位原因,Mike 在Atlassian 公司与大多数AWS 服务合作,并协助Atlassian 公司内部的团队以高安全性、高可用性和合理的成本效率运行。Atlassian 公司的云研发团队负责整个公司的大规模云架构的最佳实践的设计、治理和实施。
Mike 拥有卧龙岗大学的计算机科学学士学位和九个AWS 认证。他曾在多个AWSre:Invent 和AWS 峰会活动中发表演讲,主题包括AWS 安全性和成本优化(FinOps)。Mike 和他的妻子莱斯利及两个孩子克莱尔和哈里森住在澳大利亚南海岸。他们喜欢去澳大利亚美丽的海滩和乡村旅行。
译者简介
孟凡杰,腾讯云容器技术专家,FinOps 产品研发负责人,开源项目Crane 联合创始人,致力于借助云原生调度能力辅助企业优化云成本。曾在IBM、EMC、eBay 等外企担任云计算资深架构师等职位,是Kubernetes 社区贡献者,专注调度、多云、网络、服务网格等技术领域。著有《Kubernetes 生产化实践之路》一书。极客时间《云原生训练营》讲师。
王孝威,腾讯云技术产品经理,FinOps 中国首位认证从业者,开源项目Crane 和腾讯云降本增效产品Housekeeper 产品负责人。云原生技术实战营、云原生正发生、K+ 讲师。
胡启明,腾讯云容器技术专家,开源项目Crane 联合创始人和负责人。曾任职于蚂蚁集团,SAP 等公司,专注云原生领域八年,是Kubernetes、Dapr、KubeFed 等项目的贡献者。GDCC、CSDN 降本增效专栏、Open Infra Days 讲师。
王孝威,腾讯云技术产品经理,FinOps 中国首位认证从业者,开源项目Crane 和腾讯云降本增效产品Housekeeper 产品负责人。云原生技术实战营、云原生正发生、K+ 讲师。
胡启明,腾讯云容器技术专家,开源项目Crane 联合创始人和负责人。曾任职于蚂蚁集团,SAP 等公司,专注云原生领域八年,是Kubernetes、Dapr、KubeFed 等项目的贡献者。GDCC、CSDN 降本增效专栏、Open Infra Days 讲师。
前言
多年来,我们一次又一次地听到这样的说法:由于工程团队对成本效益了解过少,所以云计算的支出远超预期。与此同时,财务部门也无法理解并及时跟进团队支出。但最糟糕的是,公司的领导层不但缺乏对公司成本管理的建议,甚至很少强调将成本管理作为组织层面的重要任务。
长期以来,采购部门是IT 设备支出的命门,购买大型设备都需要经其批准。然而,随着公司进入云时代,按量计费制(也称为可变支出模型)的出现省去了原先的采购审批流程。
当云支出达到预期水平时,公司不得不对成本进行分配、解释与控制。由于云服务提供商每年为公司提供远超30 万个SKU(Stock Keeping Unit,库存量单位)、数千个新功能,所以云成本优化成为公司无法忽视的一大问题。业界亟须一个新的云成本优化运营模型,这便是FinOps。
我们在学术峰会或博客上看到的成功案例,其展示重点都在于公司如何进行技术迁移。他们的故事往往始于夸大开发与运营团队面临的挑战,再冠以完美解决的英雄式结尾。他们会谈到规模、数据,以及如何通过最新服务来解决复杂的问题。然而,成功路上必不可少的财务管理实践却往往被忽略。多年来,由于云成本优化失败而陷入困境的案例层出不穷。
在我们过去八年的职业生涯里,从公司高管和从业者口中了解到同一个问题:当代公司对于FinOps 教育与相关知识非常匮乏。Mike 在对Atlassian 公司大规模云业务部署进行成本优化时听到了对该问题的反馈。而J.R. 作为Apptio Cloudability 云支出管理平台联合创始人,在指导世界上最大的云用户进行成本优化时听到了同样的问题。
公司与科技独角兽在基于云的DevOps 实践中,努力改进团队的协作方式。当他们将每日最佳实践代码化时,却陷入了重复造轮子的怪圈。更绝望的是,他们找不到同行者。佛法在世间,不离世间觉。少数几家有远见的公司(且称之为FinOps 英雄)严格遵守FinOps 成熟度曲线深入实践,从而打破了僵局。相较于采用FinOps 之前的云支出,他们节省了大量成本。同时,工程师也加速了创新。采购团队也开始优化采购战略,并统一负责与云供应商的合作关系。之前不参与这些流程的财务人员,现在却已成为具备技术能力、关注单位经济学的积极参与者。而领导层则有意识地在权衡速度、质量和成本之后,做出频繁的战略调整。
不断有人寻求FinOps 资源以供学习,他们不仅想学习FinOps 的具体知识,而且渴望从权威的FinOps 从业者处汲取经验。简而言之,我们的目的就是从他们的经验中提取精华,汇编成书,供世界各地的同好们研究。
这也是我们建立FinOps 基金会的原因。正是这些实践者推动了最佳实践的发展。书中介绍的实例均从实践者的经验中得来,我将他们的陈述直接引用、转述,以便将FinOps的观点与实操呈现给你。
本书为谁而写
任何已经将业务运行在云上,或准备将业务迁移至云上,从事工程、金融、采购、产品相关行业,或负责公司运营(包括有运营意愿)的领导层都将从此书中受益。只要组织了解FinOps 的人物角色分配,就可以在团队中如法炮制。
工程和运营团队不习惯日复一日地关注成本。在过去的非云时代,他们关心应用的性能。由于受到硬件采购的限制,不能随时随地获得所需服务器,所以他们不得不囤积资源、提前计划。硬件容量规划提前几个月甚至几年就完成了。现在,在云计算环境下,无论何时需要额外容量,只要花费更多钱就能获得相应资源,解决相应问题。但这又为工作增加了全新挑战。即公司必须考虑到,选择基础架构的成本及该成本对业务有何影响。
一开始,大家会感觉成本考量与更受关注的软件交付相悖。但他们很快意识到,这些成本可以看作另一个效能指标,应该被优化以对业务产生正面影响。许多工程师只会通过“堆硬件”来解决问题,而FinOps 需要工程师进一步考虑这样做的成本(和利润)。
—John Stuart,Jobvite 安全与IT 部门DevOps 副总裁
财务团队的传统操作是关注按月或按季度的追溯报告,并基于报告设定很快过期的财务预算。现在,这项工作已经演变成助力业务持续发展,即财务团队会根据工程、技术团队的需求(他们不习惯考虑成本),主动与其合作,预测支出。换句话说,他们正尝试摒弃固定、不透明的资本支出报告,采用流动性强、透明的运营支出预测。作为其中的一分子,财务部门通过了解云支出在数千个规格中的驱动因素,与工程、技术团队并肩作战。完成这些工作有助于财务人员从根本上重塑如何履行财务职能的观念,并尝试用新的方式向高管和投资者汇报技术支出。
采购团队总是严格控制支出,在价格谈判时格外谨慎,也会在支付供应商费用之前,先行使其在采购订单上列明的权力。而现在,采购团队进行了战略化改革,他们将所有异常支出与云服务提供商的公司协议进行整合,以得出工程师已使用产品的最佳价格。我们不靠压榨云服务提供商获取盈利,我们通过向客户提供优质功能而成功。
—Alex Landis,Autodesk
首席信息官(CIO)、首席技术官(CTO)等技术高管丧失了控制许多支出决策的权力,他们现在必须放权,任团队在合理预算范围内自行运作。技术高管不再对大型采购决策进行规划,而是更多地考虑如何预测目前的运营支出。开会时的话题已经从确保有足够资源运行服务,转移到了确保有足够的钱运行服务。其实技术高管希望能在更大程度上控制支出,并在战略化层面决定资金的去处。
本书通过介绍一系列公共术语及最佳实践,使各部门得以在相同理解层面上进行公平交流与合作。
关于本书
在之后的章节中,我们正式定义FinOps。该定义是我们与一些每年管理着数亿美元云支出的、最具经验的云成本优化团队共同制定的。我们摘录了他们成功的云实践,包括他们在研究中发现、解决的一些问题。除此之外,我们还将展示何为有效的FinOps 实践,以及它如何被应用于公司。
之前,了解这类知识的唯一途径就是参加一些公共活动、听专家讲座。本书和FinOps基金会正努力改变这种现状,我们的创始成员包括来自Spotify、Nationwide、Pearson、Atlassian、Thermos Fisher Scientific、HERE Technologies 和Australia Post 等不同公司的优秀FinOps 智囊团成员。FinOps 基金会是一个非营利的行业协会,其目的是编写、促进云成本优化的最佳实践与标准。
读完本书后,你会发现,FinOps 基金会是一个可以让你进一步学习云成本优化的好去处。
这是一个充满活力的社区,实践者们可以在线或在虚拟会议上分析、探讨实践过程中遇到的困难,分享解决方案。我们衷心希望公司制定的策略、流程及本书中的真实案例能帮助大家更好地管理云支出。
并且,通过了解这些流程,相信你们的公司或个人职业生涯都会更具竞争力。FinOps 基金会欢迎任何认为公司、职业生涯需要向一种新型、更具效率的云成本优化方式转变的同好们加入。
本书中,我们以Apptio Cloudability 为例来介绍一个云成本优化平台,因为J.R. 是Apptio Cloudability 的联合创始人,参与了整个云成本优化过程,并伴其一步步走向成熟。
FinOps 不需要特定的技术平台,你可以使用其他工具、开放源代码或自己创建的脚本,来完成本书提到的最佳实践。
阅读前准备
我们将与你分享在FinOps 中不断成长的经验,从而赋予我们的公司更多竞争力。在阅读过程中,我们假设你至少对三大公有云供应商(AWS、Azure、GCP)之一有基本的认知。你应具备对云工作原理、云资源计费方式的基本理解能力,熟悉主要的资源类型(例如计算与储存),以及更高级别的服务(例如管理数据库、队列及对象储存)。如果你想达到专业AWS(Amazon Web Services,亚马逊云科技)水平,可以参加AWS业务专业培训,若获得AWS 云从业者资格证书培训更佳,上述两种方式都能帮助大家学到AWS 运营的基本知识。同样,要学习谷歌云平台相关知识,可以报名GCP(GoogleCloud Platform,谷歌云平台)基础学习课程;学习Azure 专业知识,则报名Azure 基础知识学习课程。以上相关课程或在线特训通常为期一天。
你还应该了解云计算工作原理;知晓云供应商提供的主要服务,包括通用案例;基本了解按量计费消费模式下的计费与定价标准。例如,作为AWS 用户,你应该已经了解EC2(弹性计算云)和RDS(关系数据库服务)之间的区别;多种资源付费类型,例如按量计费、预留实例(RI)和竞价实例(Spot)。
如果你不知道预留实例具体是如何工作的,或如何规划购买策略也没关系,书里有相关介绍,你需要知道的是应用它们可以节省EC2 资源的费用。
FinOps 在演进
在过去的这些年里,FinOps 一直在演进,并将持续发展,随着云服务提供商提供的服务越来越多,平台的优化手段越来越多,FinOps 将不断进化。我们建议你在实际项目中,重新确认本书提到的云服务提供商提供的服务细节。一旦发现本书内容有任何需要更正选择方案或改进之处,请随时联系我们。毕竟,成功的FinOps 实践是在不断的挑战、质疑中发展进步的。
请感兴趣的你登录FinOps 官方网站,及时了解最新情况和有关云计算的最新进展。
本书使用的约定
本书使用如下排版约定:
斜体(Italic)
用于表示对应的内容是新词汇、URL、邮箱地址、文件名和文件扩展名。
这个图标表示提示或建议。
这个图标表示一般注释。
O’Reilly 在线学习平台(O’Reilly Online Learning)
40 多年来,O’Reilly Media 为许多企业提供技术咨询、商业培训、
知识和洞察力,帮助企业获得成功。
我们独特的专家和创新者网络会通过图书、文章、会议和在线学习平台分享他们的知识和专长。O’Reilly 的在线学习平台可以让你按需访问在线培训课程、深度学习路径、交互式编程环境,以及来自O’Reilly 和200 多个其他出版商的大量文章和视频。若要获得更多信息,请访问O’Reilly 官方网站(参见链接1)。
如何联系我们
请将对本书的评价和存在的问题通过如下地址告知出版者。
美国:
O’Reilly Media, Inc.
1005 Gravenstein Highway North
Sebastopol, CA 95472
中国:
北京市西城区西直门南大街2 号成铭大厦C 座807 室(100035)
奥莱利技术咨询(北京)有限公司
O’Reilly 的每一本书都有专属网站,你可以在那里找到图书的相关信息,包括勘误列表、示例代码及其他信息。本书的网址参见链接2。
关于本书的评论和技术性的问题,请发送电子邮件到:
bookquestions@oreilly.com
关于我们的图书、课程、会议和新闻的更多信息,请参阅我们的网站(参见链接1)
在Facebook 上找到我们:参见链接3
在Twitter 上关注我们:参见链接4
在YouTube 上观看我们:参见链接5
致谢
首先,感谢我们的家人,在本书的创作过程中,他们牺牲了许多日夜及周末,为我们提供足够的创作时间与空间,忍受我们对家庭的忽视,让我们一心研究FinOps 及其构架内容。谢谢。其次,感谢O’Reilly 的团队(Amelia Blevins、John Devins、Sarah Grey 及Virginia Wilson),没有你们的付出,就没有本书的问世。
感谢Gavin Cahill,在本书问世前的最后阶段对文字进行细致的打磨,感谢你为本书的最终出版做出的巨大贡献。
感谢Message Glue 的Ken Boynton,你对FinOps 的故事进行润色与阐释,让本书读起来脍炙人口。
感谢书中提到的所有人。
我们还要感谢FinOps 基金会的所有成员,自从FinOps 基金会成立,注册公司和注册从业人员的数量稳步上升,我们为其核心成员帮助FinOps 规范化的举措所深深折服。
多年来,我们与众多精英合作,听他们分享各自遇到的云计算挑战,以及解决路径。太多的话不知从何说起,所以,感谢你们。
最后,感谢我们的技术书评人和所有一路上帮我们审阅内容的伙伴。没有你们的反馈,就没有本书的今天。感谢:Adam Heher、Alex Hullah、Alex Landis、Alexander Price、Alex Sung、Alison Pumma、Ally Anderson、Anders Hagman、Andrew Midgley、AndrewThonberry、Anthony Tambasco、Ashley Hromatko、Ben Kwan、Bhupendra Hirani、Bob Nemeth、Casey Doran、Dana Martin、Darek Gajewski、David Andrews、David Angot、David Arnold、David Shurtliff、David Vale、Dean Layton-James、Dieter Matzion、Elliot Borst、Elliott Spira、Ephraim Baron、Erik Onnen、James Jackson、Jason Fuller、Jess Belliveau、John Merritt、John Stuart、Jon Collins、Joseph Daly Justin Kean、Keith Jarrett、Manish Dalwadi、Marsha Shoemaker、Martin Bleakley Matt Finlayson、Matt Leonard、Michele Allesandrini、Nabil Zakaria、Naveen Chand、Pedro Silva、Phillip Coletti、Rob Martin、Sascha Curth、Shane Anderson、Stephanie Gooch、Stephen Elliot、Tom March、Tom Marrs、Tony Curry、Umang Sehgal、Vasilio Markanastasakis 和Wendy Smith。