-
-
-
- 06 Jul, 2019 - -
- John Doe -
编写中-华为云的 SRE 实践
-The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -diff --git a/content/chinese/event/meetup-beijing-1.md b/content/chinese/event/meetup-beijing-1.md index ff4fd54..ba2d4a9 100644 --- a/content/chinese/event/meetup-beijing-1.md +++ b/content/chinese/event/meetup-beijing-1.md @@ -1,9 +1,9 @@ --- -title: "SRE精英联盟 Meetup - 北京 预告" +title: "SRE精英联盟 Meetup - 北京 " # Schedule page publish date -publishDate: "2024-04-28T01:00:00Z" +publishDate: "2024-06-07T01:00:00Z" # event date -date: "2024-06-22T13:00:00+06:00" +date: "2024-06-22T13:30:00+06:00" # post save as draft draft: false # page title background image @@ -46,36 +46,52 @@ type: "event" ### 活动日程 -> 地点:待定 +> 地点:北京市海淀区清河小米科技园 -1. 开场【13:25】:主持人介绍活动目的和流程。 : -2. 演讲1【13:30-14:10】: -3. 演讲2【14:10-14:50】: -4. 茶歇【14:50-15:05】: 休息 -5. 演讲3【15:05-15:45】: -6. 演讲4【15:45-16:25】: -7. 演讲5【16:25-17:05】: +1. 开场【13:25】:主持人介绍活动目的和流程 : +2. 演讲1【13:30-13:50】:【《服务韧性工程(SRE)能力要求》标准解析】 - 王海清(中国信通院云大所业务主管稳定性保障实验室负责人) +3. 演讲2【13:50-14:35】:【《小米集团云计算故障应急响应经验分享》】 - 王哲(小米集团云平台运维部负责人) +4. 茶歇【14:35-14:50】: 休息 +5. 演讲3【14:50-15:35】:【《美图故障管理体系搭建实践》】 - 石鹏 (美图公司-高级运维经理) +6. 演讲4【15:35-16:20】:【《数字化监控平台稳定性保障实践》】 - 吴天昊 (中国联通软件研究院-副总架构师) +7. 演讲5【16:20-17:05】:【《全球化游戏故障管理实践》】 - 乾海平 (腾讯自研游戏SRE负责人) 5. 交流:【17:05-17:30】自由交流。 6. 结束:【17:30】感谢致辞和下次活动预告。 -#### 分享演讲 1: +#### 分享演讲 1: 《服务韧性工程(SRE)能力要求》标准解析 +* 讲师姓名:王海清(中国信通院云大所业务主管稳定性保障实验室负责人) +* 讲师简介:专注系统稳定性保障领域技术研究,掌握行业发展痛点和趋势。 +* 内容概述:中国信通院依托稳定性保障实验室,联合数十家头部企业专家,研讨和制定《服务韧性工程(SRE)能力要求》标准; +该标准体系基于SRE理论的运维体系评估模型; +标准覆盖全栈技术能力建设,构建和维护服务韧性工程,是体系化的方法论、实践和标准的集合。 +#### 分享演讲 2: 《小米集团云计算故障应急响应经验分享》 +* 讲师姓名:王哲(小米集团云平台运维部负责人) +* 讲师简介:运维老兵,长期致力于效率提升带来的质量成本价值。 +* 内容概述:中大型企业复杂场景,故障管理带来的挑战,应对挑战如何构建对应的能力,以及一些实践案例分享。 -#### 分享演讲 2: +#### 分享演讲 3: 《美图故障管理体系搭建实践》 +* 讲师姓名:石鹏(东方德胜) +* 讲师简介:美图SRE负责人,整体负责公司线上服务的稳定性保障工作。在运维架构设计、灾备建设、故障管理、稳定性运营等方面有一定的积累。 +* 内容概述:故障管理体系之What&Why; +常见的构建思路; +美图的探索实践分享。 -#### 分享演讲 3: +#### 分享演讲 4: 《数字化监控平台稳定性保障实践》 +* 讲师姓名:吴天昊(中国联通软件研究院-副总架构师) +* 讲师简介:主要负责中国联通数字化监控平台整体功能和技术架构设计及建设推广,打造自动化生产和智慧化运营的生产运营平台,助力系统稳定性持续提升。 +* 内容概述:云原生下运维的问题挑战; +数字化监控平台的核心能力; +稳定性保障的场景应用实践。 - -#### 分享演讲 4: - - - -#### 分享演讲 5 - +#### 分享演讲 5 :《全球化游戏故障管理实践》 +* 讲师姓名:乾海平(腾讯自研游戏SRE负责人) +* 讲师简介:运维界老司机,深耕多年运维行业,在全球游戏业务的故障管理上积累了一定经验。 +* 内容概述:全球化业务在故障管理上面临的问题和挑战;如何做故障治理 > 有任何建议和咨询,请联系我们。[点这里](/contact/) diff --git a/hugo_stats.json b/hugo_stats.json index 8442e93..30c59fa 100644 --- a/hugo_stats.json +++ b/hugo_stats.json @@ -296,15 +296,15 @@ "公告", "六成本优化思路实操经验总结", "内容概述", - "分享演讲-1", "分享演讲-1-发布之二三事", - "分享演讲-2", + "分享演讲-1-服务韧性工程sre能力要求标准解析", + "分享演讲-2-小米集团云计算故障应急响应经验分享", "分享演讲-2-应用变更发布实践", - "分享演讲-3", "分享演讲-3-b站变更防控设计与实践", - "分享演讲-4", + "分享演讲-3-美图故障管理体系搭建实践", "分享演讲-4-携程云基础设施变更管理实践", - "分享演讲-5", + "分享演讲-4-数字化监控平台稳定性保障实践", + "分享演讲-5-全球化游戏故障管理实践", "分享演讲-5-腾讯游戏gitops发布变更方案", "反馈和沟通", "嘉宾", diff --git a/public/about/index.html b/public/about/index.html index 8864680..356f7a5 100644 --- a/public/about/index.html +++ b/public/about/index.html @@ -1,391 +1,9 @@ - -
- -Google 在2003年启动了一个全新的团队——“SRE 团队”,该团队旨在通过软件工程的方法提高应用系统的可靠性;随着 SRE 相关理论和实践在 Google 的日臻成熟,SRE 实践也从 Google慢慢地扩散到了整个行业。自从 SRE 的理念进入中国以来,就已经引起了很多企业的关注和效仿,但各企业实施 SRE 的方法各异,SRE 的实现效果也各不相同。与此同时,中国的互联网行业中涌现出了一批对SRE 充满热情的倡导者,他们为社区做出了各种贡献;包括:孙宇聪翻译出版了《SRE:Google 运维解密》、赵成在极客时间开设了课程《SRE 实战手册》,以及赵舜东在社区里积极地布道分享等等,不胜枚举。
-2022 年,由赵成等人牵头,首批来自于互联网、运营商、金融等行业领军企业的 SRE 团队负责人齐聚一堂,组织了SRE 研讨社区,定期开展社区分享活动,共同探讨 SRE 在各企业里的发展路径,分享各自的实战经验,并总结出了这份来自一线实战的、详实而持续更新的《SRE 实践白皮书》。社区每年都吸纳新的成员,逐年更新本白皮书内容,力求真实客观地描述国内企业SRE 团队的工作方式。在《实践白皮书》初稿长达两年的整理过程中,我们看到了不同企业对SRE 的理解,并尽可能统一大家对相似场景的定义;我们看到了不同企业对SRE 职能领地的扩展,并将成功团队的经验提炼成案例供大家参考;我们也看到了在这两年的编写过程中,不同企业SRE 团队的真实变化,并及时将其更新到实践白皮书中。总之,在未来的每个季度,我们都会将各SRE 团队的最新职能、组织形式、技术迭代等现状,补充到《实践白皮书》中。
-2023 年,中国信息通信研究院(下简称信通院)云计算与大数据研究所(下简称云大所)稳定性保障实验室的专家加入了 SRE 研讨社区,深度的参与到社区交流当中,为《SRE 实践白皮书》的编写工作提供了专业指导。
-参编企业包括20多家企业的SRE负责人或者SRE主管经理,SRE社区代表、信通院代表等。
- -白皮书发布更新进展和下载,点这里:《SRE实践白皮书》
-SRE精英联盟不光注重联盟内部的研讨交流。更重视构建一个活跃的 SRE 社区,从 2024 年开始联盟会定期举办线上和线下的技术分享活动,邀请各企业的SRE团队负责人,一线技术专家,分享各自的 SRE 实战经验。活动的内容包括 SRE 团队的各种项目实践、团队组织形式、技术迭代、职能领域的扩展等。活动的目的是为了促进 SRE 的发展,让更多的企业了解 SRE 的实际应用方式,以及SRE的最佳实践。
-所有公开活动的报名信息都会在本站发布,敬请关注。这些活动信息也会同步到联盟建立的微信公众号、视频号、B站和YouTube频道,欢迎关注。
-微信公众号、视频号、B站和YouTube频道,请在各个平台搜索 “SRE精英联盟”。
- -在首次直播活动中,我们邀请了联盟的创始人和相关重要成员,为大家讲解了 SRE 精英联盟的起源,目前正在做的工作。
-Google 在2003年启动了一个全新的团队——“SRE 团队”,该团队旨在通过软件工程的方法提高应用系统的可靠性;随着 SRE 相关理论和实践在 Google 的日臻成熟,SRE 实践也从 Google慢慢地扩散到了整个行业。自从 SRE 的理念进入中国以来,就已经引起了很多企业的关注和效仿,但各企业实施 SRE 的方法各异,SRE 的实现效果也各不相同。与此同时,中国的互联网行业中涌现出了一批对SRE 充满热情的倡导者,他们为社区做出了各种贡献;包括:孙宇聪翻译出版了《SRE:Google 运维解密》、赵成在极客时间开设了课程《SRE 实战手册》,以及赵舜东在社区里积极地布道分享等等,不胜枚举。
2022 年,由赵成等人牵头,首批来自于互联网、运营商、金融等行业领军企业的 SRE 团队负责人齐聚一堂,组织了SRE 研讨社区,定期开展社区分享活动,共同探讨 SRE 在各企业里的发展路径,分享各自的实战经验,并总结出了这份来自一线实战的、详实而持续更新的《SRE 实践白皮书》。社区每年都吸纳新的成员,逐年更新本白皮书内容,力求真实客观地描述国内企业SRE 团队的工作方式。在《实践白皮书》初稿长达两年的整理过程中,我们看到了不同企业对SRE 的理解,并尽可能统一大家对相似场景的定义;我们看到了不同企业对SRE 职能领地的扩展,并将成功团队的经验提炼成案例供大家参考;我们也看到了在这两年的编写过程中,不同企业SRE 团队的真实变化,并及时将其更新到实践白皮书中。总之,在未来的每个季度,我们都会将各SRE 团队的最新职能、组织形式、技术迭代等现状,补充到《实践白皮书》中。
2023 年,中国信息通信研究院(下简称信通院)云计算与大数据研究所(下简称云大所)稳定性保障实验室的专家加入了 SRE 研讨社区,深度的参与到社区交流当中,为《SRE 实践白皮书》的编写工作提供了专业指导。
参编企业包括20多家企业的SRE负责人或者SRE主管经理,SRE社区代表、信通院代表等。
白皮书发布更新进展和下载,点这里:《SRE实践白皮书》
SRE精英联盟不光注重联盟内部的研讨交流。更重视构建一个活跃的 SRE 社区,从 2024 年开始联盟会定期举办线上和线下的技术分享活动,邀请各企业的SRE团队负责人,一线技术专家,分享各自的 SRE 实战经验。活动的内容包括 SRE 团队的各种项目实践、团队组织形式、技术迭代、职能领域的扩展等。活动的目的是为了促进 SRE 的发展,让更多的企业了解 SRE 的实际应用方式,以及SRE的最佳实践。
所有公开活动的报名信息都会在本站发布,敬请关注。这些活动信息也会同步到联盟建立的微信公众号、视频号、B站和YouTube频道,欢迎关注。
微信公众号、视频号、B站和YouTube频道,请在各个平台搜索 “SRE精英联盟”。
The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读当前,降本增效是各大互联网公司的重要方向,IT成本则占据了互联网公司成本的大头。如何有效的降本?如何推动各业务线配合?如何平衡成本、质量和效率?本文将介绍B站的IT成本管理和优化的思路,介绍B站通过落地FinOps,推进成本洞察、技术优化和运营优化,提升资源效率的经验。2022年,在B站DAU稳步增长的情况下,IT成本花费金额低于21年同期,为公司节省了数亿成本。项目团队也获得了公司2022年度技术突出贡献奖。
-IT的成本管理主要是针对预算的管理,每财年开始的时候完成整个财年的预算编制。在预算编制的过程中,将业务目标转化为成本,结合技术优化方案,定下来降本目标。业务增长目标加上降本目标得出成本目标。
- -预算定好了,降本目标也定好了,那是不是按部就班的执行就好了?这中间暴露出来几个问题:
-其中最重要的是最后一个问题,业务对资源效率和成本无感知,那么降本的收益也就难以评估,业务的降本动力就会不足。
-既然降本目标已经下达,行动就迫在眉睫。
-一开始我们延续传统思路,提到降本增效,第一反应就是各类资源利用率。与所有互联网公司的敏捷性相同,我们基于内部的平台和资源,整合监控系统、资产管理系统、混合云HCRM系统等基础数据,使用数据平台的数仓能力,快速搭建了资源数仓、数据看板与告警机制。基于历史数据,希望支持业务资源预估和制定降本目标等活动。
-根据B站的成本占比数据,我们重点设立了核心关注的是带宽资源和计算资源的利用率相关指标。
-当前我们已经实现,针对对不同供应商,将同类资源的不同指标进行归一化,例如多云场景下不同云厂商的指标对齐。对于GPU这类资源,还会考量训练、推理等不同场景下的利用率等。
-为了更好的联动其他团队,我们还给公司内各类技术中台建立效能模型,注重计算、存储等各类平台模型都有不同,以容器平台为例:
- -关注以上指标,可有效评估容器平台的资源效能,支持平台做资源水位线管理,度量使用效率和技术优化空间。
-经过一段时间的实践,尽管拉着资源使用者聊利用率、巡检各部门空闲机器、甚至定期制作各类排名榜单,我们还是发现降本工作推进缓慢。技术中台与业务部门间难以联动、研发人员缺乏成本意识、无法量化降本产出等核心问题依旧难以解决。
-那段时间,碰上行业内越来越多公司开始重视降本增效,在与其他公司的相关从业者多次交流讨论后,一个概念逐渐出现到我们眼前——FinOps(Financial Operations)。
-按照FinOps Foundation给出的定义,FinOps是一种不断发展的云财务管理规范和文化实践,通过帮助工程、财务、技术和业务团队,基于数据驱动,在支出决策上展开合作,使得组织能够获取最大的业务价值。
-当前云原生成为技术选型的共识,B站内部平台和系统也大多选择了云原生的道路。B站的云原生是搭建在私有云、公有云的多云环境上的,其中私有云底层资源为租赁IDC和自有服务器资产。FinOps的整个框架不仅适用于公有云上的资源和成本管理,也同样适用于私有云,整体的工作思路和逻辑是一致的。
- -从上面FinOps Framework可以看到,参与Finops的角色很多:
-做为FinOps实践者,需要联合业务、平台、运维、基础工程、财务和采购团队一起,对IT成本进行有效管理和优化。
-FinOps的生命周期分为三个阶段:
-在反复研究相关理论后,我们定下了B站基于FinOps视角下降本的实验路径:
-所有技术需求的开展都离不开其底层资源,而各类IT资源的成本,需要纳入财务对各业务线的ROI考核中。但在之前很长一段时间内,业务线可能只有一个预算的大概数字,并不了解细节,自然也不能引起重视。也就没有量化分析的基础,很难明确优化的目标和方向。
-为了更好的衡量技术成本,将每一笔IT资源的采购成本,折算到每个业务甚至每次活动中,为了让每个业务线都能清楚钱花到哪里去了,了解其IT成本及具体构,我们首先引入财务中的两个概念。
-想要将CAPEX转化为OPEX,就需要计算TCO(Total Cost of Ownership),将采购硬件资产的一次性成本分摊到该资产的生命周期里。以一台服务器为例,直接采购成本即为CAPEX,将采购成本分摊到今后使用的每个月,再增加服务器每月配套使用的其他资源成本,即可得到TCO模型:
- -B站的业务搭建在公有云和私有云上,想要各个业务了解成本,需要公有云和私有云都能计费和拆帐。将IT资源和对应的成本挂钩。技术中台想要和公有云一样具备计费、出账和对账的能力,则需要统一设计和升级。各技术中台需设计计费的SKU(即平台售卖的产品),定好价格策略,然后统计各业务的资源用量,最终实现向内部业务计费出账。
-SKU设计时即考虑和公有云平台对齐,以便和公有云成本对比。又需要兼顾公司的实际业务场景需求。例如,容器平台的一种CPU产品定价模型如下:
- -对于其他技术中台的SKU,基本适用以上“单价=SKU对应TCO/理论总服务量“的模式。由于技术中台没有盈利压力,账单只是为了合理的反应业务成本,推动业务提升使用资源的效率,所以平台资源利用率的提升让可售卖的资源更多了,降低了单个资源的单价,业务从成本上也能受益。
-成本=单价*用量。单价有了,接下来需要确定业务各SKU的计费用量了。我们大致将用量的统计方式分成了两类,共享与独占。还是以容器平台的上述SKU为例:
- -在实际计算中,即使A(独占类)、B(共享类)两个服务实际消耗的CPU相同,A的计费用量也会高于B的。因为A所在资源池就算无服务运行,其独占的特性也使其他服务无法调度进来,造成浪费。因此在成本量化上,按其资源池理论最大使用量进行收费。相对的,共享资源池内的空闲节点可调度其他服务,按服务实际申请容器的limit进行收费。
-通过区分独占、共享用量统计逻辑,更多的业务方选择收费更低的共享类资源,服务器资源的归属逐渐从业务方,转向技术中台,这使得中台承担更多的容量管理工作。原本在公司采购服务器流程中:预估业务目标->转化机器数量->提出采购需求->中台交付资源,技术中台不会过多参与整机数量评估,业务需求采买多少服务器,中台最终就交付、托管多少台的服务。
-而现在,整个流程改进为:预估业务目标->中台转化算力需求->评估全局算力缺口->提出采购需求。中台会收集各业务需求,再结合自身存量资源,提出缺口算力对应的采购需求,从而减少资源采买。
-“成本=单价*用量”,可以从折旧(Opex)的角度,客观反映出平台空闲与超卖情况,推动技术中台和业务协同优化,并量化成本收益。
-双方齐头并进,合作共赢,优化IT成本。
- -账单生成好了,下个主要问题是让业务负责人了解账单并Review成本,从而确定后续优化方向。账单的确认流程由统一的出账系统实现,具体成本分摊的规则、资源定价和出账的流程都在系统里定义。系统里还有各类资源IT成本模型,能够量化资源与成本关系,最终将每一种IT成本以统一的形式发送给业务方。
-依托于出账系统,公有云和私有云成本都能在统一的账单里展示,业务查看账单就能知道完整的IT成本构成。每月各业务技术负责人在收到系统推送的账单后,需完成对账Review,并在系统中确认账单。如对账单细节有疑问可在系统中标注反馈,出账平台将修正账单。
-这里其实包含了很多的沟通成本,业务刚开始收到一份账单,是很难看懂账单的,需要有人"翻译"一下。业务是业务视角,账单是资源视角,一个业务或者一个功能对应到哪些资源上,各类资源的含义都需要解释和说明。
-对账中最困难的其实是“资源归属业务”的准确性问题。挑战来自公司组织架构的各种调整,业务和资源的不断变化,还有历史包袱,有些历史资源归属不清等等。
-为确保归属的准确性,归属映射关系从服务树(CMDB)同步。每一个微服务应用都有自身的APPID(Application Identification)。出账系统通过APPID来进行应用的唯一定位与关联相关资源的项目、部门和负责人等信息。基于CMDB的APPID(服务/应用粒度)=>项目=>组织架构=>业务的关系,实现多维度的成本视角,应用视角,部门视角或者业务视角。
-非服务树(CMDB)支持的资源,则通过各平台自身维护的归属映射,以实现多种方式的成本归属。例如大数据平台基于工作空间的归属关系。
-与此同时,成本数据的实时性也影响到成本监测和优化分析的有效性。日级别或者更加实时的账单,能协助业务快速发现和定位成本问题,及时调整项目投入。提升实时性也是后续账单系统的迭代方向。
- -总结一下,整个流程就是:**平台出账=>业务对账=>账单分析=>针对性优化=>优化效果反映到下一出账周期的资源对账,这样一套闭环流程。**通过对账,将IT成本及时同步给Finops中各类干系人,强化成本责任制,为IT成本优化决策提供数据支撑。同时反映IT成本优化效果、预算执行情况等指标。
-成本账单有了,效能大盘也有了,接下来该在哪些方向上推进成本优化呢?如何有效推进成本优化落地呢?
-首先让我们来分析一下成本数据。B站的主要业务是点播、直播、电商、游戏等,做为一个以视频为主的网站,B站的每年IT成本花费中,带宽占比最大,其次是硬件,最后是公有云&其他IT服务类成本。想要做到成本优化的收益最大化,那么在各类成本资源项上都需要投入优化。
-从业务角度看,不同的资源需求有着不同的成本模型。
-从资源角度看,不同的计费方式有着不同的优化思路。
-带宽成本是成本的最大头,从使用角度可以分为点播带宽、直播带宽、Web带宽。其中Web带宽又细分为动态带宽和静态带宽。
-(1)点播带宽成本模型
-下面以点播带宽举例,点播带宽的成本模型如下:
-点播带宽成本 = 平均单次播放带宽 点播播放次数 带宽单价。
-(2)点播带宽优化思路
-从上述简化的模型分析可以分析出点播带宽的优化主要是思路是降低码率和降低单价,实际推进的优化项目主要如下:
-除了点播带宽,上述的直播、Web动态、Web静态都同步推进优化,思路也是从成本模型数据分析出发,优化前核算成本,优化后验证收益。
-服务器硬件优化不同于带宽,主要使用利用率来衡量优化效果,同时采用TCO或者Opex来核算和评估技改优化方案。
-(1)服务器硬件迭代
-硬件的迭代速度是飞速的,每一次的硬件迭代,也刷新了单位算力的成本的下限。既然新的硬件更有成本优势,那么应该尽量引导业务配合硬件升级,每个硬件代次的迭代成本优化效果都是非常显著的。
-同时,硬件功耗的增长也是飞速的,机柜从3KW、4KW、8KW到10KW,机柜和电力成本优化的收益也会非常可观。在IDC的布局和选择上,可以选择更加廉价的资源,将接入的POP点和IDC解耦,以达到性能和成本的最优。
-(2)服务器虚拟化和混部
-基于K8S构建的私有云容器平台,是服务器成本优化的主力。平台也发表过多篇文章分享混部和VPA技术。让我们来整体看下优化思路,还记得前面讲的效能模型吗?容器平台的优化就是基于资源的效能模型。
- -提升容器总资源量:将服务器资源尽量都容器化,让更多的业务都搭建在容器之上,不止业务应用,其他的技术中台的应用也要尽量接入到容器平台中。
-提升池化率(可售卖的资源量/总资源量):提高池化率主要是在有限的资源上,尽量增加可售卖的资源量,让更多的资源都是通过统一的容器调度。
-提升分配率(已售卖的资源量/可售卖的资源量):不同分配率的资源池可以考虑合并,减少资源碎片和冗余。
-提升利用率(使用资源量/已售卖的资源量):利用率不足将造成资源的极度浪费,通过建立应用画像,利用超卖、VPA、HPA等有效手段,资源利用率得到大幅提升。
-除了以上的手段,混部也是提升利用率的一大利器。利用不同业务的潮汐效应,分时复用资源。转码做为算力密集型业务,最早尝试混部。目前B站已经对离线-离线,在线-离线间进行了混部,也有相关的技术分享文章。
-当前在推进的主要是AI场景下的混部,也就是推广搜业务的混部。AI业务不仅是计算密集型,访存带宽也非常高,会触达硬件瓶颈,造成雪崩效应,因此混部策略需要更加谨慎。
-不同于服务器资源,公有云承担弹性保障、降低延迟、海外部署等用途。而公有云的成本优化,是为在支持业务正常发展的前提下,最大程度使用公有云资源即买即用的特性。
-根据资源类型与其对应的计费方式,公有云上资源大致可分为网络流量、云服务器等IaaS资源、云上SaaS服务等资源。不同资源,需对症下药。
-(1)根据业务特性适配资源
-云上项目根据业务特性,会产生波形截然不同的网络流量,而云厂商提供的网络流量产品也根据特点还有不同的计费方式。需同时考虑此二者关系,才能做到网络成本最优。
-常见的网络类产品计费模式有按带宽计费和按流量计费:
-除计费模式外,网络线路类型也有不同选择,例如动态BGP、静态BGP、三大运营商单线、公网或混合云专线等,会让成本有较大差异,同样需要根据业务的架构方案及成本模型进行选择。
-在此基础上还可考虑其他策略,例如将多个项目的网络流量放进一个共享带宽包,可实现带宽的共峰收益。
-(2)预先规划与定期释放
-IaaS类资源多以实例*使用时长的形式计费,因此可在申请阶段就控制新增资源量。大型项目的容量、实例组合和付费策略在申请时就要求有明确规划。
-申请方提交资源需求后,FinOps各方会基于业务特点、成本等考虑,确定供应商、地域、资源型号等事宜。
-(3)自研or公有云
-通常情况下,公有云的SaaS类服务拥有快速部署、简易维护等优势,但相较自建乃至云上IaaS产品会有更高的定价。
-同类自研产品在公司内私有云已投入大量前期成本,拥有较为成熟的技术积累和专业运维团队,在经过一定的标准化改造,可满足云上同类产品的功能需求。而对于自研暂无法替代或改造收益不高的产品,会通过调整使用场景、计费方式或寻找价格更优的同类产品替代。
-随着B站自建机房节点与传输网络建设程度提升,后续更多云上项目可复用基础服务和基础设施,做到常量私有云+公有云混合部署,突发公有云弹性兜底,实现此类服务的混合云方案。基于上述执行办法的实践,B站的自研HTTPDNS域名解析、DSA动态加速等服务,已节省超过一半的成本。
-如下图,IT成本除了带宽、服务器、公有云,还有很多其他资源成本,各项成本FinOps都需要分析并推动优化。在分析和推进的过程中,形成了一套完整的成本模型。随着业务不断的发展,成本模型和优化方案也在不断进步。
- -运营优化是围绕两个方面开展的:
-成本运营,依托于预算、成本账单和成本模型,及时和各方同步成本情况和问题。
-资源运营,依托于资源效能大盘数据,及时发现并制止资源浪费现象。
-1、成本运营
-预算控制:为了降本做到极致,达到成本最优,预算控制需要更加严格。预算实际执行采购的时间可能和预算规划时间已经间隔比较长了,内部和外部都发生了变化,需要及时根据变化进行调整,尽量减少金额。
-决算分析:每月基于账单数据进行成本分析,将超预算或者其他有改进空间的成本项进行重点沟通,沟通范围为业务研发负责人、基础平台负责人、财务、采购等FinOps各角色。对超预算的风险进行预警,共同商议改进措施和策略。
-账单分析:协助业务理解账单,从业务角度触发,分析单DAU成本,为业务降本提供指标和决策依据。
-成本核算:对于技术改造的新方案或项目,构建成本模型,决策出成本改进的最优解。
-成本决策:成本的模型搭建不难,难的是如何在追求成本更优的情况下,兼顾稳定性和效率。成本优化通常伴随着技术升级和技术改造,大量的人力投入会影响原来计划的迭代效率,系统升级也常常会带来不稳定因素。追求廉价资源的使用,也会影响系统的质量,需要系统设计上能考虑到容错和兜底策略。总的来说,如果没有强有力的管理层做成本决策,降本增效的效果将会大打折扣。
- -2、资源运营
-公有云主机:结合利用率监控、混合云平台及供应商账单数据,需要监控资源效能情况,发现不合理的冗余容量、不再使用的资源,及时推进缩容、降配等操作。
-公有云服务:资源巡检过程中,若发现无人认领、未清退完全的资源,例如闲置未挂载的却仍在计费的云硬盘,历史悠久的快照等,会定期公示并清退。
-IDC服务器:对于利用率极低的服务器,推进纳入容器的资源池中,尽量容器化。
-其他资源:各服务使用的合理性也需要运营同学关注,例如超长短信会拆成多条计费,合理设计短信模板,能节省大量成本。
-B站通过对FinOps的实践,实现了成本洞察=>成本优化=>运营优化的完整闭环。通过效能数据、成本账单、持续优化和运营等关键行动,达成了业务增长而IT成本金额不增长,为公司节省了数亿成本。后续FinOps将继续在实时数据驱动决策、成本预测等方向继续探索,追求更加极致的IT成本,提升毛利率。
---参考资料
-
作者丨叶翠、马永智 -来源丨公众号:哔哩哔哩技术(ID:bilibili-TC)
- -当前,降本增效是各大互联网公司的重要方向,IT成本则占据了互联网公司成本的大头。如何有效的降本?如何推动各业务线配合?如何平衡成本、质量和效率?本文将介绍B站的IT成本管理和优化的思路,介绍B站通过落地FinOps,推进成本洞察、技术优化和运营优化,提升资源效率的经验。2022年,在B站DAU稳步增长的情况下,IT成本花费金额低于21年同期,为公司节省了数亿成本。项目团队也获得了公司2022年度技术突出贡献奖。
IT的成本管理主要是针对预算的管理,每财年开始的时候完成整个财年的预算编制。在预算编制的过程中,将业务目标转化为成本,结合技术优化方案,定下来降本目标。业务增长目标加上降本目标得出成本目标。
预算定好了,降本目标也定好了,那是不是按部就班的执行就好了?这中间暴露出来几个问题:
其中最重要的是最后一个问题,业务对资源效率和成本无感知,那么降本的收益也就难以评估,业务的降本动力就会不足。
既然降本目标已经下达,行动就迫在眉睫。
一开始我们延续传统思路,提到降本增效,第一反应就是各类资源利用率。与所有互联网公司的敏捷性相同,我们基于内部的平台和资源,整合监控系统、资产管理系统、混合云HCRM系统等基础数据,使用数据平台的数仓能力,快速搭建了资源数仓、数据看板与告警机制。基于历史数据,希望支持业务资源预估和制定降本目标等活动。
根据B站的成本占比数据,我们重点设立了核心关注的是带宽资源和计算资源的利用率相关指标。
当前我们已经实现,针对对不同供应商,将同类资源的不同指标进行归一化,例如多云场景下不同云厂商的指标对齐。对于GPU这类资源,还会考量训练、推理等不同场景下的利用率等。
为了更好的联动其他团队,我们还给公司内各类技术中台建立效能模型,注重计算、存储等各类平台模型都有不同,以容器平台为例:
关注以上指标,可有效评估容器平台的资源效能,支持平台做资源水位线管理,度量使用效率和技术优化空间。
经过一段时间的实践,尽管拉着资源使用者聊利用率、巡检各部门空闲机器、甚至定期制作各类排名榜单,我们还是发现降本工作推进缓慢。技术中台与业务部门间难以联动、研发人员缺乏成本意识、无法量化降本产出等核心问题依旧难以解决。
那段时间,碰上行业内越来越多公司开始重视降本增效,在与其他公司的相关从业者多次交流讨论后,一个概念逐渐出现到我们眼前——FinOps(Financial Operations)。
按照FinOps Foundation给出的定义,FinOps是一种不断发展的云财务管理规范和文化实践,通过帮助工程、财务、技术和业务团队,基于数据驱动,在支出决策上展开合作,使得组织能够获取最大的业务价值。
当前云原生成为技术选型的共识,B站内部平台和系统也大多选择了云原生的道路。B站的云原生是搭建在私有云、公有云的多云环境上的,其中私有云底层资源为租赁IDC和自有服务器资产。FinOps的整个框架不仅适用于公有云上的资源和成本管理,也同样适用于私有云,整体的工作思路和逻辑是一致的。
从上面FinOps Framework可以看到,参与Finops的角色很多:
做为FinOps实践者,需要联合业务、平台、运维、基础工程、财务和采购团队一起,对IT成本进行有效管理和优化。
FinOps的生命周期分为三个阶段:
在反复研究相关理论后,我们定下了B站基于FinOps视角下降本的实验路径:
所有技术需求的开展都离不开其底层资源,而各类IT资源的成本,需要纳入财务对各业务线的ROI考核中。但在之前很长一段时间内,业务线可能只有一个预算的大概数字,并不了解细节,自然也不能引起重视。也就没有量化分析的基础,很难明确优化的目标和方向。
为了更好的衡量技术成本,将每一笔IT资源的采购成本,折算到每个业务甚至每次活动中,为了让每个业务线都能清楚钱花到哪里去了,了解其IT成本及具体构,我们首先引入财务中的两个概念。
想要将CAPEX转化为OPEX,就需要计算TCO(Total Cost of Ownership),将采购硬件资产的一次性成本分摊到该资产的生命周期里。以一台服务器为例,直接采购成本即为CAPEX,将采购成本分摊到今后使用的每个月,再增加服务器每月配套使用的其他资源成本,即可得到TCO模型:
B站的业务搭建在公有云和私有云上,想要各个业务了解成本,需要公有云和私有云都能计费和拆帐。将IT资源和对应的成本挂钩。技术中台想要和公有云一样具备计费、出账和对账的能力,则需要统一设计和升级。各技术中台需设计计费的SKU(即平台售卖的产品),定好价格策略,然后统计各业务的资源用量,最终实现向内部业务计费出账。
SKU设计时即考虑和公有云平台对齐,以便和公有云成本对比。又需要兼顾公司的实际业务场景需求。例如,容器平台的一种CPU产品定价模型如下:
对于其他技术中台的SKU,基本适用以上“单价=SKU对应TCO/理论总服务量“的模式。由于技术中台没有盈利压力,账单只是为了合理的反应业务成本,推动业务提升使用资源的效率,所以平台资源利用率的提升让可售卖的资源更多了,降低了单个资源的单价,业务从成本上也能受益。
成本=单价*用量。单价有了,接下来需要确定业务各SKU的计费用量了。我们大致将用量的统计方式分成了两类,共享与独占。还是以容器平台的上述SKU为例:
在实际计算中,即使A(独占类)、B(共享类)两个服务实际消耗的CPU相同,A的计费用量也会高于B的。因为A所在资源池就算无服务运行,其独占的特性也使其他服务无法调度进来,造成浪费。因此在成本量化上,按其资源池理论最大使用量进行收费。相对的,共享资源池内的空闲节点可调度其他服务,按服务实际申请容器的limit进行收费。
通过区分独占、共享用量统计逻辑,更多的业务方选择收费更低的共享类资源,服务器资源的归属逐渐从业务方,转向技术中台,这使得中台承担更多的容量管理工作。原本在公司采购服务器流程中:预估业务目标->转化机器数量->提出采购需求->中台交付资源,技术中台不会过多参与整机数量评估,业务需求采买多少服务器,中台最终就交付、托管多少台的服务。
而现在,整个流程改进为:预估业务目标->中台转化算力需求->评估全局算力缺口->提出采购需求。中台会收集各业务需求,再结合自身存量资源,提出缺口算力对应的采购需求,从而减少资源采买。
“成本=单价*用量”,可以从折旧(Opex)的角度,客观反映出平台空闲与超卖情况,推动技术中台和业务协同优化,并量化成本收益。
双方齐头并进,合作共赢,优化IT成本。
账单生成好了,下个主要问题是让业务负责人了解账单并Review成本,从而确定后续优化方向。账单的确认流程由统一的出账系统实现,具体成本分摊的规则、资源定价和出账的流程都在系统里定义。系统里还有各类资源IT成本模型,能够量化资源与成本关系,最终将每一种IT成本以统一的形式发送给业务方。
依托于出账系统,公有云和私有云成本都能在统一的账单里展示,业务查看账单就能知道完整的IT成本构成。每月各业务技术负责人在收到系统推送的账单后,需完成对账Review,并在系统中确认账单。如对账单细节有疑问可在系统中标注反馈,出账平台将修正账单。
这里其实包含了很多的沟通成本,业务刚开始收到一份账单,是很难看懂账单的,需要有人"翻译"一下。业务是业务视角,账单是资源视角,一个业务或者一个功能对应到哪些资源上,各类资源的含义都需要解释和说明。
对账中最困难的其实是“资源归属业务”的准确性问题。挑战来自公司组织架构的各种调整,业务和资源的不断变化,还有历史包袱,有些历史资源归属不清等等。
为确保归属的准确性,归属映射关系从服务树(CMDB)同步。每一个微服务应用都有自身的APPID(Application Identification)。出账系统通过APPID来进行应用的唯一定位与关联相关资源的项目、部门和负责人等信息。基于CMDB的APPID(服务/应用粒度)=>项目=>组织架构=>业务的关系,实现多维度的成本视角,应用视角,部门视角或者业务视角。
非服务树(CMDB)支持的资源,则通过各平台自身维护的归属映射,以实现多种方式的成本归属。例如大数据平台基于工作空间的归属关系。
与此同时,成本数据的实时性也影响到成本监测和优化分析的有效性。日级别或者更加实时的账单,能协助业务快速发现和定位成本问题,及时调整项目投入。提升实时性也是后续账单系统的迭代方向。
总结一下,整个流程就是:**平台出账=>业务对账=>账单分析=>针对性优化=>优化效果反映到下一出账周期的资源对账,这样一套闭环流程。**通过对账,将IT成本及时同步给Finops中各类干系人,强化成本责任制,为IT成本优化决策提供数据支撑。同时反映IT成本优化效果、预算执行情况等指标。
成本账单有了,效能大盘也有了,接下来该在哪些方向上推进成本优化呢?如何有效推进成本优化落地呢?
首先让我们来分析一下成本数据。B站的主要业务是点播、直播、电商、游戏等,做为一个以视频为主的网站,B站的每年IT成本花费中,带宽占比最大,其次是硬件,最后是公有云&其他IT服务类成本。想要做到成本优化的收益最大化,那么在各类成本资源项上都需要投入优化。
从业务角度看,不同的资源需求有着不同的成本模型。
从资源角度看,不同的计费方式有着不同的优化思路。
带宽成本是成本的最大头,从使用角度可以分为点播带宽、直播带宽、Web带宽。其中Web带宽又细分为动态带宽和静态带宽。
(1)点播带宽成本模型
下面以点播带宽举例,点播带宽的成本模型如下:
点播带宽成本 = 平均单次播放带宽 点播播放次数 带宽单价。
(2)点播带宽优化思路
从上述简化的模型分析可以分析出点播带宽的优化主要是思路是降低码率和降低单价,实际推进的优化项目主要如下:
除了点播带宽,上述的直播、Web动态、Web静态都同步推进优化,思路也是从成本模型数据分析出发,优化前核算成本,优化后验证收益。
服务器硬件优化不同于带宽,主要使用利用率来衡量优化效果,同时采用TCO或者Opex来核算和评估技改优化方案。
(1)服务器硬件迭代
硬件的迭代速度是飞速的,每一次的硬件迭代,也刷新了单位算力的成本的下限。既然新的硬件更有成本优势,那么应该尽量引导业务配合硬件升级,每个硬件代次的迭代成本优化效果都是非常显著的。
同时,硬件功耗的增长也是飞速的,机柜从3KW、4KW、8KW到10KW,机柜和电力成本优化的收益也会非常可观。在IDC的布局和选择上,可以选择更加廉价的资源,将接入的POP点和IDC解耦,以达到性能和成本的最优。
(2)服务器虚拟化和混部
基于K8S构建的私有云容器平台,是服务器成本优化的主力。平台也发表过多篇文章分享混部和VPA技术。让我们来整体看下优化思路,还记得前面讲的效能模型吗?容器平台的优化就是基于资源的效能模型。
提升容器总资源量:将服务器资源尽量都容器化,让更多的业务都搭建在容器之上,不止业务应用,其他的技术中台的应用也要尽量接入到容器平台中。
提升池化率(可售卖的资源量/总资源量):提高池化率主要是在有限的资源上,尽量增加可售卖的资源量,让更多的资源都是通过统一的容器调度。
提升分配率(已售卖的资源量/可售卖的资源量):不同分配率的资源池可以考虑合并,减少资源碎片和冗余。
提升利用率(使用资源量/已售卖的资源量):利用率不足将造成资源的极度浪费,通过建立应用画像,利用超卖、VPA、HPA等有效手段,资源利用率得到大幅提升。
除了以上的手段,混部也是提升利用率的一大利器。利用不同业务的潮汐效应,分时复用资源。转码做为算力密集型业务,最早尝试混部。目前B站已经对离线-离线,在线-离线间进行了混部,也有相关的技术分享文章。
当前在推进的主要是AI场景下的混部,也就是推广搜业务的混部。AI业务不仅是计算密集型,访存带宽也非常高,会触达硬件瓶颈,造成雪崩效应,因此混部策略需要更加谨慎。
不同于服务器资源,公有云承担弹性保障、降低延迟、海外部署等用途。而公有云的成本优化,是为在支持业务正常发展的前提下,最大程度使用公有云资源即买即用的特性。
根据资源类型与其对应的计费方式,公有云上资源大致可分为网络流量、云服务器等IaaS资源、云上SaaS服务等资源。不同资源,需对症下药。
(1)根据业务特性适配资源
云上项目根据业务特性,会产生波形截然不同的网络流量,而云厂商提供的网络流量产品也根据特点还有不同的计费方式。需同时考虑此二者关系,才能做到网络成本最优。
常见的网络类产品计费模式有按带宽计费和按流量计费:
除计费模式外,网络线路类型也有不同选择,例如动态BGP、静态BGP、三大运营商单线、公网或混合云专线等,会让成本有较大差异,同样需要根据业务的架构方案及成本模型进行选择。
在此基础上还可考虑其他策略,例如将多个项目的网络流量放进一个共享带宽包,可实现带宽的共峰收益。
(2)预先规划与定期释放
IaaS类资源多以实例*使用时长的形式计费,因此可在申请阶段就控制新增资源量。大型项目的容量、实例组合和付费策略在申请时就要求有明确规划。
申请方提交资源需求后,FinOps各方会基于业务特点、成本等考虑,确定供应商、地域、资源型号等事宜。
(3)自研or公有云
通常情况下,公有云的SaaS类服务拥有快速部署、简易维护等优势,但相较自建乃至云上IaaS产品会有更高的定价。
同类自研产品在公司内私有云已投入大量前期成本,拥有较为成熟的技术积累和专业运维团队,在经过一定的标准化改造,可满足云上同类产品的功能需求。而对于自研暂无法替代或改造收益不高的产品,会通过调整使用场景、计费方式或寻找价格更优的同类产品替代。
随着B站自建机房节点与传输网络建设程度提升,后续更多云上项目可复用基础服务和基础设施,做到常量私有云+公有云混合部署,突发公有云弹性兜底,实现此类服务的混合云方案。基于上述执行办法的实践,B站的自研HTTPDNS域名解析、DSA动态加速等服务,已节省超过一半的成本。
如下图,IT成本除了带宽、服务器、公有云,还有很多其他资源成本,各项成本FinOps都需要分析并推动优化。在分析和推进的过程中,形成了一套完整的成本模型。随着业务不断的发展,成本模型和优化方案也在不断进步。
运营优化是围绕两个方面开展的:
成本运营,依托于预算、成本账单和成本模型,及时和各方同步成本情况和问题。
资源运营,依托于资源效能大盘数据,及时发现并制止资源浪费现象。
1、成本运营
预算控制:为了降本做到极致,达到成本最优,预算控制需要更加严格。预算实际执行采购的时间可能和预算规划时间已经间隔比较长了,内部和外部都发生了变化,需要及时根据变化进行调整,尽量减少金额。
决算分析:每月基于账单数据进行成本分析,将超预算或者其他有改进空间的成本项进行重点沟通,沟通范围为业务研发负责人、基础平台负责人、财务、采购等FinOps各角色。对超预算的风险进行预警,共同商议改进措施和策略。
账单分析:协助业务理解账单,从业务角度触发,分析单DAU成本,为业务降本提供指标和决策依据。
成本核算:对于技术改造的新方案或项目,构建成本模型,决策出成本改进的最优解。
成本决策:成本的模型搭建不难,难的是如何在追求成本更优的情况下,兼顾稳定性和效率。成本优化通常伴随着技术升级和技术改造,大量的人力投入会影响原来计划的迭代效率,系统升级也常常会带来不稳定因素。追求廉价资源的使用,也会影响系统的质量,需要系统设计上能考虑到容错和兜底策略。总的来说,如果没有强有力的管理层做成本决策,降本增效的效果将会大打折扣。
2、资源运营
公有云主机:结合利用率监控、混合云平台及供应商账单数据,需要监控资源效能情况,发现不合理的冗余容量、不再使用的资源,及时推进缩容、降配等操作。
公有云服务:资源巡检过程中,若发现无人认领、未清退完全的资源,例如闲置未挂载的却仍在计费的云硬盘,历史悠久的快照等,会定期公示并清退。
IDC服务器:对于利用率极低的服务器,推进纳入容器的资源池中,尽量容器化。
其他资源:各服务使用的合理性也需要运营同学关注,例如超长短信会拆成多条计费,合理设计短信模板,能节省大量成本。
B站通过对FinOps的实践,实现了成本洞察=>成本优化=>运营优化的完整闭环。通过效能数据、成本账单、持续优化和运营等关键行动,达成了业务增长而IT成本金额不增长,为公司节省了数亿成本。后续FinOps将继续在实时数据驱动决策、成本预测等方向继续探索,追求更加极致的IT成本,提升毛利率。
参考资料
作者丨叶翠、马永智 +来源丨公众号:哔哩哔哩技术(ID:bilibili-TC)
Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
-But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
---On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
-
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
- -Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
-But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
---On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
-
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
- -Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
-But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
---On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
-
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
- -Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
-But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
---On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
-
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
- -Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
-But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
---On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
-
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
- -Lorem ipsum dolor sit amet, consectetur adipiscing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum
But I must explain to you how all this mistaken idea of denouncing pleasure and praising pain was born and I will give you a complete account of the system, and expound the actual teachings of the great explorer of the truth, the master-builder of human happiness. No one rejects, dislikes, or avoids pleasure itself, because it is pleasure, but because those who do not know how to pursue pleasure rationally encounter consequences that are extremely painful. Nor again is there anyone who loves or pursues or desires to obtain pain of itself, because it is pain, but because occasionally circumstances occur in which toil and pain can procure him some great pleasure. To take a trivial example, which of us ever undertakes laborious physical exercise, except to obtain some advantage from it? But who has any right to find fault with a man who chooses to enjoy a pleasure that has no annoying consequences, or one who avoids a pain that produces no resultant pleasure?
On the other hand, we denounce with righteous indignation and dislike men who are so beguiled and demoralized by the charms of pleasure of the moment, so blinded by desire, that they cannot foresee the pain and trouble that are bound to ensue
At vero eos et accusamus et iusto odio dignissimos ducimus qui blanditiis praesentium voluptatum deleniti atque corrupti quos dolores et quas molestias excepturi sint occaecati cupiditate non provident, similique sunt in culpa qui officia deserunt mollitia animi, id est laborum et dolorum fuga. Et harum quidem rerum facilis est et expedita distinctio. Nam libero tempore, cum soluta nobis est eligendi optio cumque nihil impedit quo minus id quod maxime placeat facere possimus, omnis voluptas assumenda est, omnis dolor repellendus. Temporibus autem quibusdam et aut officiis debitis aut rerum necessitatibus saepe eveniet ut et voluptates repudiandae sint et molestiae non recusandae. Itaque earum rerum hic tenetur a sapiente delectus, ut aut reiciendis voluptatibus maiores alias consequatur aut perferendis doloribus asperiores repellat.
The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读请关注我们的微信公众号、B站和YouTube频道,获取最新的SRE技术资讯和最佳实践。
-
-
-
北京,中国
-北京
-上海
-视频号&B站-直播
-北京
-22 Jun, 2024
-13:00 +0600
-0¥/人
---地点:待定
-
-- -有任何建议和咨询,请联系我们。点这里
-
视频号&B站-直播
-上海
-地点:北京市海淀区清河小米科技园
有任何建议和咨询,请联系我们。点这里
视频号&B站-直播
上海
-13 Apr, 2024
-13:30 +0400
-免费
---地点:上海市杨浦区国正中心1号楼18楼
-
-- -有任何建议和咨询,请联系我们。点这里
-
视频号&B站-直播
-北京
-地点:上海市杨浦区国正中心1号楼18楼
有任何建议和咨询,请联系我们。点这里
视频号&B站-直播
视频号&B站-直播
-29 Feb, 2024
-20:00 +0100
-免费
-请扫码关注预约直播,或者关注回放视频。
-视频号: -
-B站: -
-本次直播的回放视频,已经被剪辑了三个独立的视频,请扫码关注以上的视频号或者B站,既可以观看。请点赞、评论、分享,感谢您的支持。我们将会在视频号和 B 站上回答您的问题,也欢迎您在评论区留言。精彩的问题和留言会在下一期直播中被选中并回答。
-上海
-北京
-请扫码关注预约直播,或者关注回放视频。
视频号: +
B站: +
本次直播的回放视频,已经被剪辑了三个独立的视频,请扫码关注以上的视频号或者B站,既可以观看。请点赞、评论、分享,感谢您的支持。我们将会在视频号和 B 站上回答您的问题,也欢迎您在评论区留言。精彩的问题和留言会在下一期直播中被选中并回答。
SRE精英联盟用社区协作的方式,历时数年,经过大量领域专家的努力,聚集了大量一线实操经验,并在持续更新中。本白皮书是联盟核心工作之一。
-联盟的社区定期举行各种交流研讨活动,包括双周闭门的例会、线上直播和线下的 Meetup 等等。。
-致力于发展核心的专家团队,讨论切磋各个公司当前线上的 SRE 实践。用白皮书和线上线下活动的方式不断输出行业影响。
-SRE 实践以及相关技术研究领域是生产系统安全稳定运行的基础,是消除和控制风险的不二法门。
-自从 SRE 的理念进入中国以来,就已经引起了很多企业的关注和效仿,但各企业实施 SRE 的方法各异,SRE 的实现效果也各不相同。与此同时,中国的互联网行业中涌现出了一批对SRE充满热情的倡导者,他们为社区做出了各种贡献;包括:孙宇聪翻译出版了《SRE:Google运维解密》、赵成在极客时间开设了课程《SRE实战手册》,以及赵舜东在社区里积极地布道分享等等,不胜枚举。2022年,由赵成等人牵头,首批来自于互联网、运营商、金融等行业领军企业的 SRE 团队负责人齐聚一堂,组织了SRE研讨社区,定期开展社区分享活动,共同探讨 SRE 在各企业里的发展路径,分享各自的实战经验,并总结出了这份来自一线实战的、详实而持续更新的《SRE实践白皮书》。
- - - 了解更多 - - -北京
-上海
-视频号&B站-直播
-The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -SRE精英联盟用社区协作的方式,历时数年,经过大量领域专家的努力,聚集了大量一线实操经验,并在持续更新中。本白皮书是联盟核心工作之一。
联盟的社区定期举行各种交流研讨活动,包括双周闭门的例会、线上直播和线下的 Meetup 等等。。
致力于发展核心的专家团队,讨论切磋各个公司当前线上的 SRE 实践。用白皮书和线上线下活动的方式不断输出行业影响。
SRE 实践以及相关技术研究领域是生产系统安全稳定运行的基础,是消除和控制风险的不二法门。
自从 SRE 的理念进入中国以来,就已经引起了很多企业的关注和效仿,但各企业实施 SRE 的方法各异,SRE 的实现效果也各不相同。与此同时,中国的互联网行业中涌现出了一批对SRE充满热情的倡导者,他们为社区做出了各种贡献;包括:孙宇聪翻译出版了《SRE:Google运维解密》、赵成在极客时间开设了课程《SRE实战手册》,以及赵舜东在社区里积极地布道分享等等,不胜枚举。2022年,由赵成等人牵头,首批来自于互联网、运营商、金融等行业领军企业的 SRE 团队负责人齐聚一堂,组织了SRE研讨社区,定期开展社区分享活动,共同探讨 SRE 在各企业里的发展路径,分享各自的实战经验,并总结出了这份来自一线实战的、详实而持续更新的《SRE实践白皮书》。
了解更多The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读本版本的增加了许可证
-公告 经过数年的编写和
-本版本的增加了许可证
公告 经过数年的编写和
经过数年的编写和修订,《SRE实践白皮书》v1.0.1 正式版终于发布了。这是一本关于SRE实践的白皮书,是SRE实践的指导手册,是SRE实践的最佳实践。
-白皮书的目录结构如下:
-如果您有任何问题或建议,点这里联系我们。
- -经过数年的编写和修订,《SRE实践白皮书》v1.0.1 正式版终于发布了。这是一本关于SRE实践的白皮书,是SRE实践的指导手册,是SRE实践的最佳实践。
白皮书的目录结构如下:
如果您有任何问题或建议,点这里联系我们。
CI/CD/CO 是现代软件开发和部署的关键技术。它们是自动化软件开发和部署流程的核心,旨在加快软件交付速度、提高软件质量、降低软件交付成本。CI/CD/CO 技术的意义在于帮助团队实现快速、安全、可靠的软件开发和部署,从而提高系统的可用性、可靠性和效率。
-持续集成(CI): 持续集成是将开发人员的代码集成到共享代码库,并进行自动化测试的过程。通过持续集成,团队可以更早地发现和解决代码质量问题,提高代码质量,减少软件开发周期。
-持续交付(CD): 持续交付是自动化地将代码部署到生产环境中,并进行自动化测试和部署的过程。通过持续交付,团队可以更快地发布新功能和修复bug,更好地满足用户需求,更快地适应市场变化。
-持续运维(CO): 持续运维是自动化地监控和管理生产环境的过程。通过持续运维,团队可以更及时地发现和解决系统故障和异常,提高系统的可用性和可靠性。
-CI/CD/CO 技术是现代软件开发和部署的核心,对于提高系统的可用性、可靠性和效率有着重要意义。通过不断探索和实践 CI/CD/CO 技术,团队可以更好地满足用户需求,更好地保护系统免受安全威胁,更好地推动软件开发和部署的自动化。
- -CI/CD/CO 是现代软件开发和部署的关键技术。它们是自动化软件开发和部署流程的核心,旨在加快软件交付速度、提高软件质量、降低软件交付成本。CI/CD/CO 技术的意义在于帮助团队实现快速、安全、可靠的软件开发和部署,从而提高系统的可用性、可靠性和效率。
持续集成(CI): 持续集成是将开发人员的代码集成到共享代码库,并进行自动化测试的过程。通过持续集成,团队可以更早地发现和解决代码质量问题,提高代码质量,减少软件开发周期。
持续交付(CD): 持续交付是自动化地将代码部署到生产环境中,并进行自动化测试和部署的过程。通过持续交付,团队可以更快地发布新功能和修复bug,更好地满足用户需求,更快地适应市场变化。
持续运维(CO): 持续运维是自动化地监控和管理生产环境的过程。通过持续运维,团队可以更及时地发现和解决系统故障和异常,提高系统的可用性和可靠性。
CI/CD/CO 技术是现代软件开发和部署的核心,对于提高系统的可用性、可靠性和效率有着重要意义。通过不断探索和实践 CI/CD/CO 技术,团队可以更好地满足用户需求,更好地保护系统免受安全威胁,更好地推动软件开发和部署的自动化。
容灾和高可用领域是SRE领域中的一个关键技术领域,旨在通过实施容灾和高可用技术,提高系统的稳定性、可靠性和可用性。容灾和高可用技术的意义在于帮助团队预防和应对系统故障和灾难,从而保障系统的稳定运行,满足用户需求。
-容灾技术: 容灾技术是实现对系统数据和服务的安全备份和快速恢复的关键。通过容灾技术,团队可以在系统故障或灾难发生时,快速恢复系统功能,减少系统停机时间,提高系统的可用性和可靠性。
-高可用技术: 高可用技术是实现系统长时间稳定运行的关键。通过高可用技术,团队可以在系统故障或灾难发生时,自动切换到备用系统,保障系统的稳定运行,满足用户需求。
-容灾和高可用技术是SRE领域中的一个关键技术领域,对于提高系统的稳定性、可靠性和可用性有着重要意义。通过不断探索和实践容灾和高可用技术,团队可以更好地预防和应对系统故障和灾难,保障系统的稳定运行,满足用户需求。
- -容灾和高可用领域是SRE领域中的一个关键技术领域,旨在通过实施容灾和高可用技术,提高系统的稳定性、可靠性和可用性。容灾和高可用技术的意义在于帮助团队预防和应对系统故障和灾难,从而保障系统的稳定运行,满足用户需求。
容灾技术: 容灾技术是实现对系统数据和服务的安全备份和快速恢复的关键。通过容灾技术,团队可以在系统故障或灾难发生时,快速恢复系统功能,减少系统停机时间,提高系统的可用性和可靠性。
高可用技术: 高可用技术是实现系统长时间稳定运行的关键。通过高可用技术,团队可以在系统故障或灾难发生时,自动切换到备用系统,保障系统的稳定运行,满足用户需求。
容灾和高可用技术是SRE领域中的一个关键技术领域,对于提高系统的稳定性、可靠性和可用性有着重要意义。通过不断探索和实践容灾和高可用技术,团队可以更好地预防和应对系统故障和灾难,保障系统的稳定运行,满足用户需求。
度量考核是评估系统运行状况的重要手段,它可以帮助团队了解系统的性能、可用性、可靠性和安全性等方面的指标,并为团队的持续改进提供数据支持。度量考核技术的意义在于帮助团队及时发现和解决问题,提高系统的可用性、可靠性和效率。
-性能度量: 通过性能度量,团队可以了解系统的响应时间、吞吐量和资源利用率等方面的指标,从而及时发现和解决性能问题,提高系统的性能。
-可用性度量: 通过可用性度量,团队可以了解系统的可用性和可靠性等方面的指标,从而及时发现和解决可用性问题,提高系统的可用性。
-可靠性度量: 通过可靠性度量,团队可以了解系统的可靠性和容错能力等方面的指标,从而及时发现和解决可靠性问题,提高系统的可靠性。
-安全度量: 通过安全度量,团队可以了解系统的安全性和合规性等方面的指标,从而及时发现和解决安全问题,提高系统的安全性。
-成本度量: 通过成本度量,团队可以了解系统的开发和维护成本等方面的指标,从而及时发现和解决成本问题,降低系统的成本。
-SRE中的度量考核技术是评估系统运行状况的重要手段,对于提高系统的可用性、可靠性和效率有着重要意义。通过不断探索和实践度量考核技术,团队可以更好地了解和改进系统的运行状况,更好地保护系统免受安全威胁,更好地推动系统的持续改进。
- -度量考核是评估系统运行状况的重要手段,它可以帮助团队了解系统的性能、可用性、可靠性和安全性等方面的指标,并为团队的持续改进提供数据支持。度量考核技术的意义在于帮助团队及时发现和解决问题,提高系统的可用性、可靠性和效率。
性能度量: 通过性能度量,团队可以了解系统的响应时间、吞吐量和资源利用率等方面的指标,从而及时发现和解决性能问题,提高系统的性能。
可用性度量: 通过可用性度量,团队可以了解系统的可用性和可靠性等方面的指标,从而及时发现和解决可用性问题,提高系统的可用性。
可靠性度量: 通过可靠性度量,团队可以了解系统的可靠性和容错能力等方面的指标,从而及时发现和解决可靠性问题,提高系统的可靠性。
安全度量: 通过安全度量,团队可以了解系统的安全性和合规性等方面的指标,从而及时发现和解决安全问题,提高系统的安全性。
成本度量: 通过成本度量,团队可以了解系统的开发和维护成本等方面的指标,从而及时发现和解决成本问题,降低系统的成本。
SRE中的度量考核技术是评估系统运行状况的重要手段,对于提高系统的可用性、可靠性和效率有着重要意义。通过不断探索和实践度量考核技术,团队可以更好地了解和改进系统的运行状况,更好地保护系统免受安全威胁,更好地推动系统的持续改进。
可观测性是指通过监控日志指标和追踪等手段来了解系统的运行状态和性能。在 SRE 研究领域范围中,可观测性的意义非常重要。
-介绍: 在 SRE 研究领域中,可观测性是指通过监控、日志、指标和追踪等手段来了解系统的运行状态和性能。可观测性技术是帮助 SRE 成员快速诊断系统故障、发现系统异常、优化系统性能的重要工具。通过实时监控和分析系统的各项指标,SRE 成员可以更加及时地发现和解决系统故障和异常,提高系统的可用性、可靠性和效率。
-意义: 可观测性技术在 SRE 研究领域中的意义主要体现在以下几个方面:1)帮助 SRE 成员及时发现和解决系统故障和异常,提高系统的可用性和可靠性;2)帮助 SRE 成员了解系统的性能和瓶颈,优化系统的性能和效率;3)帮助 SRE 成员追踪系统的变化和演化,及时发现和解决系统的问题;4)帮助 SRE 成员评估系统的可靠性和稳定性,为系统的持续改进提供数据支持。综上所述,可观测性技术在 SRE 研究领域中具有重要意义,是帮助 SRE 成员快速诊断系统故障、发现系统异常、优化系统性能的重要工具。
-可观测性是指通过监控日志指标和追踪等手段来了解系统的运行状态和性能。在 SRE 研究领域范围中,可观测性的意义非常重要。
介绍: 在 SRE 研究领域中,可观测性是指通过监控、日志、指标和追踪等手段来了解系统的运行状态和性能。可观测性技术是帮助 SRE 成员快速诊断系统故障、发现系统异常、优化系统性能的重要工具。通过实时监控和分析系统的各项指标,SRE 成员可以更加及时地发现和解决系统故障和异常,提高系统的可用性、可靠性和效率。
意义: 可观测性技术在 SRE 研究领域中的意义主要体现在以下几个方面:1)帮助 SRE 成员及时发现和解决系统故障和异常,提高系统的可用性和可靠性;2)帮助 SRE 成员了解系统的性能和瓶颈,优化系统的性能和效率;3)帮助 SRE 成员追踪系统的变化和演化,及时发现和解决系统的问题;4)帮助 SRE 成员评估系统的可靠性和稳定性,为系统的持续改进提供数据支持。综上所述,可观测性技术在 SRE 研究领域中具有重要意义,是帮助 SRE 成员快速诊断系统故障、发现系统异常、优化系统性能的重要工具。
平台工程是一种软件开发方法,它旨在提高系统的可靠性、可用性和效率。平台工程通过统一管理和自动化部署系统的运行环境,从而降低系统运维成本、减少人为错误、提高系统的稳定性和可靠性。平台工程的意义在于帮助团队实现快速、安全和可靠的软件部署,从而提高系统的可用性、可靠性和效率。
-统一管理运行环境: 平台工程通过统一管理系统的运行环境,包括操作系统、运行库、数据库等,从而简化系统的运维工作,提高系统的稳定性和可靠性。
-自动化部署: 平台工程通过自动化部署系统的运行环境,包括系统的配置、安装、启动等,从而降低系统的部署成本,提高系统的可用性和可靠性。
-监控和管理: 平台工程通过监控和管理系统的运行环境,包括系统的运行状态、资源使用情况等,从而及时发现和解决问题,提高系统的可用性和可靠性。
-综上所述,平台工程是一种通过统一管理和自动化部署系统的运行环境,从而提高系统的可靠性、可用性和效率的软件开发方法。通过不断探索和实践平台工程,团队可以更好地满足用户需求,更好地保护系统免受安全威胁,更好地推动软件开发和部署的自动化。
- -平台工程是一种软件开发方法,它旨在提高系统的可靠性、可用性和效率。平台工程通过统一管理和自动化部署系统的运行环境,从而降低系统运维成本、减少人为错误、提高系统的稳定性和可靠性。平台工程的意义在于帮助团队实现快速、安全和可靠的软件部署,从而提高系统的可用性、可靠性和效率。
统一管理运行环境: 平台工程通过统一管理系统的运行环境,包括操作系统、运行库、数据库等,从而简化系统的运维工作,提高系统的稳定性和可靠性。
自动化部署: 平台工程通过自动化部署系统的运行环境,包括系统的配置、安装、启动等,从而降低系统的部署成本,提高系统的可用性和可靠性。
监控和管理: 平台工程通过监控和管理系统的运行环境,包括系统的运行状态、资源使用情况等,从而及时发现和解决问题,提高系统的可用性和可靠性。
综上所述,平台工程是一种通过统一管理和自动化部署系统的运行环境,从而提高系统的可靠性、可用性和效率的软件开发方法。通过不断探索和实践平台工程,团队可以更好地满足用户需求,更好地保护系统免受安全威胁,更好地推动软件开发和部署的自动化。
发布工程是 SRE 领域中的一个重要概念,它是指为了实现快速、安全和可靠的软件发布而进行的一系列工程实践和技术手段的集合。发布工程的核心目标是通过自动化和标准化的方式,确保软件的高质量、高可靠性和高可用性,从而提高用户体验和系统的竞争力。
-在 SRE 研究领域中,发布工程的意义主要体现在以下几个方面:
-提高发布速度: 通过发布工程技术,团队可以实现快速、安全和可靠的软件发布,从而缩短软件发布周期,更快地向用户提供新功能和修复bug。
-降低发布风险: 发布工程技术可以帮助团队实现自动化的发布过程,并进行自动化测试和部署,从而降低软件发布的风险,确保发布的软件质量和稳定性。
-提高系统的可用性和可靠性: 发布工程技术可以帮助团队实现快速、安全和可靠的软件发布,从而提高系统的可用性和可靠性,确保系统能够持续稳定运行。
-提高团队的工作效率: 通过发布工程技术,团队可以实现自动化的发布流程,减少人工干预,提高工作效率,从而更好地满足用户需求,更快地适应市场变化。
-发布工程是 SRE 研究领域中的一个重要概念,它的意义在于帮助团队实现快速、安全、可靠的软件发布,提高系统的可用性、可靠性和效率,从而更好地满足用户需求,更好地保护系统免受安全威胁,更好地推动软件开发和部署的自动化。
- -发布工程是 SRE 领域中的一个重要概念,它是指为了实现快速、安全和可靠的软件发布而进行的一系列工程实践和技术手段的集合。发布工程的核心目标是通过自动化和标准化的方式,确保软件的高质量、高可靠性和高可用性,从而提高用户体验和系统的竞争力。
在 SRE 研究领域中,发布工程的意义主要体现在以下几个方面:
提高发布速度: 通过发布工程技术,团队可以实现快速、安全和可靠的软件发布,从而缩短软件发布周期,更快地向用户提供新功能和修复bug。
降低发布风险: 发布工程技术可以帮助团队实现自动化的发布过程,并进行自动化测试和部署,从而降低软件发布的风险,确保发布的软件质量和稳定性。
提高系统的可用性和可靠性: 发布工程技术可以帮助团队实现快速、安全和可靠的软件发布,从而提高系统的可用性和可靠性,确保系统能够持续稳定运行。
提高团队的工作效率: 通过发布工程技术,团队可以实现自动化的发布流程,减少人工干预,提高工作效率,从而更好地满足用户需求,更快地适应市场变化。
发布工程是 SRE 研究领域中的一个重要概念,它的意义在于帮助团队实现快速、安全、可靠的软件发布,提高系统的可用性、可靠性和效率,从而更好地满足用户需求,更好地保护系统免受安全威胁,更好地推动软件开发和部署的自动化。
精英联盟组织希望能陪伴式的加速度带新成员企业快速成长。
-联盟是一个持续学习的集体,我们希望能够帮助新成员企业快速成长,我们的专家团队会定期与新成员企业进行交流,帮助他们解决在SRE实践中遇到的问题,帮助他们快速成长。
- -精英联盟组织希望能陪伴式的加速度带新成员企业快速成长。
联盟是一个持续学习的集体,我们希望能够帮助新成员企业快速成长,我们的专家团队会定期与新成员企业进行交流,帮助他们解决在SRE实践中遇到的问题,帮助他们快速成长。
The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读The standard Lorem Ipsum passage, used since the 1500s Lorem
- 详细阅读 -The standard Lorem Ipsum passage, used since the 1500s Lorem
详细阅读多年监控运维,可观测性产品专家, 在可观测性的PMF ,商业化
-自2009年加入阿里以来,从一线技术支持逐步成长为GOC团队leader,推动了GOC能力转型升级,为业务的稳定运行提供支撑。
-自2009年加入阿里以来,从一线技术支持逐步成长为GOC团队leader,推动了GOC能力转型升级,为业务的稳定运行提供支撑。
畅销书《DevOps权威指南》作者,中国商联专家智库入库专家、国家互联网数据中心产业技术创新战略联盟(NIISA)智库专家委员会副主任委员、江苏银行业和保险业金融科技专家委员会候选专家、工信部企业数字化转型IOMM委员会特聘专家、江海职业学院客座讲师、财联社鲸平台智库入库专家、中国信通院可信云标准特聘专家、中国信通院低代码/无代码推进中心特聘专家,腾讯云最具价值专家TVP,阿里云最有价值专家MVP,《研发运营一体化(DEVOPS)能力成熟度模型》和《企业IT运维发展白皮书》核心作者,出版物《企业级DevOps实战案例-持续交付篇》合著作者,容器云技能大赛课程出品人,多个技术峰会演讲嘉宾,拥有丰富的企业级DevOps实战经验,专注企业IT数字化的转型和落地,致力于企业智慧运维体系的打造。
-从事信息科技岗位15年,涵盖基础架构、应用架构、数据库、DevOps,具备制造业、零售、金融等行业经验,参编行标两项,专著一本,合著两本,参加多个项目课题,获得三个已授权专利。
- -畅销书《DevOps权威指南》作者,中国商联专家智库入库专家、国家互联网数据中心产业技术创新战略联盟(NIISA)智库专家委员会副主任委员、江苏银行业和保险业金融科技专家委员会候选专家、工信部企业数字化转型IOMM委员会特聘专家、江海职业学院客座讲师、财联社鲸平台智库入库专家、中国信通院可信云标准特聘专家、中国信通院低代码/无代码推进中心特聘专家,腾讯云最具价值专家TVP,阿里云最有价值专家MVP,《研发运营一体化(DEVOPS)能力成熟度模型》和《企业IT运维发展白皮书》核心作者,出版物《企业级DevOps实战案例-持续交付篇》合著作者,容器云技能大赛课程出品人,多个技术峰会演讲嘉宾,拥有丰富的企业级DevOps实战经验,专注企业IT数字化的转型和落地,致力于企业智慧运维体系的打造。
从事信息科技岗位15年,涵盖基础架构、应用架构、数据库、DevOps,具备制造业、零售、金融等行业经验,参编行标两项,专著一本,合著两本,参加多个项目课题,获得三个已授权专利。
SRE 和Observability 领域专家,开源监控Open-Falcon、Nightingale夜莺的创始人。
-云原生智能运维科技公司快猫星云的创始人,SRE 和Observability 领域专家,资深云计算专家。中国计算机学会开源发展委员会执行委员,中国开源杰出贡献⼈物奖获得者,开源监控Open-Falcon、Nightingale夜莺的创始人。先后就职于百度、滴滴等互联网公司,曾任滴滴云计算总经理职务,长期从事运维和云计算领域的工作。
- -云原生智能运维科技公司快猫星云的创始人,SRE 和Observability 领域专家,资深云计算专家。中国计算机学会开源发展委员会执行委员,中国开源杰出贡献⼈物奖获得者,开源监控Open-Falcon、Nightingale夜莺的创始人。先后就职于百度、滴滴等互联网公司,曾任滴滴云计算总经理职务,长期从事运维和云计算领域的工作。
从业十余年,专注于运维效能、质量运营等领域。2017年加入哔哩哔哩,先后负责了B站运营研发、中间件研发和SRE体系等方向,构建了B站的统一作业&流程&鉴权服务,主导了数据库&缓存相关中间件的自研落地。目前主要负责SRE体系化建设和人员转型培训,设计落地应急响应、变更防控、蓝军演练、运维数据资产和资产成本等系统,持续优化业务稳定性、提升人员效率和降低资产成本。
-从业十余年,专注于运维效能、质量运营等领域。2017年加入哔哩哔哩,先后负责了B站运营研发、中间件研发和SRE体系等方向,构建了B站的统一作业&流程&鉴权服务,主导了数据库&缓存相关中间件的自研落地。目前主要负责SRE体系化建设和人员转型培训,设计落地应急响应、变更防控、蓝军演练、运维数据资产和资产成本等系统,持续优化业务稳定性、提升人员效率和降低资产成本。
- -从业十余年,专注于运维效能、质量运营等领域。2017年加入哔哩哔哩,先后负责了B站运营研发、中间件研发和SRE体系等方向,构建了B站的统一作业&流程&鉴权服务,主导了数据库&缓存相关中间件的自研落地。目前主要负责SRE体系化建设和人员转型培训,设计落地应急响应、变更防控、蓝军演练、运维数据资产和资产成本等系统,持续优化业务稳定性、提升人员效率和降低资产成本。
从业十余年,专注于运维效能、质量运营等领域。2017年加入哔哩哔哩,先后负责了B站运营研发、中间件研发和SRE体系等方向,构建了B站的统一作业&流程&鉴权服务,主导了数据库&缓存相关中间件的自研落地。目前主要负责SRE体系化建设和人员转型培训,设计落地应急响应、变更防控、蓝军演练、运维数据资产和资产成本等系统,持续优化业务稳定性、提升人员效率和降低资产成本。
目前负责趣丸科技的基础架构、SRE 保障、FinOps 财务管理以及运维产品体系等多个方面。16年运维工作经验,对 IDC、云计算、基础架构、云原生应用架构、SRE 运维保障、数据库多活和容灾、资源成本优化、运维产品规划和落地等方面具有深入理解和大量实践
-目前负责趣丸科技的基础架构、SRE 保障、FinOps 财务管理以及运维产品体系等多个方面。16年运维工作经验,对 IDC、云计算、基础架构、云原生应用架构、SRE 运维保障、数据库多活和容灾、资源成本优化、运维产品规划和落地等方面具有深入理解和大量实践
《The Site Reliability Workbook》《DevOps Handbook》译者,微软MVP,DevOps/SRE的长期实践者。致力于通过社区推广SRE/DevOps的理念、技术和实践。热衷于学习和传播开源技术。
-从业 20 余年,曾供职于Citrix、BMC、Red Hat、Elastic 等外商软件企业,现为独立顾问。从 18 年开始在国内创立了中国DevOps社区。专注于SRE和可观测性等方面的深入研究,从事相关领域的企业咨询和培训工作。
- -《The Site Reliability Workbook》《DevOps Handbook》译者,微软MVP,DevOps/SRE的长期实践者。致力于通过社区推广SRE/DevOps的理念、技术和实践。热衷于学习和传播开源技术。
从业 20 余年,曾供职于Citrix、BMC、Red Hat、Elastic 等外商软件企业,现为独立顾问。从 18 年开始在国内创立了中国DevOps社区。专注于SRE和可观测性等方面的深入研究,从事相关领域的企业咨询和培训工作。
资深SRE专家,“运维之路”订阅号与《运维数字化转型》等书作者
-拥有超10年金融领域运维工作,其间负责或参与企业运维组织、流程、工具的建设,包括多项重大业务系统及数据中心工程性项目实施,数据中心工作流程构建,运维平台规划与研发等工作,参与多项行业标准,以及《运维数字化转型:构建四位一体的数字化运维体系》、《运维数据治理》、《变局中的证券机构;数字化转型与创新》等图书的编写,获得高效运维社区、 DevOps时代社区颁发的“2022年度技术专家”,“腾讯云最具价值专家”,“运维之路”订阅号作者。
- -拥有超10年金融领域运维工作,其间负责或参与企业运维组织、流程、工具的建设,包括多项重大业务系统及数据中心工程性项目实施,数据中心工作流程构建,运维平台规划与研发等工作,参与多项行业标准,以及《运维数字化转型:构建四位一体的数字化运维体系》、《运维数据治理》、《变局中的证券机构;数字化转型与创新》等图书的编写,获得高效运维社区、 DevOps时代社区颁发的“2022年度技术专家”,“腾讯云最具价值专家”,“运维之路”订阅号作者。
花名东方德胜,运维技术专家,现任美图SRE负责人,目前整体负责美图公司线上服务的稳定性保障工作。
-从业十余年,一直从事运维相关的工作。2016年加入美图公司,现任美图SRE负责人,目前整体负责美图公司线上服务的稳定性保障工作。曾多次参与或主导过美图公司多项基础设施、运维架构的调整和改造,在监控、灾备、故障管理、稳定性运营等方面有一定的经验积累和行业输出。在方兴未艾的AIGC的浪潮里,带领团队迎难而上,持续做好资源交付和稳定性保障工作,为公司All in AIGC的战略保驾护航
-致力于推广SRE、稳定性运营相关的理念及实践,编著有「SRE系统建设指南」图谱,参与过业界多个SRE、DevOps相关案例集/期刊的编纂或供稿。业界多个技术峰会的分享嘉宾、金牌讲师或出品人,中国信通院「稳定性保障实验室」的认证专家。
- -从业十余年,一直从事运维相关的工作。2016年加入美图公司,现任美图SRE负责人,目前整体负责美图公司线上服务的稳定性保障工作。曾多次参与或主导过美图公司多项基础设施、运维架构的调整和改造,在监控、灾备、故障管理、稳定性运营等方面有一定的经验积累和行业输出。在方兴未艾的AIGC的浪潮里,带领团队迎难而上,持续做好资源交付和稳定性保障工作,为公司All in AIGC的战略保驾护航
致力于推广SRE、稳定性运营相关的理念及实践,编著有「SRE系统建设指南」图谱,参与过业界多个SRE、DevOps相关案例集/期刊的编纂或供稿。业界多个技术峰会的分享嘉宾、金牌讲师或出品人,中国信通院「稳定性保障实验室」的认证专家。
现任小米集团云平台运维部总监。
-2022年加入小米云平台,负责小米云平台产研和运维方向工作;在此之前担任360集团技术中台云平台负责人,具有十多年的LAMP平台开发经验和云计算系统架构设计经验,对虚拟化,容器化,存储,备份,安全等相关技术有深入的理解和研究。
-参与了国家智能运维标准、企业数字基础设施云化成熟度模型等标准制定和评估工作。是360技术委员会运维分委会主席,信通院智能运维标准化核心工作组专家成员,同时担任北京林业大学MBA校外导师工作。
- -2022年加入小米云平台,负责小米云平台产研和运维方向工作;在此之前担任360集团技术中台云平台负责人,具有十多年的LAMP平台开发经验和云计算系统架构设计经验,对虚拟化,容器化,存储,备份,安全等相关技术有深入的理解和研究。
参与了国家智能运维标准、企业数字基础设施云化成熟度模型等标准制定和评估工作。是360技术委员会运维分委会主席,信通院智能运维标准化核心工作组专家成员,同时担任北京林业大学MBA校外导师工作。
主要负责中国联通安全生产保障体系建设,负责中国联通数字化监控平台整体功能技术架构设计、优化及演进。
-深耕运维领域十余年,具备丰富的运维研发经验,主要负责中国联通数字化监控平台整体功能和技术架构设计、优化及演进,致力于打造中国联通安全生产保障体系,建设自动化生产和智慧化运营的生产运营平台,完善稳定性“平台+应用” 生态体系,助力系统稳定性持续提升。
- -主要负责中国联通安全生产保障体系建设,负责中国联通数字化监控平台整体功能技术架构设计、优化及演进。
深耕运维领域十余年,具备丰富的运维研发经验,主要负责中国联通数字化监控平台整体功能和技术架构设计、优化及演进,致力于打造中国联通安全生产保障体系,建设自动化生产和智慧化运营的生产运营平台,完善稳定性“平台+应用” 生态体系,助力系统稳定性持续提升。
现任IEG-技术运营部-蓝鲸产品中心总监
-腾讯T12专家工程师,2011年加入腾讯,先后担任腾讯游戏地下城与勇士、穿越火线、七雄争霸等业务的SRE运维负责人,目前负责面向腾讯异构业务的平台工程–蓝鲸的建设与接入
-腾讯T12专家工程师,2011年加入腾讯,先后担任腾讯游戏地下城与勇士、穿越火线、七雄争霸等业务的SRE运维负责人,目前负责面向腾讯异构业务的平台工程–蓝鲸的建设与接入
现任浙江移动信息技术与数据管理部-技术运营部主管
-在浙江移动深耕12年的IT运维老兵,积极推进运维的数字化转型,主持建设多个运维工具平台,创新实践复杂IT系统的灰度沙箱发布,积极落地混沌工程在生产环境的实践。近年来重点围绕自主可控的云原生实践课题,完善IT运维的护航保障体系,助力企业在信创大背景下持续走深走实。
-作为传统企业IT运维转型的典型代表,多次在GOPS、qCon、极客时间等平台分享浙江移动SRE的工程实践,相关案例多次入选信通院信通院稳定性保障白皮书、年度XOPS峰会最佳实践,为传统企业的运维转型提供实践参考。
- -在浙江移动深耕12年的IT运维老兵,积极推进运维的数字化转型,主持建设多个运维工具平台,创新实践复杂IT系统的灰度沙箱发布,积极落地混沌工程在生产环境的实践。近年来重点围绕自主可控的云原生实践课题,完善IT运维的护航保障体系,助力企业在信创大背景下持续走深走实。
作为传统企业IT运维转型的典型代表,多次在GOPS、qCon、极客时间等平台分享浙江移动SRE的工程实践,相关案例多次入选信通院信通院稳定性保障白皮书、年度XOPS峰会最佳实践,为传统企业的运维转型提供实践参考。
运维及SRE专栏作家,聊聊SRE社区发起人
-