优维科技王津银 - 谈谈技术架构的运维治理

2020-02-27 57浏览

1.谈谈技术架构下的运维治理优维科技王津银
2.运维老王隔壁老王王津银优维科技创始人，致力于DevOps 运维推广 9年运维经验行业价值（腾讯5年＋YY ＋UC＋某金融）互联网运维杂谈作者>2w人无2年惧开于发开经h发t验t的p，://www.easyops应规.c范用n运组维联标席准组技术交流和PK 长兼神秘
3.目 Contents 录 01 何为运维治理 02 运维治理之过程治理 03 运维治理之服务治理 04 运维治理之平台治理
4.为什么需要运维治理 1 业务的互联网化 2 变化是必然，频繁的变化更是必然 3 硬件和软件的开源化 4 Dev和Ops的边界越来越近 5 IT和业务越来越近
5.从COBIT看运维治理 2 58 3 6 9 11 1 4 7 10 12
6.运维治理的典型框架业务需求业务收益资源优化风险控制治理层指导评估监控计划／构建／运营／监控是全面构建IT服务管理流程管理层计划构建运营监控除了IT服务流程管理，偏向具体的各层服务治理能力执行层资源层治理架构层治理运维过程治理（流程／规范／方法／持续交付）应用层治理平台层治理
7.运维治理的典型过程运维战略要和业务战略对齐，包括 • 目标／机会 • 业务架构和系统架构 • 资源／服务战略运维战略运维管理平台支撑 • 信息共享化平台 • 持续交付平台 • 数据化平台运维平台运维价值运维价值和业务价值转化 • 质量 • 成本 • 效率 • 安全标准化的运维支撑 • 运维标准化 • 运维规范 • 运维流程运维过程运维服务构建服务能力管理 • 面向研发者服务 • 面向运维者服务
8.运维治理的目标可监控性服务透明容错性、位置透明、名字服务可运维性可管理性可视化管理，一切可配置，场景化服务最终自助化管理，产品化的要求自服务
9.目 Contents 录 01 何为运维治理 02 运维治理之过程治理 03 运维治理之服务治理 04 运维治理之平台治理
10.运维治理之流程体系服务战略服务设计服务转换服务运营持续服务改进 • 服务组合管理 • 财务管理 • 需求管理 • 服务级别管理 • 服务目录管理 • 供应商管理 • 容量管理 • 可用性管理 • 变更管理 • 配置管理 • 发布管理 • 知识管理 • 突发事件管理 • 问题管理 • 事件管理 • 评估管理 • PDCA过程 • 请求管理 • 评估要衡量的服务 • 收集数据 • 分析数据 • 改进过程
11.运维治理之规范体系
12.运维治理之标准化 • 组件选型 • 监控 • 容量 • 包管理 • 配置管理 • 测试工具 • 机型 • 命名 • 运营状态 • 重要级别 • 监控 • 资源池业务层接入层逻辑层数据层系统资源层设备资源层网络资源层 • 架构 • 分布 • 容灾 • 监控 • OS/内核 • 初始化 • 用户/密码管理 • 基础agent • 机房 • 机柜 • 网段规划 • 容灾 • 波分 • 监控 • ……
13.目 Contents 录 01 何为运维治理 02 运维治理之过程治理 03 运维治理之服务治理 04 运维治理之平台治理
14.服务治理之服务公共化多组件带来质量下降每个组件的可用性 <1，乘积的放大效应业务的快速响应公共服务让业务的试错成本越来越低运维管理的需要简化运维管理，提高可运维性
15.服务治理之架构失控服务间调用：配置、DNS、LVS、链路… 负载均衡接入层逻辑层 LVS F5 Haproxy+keepalive Nginx+keepalive Cache服务器 Nginx Tomcat Resin Jetty 自研文件服务器私有程序 Tomcat Resin Apache 存储服务器 Memcache Redis Localstorage Ftp Mfs Fastdfs Tfs Mysql Mongodb Cassandra Redis
16.架构失控的统计学阐释失控下组件数量N 可控下组件M（17.运维治理之架构点控制18.运维治理之架构点控制应用服务层 PaaS+能力层 PaaS能力层组件及服务 IaaS能力层基础设施及服务业务层应用A 应用B 应用C 应用D 应用E 应用能力SDK层登录SDk 支付SDK 基于JAE的开发框架 RDS Sdk Cache Sdk RDS Cache PaaS，平台即服务移动开发框架测试框架 File Sdk 文件存储队列Sdk 队列数据sdk NoSql Sdk NoSql IM sdk 定时任务 sdk 定时任务 IaaS，基础设施及服务计算存储网络物理多云SP19.运维治理之架构线的控制服务注册能够完成服务的人工或者自动注册服务发现服务调用端能够对被调用端做自动的服务发现服务调度还要解决线上服务的动态调度20.技术架构之名字服务技术架构运行时应该剔除人的因素21.名字服务中心的服务治理服务注册 • 服务自动注册 • 服务自动下线 • 接口发布 • 实时感知 • 中心注册服务发现 • 自动发现 • 实时感知 • 双向通知服务调度 • 软负载均衡 • 自动降权 • 自动检测恢复 • 服务路由 • 调用链染色服务管理 • 服务 • 实例 • 接口 • 接口黑白名单 • RPC容器 • 调度授权 • 调度策略 • 集群管理服务监控 • 调度监控 • 调度链监控 • 依赖监控 • 故障拓扑 • 质量报告 • 服务自动分级 • 集群监控22.名字服务的服务治理价值业务拓扑 01 性能管理 03 基于拓扑的故 02 障定位 04 数据成本低 APM实现的23.运维治理之架构面控制一次业务访问流能够很好的容忍其经过的硬件及软件故障，从而提供高可用的服务。 ——fault tolerance ——high availability24.运维治理之架构面控制 9个技术手段 SET模型全网调度灰度升级过载保护立体监控自动部署柔性可用数据银行云中生长 4个意识大系统做小先抗住再优化边重构边生活干干净净 2个技术价值观有损服务动态运营遵守一致的架构方法论 l 腾讯海量服务之道 l MicroService微服务 l 12factor l CloudNavtive等等25.运维治理之经验分享强有力的领导公共架构团队架构与运维深度融合一致的方向理解架构及服务持续的目标认同及滚动26.目 Contents 录 01 何为运维治理 02 运维治理之过程治理 03 运维治理之服务治理 04 运维治理之平台治理27.Dev和Ops的冲突 2728.Dev和Ops的价值一致性 ABCD 2829.Dev和Ops，统一持续交付流需求队列 • 用户反馈产生的需求 • 运行持续反馈产生的需求持续集成持续测试持续交付持续运营 • 运维标准化 • 运维平台化 • 运维PaaS化交付队列 • 人工构建库 • 技术架构服务化 • 持续集成与测试 • 用户验收测试驱动研发 • 冒烟测试和探索性测试30.DevOps持续交付平台体系运营能力层成本优化能力故障自愈能力业务服务优化能力性能优化能力质量优化能力用户体验优化能力效率提升能力连续服务能力 OaaS，运维即服务平台能力层持续交付平台智能监控平台 IT运营分析平台安全平台通用能力层基础设施层名字服务 GSLB服务缓存即服务 LB即服务存储即服务队列即服务配置即服务数据即服务引擎即服务资源即服务作业即服务应用部署服务 CMDB，基础资源管理和业务信息管理 API Adapter Layer 设施管理 OpenStack VMware CloudStack 物理服务器 PaaS，平台即服务 IaaS，基础即服务 l Operation As a Service，运维及服务，是以DevOps平台能力为基础，实现了运维的IT能力和业务能力的对接。 3031.持续交付平台分层业务交付层（服务编排）应用交付层（代码部署）作业交付层（作业管理）成场业自熟景务动度化化化不不不不断断断断提增明提升强显高32.持续交付之持续部署包/配置、服务、环境等一键化业务变更能力(灰资源生命周期管理(发布、度、部署、启动、停止、测试、部署、优化) 下线等能力) 持续部署平台业务、服务管理(业务/ 持续反馈(用户侧、服务服务拓扑视图管理) 侧)33.运维平台之数据化平台 l 数据化平台是裂变了告警监控和运营分析两个平台 l 智能监控负责问题处理能力闭环 l 运营分析负责数据化驱动决策和优化闭环34.谢谢优维科技，DevOps管理专家
17.运维治理之架构点控制
18.运维治理之架构点控制应用服务层 PaaS+能力层 PaaS能力层组件及服务 IaaS能力层基础设施及服务业务层应用A 应用B 应用C 应用D 应用E 应用能力SDK层登录SDk 支付SDK 基于JAE的开发框架 RDS Sdk Cache Sdk RDS Cache PaaS，平台即服务移动开发框架测试框架 File Sdk 文件存储队列Sdk 队列数据sdk NoSql Sdk NoSql IM sdk 定时任务 sdk 定时任务 IaaS，基础设施及服务计算存储网络物理多云SP
19.运维治理之架构线的控制服务注册能够完成服务的人工或者自动注册服务发现服务调用端能够对被调用端做自动的服务发现服务调度还要解决线上服务的动态调度
20.技术架构之名字服务技术架构运行时应该剔除人的因素
21.名字服务中心的服务治理服务注册 • 服务自动注册 • 服务自动下线 • 接口发布 • 实时感知 • 中心注册服务发现 • 自动发现 • 实时感知 • 双向通知服务调度 • 软负载均衡 • 自动降权 • 自动检测恢复 • 服务路由 • 调用链染色服务管理 • 服务 • 实例 • 接口 • 接口黑白名单 • RPC容器 • 调度授权 • 调度策略 • 集群管理服务监控 • 调度监控 • 调度链监控 • 依赖监控 • 故障拓扑 • 质量报告 • 服务自动分级 • 集群监控
22.名字服务的服务治理价值业务拓扑 01 性能管理 03 基于拓扑的故 02 障定位 04 数据成本低 APM实现的
23.运维治理之架构面控制一次业务访问流能够很好的容忍其经过的硬件及软件故障，从而提供高可用的服务。 ——fault tolerance ——high availability
24.运维治理之架构面控制 9个技术手段 SET模型全网调度灰度升级过载保护立体监控自动部署柔性可用数据银行云中生长 4个意识大系统做小先抗住再优化边重构边生活干干净净 2个技术价值观有损服务动态运营遵守一致的架构方法论 l 腾讯海量服务之道 l MicroService微服务 l 12factor l CloudNavtive等等
25.运维治理之经验分享强有力的领导公共架构团队架构与运维深度融合一致的方向理解架构及服务持续的目标认同及滚动
26.目 Contents 录 01 何为运维治理 02 运维治理之过程治理 03 运维治理之服务治理 04 运维治理之平台治理
27.Dev和Ops的冲突 27
28.Dev和Ops的价值一致性 ABCD 28
29.Dev和Ops，统一持续交付流需求队列 • 用户反馈产生的需求 • 运行持续反馈产生的需求持续集成持续测试持续交付持续运营 • 运维标准化 • 运维平台化 • 运维PaaS化交付队列 • 人工构建库 • 技术架构服务化 • 持续集成与测试 • 用户验收测试驱动研发 • 冒烟测试和探索性测试
30.DevOps持续交付平台体系运营能力层成本优化能力故障自愈能力业务服务优化能力性能优化能力质量优化能力用户体验优化能力效率提升能力连续服务能力 OaaS，运维即服务平台能力层持续交付平台智能监控平台 IT运营分析平台安全平台通用能力层基础设施层名字服务 GSLB服务缓存即服务 LB即服务存储即服务队列即服务配置即服务数据即服务引擎即服务资源即服务作业即服务应用部署服务 CMDB，基础资源管理和业务信息管理 API Adapter Layer 设施管理 OpenStack VMware CloudStack 物理服务器 PaaS，平台即服务 IaaS，基础即服务 l Operation As a Service，运维及服务，是以DevOps平台能力为基础，实现了运维的IT能力和业务能力的对接。 30
31.持续交付平台分层业务交付层（服务编排）应用交付层（代码部署）作业交付层（作业管理）成场业自熟景务动度化化化不不不不断断断断提增明提升强显高
32.持续交付之持续部署包/配置、服务、环境等一键化业务变更能力(灰资源生命周期管理(发布、度、部署、启动、停止、测试、部署、优化) 下线等能力) 持续部署平台业务、服务管理(业务/ 持续反馈(用户侧、服务服务拓扑视图管理) 侧)
33.运维平台之数据化平台 l 数据化平台是裂变了告警监控和运营分析两个平台 l 智能监控负责问题处理能力闭环 l 运营分析负责数据化驱动决策和优化闭环
34.谢谢优维科技，DevOps管理专家