腾讯游戏运维服务体系实践 洪楷 腾讯游戏 运维总监 G O P S 2016 全 球 运 维 大 会 · 北 京 站 个人简介 洪楷 KemHong 腾讯自研游戏业务运维总监 • 专注海量运维、高可用以及自动化运维等相关技术，致力于提升业务运维的自动化，建设运维岗位价值体系，通 过运维服务整体提升团队价值和技术能力。 • 负责运营商SP网关开发工作，涉及计费平台、网络间通讯平台构建和持续集成 • 腾讯十年： • 负责腾讯TBOSS平台的平台设计以及运维系统开发设计以及运维工作，见证TBOSS从1.0到3.0的成长，并 在多次平台升级以及故障中得以锤炼。 • 腾讯游戏代理、自研&引领云梯运维服务团队 • 爱好： • 游泳、旅行、美食 G O P S 2016 全 球 运 维 大 会 · 北 京 站 目录 G O P S 2016 全 球 运 维 大 会 · 北 京 站 1 定义运维服务 2 腾讯游戏运维服务体系 3 游戏行业的开合服看服务实战 4 从内部用户到外部用户-版本服务案例 5 微服务引入-下载服务实战进阶 6 “智能+”与“微”服务 定义运维服务 运维基础服务：“发布、变更、故障处理”+SLA（安全、成本） 运维服务+：被你的产品或你服务的团队关注并且产生增值价值点，可计价 用户关注 G O P S 2016 全 球 运 维 大 会 · 北 京 站 增值效益 可计价 为什么？ 幕后到台前，用户现在关注才会关心 用户关注 增值效益 用户潜在关注的才拥有更多核心价值 ？ 可计价 G O P S 2016 全 球 运 维 大 会 · 北 京 站 本份事情打基础，增值效益才体现核心竞争力 做任何事情都必须有价值，可衡量才可以对比 有价值才能够更让团队有动力 目录 G O P S 2016 全 球 运 维 大 会 · 北 京 站 1 定义运维服务 2 腾讯游戏运维服务体系 3 游戏行业的开合服看服务实战 4 从内部用户到外部用户-版本服务案例 5 微服务引入-下载服务实战进阶 6 “智能+”与“微”服务 腾讯游戏运维服务体系全貌 游戏运维服务体系进阶 SaaS 版本服务 用户体验优化服务 业务安全保障服务 运营 系统 A 运营活动服务 重 例 大 行 版 版 本 本 紧 急 版 本 场景工具 下 载 优 化 玩 家 家 登 付 陆 费 体 体 验 验 提 提 升 升 游 戏 内 体 验 提 升 场景工具 G O P S 2016 全 球 运 维 大 会 · 北 京 站 软 VI P 用 户 关 怀 游 戏 游 特 戏 性 对 监 账 测 硬 攻 件 击 安 发 全 现 漏 与 场景工具 洞 防 检 范 操 作 安 全 审 支撑 工具 A 支撑 工具 B …… 运营成本控制与优化服务 API 网关 & 服务总线 PaaS 玩 运营 系统 B 管 前 后 调 配 作 数 控 端 台 度 置 业 设据 平 服 框 服 服 服 服 开 备 台 扩务 冲 架 务 务 务 务 周 成 合 年 缩 在 本 区 庆 + Docker 容 APP 线 Engine 优 场景工具 计 … DB Tdoc ker 本 优 化 化 网络 支撑 安全 防护 宽 成 测 基础 架构 带 …… 目录 G O P S 2016 全 球 运 维 大 会 · 北 京 站 1 定义运维服务 2 腾讯游戏运维服务体系 3 游戏行业的开合服看服务实战 4 从内部用户到外部用户-版本服务案例 5 微服务引入-下载服务实战进阶 6 “智能+”与“微”服务 游戏行业的开合服看服务实战 特点 通过之前积累的数据，产品运营跟踪 开服后的效果，调整开服时间，开服 策略，运营策略等，达到既能让老区 玩家对游戏的某些玩法还能够顺利进 行，同时后来新进的玩家也追赶不至 精细 运营 期 合服 期 PVP玩法也会受到影响，业务一般通 过合服降低流失。 特点 导量情况。新区的开放也一般是人工 判断，手动执行。 单服人数低于某个量后，玩家流失速 度会非常块，游戏中一些核心团队 于过于困难。 导量速度一般会很猛，需要人力盯着 特点 上线 初期 导量 稳定 期 特点 每周的放量基本固定，已经不需要人 工操作，有的业务设定注册量，到量 后自动开新区，有的业务则会固定每 周的开放时间。 G O P S 2016 全 球 运 维 大 会 · 北 京 站 游戏行业的开合服看服务实战 手动开服 在智慧雪球项目组通过人工点击开服按钮，调后台任务自动完成大区对外开放操 作 自动开服 开服 根据项目组制定的开服策略，如PCU或注册其中一项达到阈值，则调后台任务自 动完成大区对外开放操作，全程无人工干预。APP会有每天开服数量和开服时间 间隔限制 定时开服 项目组在智慧雪球上配置定时开服任务，到点即开服。当定时开服与手动、自动 开服冲突时，以手动、自动开服优先 G O P S 2016 全 球 运 维 大 会 · 北 京 站 运维场景 2016 开服时长 5分钟 游戏行业的开合服看服务实战-开服进阶 PCU与注册 游戏区服 池子 G O P S 2016 全 球 运 维 大 会 · 北 京 站 游戏行业的开合服看服务实战-合服 项目组 运营团 队提交 需求 开发提 供数据 合并工 具 G O P S 2016 全 球 运 维 大 会 · 北 京 站 运营团 队提供 合服的 N合M 运维团 队挑选 合适服 务器 运维场景 2016 合服时长 2~3小时 运维执 行工具 数据合 并 正式对 外 游戏行业的开合服看服务实战-合服 G O P S 2016 全 球 运 维 大 会 · 北 京 站 游戏行业的开合服看服务实战-合服 G O P S 2016 全 球 运 维 大 会 · 北 京 站 游戏行业的开合服看服务实战-合服进阶 G O P S 2016 全 球 运 维 大 会 · 北 京 站 游戏行业的开合服看服务实战-合服进阶 合服聚类基础架构： 接入层 计算层 （Kmeans算法） 上报数据集 经分 /TDW/Mysql 数据转换/加权/初始化 数据计算/汇聚 聚类结果展示 G O P S 2016 全 球 运 维 大 会 · 北 京 站 存储层 DB 游戏行业的开合服看服务实战-合服进阶 G O P S 2016 全 球 运 维 大 会 · 北 京 站 游戏行业的开合服看服务实战-合服进阶 1064 260H 238 业务累计合服次数 合服累计节约时间 合服辅助决策累计使用次数 129 250 7368 合服预估累计使用次数 大区对外开放累计执行次数 推荐区服累计执行次数 G O P S 2016 全 球 运 维 大 会 · 北 京 站 服务建设过程中几个问题 挖掘出产品需求 产品需求不断变化 开发效率 G O P S 2016 全 球 运 维 大 会 · 北 京 站 敏捷试错 服务建设过程中几个问题 快捷的代码 部署与验证 丰富的原子层 让组合更加灵活 G O P S 2016 全 球 运 维 大 会 · 北 京 站