游戏服务端的高并发和高可用( 四 )
在上文水平扩展中已经介绍 , 对于支持水平扩展的服务 , 有状态服务出现异常只会影响到此进程所提供的服务 , 其他进程正常运行;对于无状态服务 , 影响更小 , 只会影响到正在执行的流程 。
当然 , 这需要我们写一些处理逻辑 , 包括:
异常监控:通过异常监控 , 可以快速发现异常 , 一般使用心跳或者消息超时机制 。 异常处理:比如一个消息超时后如何处理 , 是重试还是忽略 。 如果一个进程不可用 , 我们需要将此进程踢出集群 。 服务恢复:对于无状态 , 直接重启即可 。 对于有状态 , 可以将状态迁移到其他进程提供服务 。 服务恢复有很多坑(有状态服务更多) , 常见的恢复方案比如将所服务的玩家直接踢下线 , 然后重新登陆 。 服务降级:服务降级常见的排队系统、关闭指定功能等 。如何实现上述逻辑其实挺复杂的 , 这里不详细介绍了 。
服务隔离和灰度发布
开发过程中 , 我们应该将大功能尽量的拆成一个个小的服务 , 每个服务只负责一小块功能 。 Skynet也提供了比较好的Service模式 , 不同的Service可以放在一个进程中 , 也可以放在不同的进程中 。
前文已经介绍服务隔离和灰度发布 , 也是为了将高风险的服务进行隔离 , 让它即使出现了问题也不要影响到系统的整体可用 。
3.2主从复制
对于有状态服务 , 支持水平扩展的进程可以做到一个进程出现异常不影响其他进程提供服务 , 但这个进程crash了会导致这个进程提供的服务不可用 , 并且造成内存中的数据丢失等问题 。
为了解决这个 , 常见的方案是主从复制 。 主从复制在数据库中非常常见 , 是保证数据库高可用性的常见方案 。
主从复制就是在主节点(master)后面挂一个或者多个从节点(slave) , 主节点实时的将状态/数据复制到从节点 。 平时是主节点提供服务 , 当主节点出现问题时 , 从节点变成主节点 , 继续提供服务 。 因为主节点近乎事实的将数据复制到从节点 , 可以近似保证数据不丢失 。
因此 , 如果想进一步的提升有状态服务或者单点服务的可用性 , 可以使用主从复制的方案 。
游戏服务器使用此方案写业务逻辑的较少 , 有些集群管理节点(非业务逻辑)会使用此方案 。
此外 , 因为常见的db(mysql/mongo/redis)都自带主从复制 , 所以无状态服务其实也是将状态让db帮我们管理 , 从而获得db主从复制带来的数据不会丢失的能力 。
3.3云服务的异常处理
除了ECS机器 , 我们大量使用了阿里云的各类SAAS服务 , 比如redis/Mysql/Mongo等DB , 也有类似于ELK的日志服务等 。
这些服务大部分都支持主从切换等高可用方案 , 但我们需要考虑当他们进行主从切换时对我们系统产生的影响 。
在Mysql和Redis中 , 当发生主从切换或gateproxy宕机 , 会导致网络连接断线 , 因此 , 我们必须在逻辑中处理网络中断并重连 。 在网络断线重连阶段 , 必然导致某些db请求失败 , 我们也需要处理这种异常问题 。
在数据落地场景中 , 需要判断每次db请求是否成功 , 若不成功进行重试并且要保证请求的幂等性以防止请求多次执行 。
4高并发和高可用的目标
为了实现高并发和高可用本身具有较大的开发成本 , 在大部分项目中人力资源也不是无限的 。 所以大家在做相关工作的时候 , 也要过度设计 , 综合考虑业务需求、承载预期和开发成本 。
其实我说的开发成本不仅是说程序开发量更大 , 更多的是越复杂的系统越容易出现问题 , 如果没有足够的人力去测试、维护和迭代 , 还不如用更简单的方式实现 , 反而出问题的概率更低 。
当然 , 如果你的项目组是王者荣耀和和平精英 , 高并发和高可用要求非常高 , 人力近乎无限 , 请忽略此段 。
百万同时在线
在游戏行业中 , 一般将百万同时在线作为游戏服务端架构的并发目标 , 百万的数量级也是绝大部分游戏(除了王者和吃鸡)的上限 。
所以 , 在游戏前期架构设计、规划和压测中 , 我们可以按照百万同时在线作为基准去预估不同的系统所需要的承载量 , 达到这个承载量就可以了 。
比如我们游戏 , 虽然也有不少单点和性能瓶颈 , 但根据我们的预估 , 即使这些单点存在 , 我们也能通过加机器支持到100w的同时在线 。 那么 , 这些单点和瓶颈就在我们的预期范围内 , 我们就不会进一步去优化了 。
如果哪天我们游戏大火需要支持千万的同时在线了 , 理论上也可以继续消除单点和优化性能瓶颈 , 但成本会大幅度增加 。
- 美国 SEC 已批准微软 75 亿美元收购 B 社游戏公司
- 《原神》x 肯德基新活动公布:买套餐送游戏内礼包和装扮
- 游戏王未界域卡——龙之溪谷,点射龙,感染龙,守护龙,始枪龙骑
- 高端市场|发布至今下跌1000元,6400万四摄+8GB,从高端市场跌至中端市场
- 因打假赛,他一夜间身败名裂,颇具实力的游戏大神为何要去作死?
- 红魔6Pro高刷游戏及性能实测:王者吃鸡原神全程高能
- 有这钱我去买个什么游戏不好?
- “烂大街”的连衣裙,穿起来简单端庄,优雅大方
- ITBD-西南地区智能终端产业集群研究报告
- 养老|服务今天,享受明天!清江浦区时间银行志愿者来了
