gonet2游戏服务器骨架-轻识

gonet/2是新一代游戏服务器骨架，基于go语言开发，采用了先进的http/2作为服务器端主要通信协议，以microservice作为主要思想进行架构，采用docker作为服务发布手段。相比第一代gonet，基础技术选型更加先进，结构更加清晰易读可扩展。

为什么用microservice架构?

业务分离是游戏服务器架构的基本思路，通过职能划分，能够更加合理的调配服务器资源。资源的大分类包括，IO,CPU,MEM,BANDWIDTH, 例如常见的情景：

IO: 如: 数据库，文件服务，消耗大量读写        CPU: 如: 游戏逻辑，消耗大量指令        MEM: 如: 分词，排名，pubsub， 消耗大量内存   BANDWIDTH: 内网带宽高，外网带宽低，物理上越接近的，传输速度越高

玩家对每种服务的请求量有巨大的不同，比如逻辑请求100次，分词请求1次，所以，没有必要1:1配置资源，通过microservice方式分离服务，可以根据业务使用情况，按需配置服务器资源。当服务容量增长，如果在monolithic的架构上做，即全部服务揉在一起成一个大进程，会严重浪费资源，比如大量内存被极少被使用的模块占用, 更严重的问题是，单台服务器的资源不是无限制的，虽然目前顶级配置的服务器可以安装高达96GB的内存，但也极其昂贵，部署量大的时候，产生的费用也不容小觑。

为什么选HTTP/2?

为了把所有的服务串起来，必须满足的条件有：
1. 支持一元RPC调用 (一般的请求/应答模式，类似于函数调用)
2. 支持服务器推送（例如pubsub服务，异步通知）
3. 支持双向流传递 (网关透传设备数据包到后端，后端应答数据经过网关返回到设备)

我们暂不想自己设计RPC，一是目前RPC繁多，没必要重新发明轮子，二是作为开源项目，应充分融入社区，利用现有资源。我们发现目前http/2(rfc7540)满足以上所有条件，google推出的gRPC就是一个基于http/2的RPC实现，当前架构中，所有的服务(microservice)全部通过gRPC连接在一起。 http/2支持stream multiplex，即可以在同一条TCP连接上，传输多个stream(1:N)，stream概念能够非常直观的1:1映射玩家双向数据流。

附: HTTP/2 帧封装

+-----------------------------------------------+    |                 Length (24)                   |    +---------------+---------------+---------------+    |   Type (8)    |   Flags (8)   |    +-+-------------+---------------+-------------------------------+    |R|                 Stream Identifier (31)                      |    +=+=============================================================+    |                   Frame Payload (0...)                      ...    +---------------------------------------------------------------+                          Figure 1: Frame Layout

基本服务模型

+             |             +--------------> auth             |             +----> game1             |agent1+------>             |             +----> game2             |                +agent2+------>                +-----> snowflake             |                |             +----> game3+---->             |                |             |                +-----> chat             ++               |                              +-----> rank                              +

使用方式假定为：

前端用两个部署在不同物理服务器上的agent服务接入，无状态，客户端随机访问任意一台agent接入，比如使用DNS round-robin方式连接。
agent和auth配合处理完鉴权等工作后，数据包透传进入game进行逻辑处理。如果有多台game服务器，那么用户需要指定一个映射关系(userid->server_id)，用来将玩家固定联入某台game服务器。
game和各个独立service通信，配合处理逻辑。service如果是无状态的，默认采用round-robin方式请求服务，如果是带状态的，则根据标识联入指定服务器。

具体的服务描述以及使用案例，请进入各个目录中阅读。

所有服务都依赖的一个基础服务是nsqd，用来做分布式日志收集，所有的服务会把日志发送到本地的nsqd，通过nsqlookupd管理nsqd拓扑，通过tailn工具或nsq_tail，可以集中收集格式化的日志(json)数据，消息主题为LOG。

游戏中的归档日志(REDOLOG)，也会通过nsqd发布，并通过arch服务自动归档，消息主题为REDOLOG。

nsqd部署的方式为：每个服务器实例部署一个

实际项目中怎么使用gonet/2?

clone下来慢慢改，不提供插件接口式的可升级模块，gonet/2只提供关键通路和demo，我不想做一个侵入式的骨架，只想在架构层面提供一个我认为比较优秀的思路并在此基础上努力做到整体最优。

游戏模块

进入每个服务阅读对应文档
1. agent: 网关
2. game: 游戏逻辑
3. snowflake: UUID发生器
4. chat: 聊天服务
5. auth: 鉴权，登陆环节
6. libs: 公共组件包
7. rank: 排名服务
8. geoip: IP归属查询
9. arch: 归档服务
10. bgsave: 与redis结合的存档服务
11. wordfilter: 脏词过滤服务

基础设施

术语：

coordinator -- zk, etcd这种分布式一致性服务
message backbone -- 服务器件消息总线，通常为pub/sub模式，数据密集

实现:

nsq
etcd

基础设施是用于支撑整个架构的基石，选择nsq, etcd的理由是:

全部采用go实现，技术栈统一
nsq在bitly商用效果很好，能支持大规模的，高可用(特别是发生网络分区)的分布式应用
etcd是coreos出品的coordinator, 已经得到大面积的使用，有成功案例，配套完善。

链接

gonet/2 unity 客户端网络库 -- by ycs
Gonet2游戏服务器框架解析 -- by 高
grpc,nsq等源码分析 -- by tenywen
Protobuf安装 -- by __IveCode

PS. 感谢热心网友对源码的解读

资料

protobuf: https://github.com/google/protobuf
protobuf golang plugin: https://github.com/golang/protobuf
grpc: http://grpc.io
http/2: http://http2.github.io/

gonet2游戏服务器骨架

相关文档