Go Micro是可插拔的微服务开发框架。

概览

Go Micro提供分布式系统开发的核心库,包含RPC与事件驱动的通信机制。

micro的设计哲学是可插拔的架构理念,她提供可快速构建系统的组件,并且可以根据自身的需求剥离默认实现并自行定制。

特性

Go Micro把分布式系统的各种细节抽象出来。下面是它的主要特性。

  • 服务发现(Service Discovery) - 自动服务注册与名称解析。服务发现是微服务开发中的核心。当服务A要与服务B协作时,它得知道B在哪里。默认的服务发现系统是Consul,而multicast DNS (mdns,组播)机制作为本地解决方案,或者零依赖的P2P网络中的SWIM协议(gossip)。

  • 负载均衡(Load Balancing) - 在服务发现之上构建了负载均衡机制。当我们得到一个服务的任意多个的实例节点时,我们要一个机制去决定要路由到哪一个节点。我们使用随机处理过的哈希负载均衡机制来保证对服务请求颁发的均匀分布,并且在发生问题时进行重试。

  • 消息编码(Message Encoding) - 支持基于内容类型(content-type)动态编码消息。客户端和服务端会一起使用content-type的格式来对Go进行无缝编/解码。各种各样的消息被编码会发送到不同的客户端,客户端服服务端默认会处理这些消息。content-type默认包含proto-rpc和json-rpc。

  • Request/Response - RPC通信基于支持双向流的请求/响应方式,我们提供有抽象的同步通信机制。请求发送到服务时,会自动解析、负载均衡、拨号、转成字节流,默认的传输协议是http/1.1,而tls下使用http2协议。

  • 异步消息(Async Messaging) - 发布订阅(PubSub)头等功能内置在异步通信与事件驱动架构中。事件通知在微服务开发中处于核心位置。默认的消息传送使用点到点http/1.1,激活tls时则使用http2。

  • 可插拔接口(Pluggable Interfaces) - Go Micro为每个分布式系统抽象出接口。因此,Go Micro的接口都是可插拔的,允许其在运行时不可知的情况下仍可支持。所以只要实现接口,可以在内部使用任何的技术。更多插件请参考:github.com/micro/go-plugins

安装protobuf

代码生成依赖Protobuf,参考安装:

服务发现

服务发现用于解析服务名与地址。

Consul

Consul 在Go Micro中是默认(以后的版本可能会更改)的服务发现注册中心。

发现系统可插拔,其它插件像 etcd, kubernetes, zookeeper可以参考micro/go-plugins 库。

Consul安装指导

安装好后,可以在命令行启动时传入变量或指令便可以使用consul作为注册中心:

  1. $ MICRO_REGISTRY=consul go run main.go

或者

  1. $ go run main.go --registry=consul

Multicast DNS

组播dns内置在服务发现系统之中的插件,提供零依赖的配置。

在启动命令中传入 —registry=mdns,或声明环境变量 MICRO_REGISTRY=mdns

  1. MICRO_REGISTRY=mdns go run main.go

编写服务

我们写一个简单的问候(greeter)程序作为示例。

例子可参考:examples/service.

服务原型

微服务中有个关键需求点,就是接口的强定义。Micro使用protobuf来完成这个需求。下面我们定义Greeter处理器,它有一个Hello方法。它有HelloRequest入参对象及HelloResponse出参对象,两个对象都有一个字符串类型的参数。

  1. syntax = "proto3";
  2. service Greeter {
  3. rpc Hello(HelloRequest) returns (HelloResponse) {}
  4. }
  5. message HelloRequest {
  6. string name = 1;
  7. }
  8. message HelloResponse {
  9. string greeting = 2;
  10. }

生成原型

在定义好原型后我们得使用protoc及micro的插件编译它,micro插件可以帮助生成go micro需要的原型文件

  1. protoc --proto_path=$GOPATH/src:. --micro_out=. --go_out=. path/to/greeter.proto

编写服务

下方的代码是greeter服务的代码

它要实现下面的几个要求

  • 实现在Greeter Handler中定义的接口。
  • 初始化 micro.Service
  • 注册 Greeter handler
  • 运行服务
  1. package main
  2. import (
  3. "context"
  4. "fmt"
  5. micro "github.com/micro/go-micro"
  6. proto "github.com/micro/examples/service/proto"
  7. )
  8. type Greeter struct{}
  9. func (g *Greeter) Hello(ctx context.Context, req *proto.HelloRequest, rsp *proto.HelloResponse) error {
  10. rsp.Greeting = "Hello " + req.Name
  11. return nil
  12. }
  13. func main() {
  14. // 创建新的服务,这里可以传入其它选项。
  15. service := micro.NewService(
  16. micro.Name("greeter"),
  17. )
  18. // 初始化方法会解析命令行标识
  19. service.Init()
  20. // 注册处理器
  21. proto.RegisterGreeterHandler(service.Server(), new(Greeter))
  22. // 运行服务
  23. if err := service.Run(); err != nil {
  24. fmt.Println(err)
  25. }
  26. }

运行服务

  1. go run examples/service/main.go

输出

  1. 2016/03/14 10:59:14 Listening on [::]:50137
  2. 2016/03/14 10:59:14 Broker Listening on [::]:50138
  3. 2016/03/14 10:59:14 Registering node: greeter-ca62b017-e9d3-11e5-9bbb-68a86d0d36b6

定义客户端

下面的客户端代码用来查询greeter服务。上面我们生成的proto原型文件中包含了客户端部分,这样可以减少模板代码量。

  1. package main
  2. import (
  3. "context"
  4. "fmt"
  5. micro "github.com/micro/go-micro"
  6. proto "github.com/micro/examples/service/proto"
  7. )
  8. func main() {
  9. // 定义服务,可以传入其它可选参数
  10. service := micro.NewService(micro.Name("greeter.client"))
  11. service.Init()
  12. // 创建新的客户端
  13. greeter := proto.NewGreeterService("greeter", service.Client())
  14. // 调用greeter
  15. rsp, err := greeter.Hello(context.TODO(), &proto.HelloRequest{Name: "John"})
  16. if err != nil {
  17. fmt.Println(err)
  18. }
  19. // 打印响应请求
  20. fmt.Println(rsp.Greeting)
  21. }

运行客户端

  1. go run client.go

输出

  1. Hello John

编写Function

Go Micro包含了函数式编程模型。

Function是指接收一次请求,执行后便退出的服务

定义Function

  1. package main
  2. import (
  3. "context"
  4. proto "github.com/micro/examples/function/proto"
  5. "github.com/micro/go-micro"
  6. )
  7. type Greeter struct{}
  8. func (g *Greeter) Hello(ctx context.Context, req *proto.HelloRequest, rsp *proto.HelloResponse) error {
  9. rsp.Greeting = "Hello " + req.Name
  10. return nil
  11. }
  12. func main() {
  13. // 创建新函数
  14. fnc := micro.NewFunction(
  15. micro.Name("greeter"),
  16. )
  17. // 初始化命令行
  18. fnc.Init()
  19. // 注册handler
  20. fnc.Handle(new(Greeter))
  21. // 运行服务
  22. fnc.Run()
  23. }

简单吧!

发布与订阅

Go-micro 给事件驱动架构内置了消息代理(broker)接口。发布与订阅像RPC一样操控生成的protobuf消息。这些消息会自动编/解码并通过代理发送。

Go-micro默认包含点到点的http代理,但是也可以通过go-plugins把这层逻辑替换掉。

发布

创建发布器,传入topic主题名,及服务客户端。

  1. p := micro.NewPublisher("events", service.Client())

发布一条protobuf消息

  1. p.Publish(context.TODO(), &proto.Event{Name: "event"})

订阅

创建消息处理器,签名得是func(context.Context, v interface{}) error

  1. func ProcessEvent(ctx context.Context, event *proto.Event) error {
  2. fmt.Printf("Got event %+v\n", event)
  3. return nil
  4. }

在这个消息处理器注册上topic主题

  1. micro.RegisterSubscriber("events", ProcessEvent)

查看完成例子:examples/pubsub

插件

Go-micro默认下只提供了少量的核心接口实现,但是这些都是可插拔的。github.com/micro/go-plugins提供了一捆插件,可以供参考,也欢迎贡献您的代码。

构建插件

如果想要集成插件,只需要把插件位置导入到文件中,重新编译即可。

  1. import (
  2. // etcd v3 registry
  3. _ "github.com/micro/go-plugins/registry/etcdv3"
  4. // nats transport
  5. _ "github.com/micro/go-plugins/transport/nats"
  6. // kafka broker
  7. _ "github.com/micro/go-plugins/broker/kafka"
  8. )

打包二进制文件:

  1. // 本地使用
  2. go build -i -o service ./main.go ./plugins.go

标识使用插件

  1. service --registry=etcdv3 --transport=nats --broker=kafka

插件即选项

另外,你也可以在服务中设置插件作为选项

  1. import (
  2. "github.com/micro/go-micro"
  3. // etcd v3 registry
  4. "github.com/micro/go-plugins/registry/etcdv3"
  5. // nats transport
  6. "github.com/micro/go-plugins/transport/nats"
  7. // kafka broker
  8. "github.com/micro/go-plugins/broker/kafka"
  9. )
  10. func main() {
  11. registry := etcdv3.NewRegistry()
  12. broker := kafka.NewBroker()
  13. transport := nats.NewTransport()
  14. service := micro.NewService(
  15. micro.Name("greeter"),
  16. micro.Registry(registry),
  17. micro.Broker(broker),
  18. micro.Transport(transport),
  19. )
  20. service.Init()
  21. service.Run()
  22. }

编写插件

插件是构建在Go接口之上的的概念。每个包都维护着高度抽象的接口。简单实现接口并把它作为选项传入服务。

服务发现的接口称作注册(Registry)。任何实现了这个接口的都可以当作注册中心。同样,对于其它包的实现也是如此。

  1. type Registry interface {
  2. Register(*Service, ...RegisterOption) error
  3. Deregister(*Service) error
  4. GetService(string) ([]*Service, error)
  5. ListServices() ([]*Service, error)
  6. Watch() (Watcher, error)
  7. String() string
  8. }

浏览go-plugins获取更多优秀实现内容。

包装器(Wrappers)

Go-micro中有中间件即包装器的概念。客户端或者处理器可以使用装饰模式包装起来。

处理器

这里演示服务处理器包装器,它负责打印传入请求的日志。Here’s an example service handler wrapper which logs the incoming request

  1. // 实现server.HandlerWrapper接口
  2. func logWrapper(fn server.HandlerFunc) server.HandlerFunc {
  3. return func(ctx context.Context, req server.Request, rsp interface{}) error {
  4. fmt.Printf("[%v] server request: %s", time.Now(), req.Endpoint())
  5. return fn(ctx, req, rsp)
  6. }
  7. }

可以在创建服务时初始化

  1. service := micro.NewService(
  2. micro.Name("greeter"),
  3. // 把handler包起来
  4. micro.WrapHandler(logWrapper),
  5. )

客户端

下面演示客户端包装器,它负责打印请求创建的日志。Here’s an example of a client wrapper which logs requests made

  1. type logWrapper struct {
  2. client.Client
  3. }
  4. func (l *logWrapper) Call(ctx context.Context, req client.Request, rsp interface{}, opts ...client.CallOption) error {
  5. fmt.Printf("[wrapper] client request to service: %s method: %s\n", req.Service(), req.Endpoint())
  6. return l.Client.Call(ctx, req, rsp)
  7. }
  8. // 实现client.Wrapper,充当日志包装器
  9. func logWrap(c client.Client) client.Client {
  10. return &logWrapper{c}
  11. }

可以在创建服务时初始化

  1. service := micro.NewService(
  2. micro.Name("greeter"),
  3. // 把客户端包起来
  4. micro.WrapClient(logWrap),
  5. )

相关示例

服务示例可以在examples/service中找到,Function则到examples/function查看

examples的Github目录下包含了各种示例,比如中间件/包装器,选择过滤器,发布/订阅,gRPC,插件等。

greeter示例的完整代码examples/greeter

所有的示例都可以在GitHub仓库中找到。

观看Golang英国会议2016视频,获得更高级的视角。