RPC学习总结及简单demo实现

参考1:https://github.com/ZtesoftCS/go-ethereum-code-analysis
参考2:https://blog.csdn.net/liuzhijun301/article/details/80759920

认识RPC

GitHub调用RPC介绍:https://github.com/ethereum/wiki/wiki/JSON-RPC

RPC(Remote Process Call):远程过程调用,是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络细节的应用程序通信协议.RPC构建于TCP或UDP或HTTP之上.允许开发者直接调用另一台计算机上的程序,而开发者无需额外地为这个调用过程编写通信代码,使开发网络分布式程序以及其它应用程序更加容易.

Go语言有net/rpc包,net/rpc包允许RPC客户端程序通过网络或是其他I/O连接调用一个远端对象的公开方法(方法名首字母必须大写,外部可调用).在RPC服务端,可将一个对象注册为可访问的服务.之后该对象的公开方法就能够以远程的方式提供访问.一个RPC服务端可以注册多个不同类型的对象,但不允许注册多个同一类型的对象.

一个对象需要满足下面这些条件,才能被RPC服务端设置为可供远程访问:

  • 必须是在对象外部可公开调用的方法(首字母大写);
  • 必须是两个参数,且参数的类型都必须是包外部可以访问的类型或者是Go内建支持的类型;
  • 第二个参数必须是一个指针;
  • 方法必须返回一个error

代码表示上述条件:

Type RpcObject struct{}
func(ro *RpcObject) Method(args T1,args *T2) error;

RPC包的大致结构

网络协议 channels和Json格式的请求和回应的编码和解码都是同时与服务端和客户端打交道的类.网络协议channels主要提供连接和数据传输的功能,json格式的编码和解码主要提供请求和回应的序列化和反序列化功能(Json->go对象)

[图片上传失败...(image-88cea-1542552106589)]

[图片上传失败...(image-764dff-1542552106589)]

GO实现简单RPC客户端与服务端调用Demo

服务端

package main

import (
    "log"
    "net/http"
    "net/rpc"
)

/*
go对RPC的支持有三个级别:TCP/HTTP/JSONRPC
GO的RPC只支持GO开发的客户端和服务器之间的交互,因为采用gob编码
*/

type Params struct {
    Width, Height int;
}
type Rect struct {}
/*
1.函数必须是导出的:函数首字母名称必须大写;
2.必须有两个导出参数类型;
3.第一个参数是接受参数;
4.第二个参数是返回给客户端参数,必须指针类型
5.函数还要有一个返回值error
*/
func (r *Rect) Area(p Params,ret *int) error  {
    *ret = (p.Width+p.Height)*2
    return nil
}
func (r *Rect) Perimeter(p Params,ret *int) error {
    *ret = (p.Width+p.Height)*2
    return nil
}

func main() {
    rect := new(Rect)
    //注册一个rect服务
    rpc.Register(rect)
    //把服务处理绑定到http协议
    rpc.HandleHTTP();
    err := http.ListenAndServe(":8080",nil)
    if err != nil {
        log.Fatal(err)
    }
}

客户端

package main

import (
    "fmt"
    "log"
    rpc "net/rpc"
)

type Params struct {
    Width, Height int
}

func main() {
    //连接远程rpc服务
    rpc,err :=rpc.DialHTTP("tcp","127.0.0.1:8080")
    if err != nil {
        log.Fatal(err)
    }
    ret := 0
    //调用远程方法--->注意:第2个参数是指针类型
    err2 := rpc.Call("Rect.Area", Params{50, 100}, &ret);
    if err2!= nil {
        log.Fatal(err2)
    }
    fmt.Println(ret)
    err3 := rpc.Call("Rect.Perimeter", Params{100, 100}, &ret)
    if err3 != nil{
        log.Fatal(err3)
    }
    fmt.Println(ret)
}

Ethereum部分源码分析

server.go

server.go主要实现了RPC服务端的核心逻辑.包括RPC方法的注册,快速读取,处理请求,发送回应等逻辑.

server的核心数据结构是Server结构体.services字段是一个map,记录了所有注册的方法和类.run参数是用来控制Server的运行和停止的.codecs是一个set,用来存储所有的编码解码器,其实就是所有的连接.codecsMu是用来保护多线程访问codecs的锁.

services字段的value类型是service类型.service代表了一个注册到Server的实例,是一个对象和方法的组合.service字段的name代表了service的namespace,type实例的类型,callbacks是实例的回调方法,subscriptions是实例的订阅方法

    //services的集合
    type serviceRegistry map[string]*service // collection of services
    //实例的回调方法
    type callbacks map[string]*callback      // collection of RPC callbacks
    //实例的订阅方法
    type subscriptions map[string]*callback 
    //核心数据结构
    type Server struct {
        services serviceRegistry
        //run参数:控制Server的运行和停止
        run      int32
        //保护多线程访问codecs的锁
        codecsMu sync.Mutex
        //用来存储所有的连接(编码和解码器)
        codecs   *set.Set
    }
    
    // callback is a method callback which was registered in the server
    //在server中注册的回调方法
    type callback struct {
        rcvr        reflect.Value  // receiver of method
        method      reflect.Method // callback
        argTypes    []reflect.Type // input argument types
        hasCtx      bool           // method's first argument is a context (not included in argTypes)
        errPos      int            // err return idx, of -1 when method cannot return error
        isSubscribe bool           // indication if the callback is a subscription
    }
    
    // service represents a registered object
    type service struct {
        name          string        // name for service
        typ           reflect.Type  // receiver type
        callbacks     callbacks     // registered handlers
        subscriptions subscriptions // available subscriptions/notifications
    }

Server的创建,Server创建的时候通过调用server.RegisterName把自己的实例注册上来,提供一些RPC服务的元信息.

const MetadataApi = "rpc"
    // NewServer will create a new server instance with no registered handlers.
    func NewServer() *Server {
        server := &Server{
            services: make(serviceRegistry),
            codecs:   set.New(),
            run:      1,
        }
        // register a default service which will provide meta information about the RPC service such as the services and methods it offers.
        //注册一个包括提供关于RPC service的元数据的默认服务,例如它提供的服务和方法.
        rpcService := &RPCService{server}
        server.RegisterName(MetadataApi, rpcService)
        return server
    }

服务注册server.RegisterName,RegisterName方法会通过传入的参数来创建一个service对象,如果传入的rcvr实例没有找到任何合适的方法,那么会返回错误.如果没有错误,就把创建的service实例加入serviceRegistry.

// RegisterName will create a service for the given rcvr type under the given name. When no methods on the given rcvr
    // match the criteria to be either a RPC method or a subscription an error is returned. Otherwise a new service is created and added to the service collection this server instance serves.
    func (s *Server) RegisterName(name string, rcvr interface{}) error {
        if s.services == nil {
            s.services = make(serviceRegistry)
        }
    
        svc := new(service)
        svc.typ = reflect.TypeOf(rcvr)
        rcvrVal := reflect.ValueOf(rcvr)
    
        if name == "" {
            return fmt.Errorf("no service name for type %s", svc.typ.String())
        }
        //如果实例的类名不是导出的(类名的首字母大写),就返回错误。
        if !isExported(reflect.Indirect(rcvrVal).Type().Name()) {
            return fmt.Errorf("%s is not exported", reflect.Indirect(rcvrVal).Type().Name())
        }
        //通过反射信息找到合适的callbacks 和subscriptions方法
        methods, subscriptions := suitableCallbacks(rcvrVal, svc.typ)
        //如果这个名字当前已经被注册过了,那么如果有同名的方法就用新的替代,否者直接插入。
        // already a previous service register under given sname, merge methods/subscriptions
        if regsvc, present := s.services[name]; present {
            if len(methods) == 0 && len(subscriptions) == 0 {
                return fmt.Errorf("Service %T doesn't have any suitable methods/subscriptions to expose", rcvr)
            }
            for _, m := range methods {
                regsvc.callbacks[formatName(m.method.Name)] = m
            }
            for _, s := range subscriptions {
                regsvc.subscriptions[formatName(s.method.Name)] = s
            }
            return nil
        }
    
        svc.name = name
        svc.callbacks, svc.subscriptions = methods, subscriptions
    
        if len(svc.callbacks) == 0 && len(svc.subscriptions) == 0 {
            return fmt.Errorf("Service %T doesn't have any suitable methods/subscriptions to expose", rcvr)
        }
    
        s.services[svc.name] = svc
        return nil
    }

通过反射信息找出合适的方法,suitableCallback,这个方法在utils.go里面.这个方法会遍历这个类型的所有方法,找到适配RPC callback或者subscription callback类型标准的方法并返回.关于RPC的标准,参考开头的RPC标准

// suitableCallbacks iterates over the methods of the given type. It will determine if a method satisfies the criteria
    // for a RPC callback or a subscription callback and adds it to the collection of callbacks or subscriptions. See server
    // documentation for a summary of these criteria.
    func suitableCallbacks(rcvr reflect.Value, typ reflect.Type) (callbacks, subscriptions) {
        callbacks := make(callbacks)
        subscriptions := make(subscriptions)
    
    METHODS:
        for m := 0; m < typ.NumMethod(); m++ {
            method := typ.Method(m)
            mtype := method.Type
            mname := formatName(method.Name)
            if method.PkgPath != "" { // method must be exported
                continue
            }
    
            var h callback
            h.isSubscribe = isPubSub(mtype)
            h.rcvr = rcvr
            h.method = method
            h.errPos = -1
    
            firstArg := 1
            numIn := mtype.NumIn()
            if numIn >= 2 && mtype.In(1) == contextType {
                h.hasCtx = true
                firstArg = 2
            }
    
            if h.isSubscribe {
                h.argTypes = make([]reflect.Type, numIn-firstArg) // skip rcvr type
                for i := firstArg; i < numIn; i++ {
                    argType := mtype.In(i)
                    if isExportedOrBuiltinType(argType) {
                        h.argTypes[i-firstArg] = argType
                    } else {
                        continue METHODS
                    }
                }
    
                subscriptions[mname] = &h
                continue METHODS
            }
    
            // determine method arguments, ignore first arg since it's the receiver type
            // Arguments must be exported or builtin types
            h.argTypes = make([]reflect.Type, numIn-firstArg)
            for i := firstArg; i < numIn; i++ {
                argType := mtype.In(i)
                if !isExportedOrBuiltinType(argType) {
                    continue METHODS
                }
                h.argTypes[i-firstArg] = argType
            }
    
            // check that all returned values are exported or builtin types
            for i := 0; i < mtype.NumOut(); i++ {
                if !isExportedOrBuiltinType(mtype.Out(i)) {
                    continue METHODS
                }
            }
    
            // when a method returns an error it must be the last returned value
            h.errPos = -1
            for i := 0; i < mtype.NumOut(); i++ {
                if isErrorType(mtype.Out(i)) {
                    h.errPos = i
                    break
                }
            }
    
            if h.errPos >= 0 && h.errPos != mtype.NumOut()-1 {
                continue METHODS
            }
    
            switch mtype.NumOut() {
            case 0, 1, 2:
                if mtype.NumOut() == 2 && h.errPos == -1 { // method must one return value and 1 error
                    continue METHODS
                }
                callbacks[mname] = &h
            }
        }
    
        return callbacks, subscriptions
    }

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,222评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,455评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,720评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,568评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,696评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,879评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,028评论 3 409
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,773评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,220评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,550评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,697评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,360评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,002评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,782评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,010评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,433评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,587评论 2 350

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,633评论 18 139
  • 转自:http://blog.csdn.net/kesonyk/article/details/50924489 ...
    晴天哥_王志阅读 24,787评论 2 38
  • 摘自: https://my.oschina.net/hosee/blog/711632摘要: 本文主要说明RPC...
    holy_z阅读 1,123评论 0 7
  • 每个人都有自己的自留地,而家就是我内心那块自留地。就像在自留地种植庄稼,而每次回家能把房间打扫好,洗完衣服,则让我...
    承谦阅读 139评论 0 0
  • 以下为文字实录: 周小川:可能大家也注意到,人民银行在三年多以前就开始组织了关于数字货币的研讨会,随后成立了央行的...
    布洛克书蜜阅读 362评论 0 0