MyCAT源码分析(二)服务启动流程

本篇将根据启动类MycatStartup.java来概览MyCAT的启动流程。
为了简明清晰,所有源码只列出关键代码加以说明,只做NIO网络框架的相关分析。

Mycat的主要启动流程在单例MycatServer.java中,我们先看下构造方法。

private MycatServer() {
        //读取文件配置
        this.config = new MycatConfig();

        //缓存服务初始化
        cacheService = new CacheService();
        
        //路由计算初始化
        routerService = new RouteService(cacheService);

                //SQL解析器
        sqlInterceptor = (SQLInterceptor) Class.forName(
                    config.getSystem().getSqlInterceptor()).newInstance();
}

主要逻辑说明:
1、读取配置文件。
即schema.xml、server.xml、rule.xml。mycat支持两种配置,zk或者本地文件,方式配置项在myid.properties文件中的loadZk=false or true。基于zk的配置方式会从zk将约定路径上的配置内容读取到本地文件,在此行代码解析到MycatConfig.java类中。

2、缓存和路由计算初始化。
缓存的配置信息在cacheservice.properties,默认实现为factory.encache=io.mycat.cache.impl.EnchachePooFactory。支持可配各个场景的缓存实现,缓存空间的大小,以及缓存的超时时间。例:
pool.SQLRouteCache=encache,10000,1800
layedpool.TableID2DataNodeCache=encache,10000,18000
配置了RouteService的本地缓存池。
备注:
SQLRouteCache的缓存key为 schema+SQL语句,value为 RouteResultset路由信息
TableID2DataNodeCache的缓存key为 id 的值,value为 节点名

接下来我们分析MycatServer.startup()方法,该方法中完成了Mycat网络通信框架中前端、后端通信的关键组件的初始化。

public void startup() throws IOException {
        //创建对SocketChannel进行封装的工厂类
    ServerConnectionFactory sf = new ServerConnectionFactory();

        //创建缓存块pool,支持可配,默认使用直接内存
    bufferPool = new DirectByteBufferPool(bufferPoolPageSize,bufferPoolChunkSize,
                    bufferPoolPageNumber,system.getFrontSocketSoRcvbuf());

        //创建业务线程池和异步处理器
        processors = new NIOProcessor[processorCount];
        //业务线程池的大小可以适当小一些,Mycat主要处理流程都是在reactor线程组中完成的
    businessExecutor = ExecutorUtil.create("BusinessExecutor",
                threadPoolSize);
    for (int i = 0; i < processors.length; i++) {
            processors[i] = new NIOProcessor("Processor" + i, bufferPool,
                    businessExecutor);
    }

        //创建NIOReactorPool, 默认大小为机器cpu核心线程数
    NIOReactorPool reactorPool = new NIOReactorPool(
                    DirectByteBufferPool.LOCAL_BUF_THREAD_PREX + "NIOREACTOR",
                    processors.length);

        //创建NIOConnector
    connector = new NIOConnector(DirectByteBufferPool.LOCAL_BUF_THREAD_PREX + "NIOConnector", reactorPool);
            ((NIOConnector) connector).start();

        //创建并启动NIOAcceptor
    server = new NIOAcceptor(DirectByteBufferPool.LOCAL_BUF_THREAD_PREX + NAME
                    + "Server", system.getBindIp(), system.getServerPort(), sf, reactorPool);
        server.start();
        
        //初始化数据库连接,调度心跳监听任务
    Map<String, PhysicalDBPool> dataHosts = config.getDataHosts();
        for (PhysicalDBPool node : dataHosts.values()) {
            String index = dnIndexProperties.getProperty(node.getHostName(),"0");
            if (!"0".equals(index)) {
                LOGGER.info("init datahost: " + node.getHostName() + "  to use datasource index:" + index);
            }
            node.init(Integer.parseInt(index));
            node.startHeartbeat();
        } 
        scheduler.scheduleAtFixedRate(dataNodeHeartbeat(), 0L, system.getDataNodeHeartbeatPeriod(),TimeUnit.MILLISECONDS);       
}

主要逻辑说明:
1、ServerConnectionFactory
封装SocketChannel为ServerConnection, 设置数据包handler处理器,创建当前连接的NonBlockingSession

2、DirectByteBufferPool
预创建缓存块pool

3、NIOReactorPool-线程组
NIOReactor线程组,用来监听并处理前端和后端的SelectionKey.OP_READ读事件,可以看到NIOConnector和NIOAcceptor都持有了reactorPool,创建连接后都交给reactorPool去处理。

4、NIOConnector-单线程
创建数据库连接,监听并处理SelectionKey.OP_CONNECT事件

5、NIOAcceptor-单线程
接收客户端(也就是业务服务)连接请求,监听并处理SelectionKey.OP_ACCEPT事件

本篇分析到此结束。

转载请备注原文链接。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
禁止转载,如需转载请通过简信或评论联系作者。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 214,588评论 6 496
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,456评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,146评论 0 350
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,387评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,481评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,510评论 1 293
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,522评论 3 414
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,296评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,745评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,039评论 2 330
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,202评论 1 343
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,901评论 5 338
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,538评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,165评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,415评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,081评论 2 365
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,085评论 2 352