通俗讲解股票类app - TCP网络通信层设计

场景

要做的产品 --- 炒股app

  • 数据量大:5000多支股票,每支股票有分时,分笔数据,画一条k线,可能要500条分时数据,甚至更多。
  • 实时性:股价每分每秒都在变化,一分钟产生很多条数据,用户要看到最新的信息,真的是一秒钟上下几十万啊。
  • 服务器主动推:股票预警等等一些重要消息,需要服务器实时推送,保证客户端100%收到,收不到可能造成客户资金损失。

由于这些场景因素,股票的数据不能通过HTTP协议来传输了,只能走TCP协议了,当然一些个人信息什么的还是走HTTP的。

技术细节实现

1.数据量比较大,一次请求可能返回几百条数据到移动端,对数据要进行压缩,这里采用了 google 的 Protocol Buffer 数据传输格式,因为它对象序列化速度快,压缩率高 (ps: http 一般用 json, xml)。

2.实时性与主动推:服务器与客户端之间维护一条 tcp 长连接,避免每次3次握手,4次挥手,和产生一堆 time_wait 状态的 socket 占用资源。走tcp协议需要自己维护一些状态
掉线重连,移动端网络情况复杂,有3G,4G,wifi,socket 经常断开,它断了要自动连上,并且还要对应用层透明!不能让应用层感知到!连上后数据接着之前断开的地方发送,不能有影响。
自动登录,这个是掉线重连后要做的一个操作,不登录拿不到股票数据。登录后接着做一个消息同步,看看有没有新消息。

3.客户端100%收到(可靠性):除了 tcp 超时重传和3次ack回应保证了可靠传输之外,我们在app里也实现了一套应用层的ack机制,服务器保存了一组消息,每个消息有个seq号,一个消息推给客户端后,客户端拿到消息的seq,要发ack请求回应服务器这个消息,然后下次服务器才不会推给你,不然的话,下次服务器还是会推给你的。掉线重连,重登录后会同步一次你订阅过的消息,把上次没收到的,或者丢包的消息再同步过来。

4.客户端的负载均衡,这个一般在服务器做,但后台那边说防止ip封锁,还有某些服务器不能在全国访问到,所以把负载均衡放在客户端做了,app启动拉取服务器列表,然后多线程并发发送测速包,得到每个服务器延迟和负载,然后选个最优的服务器连上即可,延迟可以理解为路有多长,负载可以理解为路上拥堵情况,显然最短的路不一定是最快的,它可能很堵。

根据以上因素,我设计了一套TCP层的网络请求逻辑,应用层只管发请求就好了,我只告诉你有没有结果,上面的细节全部屏蔽在底层,对应用层透明!

// 应用层发一个 tcp 请求的代码例子,支持多线程循环发:
[[TCPAPI instance] requestStockInfoWithcompletion:^(id response, NSString *error) {
    if (error == nil) {
        NSLog(@"成功:%@", (NSArray *)response);
    } else {
        NSLog(@"失败:%@", error);
    }
}];

测试:我用一条线程以每隔 0.1 秒的速度循环发送请求,然后模拟断网,网络差,被服务器踢下线等等情况,程序工作正常,一旦有网络,数据就会成功返回。

整个app网络层的请求逻辑图:
我有个 tcp 请求同步队列接收应用层来的请求,有句话叫做"we cannot send directly, so queue it",然后一个请求走完图中的逻辑,下一个请求接着走,每一个请求有一个定时器,超时就回调一个失败结果给应用层,有张映射表保存请求和回调之间的映射。
然后还一个socket发送队列,真正去发送数据的队列,socket接收队列就不用说了吧,把接收到的数据通过pb协议反序列化得到pb对象的,这里有个 tcp 分片机制导致的 tcp 粘包问题,就是 socket 返回一段二进制数据不一定刚好就是一个对象的全部数据,可能少可能多,要自己判断,拆包的时候注意下就好了。
得到 pb 对象,把这个结果回调给应用层,整个流程就走完了。

tcp请求逻辑.png

图片可能太大,可以到这里下载来看。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 198,848评论 5 466
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,529评论 2 375
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 145,824评论 0 327
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,329评论 1 268
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,227评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 47,879评论 1 275
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,218评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,877评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,159评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,155评论 2 315
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,987评论 1 328
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,736评论 3 316
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,273评论 3 302
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,407评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,663评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,158评论 2 344
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,517评论 2 339

推荐阅读更多精彩内容