python 学习笔记(Queue & Pipe 进程间的通讯)

Pipe

multiprocessing.Pipe()即管道模式,调用Pipe()返回管道的两端的Connection。
pipe()方法返回的是一个tuple(conn1,conn2);
Pipe方法还有一个参数duplex参数,如果deplex=True,叫双工模式;deplex=False单工模式,那么返回的参数conn1只负责接受,conn2只负责发信息。

主要方法:

(1)send() 发信息
(2)rece()接受信息
(3)close()关闭管道

例子(1)单进程

from multiprocessing import  Pipe,Process

def son_process(x,pipe):
    _out_pipe,_in_pipe = pipe

    while x:
        try:
            #recv 接受信息
            msg = _out_pipe.recv()
            print(msg)
            x = x-1
        except EOFError:
            break

if __name__ == '__main__':
    out_pipe,in_pipe = Pipe(True)
    son_p = Process(target=son_process,args=(10,(out_pipe,in_pipe)))
    son_p.start()

    #out_pipe,close()
    for x in range(10):
        #send 发信息
        in_pipe.send(x)
    son_p.join()
    print("主进程也结束了")

运行结果:

0
1
2
3
4
5
6
7
8
9
主进程也结束了

例子(2)多进程之间通讯

import time

import multiprocessing

from multiprocessing import Process


def proc1(pipe):
    for i in range(10):
        print("send {0}".format(i))
        pipe.send(i)
        time.sleep(0.1)

def proc2(pipe):
    n = 10
    while n:
        print("proc2 recv: {0}".format(pipe.recv()))
        n -= 1


if __name__ == '__main__':
    (p1, p2) = multiprocessing.Pipe(duplex=False)
    pr = Process(target=proc1, args=(p2,))
    cu = Process(target=proc2, args=(p1,))
    pr.start()
    cu.start()

运行结果:

send 0
proc2 recv: 0
send 1
proc2 recv: 1
send 2
proc2 recv: 2
send 3
proc2 recv: 3
send 4
proc2 recv: 4
send 5
proc2 recv: 5
send 6
proc2 recv: 6
send 7
proc2 recv: 7
send 8
proc2 recv: 8
send 9
proc2 recv: 9

multiprocessing.Queue 队列

from Queue import Queue

常用方法

Queue(maxsize=0) 指定队列大小,0表示无限
q = Queue()
q.qsize() #返回当前队列的空间
q.empty() #判断当前队列是否为空
q.full() #判断当前队列是否满
q.put() #放消息
q.get() #获取消息
q.task_done() #接受消息的线程调用该函数来说明消息对应的任务是否已经完成
q.join() #等待队列为空,在执行别的操作

例子

from multiprocessing import  Queue,Pipe
from threading import Thread
import  time

#生产
def produce(q):
    print("start produce")
    for i in range(10):
        q.put(i) #放入消息
        print("produce has produced value {0}".format(i))
        time.sleep(0.3)
    print("end produce")

#消费
def custome(q):
    print("start custorme")
    while True:
        data = q.get() #获取消息
        print("custormer has get value{0}".format(data))

if __name__ =="__main__":
    q = Queue()
    p = Thread(target=produce,args=(q,))
    c = Thread(target=custome,args=(q, ))
    p.start()
    c.start()

运行结果:

start produce
start custorme
produce has produced value 0
custormer has get value0
produce has produced value 1
custormer has get value1
produce has produced value 2
custormer has get value2
produce has produced value 3
custormer has get value3
produce has produced value 4
custormer has get value4
produce has produced value 5
custormer has get value5
produce has produced value 6
custormer has get value6
produce has produced value 7
custormer has get value7
produce has produced value 8
custormer has get value8
produce has produced value 9
custormer has get value9
end produce

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,012评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,628评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,653评论 0 350
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,485评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,574评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,590评论 1 293
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,596评论 3 414
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,340评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,794评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,102评论 2 330
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,276评论 1 344
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,940评论 5 339
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,583评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,201评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,441评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,173评论 2 366
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,136评论 2 352

推荐阅读更多精彩内容