python - Twisted能充分利用多核吗?
PHP中文网
PHP中文网 2017-04-17 15:59:14
[Python讨论组]
PHP中文网
PHP中文网

认证高级PHP讲师

全部回复(2)
PHPz

Twisted的IO操作是单线程的,即reactor线程。然而IO操作并不是消耗CPU性能的瓶颈所在,真正需要消耗CPU性能实际上是业务逻辑。Twisted提供了reactor.callInThread函数,可以让耗时的业务逻辑放到新的业务线程池中执行,而不是在reactor线程中运行,这样可以充分利用多核。

# -*- coding:utf-8 –*-

import time
from twisted.internet.protocol import Protocol
from twisted.internet.protocol import Factory
from twisted.internet import reactor

# 耗时、阻塞的业务逻辑
def logic(data):
    print data
    time.sleep(3) # 假设这里有个变态的业务逻辑要执行3秒    

class TcpServerHandle(Protocol):
    
    def dataReceived(self, data):
        reactor.callInThread(logic, data) # 在线程池中运行logic(data)耗时任务,不在reactor线程中运行

reactor.suggestThreadPoolSize(8) # 设置线程池的线程数量为8

factory = Factory()
factory.protocol = TcpServerHandle
reactor.listenTCP(8080, factory)
reactor.run()

可以参考我写的一篇关于Twisted线程模型的博文:http://xxgblog.com/2014/10/16/mina-netty-twisted-10/

怪我咯

python(这里特指CPython)本身就不适用于CPU敏感型的开发,跑多核无力,twisted只是一个python的类库,低层也是select、epoll那些东西,如果你这里的用多核指的是spawn出多个process跑CPU那也算是一种多核,但这个不是广义上的支持多核。
广义上支持多核的语言有erlang(天生面向并发), golang(调度器自己多调度), C++(需要设置线程的CPU亲和性), JVM语言如java/scala/clojue由JVM做调度。
twisted的性能比libevent的要低

热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号