Python多线程具体运用的方法


Python编程语言是一种功能强大的面向对象计算机通用型语言。那么今天我们就可以先从Python多线程的具体应用开始了解,从而进一步的对这一编程语言有一个深刻的认识,以帮助我们在实际中的应用。

为了利用多核处理器,看过很多文档,研究很多python相关技术,全部是失望的。

1、Python:受限于GIL,被锁住只能用一个CPU核心。

2、Twisted:其实只有一个线程,何谈多核的利用。

3、Stackless:测试表明其多线程程序的速度比Python多线程使用的native线程方式要快一点,不过一样没法用多核。

4、parallel Python:多进程方式,感觉封装的很龌龊,虽然翻译完了文档,但是仍然没有兴趣去使用。

现在的办法:

1、负载均衡:后面在多台服务器上启动多个Python程序。现在我开发的应用基本上都是用twistd启动的daemon程序。

  • Python编程语言与Zpoe之间不解的情缘
  • Python编程语言在网站开发中的妙用
  • Python编程语言的发展历程介绍
  • Python编程语言在未来的发展趋势
  • 探究Python性能为什么如此的强大

2、C/S应用:各个进程间用多进程通信。

3、subprocess:使用这个模块,利用外部进程作worker,异步等待结果。

从这些解决方法之后,倒是感觉Python作为胶水语言其实多核利用也不是很必要。

pyprocessing 测试过没?这个模块将会被加入到python2.6中。
我用pyprocessing改造了Karrigell,性能获得了很大提升。

在Quixote官方白皮书中已经详细描述了Quixote的工作模式。Quixote可以使用Python自代的http_server(主要用于开发调试)和与Apache(或lighttpd)配合使用。

Quixote与Apache配合使用方式如下:

使用CGI,文档中称为egular CGI。被认为效率最低的一种方式,因为每一个请求都会创建一个新的进程。

使用fastCGI,CGI可以运行fastCGI一定是可以应用的。这也是豆瓣采用的方式。在Quixote作者的一个PPT中,他认为fastCGI是buggy的。哦:(也不至于啊。我们正在寻找使用fastCGI的部署经验。

使用mod_python,将python代码嵌入到Apache中。

使 用SCGI,这是作者推荐的。使用Apache SCGI module scgi_mod将遵循SCGI协议Apache将请求发送到相应的Socket如localhost:3001。而这个Socket由本地运行的一个 Python程序打开。这个Python多线程将处理请求,并返回结果。

评论关闭