Python cmd模块多线程下载网页卡顿请高手帮忙指点下,pythoncmd,在使用cmd模块的时候我
Python cmd模块多线程下载网页卡顿请高手帮忙指点下,pythoncmd,在使用cmd模块的时候我
在使用cmd模块的时候
我在mycmd.py文件中写有以下代码
def test(self): from lib.core.request import GetHtml print GetHtml("http://www.baidu.com")
使用以下2中方法进行调用:
方法1:
self.test()
方法2:
pool = ThreadPool(1)pool.add_job(self.test)pool.wait(1)注:1代表线程数量
结果:
方法1可以正常执行,方法2没办法正常执行(或者说卡住了,只能强制退出)。
跟踪后,发现在GetHtml函数中卡住了:
req = urllib2.Request(url = url, data = postData)
ThreadPool是线程池类,之前均可正常使用,没出现过任何问题(换句话说:如果以上代码没有用到cmd模块的话,方法1和方法2都可以正常执行),但使用cmd模块的时候,就碰到了以上的问题
不知什么原因,请高手帮忙指点下。
经过多次实践,终于解决了问题,但为什么会这样,不是很明白,还希望大家帮忙下。
估计我上面的问题描述一定也很难让大家找到问题所在。
这里我在详尽的描述下。
mycmd.py文件中,有如下代码:
class MyCmd(cmd.Cmd): def test(self): from lib.core.request import GetHtml print GetHtml("http://www.baidu.com") def do_start(self,arg): from lib.core.ThreadPool import ThreadPool #线程池 pool = ThreadPool(10) for i in range(50): pool.add_job(self.test) pool.wait(10)mycmd = MyCmd()mycmd.cmdloop()
请注意:我在mycmd.py文件中的最后执行了
mycmd = MyCmd()mycmd.cmdloop()
另外,在项目的入口文件index.py中将mycmd.py文件进行import
if __name__ == "__main__": from mycmd import *
之前就是这样子执行的,然后就发现没法执行,一直卡在了GetHtml函数中的
req = urllib2.Request(url = url, data = postData)
解决办法:将mycmd.py文件中的
mycmd = MyCmd()mycmd.cmdloop()
转移到index.py文件中:
if __name__ == "__main__": from mycmd import * mycmd = MyCmd() mycmd.cmdloop()
这样就解决了问题。
编橙之家文章,
相关内容
- 请问flask运行显示TypeError错误 'Config' object is not callabl
- Python3N维向量操作求教,python3n维向量,想用 Python 3
- 请教关于python如何调用npm run build方法是什么?,pytho
- 求一个最好的python打包工具,最好的python打包,py2exe最新
- subprocess.Popen无法获取python--version数据是为什么,,尝试
- Flask设置cookie源码不解求指教,flaskcookie,看了官网上的
- 请问Python与PHP在部署web文件操作上有什么不同,python
- 分析网页内容是否可以被python爬虫抓取的判断应该怎么
- Sublime Text 2调用声明跳转设置方法,sublimetext,除了用C
- Python遍历字典中key最高效操作方法是什么,python操作方
评论关闭