Python3.4编程实现简单抓取爬虫功能示例,python3.4爬虫
Python3.4编程实现简单抓取爬虫功能示例,python3.4爬虫
本文实例讲述了Python3.4编程实现简单抓取爬虫功能。分享给大家供大家参考,具体如下:
import urllib.request import urllib.parse import re import urllib.request,urllib.parse,http.cookiejar import time def getHtml(url): cj=http.cookiejar.CookieJar() opener=urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cj)) opener.addheaders=[('User-Agent','Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.101 Safari/537.36'),('Cookie','4564564564564564565646540')] urllib.request.install_opener(opener) page = urllib.request.urlopen(url) html = page.read() return html #print ( html) #html = getHtml("http://weibo.com/") def getimg(html): html = html.decode('utf-8') reg='"screen_name":"(.*?)"' imgre = re.compile(reg) src=re.findall(imgre,html) return src #print ("",getimg(html)) uid=['2808675432','3888405676','2628551531','2808587400'] for a in list(uid): print (getimg(getHtml("http://weibo.com/"+a))) time.sleep(1)
更多关于Python相关内容可查看本站专题:《Python Socket编程技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》及《Python文件与目录操作技巧汇总》
希望本文所述对大家Python程序设计有所帮助。
相关内容
- python实现八大排序算法(2),python八大
- python自动化脚本安装指定版本python环境详解,python详解
- Python实现随机选择元素功能,python实现元素
- 关于Python如何避免循环导入问题详解,python详解
- 在Python中执行系统命令的方法示例详解,python示例
- Python 关于反射和类的特殊成员方法,python反射成员
- python中reload(module)的用法示例详解,pythonreload
- Python 实现购物商城,含有用户入口和商家入口的示例,
- 轻松理解Python 中的 descriptor,pythondescriptor
- Python实现求笛卡尔乘积的方法,python笛卡尔乘积
评论关闭