python网络爬虫入门小程序-凯发ag旗舰厅登录网址下载

转载请注明作者和出处： http://blog.csdn.net/c406495762 运行平台： windows python版本： python3.x ide： sublime text3 前言 问题分析 预备知识 1 selenium 11 简介 12 安装 13 基础知识 131 小试牛刀 132 模拟提交 133 元素选取 134 界面交互 135 添加u

python很简洁，也很强大，作为兴趣，值得一学！

下面这个程序实现的是从一个网站上下载图片，根据自己需要可以进行修改使用python语言，编写简单的爬虫程序，在百度百科页面上爬取跟词条“python”有关的1000个页面(页面数目可以自己任意设定)。 这个简易的爬虫项目可以分为5个模块： 首先，需要有一个程序入口spider_main，同时作为爬虫的总控程序(调度程序)， 改程序需要

import re

import urllib

def gethtml(url):

page = urllib.urlopen(url)

html = page.read()

return html

def getimg(html):

reg = r'src="(.*?\.jpg)"'

imgre = re.compile(reg)

imglist = re.findall(imgre, html)

x = 1

for imgurl in imglist:

urllib.urlretrieve(imgurl, '%s.jpg' % x)

x =1

target = raw_input("input one url:")

html = gethtml(target)

print "please wating, pictrues are downloading....."

getimg(html)

总结

以上是凯发ag旗舰厅登录网址下载为你收集整理的python网络爬虫入门小程序_python 实现网络爬虫小程序的全部内容，希望文章能够帮你解决所遇到的问题。

如果觉得凯发ag旗舰厅登录网址下载网站内容还不错，欢迎将凯发ag旗舰厅登录网址下载推荐给好友。