Python web爬虫的小例子

发布时间:2020-06-27编辑:脚本学堂
本文分享一个python实现的web爬虫的简单例子,使用urllib模块获取web页的内容,有需要的朋友参考下。

python web爬虫实例。
代码:
 

复制代码 代码示例:

#!/bin/python

# coding:UTF-8
import urllib
 
#' 获取web页面内容并返回'
def getWebPageContent(url):
    f = urllib.urlopen(url)
    data = f.read()
    f.close()
    return data
url = 'http://www.jb200.com'
content = getWebPageContent(url)
print content

更多有关python爬虫的文章,请参考:
python 网络爬虫(经典实用型)
Python 网易新闻小爬虫
python网络爬虫的代码
python 实现从百度开始不断搜索的爬虫
python编写分布式爬虫
Python实现天气预报采集器(网页爬虫)