一、python使用BeautifulSoup模块分析网页中的超级链接
输出指定网页上包括某url的超链接
代码:
二、python提取网页链接
python实现的网页链接提取的方法
代码:
#!/usr/bin/python
#encoding:utf-8
import socket
import htmllib,formatter
def open_socket(host,servname):
s=socket.socket(socket.AF_INET,socket.SOCK_STREAM)
port=socket.getservbyname(servname)
s.connect((host,port))
return s
host=''
host=input('请输入网址n')
mysocket=open_socket(host,'http')
message='GET http://%s/nn'%(host,)
mysocket.send(message)
file=mysocket.makefile()
htmldata=file.read()
file.close()
parser=htmllib.HTMLParser(formatter.NullFormatter())
parser.feed(htmldata)
print 'n'.join(parser.anchorlist)
parser.close()