python使用BeautifulSoup分页网页中超链接的方法

519次阅读  |  发布于5年以前

本文实例讲述了python使用BeautifulSoup分页网页中超链接的方法。分享给大家供大家参考。具体如下:

python通过BeautifulSoup分页网页中的超级链接,这段python代码输出www.jb51.net主页上所有包含了jb51的url链接


    from BeautifulSoup import BeautifulSoup
    import urllib2
    import re
    url = urllib2.urlopen("http://www.jb51.net")
    content = url.read()
    soup = BeautifulSoup(content)
    for a in soup.findAll('a',href=True):
      if re.findall('sharejs', a['href']):
        print "Found the URL:", a['href']

希望本文所述对大家的Python程序设计有所帮助。

Copyright© 2013-2020

All Rights Reserved 京ICP备2023019179号-8