BeautifulSoup模块的简单使用
发布时间:2020-05-29 00:10:49 所属栏目:Python 来源:互联网
导读:BeautifulSoup模块的简单使用
|
下面是脚本之家 jb51.cc 通过网络收集整理的代码片段。 脚本之家小编现在分享给大家,也给大家做个参考。 # -*- coding:utf8 -*-
import urllib
import urllib2
import BeautifulSoup
import re
htmlSource = urllib.urlopen("http://www.taobao.com/").read(200000)
soup = BeautifulSoup.BeautifulSoup(htmlSource)
#输出<head>...</head>
print soup.head
#输出<title>...</title>
print soup.head.title
#会返回一个列表,每个列表元素都是<a>...</a>
tags = soup.findAll('a')
print tags
print '京东放养的爬虫'
#取<a></a>中间包含的元素,如果有href则输出
for item in soup.fetch('a',href=True):
print item['href']
#找到所有的<a></a>,如果其中href元素中含有taobao则输出
for a in soup.findAll('a',href=True):
if re.findall('taobao',a['href']):
print "Found the URL:",a['href']
#输出<div></div>中间class属性等于J_Tanx mod,只输出第一个
print str(soup.find("div",{"class":"J_Tanx mod"}))
以上是脚本之家(jb51.cc)为你收集整理的全部代码内容,希望文章能够帮你解决所遇到的程序开发问题。 如果觉得脚本之家网站内容还不错,欢迎将脚本之家网站推荐给程序员好友。 (编辑:安卓应用网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |
