源码网商城,靠谱的源码在线交易网站 我的订单 购物车 帮助

源码网商城

python BeautifulSoup使用方法详解

  • 时间:2022-07-30 09:08 编辑: 来源: 阅读:
  • 扫一扫,手机访问
摘要:python BeautifulSoup使用方法详解
直接看例子:
[url=http://www.1sucai.cn]<a href="http://www.1sucai.cn" class="sister" id="link2">Lacie</a> and <a href="http://www.1sucai.cn" class="sister" id="link3">Tillie</a>; and they lived at the bottom of a well.</p> <p class="story">...</p> """ soup = BeautifulSoup(html_doc) print soup.title print soup.title.name print soup.title.string print soup.p print soup.a print soup.find_all('a') print soup.find(id='link3') print soup.get_text()
结果为: 可以看出:soup 就是BeautifulSoup处理格式化后的字符串,soup.title 得到的是title标签,soup.p  得到的是文档中的第一个p标签,要想得到所有标签,得用find_all 函数。find_all 函数返回的是一个序列,可以对它进行循环,依次得到想到的东西. get_text() 是返回文本,这个对每一个BeautifulSoup处理后的对象得到的标签都是生效的。你可以试试 print soup.p.get_text() 其实是可以获得标签的其他属性的,比如我要获得a标签的href属性的值,可以使用 print soup.a['href'],类似的其他属性,比如class也是可以这么得到的(soup.a['class'])。 特别的,一些特殊的标签,比如head标签,是可以通过soup.head 得到,其实前面也已经说了。 如何获得标签的内容数组?使用contents 属性就可以 比如使用 print soup.head.contents,就获得了head下的所有子孩子,以列表的形式返回结果, 可以使用 [num]  的形式获得 ,获得标签,使用.name 就可以。 获取标签的孩子,也可以使用children,但是不能print soup.head.children 没有返回列表,返回的是 <listiterator object at 0x108e6d150>, 不过使用list可以将其转化为列表。当然可以使用for 语句遍历里面的孩子。 关于string属性,如果超过一个标签的话,那么就会返回None,否则就返回具体的字符串print soup.title.string 就返回了 The Dormouse's story 超过一个标签的话,可以试用strings 向上查找可以用parent函数,如果查找所有的,那么可以使用parents函数 查找下一个兄弟使用next_sibling,查找上一个兄弟节点使用previous_sibling,如果是查找所有的,那么在对应的函数后面加s就可以 [b]如何遍历树? [/b] [b]使用find_all 函数 [/b]
[url=http://www.1sucai.cn][<a class="sister" href="http://www.1sucai.cn" id="link2">Lacie</a>] [<a class="sister" href="http://www.1sucai.cn" id="link1">Elsie</a>, <a class="sister" href="http://www.1sucai.cn" id="link2">Lacie</a>, <a class="sister" href="http://www.1sucai.cn" id="link3">Tillie</a>]
[b]通过css查找,直接上例子:[/b]
[b]通过属性进行查找 [/b]
[u]复制代码[/u] 代码如下:
print soup.find_all("a", attrs={"class": "sister"})
[b]通过文本进行查找 [/b]
[u]复制代码[/u] 代码如下:
print soup.find_all(text="Elsie") print soup.find_all(text=["Tillie", "Elsie", "Lacie"])
[b]限制结果个数 [/b]
[u]复制代码[/u] 代码如下:
print soup.find_all("a", limit=2)
结果为:
[u]复制代码[/u] 代码如下:
[<a class="sister" href="http://www.1sucai.cn" id="link1">Elsie</a>, <a class="sister" href="http://www.1sucai.cn" id="link2">Lacie</a>, <a class="sister" href="http://www.1sucai.cn" id="link3">Tillie</a>] [<p class="title"><b>The Dormouse's story</b></p>] [<a class="sister" href="http://www.1sucai.cn" id="link1">Elsie</a>, <a class="sister" href="http://www.1sucai.cn" id="link2">Lacie</a>, <a class="sister" href="http://www.1sucai.cn" id="link3">Tillie</a>] [u'Elsie'] [u'Elsie', u'Lacie', u'Tillie'] [<a class="sister" href="http://www.1sucai.cn" id="link1">Elsie</a>, <a class="sister" href="http://www.1sucai.cn" id="link2">Lacie</a>]
总之,通过这些函数可以查找到想要的东西。
  • 全部评论(0)
联系客服
客服电话:
400-000-3129
微信版

扫一扫进微信版
返回顶部