当前位置:   article > 正文

xpath基本案例(Python)_xpath案例

xpath案例

**#相关介绍:xpath是在XML文档中搜索内容的一门语言;html是xml的一个子集。
一、首先安装lxml模块,这里以pycharm开发环境为例,在Terminal命令行输入pip install lxml 出现如下页面即是安装成功。在这里插入图片描述
1.再介入案例之前,首先看一个小例子:
xml在这里插入图片描述

在这里插入图片描述
(1)先从lxml模块导入etree包;
(2)xml可以看作是网页源代码(相关知识html标签语言)
(3)第20行拿到页面源代码(调用XML方法);
(4)调用xpath方法。
输出结果如下:
在这里插入图片描述
二、关于xpath基本案例
1.拿到页面源代码(以猪八戒网为例)

import requests
from lxml import etree

url = "https://taiyuan.zbj.com/sem_search/f/?kw=sass"
res = requests.get(url)
  • 1
  • 2
  • 3
  • 4
  • 5

2.HTML对源代码进行解析

xml = etree.HTML(res.text)
  • 1

3.拿到每一个服务商的div

divs = xml.xpath("/html/body/div[6]/div/div/div[2]/div[7]/div/div[1]")
  • 1

在这里插入图片描述
右击选择复制->复制xpath,然后粘贴到代码区。
4.遍历服务商信息

for div in divs:#每一个服务商信息
    result1 = div.xpath("./div/div/a[2]/div[2]/div[1]/span[1]/text()")
    result2 = div.xpath("./div/div/a[2]/div[2]/div[1]/span[2]/text()")
    print(result1, result2)

['¥5000'] ['近半年成交:0笔']
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6

成功爬取此信息。小伙伴们也可以用同样的方法爬取更多的信息。
在这里插入图片描述

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/Guff_9hys/article/detail/838359
推荐阅读
相关标签
  

闽ICP备14008679号