xpath是一个路径表达式,

xpath学习

(1)xpath节点

在XPath中,有七种类型的节点:元素,属性,文本,命名空间,处理指令,注释以及文档节点;XML文档是被作为节点树来对待的。树的根被称为文档节点或者根结点

(2)xpath语法

xpath使用路径表达式来选取XML文档中的节点或节点集。节点是通过沿着路径(path)或者步(steps)来获取的。

//表示从匹配选择的当前节点选择文档中的节点,而不考虑它们的位置。例如:

<?xml version="1.0" encoding="UTF-8"?>

<bookstore>

<book>
<title lang="eng">Harry Potter</title>
<price>29.99</price>
</book> <book>
<title lang="eng">Learning XML</title>
<price>39.95</price>
</book> </bookstore>

其中,选取节点方式为:

表达式 描述
bookstore 表示选取bookstore元素的所有子节点;
/bookstore 表示选取根元素bookstore;
bookstore/book 表示选取bookstore的子元素的所有book元素;
//book 表示选取所有book子元素,而不管它们在文档中的位置;
bookstore//book 表示选取bookstore元素的后代的所有book元素,而不管它们位于bookstore之下的什么位置;
//@lang 表示选取名为lang的所有元素。

选择谓语方式为:

谓语用来查找某个特定的节点或者包含某个指定的值的节点;谓语被嵌套在方括号中;

路径表达式 结果
/bookstore/book[1] 表示选取属于bookstore子元素的第一个book元素;
/bookstore/book[last()] 表示选取属于bookstore子元素的最后一个book元素;
/bookstore/book[-1] 表示选取bookstore子元素的倒数第二个book元素;
bookstore/book[position()<3] 选取最前面的两个属于bookstore元素的子元素的book元素;
//title[@lang] 表示选取所有拥有名为lang的属性的title元素;
//title[@lang='eng'] 表示选取所有拥有属性lang的值为eng的title元素;
bookstore/bookprice>35.00] 表示选取bookstore元素的所有book元素,且其中的price元素的值须大于35.00;
/bookstore/book[price>35.00]/title 表示选取bookstore元素中的book元素的所有title元素,且其中的price元素的值须大于35.00。

选取未知节点:(通配符)

XPath通配符可用来选取位置的XML元素;

通配符 描述
* 匹配任何元素节点;
@* 匹配任何属性节点;
node() 匹配任何类型的节点;

对应的路径表达式可以为:

路径表达式 结果
/bookstore/* 选取文档中的所有元素;
//* 表示文档中的所有元素。
//title[@*] 选取所有带有属性的title元素。

选取若干路径:

通过在路径表达式中使用“|”运算符,您可以选取若干个路径。

|//book/title | //book/price |表示book元素的所有title和price元素;|

|//title | //price |表示文档中的所有title和price元素;|

|bookstore/book/title | //price|表示选取属于bookstore元素的book元素的所有title元素,以及文档中所有的price元素;|

因此://dd[@data-index = '0']表示选取所有dd子元素,且其属性data-index的值为0;

//div[@class='option-list']表示选取所有div子元素,且其属性class的值为option-list;

/a/text()表示选取属于a元素节点中的所有文本;其中text()表示匹配任何文本类型的节点;

//dd[@data-index = '0']//div[@class='option-list']/a/text()表示选取所有属性data-index值为0的dd元素下的所有属性class值为option-list的div元素下的a元素的所有文本;

//dd[@data-index = '0']//div[@class='option-list']/a/@href表示选取所有属性data-index值为0的dd元素下的所有属性class值为option-list的div元素下的a元素的所有属性为href的数据;

Xpath做数据解析的更多相关文章

  1. 070.Python聚焦爬虫数据解析

    一 聚焦爬虫数据解析 1.1 基本介绍 聚焦爬虫的编码流程 指定url 基于requests模块发起请求 获取响应对象中的数据 数据解析 进行持久化存储 如何实现数据解析 三种数据解析方式 正则表达式 ...

  2. python爬虫数据解析的四种不同选择器Xpath,Beautiful Soup,pyquery,re

    这里主要是做一个关于数据爬取以后的数据解析功能的整合,方便查阅,以防混淆 主要讲到的技术有Xpath,BeautifulSoup,PyQuery,re(正则) 首先举出两个作示例的代码,方便后面举例 ...

  3. python爬虫的页面数据解析和提取/xpath/bs4/jsonpath/正则(1)

    一.数据类型及解析方式 一般来讲对我们而言,需要抓取的是某个网站或者某个应用的内容,提取有用的价值.内容一般分为两部分,非结构化的数据 和 结构化的数据. 非结构化数据:先有数据,再有结构, 结构化数 ...

  4. Python网络爬虫之三种数据解析方式 (xpath, 正则, bs4)

    引入 回顾requests实现数据爬取的流程 指定url 基于requests模块发起请求 获取响应对象中的数据 进行持久化存储 其实,在上述流程中还需要较为重要的一步,就是在持久化存储之前需要进行指 ...

  5. 爬虫-数据解析-xpath

    xpath 解析 模块安装 : pip install lxml xpath的解析原理 实例化一个etree类型的对象,且将页面源码数据加载到该对象中 需要调用该对象的xpath方法结合着不同形式的x ...

  6. 数据解析(XML和JSON数据结构)

    一   解析 二 XML数据结构 三 JSON 数据结构     一 解析 1  定义: 从事先规定好的格式中提取数据     解析的前提:提前约定好格式,数据提供方按照格式提供数据.数据获取方则按照 ...

  7. iOS - XML 数据解析

    前言 @interface NSXMLParser : NSObject public class NSXMLParser : NSObject 1.XML 数据 XML(Extensible Mar ...

  8. iOS开发——网络Swift篇&JSON与XML数据解析

    JSON与XML数据解析 JSON数据解析(内置NSJSONSerialization与第三方JSONKit)   一,使用自带的NSJSONSerialization 苹果从IOS5.0后推出了SD ...

  9. 玩转iOS开发 - JSON 和 Xml 数据解析

    前言 Json 和xml是网络开发中经常使用的数据格式,JSON轻量级.xml相对较复杂.所以如今用JSON的比例很大.基本上从server获取的返回数据都是JSON格式的,作为iOS开发人员,解析J ...

随机推荐

  1. dp入门(LIS,LCS)

    LCS

  2. RHEL7和RHEL6即时设置、开启和开机、永久开启服务的方法、原理(例子:端口与Nginx冲突的Apache httpd服务的关闭)

    1.RHEL7 说明:启用服务就是在当前 runlevel 的配置文件目录/etc/systemd/system/multi-user.target.wants/里,建立/usr/lib/system ...

  3. 【分片无法挂载】Elasticsearch分片和副本无法挂载(分片移位)

    部署说明 硬件 服务器两台: 机器A:64G内存 机器B:32G内存 分片 共12个节点 2个查询节点,10个存储节点 8个主分片 1个复制分片(每个分片都有一个副本分布在不同的节点上面) 每台机器都 ...

  4. P3239 [HNOI2015]亚瑟王

    思路 神仙概率dp 由于期望的线性性质,能够想到最后要求的期望价值就是把每个卡牌发动的概率\(g_i\)乘上伤害\(val_i\)之后加到一起 然后怎么求\(g_i\)呢,肯定是要dp的 我想了例如d ...

  5. addEventListener在一个节点上添加多个相同的事件

    <button id='btn'>attachEvent</button> window.onload=function(){ var Obtn = document.getE ...

  6. Vue学习五:v-for指令使用方法

    本文为博主原创,未经允许不得转载: <!DOCTYPE html> <html lang="zh"> <head> <meta http- ...

  7. No mapping found for HTTP request with URI [/Portal/download] in DispatcherServlet with name 'springmvc'

    本文为博主原创,未经允许不得转载: 遇到这个异常,总结一下这个问题发生的原因: 这个原因是在springmvc中在DispatcherServlet分发请求时,解析不到相应的请求路径.后台要请求的路径 ...

  8. win7 "com surrogate“ 已停止工作的解决办法

    1.在文件夹选项里选“始终显示图标,从不显示缩略图”. 2.数据执行保护(DEB),依次打开:计算机——属性——高级系统设置——高级——性能——设置——数据执行保护 选下面的单选按钮“为除下列选定程序 ...

  9. python爬虫训练——爬poj题目

    首先要解决的就是不同的题目在不同的页上,也就是要实现翻页功能,自动获取所要爬取的地址,通过分析可以得出不同的页面也就是volume=后面的数字不同 所以我们可以用re模块来替换即可: new_url ...

  10. 线程中为控件赋值Winform

    this.Invoke(new MethodInvoker(() => { //TO DO })); this.Invoke(new Action(()=>{ // TO DO }));