XPath选择器参考

XPath是用于浏览XML文档元素和属性的语言，通过XPath路径表达式遍历节点元素就如同在磁盘上访问文件夹路径一样的方便精准表达元素和属性。

XPath内置了200多个函数帮助我们处理文本、数字、布尔值、日期和时间等类型数据，它的语法规则已经广泛用于很多语言中。

XPath术语

• 节点(Node) ： 元素、属性、文本、命名空间、处理指令、注释和文档(根)节点。XML文档被当做节点树对待，树的根被称作文档节点或者根节点。
• 基本值(原子值， Atomic value): 无父或无子的节点。
• 项目(Items)：基本值或者节点都可以称为一个item项目。
• 节点关系： 父(Parent)、子(Children)、同胞(Sibling)、先辈(Ancestor)、后代(Descendant)

以articlie节点为例，父节点为div，子节点为ul ，孙子节点为 li 。

再以li/div节点为例， 节点包含节点有 @class属性节点， @id属性节点和text文本无子节点就称为原子值。

XPath路径表达式语法

我们以下面例子了解语法及含义：

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11

<?xml version="1.0" encoding="ISO-8859-1"?>
<bookstore>
<book>
  <title lang="eng">Harry Potter</title>
  <price>29.99</price>
</book>
<book>
  <title lang="eng">Learning XML</title>
  <price>39.95</price>
</book>
</bookstore>

选取节点

下面列出了最常用的路径表达式：

来看下下面的路径表达式例子以及表达式的含义解释:

谓语(Predicates)

谓语用来查找某个特定的节点或者包含某个指定的值的节点。

谓语被嵌在方括号中。

选取通配符

示例：

多个节点选取方法

过在路径表达式中使用“|”运算符，您可以选取若干个路径。

XPath轴(Axes)

轴可定义相对于当前节点的节点集。

实际上轴的这些名称可以通过：. , .. , @ , // 表达出来，很少会使用这些名称。

节点测试(nodetest)

想了解更多，可以来了解w3中关于note-tests详细说明

定义：节点测试的另一种形式称为 种类测试，可以根据节点的种类，名称和类型注释选择节点。 种类测试的语法和语义在2.5.4 SequenceType语法和2.5.5 SequenceType中进行了描述。 在节点测试中使用同类测试时，仅选择指定轴上与种类测试匹配的那些节点。 下面显示的是可能在路径表达式中使用的种类测试的几个示例：

其中我们比较常用的可能就是text()，提取节点文本信息返回结果为列表格式(保留文本的空白符)。

另外需要说明的是XPath的string(arg)函数，这个函数返回节点内部的字符串信息，也就是返回了字符串类型数据。 我们来说下text()和fn:string(arg)的区别：

1. 含义不同： text()是种类测试，string(arg)是XPath函数，所以可以在XPath表达式中使用结合使用text()，而string()不能。
2. 返回结果集类型不同： text()返回的是文本列表类型(一个节点也会返回一个元素的列表)，string()返回的是字符串类型。

位置路径表达式

位置路径可以是绝对的，也可以是相对的。

绝对路径起始于正斜杠( / )，而相对路径不会这样。在两种情况中，位置路径均包括一个或多个步，每个步均被斜杠分割：

绝对位置路径：

/step/step/...

相对位置路径：

step/step/...

每个步均根据当前节点集之中的节点来进行计算。

*** 步（step）包括：***

• 轴（axis） : 定义所选节点与当前节点之间的树关系
• 节点测试（node-test） : 识别某个轴内部的节点
• 零个或者更多谓语（predicate）: 更深入地提炼所选的节点集

路径表达式中的一步(step)的语法：

轴名称::节点测试[谓语]
axisname::nodetest[predicate]

实例

XPath运算符

XPath 表达式可返回节点集、字符串、逻辑值以及数字。

有了运算符就可以构建逻辑表达式来复杂化我们的匹配条件了。

XPath函数

1. 模糊查询fn:contains(string1,string2) ：如果 string1 包含 string2，则返回 true，否则返回 false。
2. 小写转换fn:lower-case(string) : 把 string 参数转换为小写。
3. 字符翻译fn:translate(string1,string2,string3), 把 string1 中的 string2 替换为 string3。 例子：translate(‘12:30’,‘0123’,‘abcd’),结果：‘bc:da’。
4. 字符串替换：fn:replace(string,pattern,replace)， 把指定的模式替换为 replace 参数，并返回结果。例子：replace(“Bella Italia”, “l”, “*”) 结果：‘Be**a Ita*ia’。
5. 字符串转换函数fn:string(arg) , 返回参数的字符串值。参数可以是数字、逻辑值或节点集。

更多函数可以访问w3schools_xsl_functions查看。

学到这里，如果怕记不住那就多练习，还可以记住这个 XPath cheetsheet 网页，需要的时候快速查看一下。

XPath实例练习

1. 按照节点属性定位

//a[text()='登录']
//div[contains(@class,'blog-content-box')]
//span[@id='name' or text()='name']

2. 提取某节点下所有文本信息

例如： <div id="test2">美女，<font color=red>你的微信是多少？</font><div>

# 获取字符串数据("美女,你的微信是多少")
data = selector.xpath('//div[@id="test2"]')[0]
info = data.xpath('string(.)')

# 获取字符串列表["美女,","你的微信是多少"]
info = selector.xpath('//div[@id="test2"]/text()')

3. 取属性值(@attr_name)

# 获取超链接的属性href地址
value1 = html.xpath('//a/@href')
value2 = html.xpath('//img/@src')
value3 = html.xpath('//div[2]/span/@id')