lxml中xpath获取本节点及以下所有节点的text()方法?

<ul id="parameter2" class="p-parameter-list">
 <li title='养生堂天然维生素E软胶囊'>商品名称:养生堂天然维生素E软胶囊</li>
 <li title='720135'>商品编号:720135</li>
 <li title='养生堂'>品牌:<a>养生堂</a></li>
</ul>

以上是网页源码,现通过xpath匹配所有Li

import lxml.etree as etree
html = html.decode("utf-8")
tree = etree.HTML(html)
property_list_reg = "//ul[@id='parameter2']/li/text()"
property_lst = tree.xpath(property_list_reg)
print len(property_lst)   

输出结果:

3
商品名称:养生堂天然维生素E软胶囊
商品编号:720135
品牌:

如果换成:

property_list_reg = "//ul[@id='parameter2']/li//text()" #此处//

输出结果:

4
商品名称:养生堂天然维生素E软胶囊
商品编号:720135
品牌:
养生堂

显然,这不是我想要的结果,我想要的结果是这样

3
商品名称:养生堂天然维生素E软胶囊
商品编号:720135
品牌: 养生堂

求大神指导~ 该如何实现?

阅读 29.2k
2 个回答

正确的做法时使用Xpath的 string 函数

import lxml.etree as etree
html = """
<ul id="parameter2" class="p-parameter-list">
 <li title='养生堂天然维生素E软胶囊'>商品名称:养生堂天然维生素E软胶囊</li>
 <li title='720135'>商品编号:720135</li>
 <li title='养生堂'>品牌:<a>养生堂</a></li>
</ul>
"""
tree = etree.HTML(html)
property_list_reg = '//ul[@id="parameter2"]//li'
property_lst = tree.xpath(property_list_reg)
for e in property_lst:
    print(e.xpath('string(.)'))
print(len(property_lst))

在XPath的定义中, "//" 就是 "/descendant-or-self::node()/",表示当前节点或后代节点的匹配,所以你用"//text()"肯定是会匹配到下面的子节点的,比较清晰的办法是匹配到父节点li层,然后手动处理下子节点。

html = """
<ul id="parameter2" class="p-parameter-list">
 <li title='养生堂天然维生素E软胶囊'>商品名称:养生堂天然维生素E软胶囊</li>
 <li title='720135'>商品编号:720135</li>
 <li title='养生堂'>品牌:<a>养生堂</a></li>
</ul>
"""

html = html.decode("utf-8")
tree = etree.HTML(html)

property_list_reg = '//ul[@id="parameter2"]/li'


def tryFindChild(element):
    children = element.getchildren()
    if len(children):
        return element.text + " " + children[0].text
    else:
        return element.text


property_lst = tree.xpath(property_list_reg)
for e in property_lst:
    print tryFindChild(e)

print len(property_lst)

输出
商品名称:养生堂天然维生素E软胶囊
商品编号:720135
品牌: 养生堂
3

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题