lxml - 从间接 url 转换为直接 url
lxml - Translate from indirect url to direct url
我正在使用 python 和 lxml 来收集一些网络数据。
如果我有一些元素:
import requests
from lxml import html
r = requests.get(url)
tree = html.fromstring(r.text)
file_ = tree.xpath('some_xpath')[0]
url=file_.attrib['href'] #element
产生如下内容:
../Document1/Document2.aspx?No=123456
我的基础 url 是这样的:
http://www.foo.com/
我可以只添加基数 url 并清除间接前导句点,但必须有更好的方法。
感谢任何意见。
对于 Python 2 是:
from urlparse import urljoin
abs = urljoin(base, rel)
我正在使用 python 和 lxml 来收集一些网络数据。
如果我有一些元素:
import requests
from lxml import html
r = requests.get(url)
tree = html.fromstring(r.text)
file_ = tree.xpath('some_xpath')[0]
url=file_.attrib['href'] #element
产生如下内容:
../Document1/Document2.aspx?No=123456
我的基础 url 是这样的:
http://www.foo.com/
我可以只添加基数 url 并清除间接前导句点,但必须有更好的方法。
感谢任何意见。
对于 Python 2 是:
from urlparse import urljoin
abs = urljoin(base, rel)