python爬虫使用lxml解析数据编码乱码问题

2021-04-07 10:27

阅读:495

标签:爬虫   alt   网页   city   结果   pac   获取   div   name   

问题状况:

response = requests.get(url=url, headers=headers).text
html = etree.HTML(response)
name = html.xpath("/html/body/div[2]/ul/li[1]/a/p/text()")[0]
print(name)

可以正常获取数据,但是结果是

å·²éª?è¯? å®?å?¨ ç?¾ç??

这样子的乱码

解决方法:

name = html.xpath("/html/body/div[2]/ul/li[1]/a/p/text()")[0].encode(ISO-8859-1).decode(UTF-8)

这边的UTF-8根据网页编码情况而定

看网页编码情况

F12

技术图片

 

 

python爬虫使用lxml解析数据编码乱码问题

标签:爬虫   alt   网页   city   结果   pac   获取   div   name   

原文地址:https://www.cnblogs.com/This-is-Y/p/13390506.html


评论


亲,登录后才可以留言!