python发送request获取html内容

最近接了个定制，需要用python的request模块发送http请求，然后获取html里面一部分内容。

导入requests模块已经不用多说啦，今天就来说一下获取html内容的一个帅气的模块， lxml：可以快速处理页面内的html标签！

安装命令：pip install lxml

引入命令是from lxml import html

我用get请求来演示一下吧~

nbzhuti = requests.get('http://www.nbzhuti.cn/')

gethttml = html.fromstring(nbzhuti.text)

接下来我们用xpath，这个方法很是精准，因为不用写什么正则，或者别的语句

比如：//li[@class="good-1"]/a/

这句语句的意思是，获取li标签，class名位good-1下面a标签的内容

我们来写成alia = tree.xpath('//li[@class="good-1"]/text()')

然后print(alia) 就能输出这个标签的html内容啦~