使用requests+re+xlwt将爬下来的数据保存在excel中
在平时的工作中,大家可能会遇见这么一种情况,就是领导让你从一个网站抓点数据,但是呢,他又不懂编程,那么如何让领导很直观的看懂咱们抓下来的数据呢?今天呢,给大家分享一个很实用的操作,就是直接抓取数据保存到Excel中,以腾讯课堂为例,链接为 https://ke.qq.com/course/list?mt=1001&st=2002&tt=3019&page=
首先咱们先来看下页面,如下:
明确一下咱们这次抓取的内容,标题及链接,还有出品人,这三个
通过页码咱们发现,此内容只有13页,所以在请求链接的时候,翻页十三次就好了
具体代码以附图形式粘在下边,大家可以参考,过程很详细
下边是抓下来的数据,因为数据行太多,只截一个供展示