您现在的位置是:首页 >其他 >【Python实战】Python采集热榜数据网站首页其他
【Python实战】Python采集热榜数据
简介【Python实战】Python采集热榜数据
前言
大家好,我们今天来爬取热搜榜,把其文章名称,链接和作者获取下来,我们保存到本地,我们通过测试,发现其实很简单,我们只要简单获取数据就可以。没有加密的东西。
效果如下:
环境使用
- python 3.9
- pycharm
模块使用
- requests
模块介绍
- requests
requests是一个很实用的Python HTTP客户端库,爬虫和测试服务器响应数据时经常会用到,requests是Python语言的第三方的库,专门用于发送HTTP请求,使用起来比urllib简洁很多。
- parsel
parsel是一个python的第三方库,相当于css选择器+xpath+re。
parsel由scrapy团队开发ÿ
风语者!平时喜欢研究各种技术,目前在从事后端开发工作,热爱生活、热爱工作。