您现在的位置是:首页 >其他 >【Python实战】Python采集热榜数据网站首页其他

【Python实战】Python采集热榜数据

爱吃饼干的小白鼠 2024-07-11 08:06:33
简介【Python实战】Python采集热榜数据

前言

1b83b1d3fff541e6844ba7bfc4b8f724.gif

大家好,我们今天来爬取热搜榜,把其文章名称,链接和作者获取下来,我们保存到本地,我们通过测试,发现其实很简单,我们只要简单获取数据就可以。没有加密的东西。

 效果如下:a34f11a5373b465588f0ef9579007eb7.png

环境使用

  • python 3.9
  • pycharm

模块使用

  • requests

模块介绍

  • requests

        requests是一个很实用的Python HTTP客户端库,爬虫和测试服务器响应数据时经常会用到,requests是Python语言的第三方的库,专门用于发送HTTP请求,使用起来比urllib简洁很多。

  • parsel

        parsel是一个python的第三方库,相当于css选择器+xpath+re。

parsel由scrapy团队开发ÿ

风语者!平时喜欢研究各种技术,目前在从事后端开发工作,热爱生活、热爱工作。