您现在的位置是：首页 >学无止境 >【Python实战】Python采集高校信息网站首页学无止境

【Python实战】Python采集高校信息

爱吃饼干的小白鼠 2024-07-17 12:01:02
简介【Python实战】Python采集高校信息

前言

大家好，我们今天来爬取某站的高校名单，把其高校名单，成员和内容数获取下来，不过，我们发现这个网站比我们平时多了一个验证，下面看看我是怎么解决的。

环境使用

  • python 3.9
  • pycharm

模块使用

  • requests

模块介绍

  • requests

        requests是一个很实用的Python HTTP客户端库，爬虫和测试服务器响应数据时经常会用到，requests是Python语言的第三方的库，专门用于发送HTTP请求，使用起来比urllib简洁很多。

  • parsel

        parsel是一个python的第三方库，相当于css选择器+xpa

风语者！平时喜欢研究各种技术，目前在从事后端开发工作，热爱生活、热爱工作。

站长推荐