您现在的位置是:首页 >技术教程 >【Python实战】Python采集地震信息网站首页技术教程

【Python实战】Python采集地震信息

爱吃饼干的小白鼠 2024-07-01 11:59:42
简介【Python实战】Python采集地震信息

 前言

昨天,我们这里发生了地震,不过,没有太大的问题,我就想着能不能把近几年发生地震的信息,收集下来,我们发现中国地震台网的官方微博会分布近几年发生地震的信息。我们可以直接在这里获取。

环境使用

  • python 3.9
  • pycharm

模块使用

  • requests

模块介绍

  • requests

        requests是一个很实用的Python HTTP客户端库,爬虫和测试服务器响应数据时经常会用到,requests是Python语言的第三方的库,专门用于发送HTTP请求,使用起来比urllib简洁很多。

  • parsel

        parsel是一个python的第三方库,相当于css选择器+xpath+re。

parsel由scrapy团队开发,是将scrapy中的parsel独立抽取出来的,可以轻松解析html,xml内容,获取需要的数据。

相比于BeautifulSoup,xpath,parsel效率更高,使用更简单。

  • re

      

风语者!平时喜欢研究各种技术,目前在从事后端开发工作,热爱生活、热爱工作。