无法从具有不同标签和日期的网站上抓取数据

莎拉

我无法从下面的网站上抓取数据。无论如何,我们可能会在几天内抓取网站上不同选项卡的数据。

https://www.aemo.com.au/Gas/Gas-Bulletin-Board

在R上也进行了一些尝试,但由于数据范围需要更改,因此似乎不起作用,因此不确定如何解决该问题吗?

费雷拉因

您是否尝试过将Python与Scrapy和Selenium结合使用。

尝试创建一个间谍来打开服务器链接或从“选项卡”导入“选择”,

和选择器以过滤数据。

使用配置定义每个请求/作业的周期...

本文收集自互联网,转载请注明来源。

如有侵权,请联系 [email protected] 删除。

编辑于
0

我来说两句

0 条评论
登录 后参与评论

相关文章

从网站上的表格中抓取数据,而无需搜索标签

无法从网站上抓取一些“ div”标签

从网站上抓取数据到熊猫数据框

要抓取的网站具有不同的类别名称

无法使用请求从网站上抓取不同公司的链接

从具有<div标签的网站上抓取/识别表格

抓取网站时BeautifulSoup无法显示所有数据

从具有多个页面的网站抓取数据

尝试进行网页抓取。下载的html代码与实时网站上的代码略有不同

无法看到网站上发布的数据和图像,缺少什么?

如何从网站上抓取数据?

具有多个来源的网站上的Internet Explorer和区域

如何使用python中的BeautifulSoup库从具有“查看更多”选项的网站上抓取数据

如何从网站上抓取所有数据?

如何在具有 woocommerce 数据和订单的实时 wordpress 网站上进行更改?

如何使用 php 和 mysql 从网站上抓取日期并将该日期存储在数据库中?

如何从网站上抓取所有图像?

无法从需要搜索输入的网站抓取 div 标签内的数据

我的代码有问题,它不会从网站上抓取数据

网页抓取时跳过具有不同 HTML 标签的元素

如何将网站上所有抓取的数据保存在熊猫数据框中?

如何使用节点从网站上抓取数据

在没有周围标签的情况下从网站上的元数据中抓取文本

使用 Beautiful Soup 和 Pandas 从网站上抓取数据

无法使用 BeautifulSoup 从网站上抓取所有数据

如何从网站上抓取 ID 标签及其内容(文本)?

如何使用硒从网站上抓取评级和所有评论

当 html 中的数据点是动态的时,如何从网站上抓取和保存图表

使用 Selenium 和 Python 从足球网站上抓取一些数据