火车头采集点击加载列表站点方法ajax「火车头ajax无限加载采集」
今天来说一下,想必很多使用火车头采集器爬取正常列表带有上一页下一页的站点很轻松,但是遇到列表是点击加载翻页就放弃了,这里分享一下火车头采集js分页点击加载ajax列表站点方法。
1、首先在目标页面按F12
或Ctrl+Shift+C
打开检查元素,然后点击Network选项卡
2、点击XHR按钮,在页面上触发ajax加载,浏览器会监听页面数据的执行和变化
红框中可以看到请求方式和请求网址
然后点击荷载可以看到发送的数据
3、将获取到的信息填写到火车头采集器
然后就可以获取文章页url了