Webmagci功能--获取链接

2021-02-04 11:15

阅读:357

标签:reg   html   focus   部分   targe   fence   链接   block   and   

获取连接

一个站点的页面是很多的,一开始不可能全部列举出来,于是如何发现后续的链接,是一个爬虫不可缺少的一部分

获取链接(例子):

page.addTargetRequests(page.getHtml().css("div#news_div").links().regix(".*9$").all());
//验证是否真正拿到下一个页面的数据
page.putField("div",page.getHtml().css("div.mt h1").all())

 

Webmagci功能--获取链接

标签:reg   html   focus   部分   targe   fence   链接   block   and   

原文地址:https://www.cnblogs.com/juddy/p/13143223.html


评论


亲,登录后才可以留言!