列表翻页配置(批量网址采集)
要大批量采集的文章,它们一般都被放在很多列表页中(翻页),而这些列表页的链接地址一般都是有规律的(等差递增1,2..n,或是字母a-z变化),为了采集到全部列表页,就可使用“按规则生成网址”来批量生成,并作为采集的列表入口网址。
场景:采集列表页,一般都有很多页(翻页),页面链接一般都是有规律的(等差递增,或是字母a-z变化),
那么就可使用“按规则生成网址”来批量生成要抓取的入口网址。
这个比较简单,不需要生成,直接粘贴多个网址即可,多个以";"分隔开。
vvv
dd