主题 : 关于数据采集
级别: 白丁
UID: 12014
积分:490 加为好友
威望: 0 精华: 0
主题:42 回复:168
注册时间:2010-10-26
在线时长:0
1#   发表于:2020-05-18 09:16:26  IP:58.71.*.*
显示全部 只看该作者
1. 说明文档里面，对数据采集的分页的处理完全没有写说明，不知道咋用。
2. 简单看了一下，只能采集静态页面么？我们想数据采集的网站是动态的，分页的下一页，都是form提交的分页参数，这个如何采集？
使用道具
   顶端
级别: 论坛管理员
UID: 122721
积分:57884 加为好友
威望: 2 精华: 1
主题:5 回复:50085
注册时间:2018-05-07
在线时长:0
2#   发表于:2020-05-18 09:23:19  IP:182.28.*.*
显示全部 只看该作者
回复第1楼
每天告诉自己一次，“我真的很不错”。
使用道具
   顶端
级别: 白丁
UID: 12014
积分:490 加为好友
威望: 0 精华: 0
主题:42 回复:168
注册时间:2010-10-26
在线时长:0
3#   发表于:2020-05-18 09:53:41  IP:58.71.*.*
显示全部 只看该作者
我知道是这里，然后输入xpath是，说找不到连接，我采集的网站，下一页按钮是调用的js方法提交的form，参数是分页参数， 

这个好像只支持下一页是链接的那种情况？
使用道具
   顶端
级别: 论坛管理员
UID: 122721
积分:57884 加为好友
威望: 2 精华: 1
主题:5 回复:50085
注册时间:2018-05-07
在线时长:0
4#   发表于:2020-05-18 09:56:16  IP:182.28.*.*
显示全部 只看该作者
是的   目前的采集都是对下一页的链接地址进行的采集  获取地址后在去对应页面采集的   js的方法是采集不了的
每天告诉自己一次，“我真的很不错”。
使用道具
   顶端
1 共1页