主题 : 采集系统内容起始点不匹配 |
级别: 举人
|
14# 发表于:2018-10-09 17:55:52 IP:124.100.*.*
回复第13楼 浏览器标识问题,系统采集的请求被识别为移动端访问, 被转入移动端页面了
|
||
---|---|---|---|
级别: 举人
|
18# 发表于:2018-10-09 18:01:21 IP:124.100.*.*
回复第17楼 采集得了, HttpGet httpget = new HttpGet(new URI(url));抓的时候,对方网站有识别, 这个请求被认为是移动端访问,被转入对方的移动端页面了
|
||
---|---|---|---|
级别: 举人
|
20# 发表于:2018-10-09 18:04:54 IP:124.100.*.*
回复第19楼 不是对方网站的问题,对方只是做了个识别,识别你是pc还是手机,转入对应的网站 ,是这个采集系统,httpget请求的时候,没有设置固定为pc的请求头
|
||
---|---|---|---|