火车头采集网址时候和访问的地址不一样！！！！！！！... [复制链接]
查看:98 | 回复:11

有容乃大 · 发表于 2013-4-25 16:20:34

目标站是
[url=]

这样子的

正常访问就是 http://url.com/ www/2/123.html

但是火车头采集来的地址是 http://url.com/utf8/ www/2/123.html

换了好几个IP都是这样子

怎么解决下？

SunnyV · 发表于 2013-4-25 16:23:16

但是火车头采集来的地址是 http://url.com/utf8/ www/2/123.html

就算这样子，你自己再做个替换吧，把多月的 UTF8删掉嘛

恢复自我 · 发表于 2013-4-25 16:25:00

我记得有网址合成了虽然已经很长时间没用

有容乃大 · 发表于 2013-4-25 16:38:14

SunnyV · 发表于 2013-4-25 16:46:26

99%以上的问题都是操作的问题，基本上人能访问的，机器就能抓到

ICFOX · 发表于 2013-4-25 16:47:07

SunnyV 发表于 2013-4-25 16:47

[/url]
99%以上的问题都是操作的问题，基本上人能访问的，机器就能抓到
+1

☆校长☆ · 发表于 2013-4-25 16:47:50

不懂采集啊

a35253283 · 发表于 2013-4-25 16:47:00

SunnyV 发表于 2013-4-25 16:47

99%以上的问题都是操作的问题，基本上人能访问的，机器就能抓到
开什么玩笑，很多站现在用JS控制，根本找不到地址了，前两天就找了一个

SunnyV · 发表于 2013-4-25 17:14:43

a35253283 发表于 2013-4-25 17:16

开什么玩笑，很多站现在用JS控制，根本找不到地址了，前两天就找了一个
JS控制一样可以抓的，极少数才抓不到
不管是get还是post 火车头都可以模拟抓取的

bangbangbang · 发表于 2013-4-25 17:16:46

SunnyV 发表于 2013-4-25 17:21

JS控制一样可以抓的，极少数才抓不到
不管是get还是post 火车头都可以模拟抓取的 ...
这样嘛，求指导呐...
SunnyV 发表于 2013-4-25 16:47

99%以上的问题都是操作的问题，基本上人能访问的，机器就能抓到
+1

火车头 采集网址时候 和访问的地址不一样！！！！！！！... [复制链接] 查看:98 | 回复:11

火车头采集网址时候和访问的地址不一样！！！！！！！... [复制链接]
查看:98 | 回复:11