最近有在做一些采集,写规则真的是很麻烦,折腾了不少我这个菜鸟的时间。前天晚上还研究了一晚上的”如何利用fiddler2采集post数据”,发现的却很难。先说说post传递数据是怎么回事吧:就是要采集那种点击下一页内容变,但URL地址不变的那种,这种一般多用在文章列表页面。突然在想百度蜘蛛是不是也有技术模拟post数据去抓取页面呢?教程有现成的视频:
请大家进入:http://pan.baidu.com/s/1ntHtB8t 去下载查看。
做简单、真实的自己
最近有在做一些采集,写规则真的是很麻烦,折腾了不少我这个菜鸟的时间。前天晚上还研究了一晚上的”如何利用fiddler2采集post数据”,发现的却很难。先说说post传递数据是怎么回事吧:就是要采集那种点击下一页内容变,但URL地址不变的那种,这种一般多用在文章列表页面。突然在想百度蜘蛛是不是也有技术模拟post数据去抓取页面呢?教程有现成的视频:
请大家进入:http://pan.baidu.com/s/1ntHtB8t 去下载查看。