严格来说应该是采集了Google的搜索结果,根据关键词得到搜索页面,把搜索结果保存到数据库。原理很简单,但是研究Google的大牛应该都知道,Google的反爬能力是很厉害的,爬不了几页就会被屏蔽IP,想要大量抓取Google的搜索结果是很困难的,小弟研究Google多年,终于解决了这个问题,现在寻求大牛合作,把这一成果利用起来。另外小弟还破解了文档分享站scribd的加密算法,可以根据文档预览页面地址获取到文档的直接下载地址,欢迎大牛前来指导合作,站内消息或者QQ:26917373! S [+ f J# m: {0 Q0 [
如果是用代理采集,那类似的工具太多,而且太吃代理,跟别的工具没什么区别了。" Y+ A) V& O: S n N. j: H
如果能大规模采集,那简直是金矿了...随便想到的工具类型有rank checker, keyword research, ad spy, spam。每一类工具都有各种细分的需求,个性化的需求更数不胜数了...