用爬虫爬了PopAds的一些站，对应siteID，有用的可以下载

plsd2012

% f' {/ m4 I, @" o# ^) u
前几天写了个爬虫爬了PopAds的一些站，然后把对应siteID解析出来了。大概看了一下，大人站居多，可以用来查看这些国家都在投放什么广告，或者根据siteID来查找对应的站，但是站点较少，1000多个。
/ {8 q5 @  l5 V" M" ]( E有没有价值，我也不好说，放出来大家自己判断吧。
还在跑PopAds以及其他各种流量源的朋友可以一起交流，qq群：549694227。
) ^8 R+ Z) o- u) J/ U) w" P
* p" X8 |9 J# p+ L) `

9 j1 d, `2 J& t  X" P8 i


$ L) Q  Q" J7 a# H. A1 O

plsd2012

% W2 r  Q" ~# V2 }0 N

河小马 发表于 2016-7-29 17:39
; k& B# y% j6 @  A& P0 _. {这个网站确实挺NB 的说。。

感谢河马老大加分。老外有不少做这种数据分析的网站，确实很NB，这个也不错：https://nerdydata.com/，不过没有builtwith全。

/ ?0 H5 Y% f' W
) F# a& ?: t  a
- w* x2 `1 ], _$ K- N3 T9 q2 ^  H

河小马

其实我觉得这份数据的最大意义是看看什么站点在获得流量。。然后仿制。。。

willok

不错，求如何获取投放了PopAds（或其他联盟adsense,infolinks等）的网站

simon611

楼主技术流啊

老刘

网站都是隐藏的，请问怎么爬的？

plsd2012

willok 发表于 2016-7-28 12:05
不错，求如何获取投放了PopAds（或其他联盟adsense,infolinks等）的网站

( X5 _' ~( u0 j" C通过spy工具可以拿到列表，或者通过google搜关键字抓列表。

plsd2012

simon611 发表于 2016-7-28 12:12
4 n5 U7 X; J, U+ I楼主技术流啊

* v' S: X4 p& |! U3 e; ~1 O! r9 i5 R半吊子

plsd2012

老刘 发表于 2016-7-28 12:22
9 O: }5 D8 D$ t" I8 z* A网站都是隐藏的，请问怎么爬的？

1 @' r0 z+ e0 j4 v2 k: A: m通过spy工具可以拿到列表，或者通过google搜关键字抓列表。

Atrus

这都能行。。。如果验证属实 得树个大拇哥

windflower

simon611 发表于 2016-7-28 12:12
: D# q& x+ ^' Z4 M2 T+ ]+ v3 }8 d楼主技术流啊

1 y7 x- r/ E) _2 o  K好久不见simon兄露脸了

高金铜

有老外用http://builtwith.com/ 也导出过    楼主能用自己的爬虫spy到   楼主威武

比特人

SB就能行，自定义grabber就可以抓任何siteid

清风教父

不错，真心厉害。

wz19_cn

河小马

高金铜 发表于 2016-7-28 20:29
有老外用http://builtwith.com/ 也导出过    楼主能用自己的爬虫spy到   楼主威武

# I4 Y- K( x/ H- _* u, y这个网站确实挺NB 的说。。