大家用 python 都做过什么有趣的爬虫吗？

爬了 1024 所有的账户,然并卵还是没扫到能登录的

@mckelvin 求代码

@JensenChen 是的，按教室弄到一块就行了。
@nikoukou 今天就有雅思考试，只能去一楼，但是一楼的桌椅质量不好年岁太长有气味！！

@codeforlife 相当有趣，之前想做一个 js 插件来着，他排版和搜索好差

我做了自已用的 http://follow.center/ 算不算？
整了 github instagram twitter tumblr 的东西进来，准确的说应该是调用 api ，不算爬虫
不过如果想整合国内的微博、知乎这些封闭型的，估计只能上爬虫了

我把 9 个目标网站所有连接都爬了，然后在抓里面的价格…到只爬了 2KW 条记录时，我放弃了。这样爬没效率。

爬 58

前两年写的少儿不宜爬虫。。 https://github.com/geekan/insane_crawler

我想知道上面爬图的朋友，图片后来怎么处理了 :)

爬学校同学的证件照片、学号、班级、课表 爬了 2000 多个
但是胆子比较小 爬完就删了（主要是没有爬到好看的妹子）

爬新浪微博，做关系链分析

https://github.com/liuslevis/weiquncrawler/

http://www.shishibi.com/

大数据抓取、搜索排序优化、聚类、性价比计算、一个人完成真心累

爬种子，发行并没什么*用

爬种子，发现并没什么*用

实习时候用 20+台屌丝云服务器，分布式爬过上亿条淘宝数据，如 http://t.ultimate010.tk:18080/taobao.php 带宽够牛逼，曾经测试跑满 1G 带宽，爽

撸过下厨房的菜单

@ultimate010 这数据占多少存储空间

@ljbha007 这些数据应该不是公开的吧 怎么找到入口的

@Moker 只是没有链接而已 自己构造 URL 可以进去

@davidlau 某是不是看过你的毕设演讲啊