V2EX › for4 的所有回复 › 第 23 页 / 共 44 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

1 ... 19 20 21 22 23 24 25 26 27 28 ... 44

❮

❯

2013 年 3 月 12 日

@liuxurong
我是把爬虫的各个功能部分分成小任务, 然后按需放入任务队列中. 这样既能有效的降低爬虫的复杂度, 同时用队列也能提高爬虫的稳健度, 比如失败重做.
还有, 使用celery后你的爬虫就变成分布式的了, 可以简单的布置在多台机器上跑

2013 年 3 月 12 日

回复了 46fo 创建的主题 › 程序员 › 你们都用什么来做爬虫的

@xdeng
第一个是编程语言
后面三个是可能需要用到的库

这是我认为的写一个爬虫最简单易学的搭配

2013 年 3 月 12 日

回复了 Livid 创建的主题 › 使用指南 › 关于头像的规则

看来楼上有不少人直接跳过了 "别的和自己毫无关系的"这几个字

2013 年 3 月 12 日

回复了 laoyuan 创建的主题 › 程序员 › 家里的电脑24小时跑爬虫，XP系统下Apache不稳定，三天两头重启，如何破？

加个进程守护, 挂/死了自动重启进程
用PHP抓? 强烈建议改成NodeJS/Python/Golang

2013 年 3 月 12 日

回复了 46fo 创建的主题 › 程序员 › 你们都用什么来做爬虫的

Python
+requests
+lxml
+celery

2013 年 3 月 12 日

回复了 Livid 创建的主题 › 使用指南 › 关于头像的规则

@Livid
赞! 同对某几个头像忍无可忍

2013 年 3 月 11 日

回复了 ua 创建的主题 › 问与答 › Kindle paperwhite貌似变砖！如何修复？

不用串口应该也行的
看这篇文章 http://blog.sina.com.cn/s/blog_59cf6726010144xo.html
我的K3用这种方式修复的, 查了一下paperwhite也是用的飞思卡尔 [CPU型号：飞思卡尔 i. MX50 Rev.1.1]
所以不想拆机和去买转接口的话建议直接用飞思卡尔的工具直刷

2013 年 3 月 10 日

回复了 abu 创建的主题 › 问与答 › 家里要装修房子了，这里想问问几个问题：关于地板、线路、书房的

@lostgerry 你这个奇葩

2013 年 3 月 6 日

回复了 sdysj 创建的主题 › 分享发现 › Google良心? Data compression proxy for Chrome for Android

试用了下 youtube还是访问不了, 搜索敏感词还是一样的连接被重置

2013 年 3 月 6 日

回复了 vvniu 创建的主题 › 北京 › 老实人怎么在这个世界上生活

不管警察管不管，报警都是正确做法，不过最好当晚就报警。

2013 年 3 月 2 日

回复了 vvniu 创建的主题 › iPad › 问下你们买了ipad觉得值吗？

作为经济窘迫的人的奢侈品不值, 反之作为玩具还行.