用 python 也写过类似的爬虫,开了多线程,运行速度和 js 写的有点差距 这是地址,欢迎大家试用! https://github.com/Card007/Proxy-Pool
用 python 也写过类似的爬虫,开了多线程,运行速度和 js 写的有点差距 这是地址,欢迎大家试用! https://github.com/Card007/Proxy-Pool
|
twotigerMar 23, 2019
1
提个建议,把 node_modules 忽略了
|
|
orangeadeMar 23, 2019
3
Android 主流方式都是 gevent 或者 asyncio,不见得会慢
|
|
orangeadeMar 23, 2019
4
android -> python 打错
|
|
delectateMar 23, 2019
5
一般都是协程,实在不行多进程协程,跑满很轻松。就这点而言,不觉得 py 慢。
|
|
facatMar 23, 2019 via Android
6
爬虫的制约因素一般是网络 I/O,除非你在骨干网上跑爬虫,否则家里的宽带应该和 python 没区别。
|
|
qianqlgzMar 23, 2019
8
怎么你们都会加链接,我不会,试了几次没成功
|
|
tikazyqMar 24, 2019 via iPhone
12
已 star,最好有可以验证代理 IP 是否可用的逻辑
|