宝贝我爱你 Good Luck To You!

pyspider学习记录

新接了一个扒网站数据的活,经枫树指导,使用pyspider来抓取。

文档:http://docs.pyspider.org/en/latest/

python写的,比较强大的框架,主要集中注意数据逻辑的处理即可。

缺点:某个单线程容易饱和,导致界面卡死。定时任务功能还不够强大,只能到每多少时间执行的程度

作者:johen 分类:技术 浏览:6429 评论:0