pyspider学习记录
新接了一个扒网站数据的活,经枫树指导,使用pyspider来抓取。
文档:http://docs.pyspider.org/en/latest/
python写的,比较强大的框架,主要集中注意数据逻辑的处理即可。
缺点:某个单线程容易饱和,导致界面卡死。定时任务功能还不够强大,只能到每多少时间执行的程度
新接了一个扒网站数据的活,经枫树指导,使用pyspider来抓取。
文档:http://docs.pyspider.org/en/latest/
python写的,比较强大的框架,主要集中注意数据逻辑的处理即可。
缺点:某个单线程容易饱和,导致界面卡死。定时任务功能还不够强大,只能到每多少时间执行的程度
导师终于通过我的论文,给督导审阅了,撒花!!!
3月10日一大早跑到江桥,办完了交房手续。(水电有线电视)
之后去物业把物业费结清。
在隔壁正好有个装修公司,机缘巧合的就算中了这家。(把飘窗敲掉改成阳台,只有他家能做。)
最后选择的是全包,都交给李老板来做,除了龙头和马桶自购。
之前用了灵雀云的docker做了一个ss服务(香港服务器),速度很快,到期之后,准备在自己的新加坡服务器上也做一个。废话上少,直接实操
安装服务:
# yum install python-setuptools && easy_in
回顾2015年,有悲剧有喜剧,有幸运也有不幸。
走路摔跤居然骨折,再家躺了3个月,错过了很多。那段时间,真的步履维艰,女朋友又欲离我而去,每年的旅游计划也被迫搁浅,损失了很多money,股市跌宕起伏,论文也不给过。
但是常言道:祸兮福之所倚,福兮祸之所伏。在经历了3个月的人生低谷之后,幸运女神再次向我微笑。之后顺利的结婚、买房。(现在房价暴涨了20%)
最近做了一个项目,要用到银联支付以及预授权。有些坑,这边记录一下:
1、测试环境中,非正式证书,微信无法跳转
2、测试证书一定要下最新的版本,否则就会验签失败(在这边纠缠了好几天)
3、正式环境和测试环境的配置不同,别忘记修改。
最近好几个项目都用到阿里云的ems和cdn服务,发现现在租用服务器带宽的成本越来越低。
从前建一个网站要买服务器,然后托管,或者自己弄网络。
现在阿里云推出了按小时或者按流量付费,也就是按需付费,大大节约了创业者的成本和技术门槛。太牛逼了。特别是cdn之前都是按月最大流量计费的,很多小公司都要支付高昂的费用,现在初创团队也可以按需使用。
最初接触到《杜拉拉升职记》是在2011年,由张蕾、任杰演播的有声读物。 但是当初没有连贯的听,只零星的听了
工作方面:
1)多反思,多总结,看看有什么可以优化
2)多积累
3)有益的事情要认真做
4)无意义的事情就捣糨糊
5)GET到领导的思路意图,这样可以避免返工
6)做人要有点脾气,不能做老好人!要敢于说NO
7)少说少做多听多看多思考
8)不要不开心——不开心是要花钱的
9)学会计划,把要