Scrapy使用代理爬取网站
timg.jpg
前言
在我们平时使用爬虫程序采集数据时，往往会遇到，因采集速度过快导致的自己网络ip被目标网站封禁，这种封禁有时候是封几分钟，有时候是封一天，封的时间不等，但是这样会导致我们局域网内其他人也无法访问目标网站，最大的问题是我们无法进行数据采集。
手淘千牛IM即时通信 - 星巴克消息开放实践
> 对垂直业务领域进行了解，抽象成领域模型，沉淀出通用能力和标准化体系，为后续业务赋能。 这是笔者理解的技术驱动业务。生于业务，又高于业务
笔者很荣幸可以参与到淘宝小程序的开放体系中，消息能力的开放也是里面很重要的一环，在双十一前可以借助星巴克小程序把消息方案落地，这次做个总结。
这次星巴克消息开放融合带来的挑战是：底层需要对接不同的服务体系，他们之间的协议不一致，上层业务业务又需要统