YiChe

易车网分布式爬虫

本项目利用multiprocess里面的Queue队列来实现分布式的抓取，对易车网的数据进行了一定的数据采集。