Golang分布式爬虫

为了给wordpress的ripro主题资源站填充数据，我用golang开发了并发版爬虫和分布式爬虫两个版本，已经顺利跑通！

为了给wordpress的ripro主题资源站填充数据，我用golang开发了并发版爬虫和分布式爬虫两个版本，已经顺利跑通！代码总量还是比较多了，具体课程中再详细讲解，这篇文章主要分享一下自己的技术选型思路，以及我觉得做这个项目过程中自己的一些感悟！包括对于系统架构的理解以及对于golang语言本身的理解。