刚写完的一个爬虫脚本

看到坛子有人要爬虫脚本, 就写了一个.

MINI_Crawler

爬虫不是并发的, 默认是爬 http://wordreference.com

会在本地创建缓存, 下次运行会自动继续.

==========
更新: 现在可以正确停止脚本了, 同时会报告本次运行的统计信息.

5 Likes

谢谢,一定认真学习!

高手,先收藏,有空再好好学习