写一个爬虫程序[原创]

刘天斯 , 2010/03/08 10:33 , Python , 评论(3) , 阅读(4312) , Via 本站原创 大 | 中 | 小
引用地址:
注意: 该地址仅在今日23:59:59之前有效
写爬虫是一项复杂、枯噪、反复的工作,考虑的问题包括采集效率、链路异常处理、数据质量(与站点编码规范关系很大)等。整理自己写一个爬虫程序,单台服务器可以启用1~8个实例同时采集,然后将数据入库。
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。