python爬取**商标网的信息
-
【scrapy】学习Scrapy入门 http://www.jianshu.com/p/a8aad3bf4dc4
-
如何优化Python爬虫速度 https://www.zhihu.com/question/20145091
-
如何入门python爬虫 https://www.zhihu.com/question/20899988/answer/24923424?group_id=252360038
-
webMagic框架 http://webmagic.io/docs/zh/posts/chx-cases/basic-list-target.html
-
参数加密算法 http://www.bijishequ.com/detail/267034
**商标网
-
文档考核:
给出爬虫的软件架构文档、测试文档和网络架构文档(测试文档需要满足下面的考核,方便测试人员,文档考核由测试人员给出
-
代码考核:
搜索条件,url抓取、网页解析、数据保存四个模块做到低耦合
-
实时性考核:
给出一个关键字能够在10秒完成搜索为及格,5秒为良好,3秒为优秀
-
健壮性考核:
给出关键字列表,爬取的出错率在1%以下。
-
爬取完整性考核:
随机抽取爬取的信息,需要维持信息错误率在1%以下。
-
爬取效率考核:
每日搜索量达到7.5W为及格,每日搜索达到15W为良好,达到25W为优秀。
-