本项目拟在得到**环境监测总站中 "**环境状况公报"、 "全国地表水水质月报"、"长江三峡工程生态与环境检测报告"、"**环境年报"、"全国生态环境质量报告" 的所有报告。
由于只有“全国地表水水质月报”内容较多,因此对于"全国地表水水质月报"中的内容使用网络爬虫获得。其他报告人工点击下载得到。
- 链接:https://pan.baidu.com/s/1cwuSd-v_HgHMbnkb6mULEQ
- 提取码:cc61
- 下载后解压即可看到下载的所有报告
- 安装Python 3.X环境
- 安装chrome浏览器,以及chrome drive, 如何安装详见:
- 安装Python 依赖库
$ pip install bs4 selenium re pickle
- 运行spyder.py
$ cd Web-Crawler-environment $ mkdir contents $ python spyder.py
在“全国地表水水质月报”中有部分内容无法下载,下面列出:
-
总站报告 | 2019年2月地表水环境质量 : 微信公众号页面,无pdf文件。
-
2015年全国地表水水质月报(8月份): pdf下载页面无法打开。
-
2012年12期水质月报 : 无pdf页面。
-
2012年11期水质月报 : 无pdf页面。
-
暂停水质月报发布的通知 : 无pdf页面。
-
2007年11月水质月报 : pdf下载页面无法打开。
-
2006年10月水质月报 : pdf下载页面无法打开。
-
2006年4月水质月报 : pdf下载页面无法打开。
-
2006年3月水质月报 : pdf下载页面无法打开。