利用python做一个关于300个地级市政府网站应急预案信息的爬虫

【利用python做一个关于300个地级市政府网站应急预案信息的爬虫】

利用python做一个关于300个地级市政府网站应急预案信息的爬虫

文章插图
用python做一个关于300个地级市政府网站应急预案信息的爬虫 。使用python对300个地级市政府网站应急预案信息的爬虫做一个简单的介绍 。我们需要对全国近300个地级市的政府应急预案做一个爬虫 。我们考虑用selenium调用网站搜索框,抓取网站和google site:三种方法,但主要问题是这些政府网站的具体页面代码设计根本不规范 。