利用python做一个关于300个地级市政府网站应急预案信息的爬虫
发布于2019-09-06 12:07 阅读(1242) 评论(0) 点赞(5) 收藏(0)
需要做我国近300个地级市关于政府应急预案的爬虫，考虑了利用selenium调用网站搜索框，网站全爬和google site： 三个方法，但是最主要问题就是这些政府网站具体的页面代码设计根本没有规律，所以selenium失败，google搜索出来的东西感觉不全，所以在考虑网站全爬然后进行信息筛选，但是因为第一次做这个，也没找到相关教程，想问问大佬们全网爬虫有什么思路呀？或者别的做这个爬虫的建议！ 有偿也行！谢谢！被困扰好多天了 马上要交了 感谢！
所属网站分类: 技术文章 > 博客
作者：雷神归来
链接：https://www.pythonheidong.com/blog/article/98332/808e6f35baca40ca84db/
来源：python黑洞网
任何形式的转载都请注明出处,如有侵权 一经发现 必将追究其法律责任
昵称:
评论内容：(最多支持255个字符)
---无人问津也好，技不如人也罢，你都要试着安静下来，去做自己该做的事，而不是让内心的烦躁、焦虑，坏掉你本来就不多的热情和定力