通过selenium八爪鱼爬取研招 各专业的初试信息

任务需求：
因工作需要，需要爬取研招 各个高校每个专业研究生考试的初试科目信息。
处理步骤：
1，查看研招 页面（https://yz.chsi.com.cn/zsml/zyfx_search.jsp），发现需要根据省市，学科类别等选项进入下一界面

进入学校界面，点击考试范围处的查看进入具体的专业信息界面

3使用selenium初步完成信息的爬取，但是数月后再进行数据更新时发现，研招 将学科类别改为了必填项，原有程序无法使用。此时有两种改进方式1在原有程序基础上多加一个所有学科类别的循环。2使用其他方式。 方法1在尝试数次后发现极为繁琐，就改用现成的八爪鱼软件来进行数据爬取。
具体爬取的流程图见下方，其otd文件见附件。