文章目录

• 一、 软件配置
• 二、爬取南阳理工OJ题目
• • （一）页面分析
  • （二）代码编写
• 三、爬取学校信息通知
• • （一）页面分析
  • （二）代码编写
• 总结
• 参考

一、 软件配置

安装必备爬虫环境软件

python 3.8
pip install requests
pip install beautifulsoup4

二、爬取南阳理工OJ题目

站地址：http://www.51mxd.cn/

（二）代码编写

1. 导入相应的包

2. 定义访问浏览器所需的请求头和写入csv文件需要的表头及存储列表

3. 定义爬取函数，并删选信息

4. 写入文件

（一）页面分析

（二）代码编写

结果：

总结

本次实验对利用Python 进行爬虫进行了学习，并实现了对 站信息的爬取。

参考

https://blog.csdn.net/weixin_47554309/article/details/121362155
https://blog.csdn.net/YangMax1/article/details/121305857