最近在学习Python，自然接触到了爬虫，写了一个小型爬虫软件，从初始Url解析 页，使用正则获取待爬取链接，使用beautifulsoup解析获取文本，使用自己写的输出器可以将文本输出保存，具体代码如下：
Spider_main.py
url_manager.py
html_parser.py
html_downloader.py
html_outputer.py
文章知识点与官方知识档案匹配，可进一步学习相关知识Python入门技能树 络爬虫urllib211389 人正在系统学习中 相关资源：开源的爬虫软件Heritrix3.1.0_开源爬虫-Java工具类资源-CSDN文库
声明：本站部分文章及图片源自用户投稿，如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢！