快捷搜索:

urllib库包含了四个模块

urllib库包含了四个模块分别是:

request:基本的http请求模块,用来模拟发送请求。

error:异常处理模块,捕获请求中的异常,然后进行重试或其他的操作以保证程序不会意外终止。

parse:一个根据模块,提供了如拆分、解析、合并等的许多URL处理方法。

robotparser:主要用来识别网站的robots.txt文件,然后判断哪些网站可以爬,哪些不能。

您可能还会对下面的文章感兴趣: