python爬虫入门一

1. 基本库的使用

一般爬虫第一个学的库是urllib

urllib 是一个收集了多个用到 URL 的模块的包：

• urllib.request 打开和读取 URL
• urllib.error 包含 urllib.request 抛出的异常
• urllib.parse 用于解析 URL
• urllib.robotparser 用于解析 robots.txt 文件