如何写python爬虫

1、确定目标网页（URL)，例如baidu。

2、按下快捷键F12可以查看网页源代码，需要的信息其实已经包含在源代码中

3、打开python IDLE编译器

4、导入requests库和Beautiful Soup库（提前安装好）

5、抓取网页内容并检查是否成功

6、修改编码方式（encoding）并打印抓取的内容

7、导入bs4库并将标签树r.text转换为BeautifulSoup类，然后就可以查看或者提取抓取网页的具体内容了，例如“百度一下，你就知道”文字

8、至此，完成了一次简单的爬虫。建议下一步进一步学习request库和Beautiful Soup库具体操作