学习Python爬虫前的准备工作

学习Python爬虫前的准备工作

在使用 Python 编写爬虫程序之前，您需要提前做一些准备工作，这样在后续学习过程中才会得心应手。
知识准备

1) Python语言

Python 爬虫作为 Python 编程的进阶知识，要求学习者具备较好的 Python 编程基础。对于没有基础的小伙伴而言，建议阅读《Python基础教程》，这套教程通俗易懂，非常适合初学者学习，并且教程作者亲自答疑解惑，帮您实现 Python 快速入门。

同时，了解 Python 语言的多进程与多线程（参考《Python并发编程》），并熟悉正则表达式语法，也有助于您编写爬虫程序。
注意：关于正则表达式，Python 提供了专门的 re 模块，详细可参考《Python re模块》。

2) Web前端

了解 Web 前端的基本知识，比如 HTML、CSS、JavaScript，这能够帮助你分析网页结构，提炼出有效信息。推荐阅读《HTML入门教程》、《CSS教程》、《JS入门教程》。

3) HTTP协议

掌握 OSI 七层网络模型，了解 TCP/IP 协议、HTTP 协议，这些知识将帮助您了解网络请求（GET 请求、POST 请求）和网络传输的基本原理。同时，也有助您了解爬虫程序的编写逻辑，这里推荐阅读《TCP/IP协议入门教程》。

图1：OSI 网络七层模型

环境准备

编写 Python 爬虫程序前，需要准备相应的开发环境，这非常的简单。首先您需要在您的电脑上安装 Python，然后下载安装 Pycharm IDE（集成开发环境）工具。至于下载安装的详细过程可以阅读《Python基础教程》。

本教程使用 Windows 10 系统进行 Python 爬虫的讲解，当然您也可以使用其他系统，比如 Linux 或者 Mac。

注意：当下载 Python 时 ，我们建议下载 Python 3.5 后的版本(含 3.5 版本)，本教程使用 Python 3.7.4
版本。