1. 下载Python

• 访问官网：https://www.python.org/downloads/

• 点击黄色大按钮下载最新版本（推荐Python 3.10+）

2. 根据你的操作系统选择安装方法：

Windows系统

1. 运行下载的安装程序（.exe文件）

2. ✅ 重要：勾选 "Add Python to PATH"

3. 选择 "Install Now"（默认安装）或 "Customize installation"（自定义安装）

4. 等待安装完成

macOS系统

（推荐）：

# 使用Homebrew安装brew install python

Linux系统

# Ubuntu/Debiansudo apt updatesudo apt install python3 python3-pip# CentOS/RHEL/Fedorasudo yum install python3 python3-pip# 或使用dnf（Fedora）sudo dnf install python3 python3-pip

3. 验证安装

python --version# 或python3 --version# 或py --version

4. 安装编辑器（可选但推荐）

• VS Code：https://code.visualstudio.com/

• PyCharm Community：https://www.jetbrains.com/pycharm/

5. 测试Python

创建一个简单的测试文件 hello.py：

print("Hello, World!")

6.新建项目盘文件夹D:\crawler_project

7. 安装爬虫依赖

py -m pip install aiohttp cchardet lxml sanic

等待安装完成，出现Successfully installed 即为成功。

8、推荐爬虫用IPython

  IPython的核心优势、安装方法、基础使用，替代原生 Python 交互终端，大幅提升开发效率。

• 什么是 IPython

IPython 是增强版的 Python 交互式解释器，完全兼容原生 Python 语法，在原生 python 命令启动的终端基础上，增加了大量高效、易用的功能，是 Python 开发者调试代码、测试片段的首选工具，也是 Jupyter Notebook 的核心内核。

• IPython 写代码的核心好处（新手 + 爬虫场景适配）

相比于系统自带的原生 Python Shell，IPython 针对你的爬虫开发有这些实用优势：

• 安装 IPython

 Python 环境正常，以管理员身份打开 CMD，切换到项目目录后执行安装命令：

1. 切换路径

D:cd crawler_project

2. 安装命令（使用清华镜像，加速下载）

py -m pip install ipython -i https://pypi.tuna.tsinghua.edu.cn/simple

安装完成后，提示 Successfully installed ipython-xxx 即为成功。

• 启动 IPython

  在 D:\crawler_project> 路径下，直接输入命令启动：

  ipython

  显示这样就ok了，代表进入 IPython 交互环境，可以开始编写代码。

  In [1]:

  

• 封神级功能：Tab 自动补全

输入代码前缀，按 Tab 键自动补全：

# 输入 ran 按 Tab → 自动补全为 randomimport random# 输入 random. 按 Tab → 展示所有可用方法（choice/shuffle等）random.choice(ua_pool)

•  直接执行系统 Shell 命令（无需退出 IPython）

在 IPython 内直接用 ! 开头执行 CMD 命令，适配 Windows 系统：

# 查看当前目录文件（Windows）!dir# 安装依赖包!py -m pip install requests# 切换目录%cd D:\crawler_project

• 常用魔法命令（% 开头，IPython 专属）

  命令	作用	爬虫实战用法
  %run xxx.py	一键运行完整 Python 脚本	%run bee_client.py  测试客户端代码片段
  %pwd	查看当前工作路径	确认是否在爬虫项目目录
  %history	查看所有输入的历史代码	回溯测试过的爬虫逻辑
  %reset	清空当前所有变量 / 模块	重新测试爬虫逻辑，避免变量污染
  %debug	进入调试模式，定位报错代码	排查download方法的网络请求异常

示例：运行项目中的配置文件测试

# 直接运行项目脚本，测试config配置%run config.py# 查看配置变量print(server_host, server_port)

• 便捷调试：异常信息优化

当代码报错时，IPython 会彩色高亮 + 精准定位行号，比如爬虫 URL 写错、模块未导入，一眼就能找到问题。

• 查看变量 / 函数

  # 查看当前所有定义的变量whos# 查看单个对象的用法（按 q 退出帮助）random.choice?

• 退出 IPython

两种方式任选其一，即可回到 CMD 终端：

1. 快捷键：Ctrl + D
2. 命令方式：
   In [x]: exit# 或In [x]: quit

• 与 Jupyter Notebook 的关系

IPython 是 Jupyter 的底层内核，学会 IPython 后，可无缝使用 Jupyter（网页版交互式开发工具），更适合编写爬虫笔记、分步调试。安装命令：

py -m pip install jupyter -i https://pypi.tuna.tsinghua.edu.cn/simple

启动命令：jupyter notebook

 9. 总结

1. IPython 仅用于测试代码片段 / 调试，不要用它编写完整的项目代码，完整代码仍需保存在 .py 文件中；
2. 所有在 IPython 中定义的变量 / 类，关闭终端后会清空，核心逻辑务必保存到项目文件；
3. 运行%run命令时，确保路径在项目根目录D:\crawler_project，避免导入模块失败。   
4. IPython 是 Python 调试神器，比原生终端更高效、更友好，完美适配爬虫代码测试；
5. 快速上手：安装→ipython启动→用Tab补全 +%run运行脚本，即可满足90%新手需求；
6. 场景落地：用它测试 UA 池、robots.txt校验、爬虫片段，大幅减少调试时间。