当前位置：首页>python>Python开发:不用重复封装工具类!Python 主流实用第三方库完整清单,覆盖加密、时间、文件、HTTP、数据解析

Python开发:不用重复封装工具类!Python 主流实用第三方库完整清单,覆盖加密、时间、文件、HTTP、数据解析

2026-08-21 11:45:15

日常Python 后端、脚本、数据开发中，总有大量重复通用逻辑：日期格式化与时区转换、MD5/SM3/AES 加解密、JSON/Excel/XML 解析、本地文件遍历读写、HTTP 接口请求、手机号 / 身份证 / 参数合法性校验等。

很多新手习惯手动封装工具函数，不仅代码冗余，还容易出现时区偏差、加密算法不标准、大文件读取内存溢出、校验规则不完善等隐藏bug。

Python 生态拥有大量成熟、稳定、经过工业验证的第三方开源库，开箱即用无需重复造轮子。本文按业务场景分类整理全套高频工具库，覆盖时间处理、加解密、数据解析、文件 IO、网络请求、数据校验六大核心场景，标注每个库适用场景、核心优势与简单使用场景，开发时直接按需引入，大幅提升编码效率，规避自研工具的各类漏洞。

一、核心知识

1、时间日期处理

库名	安装命令	核心优势	适用场景
python-dateutil	pip install python-dateutil	解析任意不规则日期字符串、自动补全时间、时间差计算	日志时间解析、爬虫不规则时间文本、跨日期运算
arrow	pip install arrow	极简链式 API，内置时区、人性化输出，兼容时间戳 / 字符串	业务快速格式化、时区转换、前端友好时间展示（替代手动 datetime 封装）
pendulum	pip install pendulum	强时区支持、完善本地化、避免原生 datetime 时区 bug	多时区业务、海外系统、定时任务时间计算
zhdate/lunar-python	pip install zhdate	公历农历互转、节气、节假日计算	国内业务：生日、农历节日、排班系统
croniter	pip install croniter	Cron 表达式时间推算	定时任务调度、定时脚本时间校验

原生datetime仅做基础底层，复杂场景优先以上库，不用自己写时区转换工具函数。

2、加解密库

（1）通用哈希/ 对称 / 非对称加密

库名	安装	优势	场景
hashlib	Python 内置	标准 MD5/SHA1/SHA256 哈希，无额外安装	普通文件摘要、简单数据签名
cryptography	pip install cryptography	官方推荐加密库，安全标准实现 AES/RSA，底层 C 优化	接口数据 AES 加解密、RSA 证书签名、生产级加密
pycryptodome	pip install pycryptodome	兼容旧版 Crypto，算法丰富，快速实现对称加密	老旧项目迁移、简单 AES 工具快速开发

（2）国密专用（政务、日志审计、等保合规必备）

库名	安装	优势	场景
gmssl	pip install gmssl	标准国密 SM2/SM3/SM4 实现，符合 GM/T 国标	日志完整性校验、用户敏感数据国密加密、政务系统
pysm3	pip install pysm3	轻量化 SM3 哈希，无需复杂依赖	简易摘要校验、轻量脚本

3、文件IO 与目录处理（遍历、大文件读写、压缩、路径、临时文件）

库名	安装	核心能力	场景
pathlib	内置	面向对象路径操作，替代 os.path	所有文件路径拼接、判断文件存在、遍历目录
aiofiles	pip install aiofiles	异步文件读写，不阻塞事件循环	FastAPI / 异步脚本大文件读取
python-multipart	pip install python-multipart	文件分片上传、大文件流处理	Web 后端文件上传接口
zipfile/tarfile	内置	压缩包读写	本地压缩文件处理
py7zr	pip install py7zr	7z 压缩包解压打包	多格式压缩文件解析
tempfile	内置	安全临时文件 / 文件夹自动销毁	临时缓存文件、导入导出临时载体
filetype	pip install filetype	通过二进制识别文件真实类型，不依赖后缀	文件上传格式校验，防止后缀篡改

4、HTTP 网络请求（同步 / 异步、连接池、接口 Mock、爬虫）

库名	安装	优势	适用场景
requests	pip install requests	同步 HTTP 标准库，连接池、Cookie、代理、文件上传	绝大多数同步脚本、后端调用第三方接口
httpx	pip install httpx	同步 + 异步双支持，兼容 requests 语法，HTTP/2	FastAPI 异步服务、高并发接口调用
aiohttp	pip install aiohttp	纯异步高性能 HTTP 客户端 / 服务端	高并发爬虫、异步微服务调用
requests-cache	pip install requests-cache	请求自动缓存，支持 Redis / 文件缓存	重复调用第三方接口、爬虫防重复请求
tenacity	pip install tenacity	请求失败自动重试，自定义重试规则	三方接口不稳定，统一重试工具
fake-useragent	pip install fake-useragent	自动生成随机 UA	爬虫场景

5、多格式数据解析

（1）结构化文本解析

库名	安装	能力	场景
json	内置	基础序列化	简单 JSON 读写
orjson	pip install orjson	C 底层极速 JSON，支持日期 /decimal 序列化	大数据接口、百万级 JSON 解析，解决原生 json 日期报错
pyyaml	pip install pyyaml	YAML 配置文件读写	项目配置、k8s 配置解析
xmltodict	pip install xmltodict	XML 一键转字典，无需手写 DOM 解析	第三方 XML 接口数据转换

（2）表格Excel/CSV 处理

库名	安装	优势	场景
pandas	pip install pandas	大数据表格读写、数据清洗	数据分析、批量报表导入导出
openpyxl	pip install openpyxl	读写 xlsx（office2007+），支持样式、合并单元格	后端导出标准 Excel 报表
xlrd/xlwt	pip install xlrd xlwt	旧版 xls 文件读写	兼容老版本 Excel 文件
csv	内置	轻量 CSV 读写，低内存	小批量纯文本表格

6、数据校验与正则、证件合法性校验（手机号、身份证、参数校验）

库名	安装	能力	场景
pydantic	pip install pydantic	数据模型自动校验、类型转换、正则、嵌套实体	FastAPI 接口参数校验、统一入参校验，替代手写正则工具
id-validator	pip install id-validator	国标 18 位身份证校验，提取出生日期、性别、地区	用户身份证合法性校验
phone-number	pip install phonenumbers	国内外手机号校验、归属地解析	手机号格式校验、国际号码处理
email-validator	pip install email-validator	RFC 标准邮箱校验，过滤虚假格式	注册邮箱参数校验
python-regex	pip install regex	增强正则，支持复杂匹配、反向查找	复杂文本提取、日志内容解析

二、场景实战

1、arrow 时间处理（替代手动 datetime 格式化）

import arrow# 当前北京时间now = arrow.now("Asia/Shanghai")print(now.format("YYYY-MM-DD HH:mm:ss"))# 时间戳转时间dt = arrow.get(1750000000, tzinfo="Asia/Shanghai")# 时间差print(now.shift(days=-7).format()) # 七天前

2、gmssl 国密 SM3 哈希（日志审计校验）

from gmssl import sm3, funcdata = b"业务原始日志内容"sm3_obj = sm3.sm3_hash(func.bytes_to_list(data))sm3_hex = func.list_to_bytes(sm3_obj).hex()print("SM3校验码：", sm3_hex)

3、httpx 异步调用 HTTP 接口（异步后端专用）

import httpximport asyncioasync def req_api():    async with httpx.AsyncClient() as client:        resp = await client.get("https://httpbin.org/get", timeout=10)        print(resp.json())asyncio.run(req_api())

4、orjson 高性能 JSON 序列化（自动处理日期）

import orjsonfrom datetime import datetimedata = {"time": datetime.now(), "num": 123.45}json_bytes = orjson.dumps(data, option=orjson.OPT_SERIALIZE_DATETIME)print(orjson.loads(json_bytes))

5、pydantic 参数自动校验（接口入参无需手写校验函数）

from pydantic import BaseModel, EmailStrimport id_validatorclass UserDTO(BaseModel):    phone: str    email: EmailStr    id_card: str# 自动校验邮箱格式user = UserDTO(phone="13800138000", email="test@xxx.com", id_card="11010119900307773X")# 身份证单独校验print(id_validator.is_valid(user.id_card))

6、openpyxl 导出 Excel 报表

from openpyxl import Workbookwb = Workbook()ws = wb.activews.append(["姓名", "手机号", "创建时间"])ws.append(["张三", "13800138000", "2026-07-19"])wb.save("用户报表.xlsx")