网络 · 函数

爬取网站

从起始 URL 开始爬取网站页面。

调用签名

(起始网址: 'str', 最大页数: 'int' = 5, 同域名: 'bool' = True, 间隔秒: 'float' = 0.2, 正文最大长度: 'int' = 2000, **选项)

爬ZHONGWEN
PYTHON

Chinese example

中文代码示例

# 案例：查看网络请求入口
设 功能 = 网络.爬取网站
打印(功能)

可直接放进 .cs / .中py 文件运行。转换器会把中文代码交给真实 Python 解释器。

Parameters

参数说明

6 个参数

参数类型 / 传入方式说明

起始网址可选 · 默认无

str位置参数或字段名=值

HTTP 或 HTTPS 地址,如 https://example.com。

常见错误：漏传会报 TypeError: missing required argument: '起始网址';检查调用是否漏了这行

最大页数可选 · 默认 5

int位置参数或字段名=值

整数类型的最大页数参数,按函数业务含义传入对应数值。

常见错误：传非整数会报 TypeError;按整数类型传值

同域名可选 · 默认 True

bool位置参数或字段名=值

布尔开关同域名,传真或假控制行为;不传时按默认值。

常见错误：传非布尔会报 TypeError;用真/假或 True/False

间隔秒可选 · 默认 0.2

float位置参数或字段名=值

数值类型的间隔秒参数,按函数业务含义传入对应浮点数。

常见错误：传非数值会报 TypeError;按数值类型传值

正文最大长度可选 · 默认 2000

int位置参数或字段名=值

读取或处理的数据长度。

常见错误：传非整数会报 TypeError;按整数类型传值

选项可选 · 默认不传则为空

未声明可变关键字参数，用 **字典展开

额外关键字参数，用字典形式展开传入。

常见错误：类型不匹配会报 TypeError;按字段类型列传值,首次使用建议先打印(结果) 确认结构

Playbook

基础用法 · 进阶组合 · 错误排查

# 案例：查看网络请求入口
设 功能 = 网络.爬取网站
打印(功能)

# 进阶组合:爬取网站 配合 网络 业务流使用
设 响应 = 网络.GET请求("https://httpbin.org/get")
设 结果 = 网络.爬取网站(
    起始网址="https://example.com",  # 必填
    最大页数=5,  # 可选
    同域名=True,  # 可选
)
设 数据 = 网络.解析JSON(响应)
打印(结果)

# 错误排查:覆盖 1 个必填参数

## 参数 1: 起始网址
# 错误:漏传会报 TypeError: missing required argument
# 设 结果 = 网络.爬取网站()  # TypeError
# 修复:补上必填字段
设 结果 = 网络.爬取网站(起始网址="https://example.com")
打印(结果)