知识卡片
解析与生成共同交给扩展函数
ParseResponse接受HTTP响应和深度,输出多个Data及多个错误,将内容分析、筛选和新请求构造放在一起,避免框架与策略往返传中间结果。这样保留请求头、Cookie、身份等定制自由,也把错误处理、资源释放和并发安全的契约交给边界双方,不能假设函数类型自动安全。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 一个网络爬虫框架的设计和实现 · 查看原书依据
type ParseResponse func(httpResp *http.Response, respDepth uint32) ([]base.Data, []error) 声明这样一个函数类型的意义是让网络爬虫框架的使用者自定义响应分析规则,以及生成相应的请求和条目的方式
参考来源
- 位置:《Go并发编程实战》第09章《一个网络爬虫框架的设计和实现》之《9.4 详细设计》(来源项目book-sources;源文件:extracted/Go并发编程实战/_epub-src/text/part0000_split_066.html)
- 结论依据:原文围绕解析与生成共同交给扩展函数给出定义、实例或限制;卡片结合这些上下文解释条件,已知错误在正文就近校正。
- 原始内容:type ParseResponse func(httpResp *http.Response, respDepth uint32) ([]base.Data, []error) 声明这样一个函数类型的意义是让网络爬虫框架的使用者自定义响应分析规则,以及生成相应的请求和条目的方式