知识卡片
自定义模型先接契约再验证
把自定义模型接入SQLFlow时,先按框架约定接收feature_columns及超参数,设默认值并导出模型名称,再用单元测试检查构造与前向行为。随后用真实SQL入口测试训练、效果及结果写读,确认模型包装与端到端契约均成立后才提交社区审查。仅定义一个类或提交PR不代表已可用或已合并。
结构图:
flowchart TD
A[实现模型与参数契约] --> B[导出模型入口]
B --> C[单元测试]
C --> D[SQL端到端验证]
D --> E[检查效果和结果写读]
E --> F[提交审查]
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第10章 SQLFlow 10.3 向SQLFlow提交分析模型 · 查看原书依据
其他参数对应TRAIN语句中传入的参数,一般在这里定义一些模型相关的超参数和参数,例如模型的层数、具体每层的隐藏节点数等。也可以通过声明参数的默认值来减少TRAIN语句中的输入。 在使用自定义模型时,如果TRAIN语句中没有传入对应的参数值,而这里参数也没有默认值,则会抛出异常并终止训练。 具体的模型结构和构建过程需要根据用户需求决定,建议在第一次自定义模型时借鉴仓库中已有的模型,以免造成不必要的异常。 3. 加载模型 在sqlflow_models/__init__.py文件中导入自定义模型,如代码清单10-25所示。 代码清单10-25 载入MyDNNClassifier类 from .mydnnclassifier import MyDNNClassifier 4. 单元测试 使用unittest进行自定义模型的单元测试,相关测试用例可以补充在sqlflow_models/tests路径下,如代码清单10-26所示。
参考来源
- 位置:《数据科学工程实践 用户行为分析与建模、AB实验、SQLFlow》第10章 SQLFlow,10.3 向SQLFlow提交分析模型(来源项目a19c7933-4eda-4176-aebd-30fe7e1ad292;源文件:extracted/数据科学工程实践 用户行为分析与建模、AB实验、SQLFlow/_epub-src/OEBPS/Text/part0058.xhtml)
- 结论依据:原文列出开发、导出、单元测试、集成测试及贡献流程,并明确检查执行、模型效果和写读。
- 原始内容:其他参数对应TRAIN语句中传入的参数,一般在这里定义一些模型相关的超参数和参数,例如模型的层数、具体每层的隐藏节点数等。也可以通过声明参数的默认值来减少TRAIN语句中的输入。 在使用自定义模型时,如果TRAIN语句中没有传入对应的参数值,而这里参数也没有默认值,则会抛出异常并终止训练。 具体的模型结构和构建过程需要根据用户需求决定,建议在第一次自定义模型时借鉴仓库中已有的模型,以免造成不必要的异常。 3. 加载模型 在sqlflow_models/__init__.py文件中导入自定义模型,如代码清单10-25所示。 代码清单10-25 载入MyDNNClassifier类 from .mydnnclassifier import MyDNNClassifier 4. 单元测试 使用unittest进行自定义模型的单元测试,相关测试用例可以补充在sqlflow_models/tests路径下,如代码清单10-26所示。