知识卡片
目标不确定性
强系统若只优化明确目标,容易把错误目标做到极致。更稳妥的智能体应承认人类目标存在不确定性,并在行动中持续校准。发散:团队管理里的 KPI 也有同样风险。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
- · 第01章 绪论
原书出处 · 1 处
- 绪论 1.5 人工智能的风险和收益 · 查看原书依据
在第18章中,我们设计并研究辅助博弈(assistance game),它在数学上描述了一种情况,即人类有一个目标而机器试图实现它,但最初不确定目标是什么。
参考来源
- 位置:《人工智能:现代方法(第4版)(上下册)》第1章《绪论》(源文件:`extracted/人工智能:现代方法(第4版)(上下册)/_epub-src/text/part0017_split_005.html`,来源项目 a19c7933-4eda-4176-aebd-30fe7e1ad292)
- 结论依据:强系统若只优化明确目标,容易把错误目标做到极致。原文从「1.5 人工智能的风险和收益」处给出对应机制与依据,支撑本卡结论。
- 原始内容:在第18章中,我们设计并研究辅助博弈(assistance game),它在数学上描述了一种情况,即人类有一个目标而机器试图实现它,但最初不确定目标是什么。