知识卡片

普通读书笔记卡 · 2781.f

数据与业务争时间

理解等级:未标注

业务方要求快速、及时、全面的结论,而数据从采集到可视化都需要时间,数据量越大越可信也越耗时,如 7 天促销要求每天调优、临时需求缺少历史数据。两者的冲突本质是时间要求的冲突。应对要两端发力:业务上提前规划减少临时需求,技术上用增量、流式、实时计算和抽样压缩产出时间。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《企业大数据系统构建实战:技术、架构、实施与应用》第12章《大数据当前问题及挑战》"12.4 认知挑战"之"大数据需求往往与业务需求对立"(源文件:_epub-src/OEBPS/text00179.html) - 结论依据:原文说明"数据需求和业务需求的关系需要平衡。从实质上讲,二者的冲突点其实是在于时间要求的冲突。业务上,预先规划、提前备案以及周全的策划;技术上,增量计算、流处理、实时计算、数据抽样、模型算法的选择和调优等都是提供实时或准实时的重要方式",直接支撑本卡结论。 - 原始内容:数据需求和业务需求的关系需要平衡。从实质上讲,二者的冲突点其实是在于时间要求的冲突。业务上,预先规划、提前备案以及周全的策划;技术上,增量计算、流处理、实时计算、数据抽样、模型算法的选择和调优等都是提供实时或准实时的重要方式