规范化、映射与转换版本
数据接入、清洗、同步与可追溯性#FDE#第九阶段#数据接入、清洗、同步与可追溯性#规范化、映射与转换版本约 498 字 · 1 分钟阅读
追问显示点击任意追问卡片可收起 / 展开
原始数据与规范化数据为什么应区分?
追问 重新转换、定位错误与保留规则如何平衡?哪些原始字段不应长期保存?
时间统一为 UTC 时需要确认什么?
追问 原时区、夏令时和无时区值如何解释?不确定时间能否直接默认本机时区?
数值和单位转换怎样验证?
追问 金额、百分比与时长的单位如何记录?精度、范围和舍入如何保留语义?
字符串清洗何时会损害业务标识?
追问 空白、大小写和前导零哪些可以规范?不能怎样把不同 ID 合成同一值?
状态映射怎样处理未知值?
追问 保留原状态、标记未知和拒绝各适合什么?映射变化后历史结果如何解释?
怎样区分精确去重与业务合并?
追问 内容相同和表示同一实体有何不同?名称相似为什么不应直接合并客户?
冲突字段由哪个来源优先决定?
追问 权威来源、版本和人工确认怎样建立?为什么最后接收的信息不一定最权威?
转换规则版本怎样关联结果?
追问 映射、程序和输入版本如何保存?修改规则后哪些记录需要重新处理?
怎样检测转换没有改变关键业务约束?
追问 主键、数量、关联和时间顺序如何检查?只验证 JSON 格式为何不够?
怎样为失败转换提供可修正报告?
追问 来源、字段、原值与原因怎样脱敏展示?修复后能否有选择地重新执行?