1.0 KiB
1.0 KiB
- [P20260218-093656] 2026-02-18 09:36:56 +0800
- summary: 在 ETL feiqiu连接器下,几个修改意见,帮我分析,是否科学合理:1 软删除参数API - ODS - DWD 是否都适用?API - ODS层的软删除,我希望能加入一个机制,即API返回的json,时间窗口中,最早的数据以前的数据不…
- prompt:
在 ETL feiqiu连接器下,几个修改意见,帮我分析,是否科学合理:1 软删除参数API - ODS - DWD 是否都适用?API - ODS层的软删除,我希望能加入一个机制,即API返回的json,时间窗口中,最早的数据以前的数据不会被软删除标记,举例:我申请2026-01-01 到 2026-02-18 的数据,返回内容中,最早的是2026-02-01的数据,则2026-02-01之前的数据不会标记软删除。防止API返回的过早数据被切断的问题。2 现在ODS - DWD的处理流程,有个参数是控制HASH校验或全量校验对吧。API - ODS 及 DWD - DWS/INDEX 也有这个参数么?要不要将此参数放在公共参数中?