Files
Neo-ZQYY/db/etl_feiqiu
Neo b25308c3f4 feat: P1-P3 全栈集成 — 数据库基础 + DWS 扩展 + 小程序鉴权 + 工程化体系
## P1 数据库基础
- zqyy_app: 创建 auth/biz schema、FDW 连接 etl_feiqiu
- etl_feiqiu: 创建 app schema RLS 视图、商品库存预警表
- 清理 assistant_abolish 残留数据

## P2 ETL/DWS 扩展
- 新增 DWS 助教订单贡献度表 (dws.assistant_order_contribution)
- 新增 assistant_order_contribution_task 任务及 RLS 视图
- member_consumption 增加充值字段、assistant_daily 增加处罚字段
- 更新 ODS/DWD/DWS 任务文档及业务规则文档
- 更新 consistency_checker、flow_runner、task_registry 等核心模块

## P3 小程序鉴权系统
- 新增 xcx_auth 路由/schema(微信登录 + JWT)
- 新增 wechat/role/matching/application 服务层
- zqyy_app 鉴权表迁移 + 角色权限种子数据
- auth/dependencies.py 支持小程序 JWT 鉴权

## 文档与审计
- 新增 DOCUMENTATION-MAP 文档导航
- 新增 7 份 BD_Manual 数据库变更文档
- 更新 DDL 基线快照(etl_feiqiu 6 schema + zqyy_app auth)
- 新增全栈集成审计记录、部署检查清单更新
- 新增 BACKLOG 路线图、FDW→Core 迁移计划

## Kiro 工程化
- 新增 5 个 Spec(P1/P2/P3/全栈集成/核心业务)
- 新增审计自动化脚本(agent_on_stop/build_audit_context/compliance_prescan)
- 新增 6 个 Hook(合规检查/会话日志/提交审计等)
- 新增 doc-map steering 文件

## 运维与测试
- 新增 ops 脚本:迁移验证/API 健康检查/ETL 监控/集成报告
- 新增属性测试:test_dws_contribution / test_auth_system
- 清理过期 export 报告文件
- 更新 .gitignore 排除规则
2026-02-26 08:03:53 +08:00
..

db/etl_feiqiu/ — ETL 数据库资产

六层 Schema

Schema 用途 DDL 基线
meta ETL 调度元数据(任务注册、游标、运行记录) docs/database/ddl/etl_feiqiu__meta.sql
ods 原始数据层API payload 落地) docs/database/ddl/etl_feiqiu__ods.sql
dwd 明细数据层(维度 SCD2 + 事实增量) docs/database/ddl/etl_feiqiu__dwd.sql
core 跨门店标准化维度/事实 docs/database/ddl/etl_feiqiu__core.sql
dws 汇总数据层(业绩、财务、会员、工资、指数) docs/database/ddl/etl_feiqiu__dws.sql
app RLS 视图层(仅视图,无表) docs/database/ddl/etl_feiqiu__app.sql

种子数据

文件 用途
seeds/seed_ods_tasks.sql 注册 ODS 抓取任务到 meta.etl_task
seeds/seed_scheduler_tasks.sql 初始化调度任务配置
seeds/seed_dws_config.sql DWS 配置(绩效档位、等级定价、技能映射等)
seeds/seed_index_parameters.sql 指数算法参数WBI/NCI/RS/OS/MS/ML

Schema 约定

  • 表名小写蛇形,带 schema 前缀(如 dwd.dim_member
  • 维度表含 SCD2 列:scd2_start_timescd2_end_timescd2_is_currentscd2_version
  • ODS 表含元数据列:content_hashpayloadfetched_atsource_file
  • 金额字段 NUMERIC(12,2)ID 字段 BIGINT
  • 不使用 ORMSQL 通过 psycopg2 直接执行