16c6fb0d3b52f5e62594f72e210bdf6ccdb69724
Windows GBK 环境下 psycopg2/libpq 在拼接连接字符串时,会读取系统
用户名 / 计算机名,若含中文(0xd6 是 GBK 首字节)会触发
UnicodeDecodeError。admin_db_health.py:105-115 已用显式 DSN +
PGCLIENTENCODING 修过,但 database.py 中的 4 个 connect 函数遗漏。
变更:
- apps/backend/app/database.py
- 新增 _CONN_KWARGS = {**_KEEPALIVE_KWARGS, "client_encoding": "UTF8"}
- 4 处 psycopg2.connect 调用从 **_KEEPALIVE_KWARGS 改为 **_CONN_KWARGS:
* get_connection(zqyy_app 业务库)
* get_etl_global_readonly_connection(ETL 全局只读)
* get_etl_readonly_connection(ETL RLS 只读)
* get_etl_write_connection(ETL 可写)
业务影响:
- 影响 75+ 调用点(grep 统计),Windows GBK 环境下未来出现
UnicodeDecodeError 概率大幅降低
- Linux UTF-8 环境无影响
- ETL RLS / FDW 链路无逻辑变化(client_encoding 是协议层)
验证:
- 后端 reload + /health 200 OK
- /api/admin/db-health 测试库 connected(test_zqyy_app + test_etl_feiqiu)
- BE-3 / T3 unit test 5/5 PASS,间接证明 ETL 连接链路无破坏
§3.3 标"sandbox 无关",4b 跳过(client_encoding 是协议层,与 sandbox
业务时钟无关)。
未加 feature flag ETL_FORCE_UTF8(§8.3 兜底建议):client_encoding=UTF8
是 PostgreSQL 默认安全设置,无需 flag 控制。若未来出现特殊业务字段
含非 UTF-8 字节再考虑加 flag。
审计:docs/audit/changes/2026-05-05__wave1_f1_5b_a6_etl_conn_utf8.md
Co-Authored-By: Claude Opus 4.7 (1M context) <noreply@anthropic.com>
NeoZQYY Monorepo
台球门店运营助手一体化平台,整合 ETL 数据 Connector、微信小程序后端、小程序前端与管理后台。
项目结构
| 目录 | 说明 | 文档 |
|---|---|---|
apps/etl/connectors/feiqiu/ |
飞球 Connector(API → ODS → DWD → DWS) | docs/ |
apps/backend/ |
FastAPI 后端(13 个路由 · JWT 双认证 · WebSocket) | README · API 参考 |
apps/miniprogram/ |
微信小程序(Donut + TDesign + TypeScript) | README |
apps/admin-web/ |
管理后台(React + Vite + Ant Design) | README |
apps/mcp-server/ |
MCP Server(AI 工具集成,PostgreSQL 只读查询) | README |
packages/shared/ |
共享包(枚举、金额精度、时间工具) | README |
db/etl_feiqiu/ |
ETL 数据库(6 层 Schema:meta/ods/dwd/core/dws/app) | README |
db/zqyy_app/ |
业务数据库(auth 认证 + 任务队列 + 调度) | README |
docs/ |
项目文档中心(架构、数据库、部署、审计) | README |
scripts/ |
运维/工具脚本 | — |
tests/ |
Monorepo 级属性测试 | — |
快速开始
# 安装全部依赖(需要 uv)
uv sync
# 运行 ETL
cd apps/etl/connectors/feiqiu
python -m cli.main --pg-dsn "$PG_DSN" --store-id "$STORE_ID" --api-token "$API_TOKEN"
# 启动后端 API
cd apps/backend
uvicorn app.main:app --reload
# 运行 ETL 单元测试
cd apps/etl/connectors/feiqiu
pytest tests/unit
配置
配置采用分层叠加:根 .env -> 应用 .env.local -> 环境变量 -> CLI 参数。
参见 .env.template 了解可用配置项。
技术栈
- Python 3.10+, uv workspace(4 个成员:etl、backend、mcp-server、shared)
- PostgreSQL 四库:
etl_feiqiu/test_etl_feiqiu(ETL)、zqyy_app/test_zqyy_app(业务) - FastAPI + Uvicorn(后端 API)
- React 19 + Vite 6 + Ant Design 5(管理后台,独立 pnpm)
- 微信小程序原生 + Donut + TDesign + TypeScript(C 端)
- JWT 双认证(管理后台用户名密码 + 小程序微信登录)
- 多门店隔离(
site_id+ RLS)
Description
Languages
Python
79.6%
TypeScript
17.4%
PLpgSQL
1.9%
HTML
0.7%
PowerShell
0.4%