MarketingSystemDataExportTool/server/internal
zhouyonggao e8c264a384 refactor(exports): 使用并行导出替代串行分块导出
- 移除旧的串行分块导出代码,改为基于分片的并行导出机制
- 引入并行导出配置,支持设置分片数量、最大并发数和每文件最大行数
- 预估总行数作为并行导出总行数,用于更合理的任务拆分
- 新增并行导出过程中的进度更新和文件创建回调处理
- 并行导出失败时记录错误日志并标记导出任务失败
- 保留原有Transform行数据转换功能,保证数据一致性
- 优化日志输出,详细记录并行导出过程中的错误信息
2025-12-19 18:43:43 +08:00
..
api refactor(exports): 使用并行导出替代串行分块导出 2025-12-19 18:43:43 +08:00
config feat(api): 支持营销代理数据库并优化代理列表查询 2025-12-18 21:37:13 +08:00
constants feat(export): 优化导出数据处理能力 2025-12-19 17:55:55 +08:00
db fix(db): 处理MySQL连接的只读副本错误 2025-12-08 11:31:28 +08:00
exporter refactor(exports): 使用并行导出替代串行分块导出 2025-12-19 18:43:43 +08:00
logging refactor(api): 优化模板API处理器结构与逻辑 2025-12-17 10:16:56 +08:00
migrate feat: 初始化营销系统数据工具项目 2025-12-02 15:48:17 +08:00
models feat: 初始化营销系统数据工具项目 2025-12-02 15:48:17 +08:00
repo fix(export): 优化导出完成时的缓存清理逻辑 2025-12-19 18:07:35 +08:00
schema fix(schema): 修改订单外部交易号标签名称 2025-12-18 22:51:32 +08:00
utils refactor(utils): 删除冗余的包声明注释 2025-12-17 10:46:56 +08:00
ymtcrypto feat: 初始化营销系统数据工具项目 2025-12-02 15:48:17 +08:00