原财务对账需人工导出Excel处理(单次耗时4小时+错误率15%),经与运营部2次痛點工作坊,立项实时对账系统。亮点:将千万级核销数据查询从分钟级压缩至秒级,获甲方「效能突破奖」。
功能模块:① 多维度组合查询(商户/用户/时间)② 数据实时看板③ 异常流水预警④ 亿级数据导出、优惠渠道明细查看
用户路径:运营配置查询条件→Doris引擎聚合数据→前端渲染交互式图表→导出异常数据→财务人工复核
团队:5人(后端3/大数据1/测试1),周期4个月(2022.10-2023.01)
职责:Flink同步链路设计+Doris性能调优
技术栈:Flink CDC+ Doris MPP引擎+阿里云DRDS
难点:MySQL到Doris字段类型映射冲突(改造20+UDF函数);Flink断点续传(解决网络抖动导致数据丢失)