基于城市车辆和人像抓拍数据的公安大数据平台,包含实时预警、离线预警、在线查询三大模块,100+ 技战法——就是在演唱会上协助警方抓获在逃人员的那类系统。

前期一个人负责平台的维护和迭代,多次担任 Story Owner 主导车辆同行分析、首次入城、隐匿车辆挖掘等技战法的全流程交付。后期新同学加入,成为小组长。

Flink 实时流的亿级高压优化

接了一个超大项目后,每日亿级抓拍数据涌入,实时预警流频繁挂掉。

我主导了全套稳定性优化:合并多条 sink 减少 ClickHouse 并发写入压力;将插入时去重改为查询时去重;精简算子内部状态;加入限流兜底容错。同时独立设计了性能测试方案、编写了数据 mock 工具并输出完整测试报告。优化后,实时预警流在高负载下稳定运行,内存占用仅 20G

代码重构与团队规范

平台几乎没有单元测试,技术债严重。我对遗留代码做了系统性重构,经手模块覆盖率全部达到 90%+(TDD 实战驱动),并推动了一系列团队规范:严格 MR 提交、定义模块划分标准、统一公共设计。研发节奏从混乱趋于稳定。