任务调度系统

BI任务调度系统

• 需求：解决托管在BigQuery的周期性sql脚本任务间依赖问题、错误告警、数据来源问题。后期延伸出多平台数据同步，sql任务产出报表管理等需求
• 方案：使用golang技术栈，类比xxl-job、airflow等开源项目，实现web、scheduler和worker模块及之间的协作，详情见架构图
• 贡献：负责调度模型的整体设计，以及web、scheduler和部分worker的开发
• 成果：该项目上线后为BI任务、webhook任务、Python脚本、ETL数据转储、定时营销短信发送等任务编排管理提供支持，累计维护任务模板1k+，任务实例2w+
• 架构图：

精子智能分析仪

精子项目

• 研发相关算法协助医生实现非染色精子图像的活性、形态、异常、密度等指标的检测
• 贡献：开发数据标注工具、设计训练多模型算法、api部署及对接工作
• 使用头体尾分割后分类及形态分析的方案取代大模型，减少了50%以上gpu资源的使用