职位描述
交易后数据分析工程师构建、运营和维护复杂的数据集及端到端数据管道,用于分析和研究场景。直接与交易员、量化研究人员和数据科学家合作,理解数据需求并在实时和次日环境中交付可靠的数据产品。通过验证框架、监控、警报、数据血缘和事件响应确保数据质量和可靠性。优化数据处理和工作流程的性能、成本和稳健性;排查管道故障和生产问题。维护和改进相关的内部工具、文档和操作手册。
主要职责
- 设计并实施高效的数据处理流程
- 开发数据质量监控和异常检测机制
- 与跨职能团队协作定义数据需求
- 持续优化现有数据基础设施
- 编写技术文档和操作指南
- 参与数据治理和标准化工作
职位要求
- 至少3年以上数据工程师工作经验
- 精通Python开发、DevOps和Linux环境
- 具备ETL/ELT管道构建和运营的实际经验(包括编排、调度和依赖管理)
- 熟悉关系型和非关系型数据库,包括模式设计和查询优化
- 掌握SQL及数据分析工具和库(如Pandas和NumPy)
- 有C++经验者优先
- 出色的分析和问题解决能力
- 能够完成分配的其他相关工作
- 保证可靠和可预期的工作时间
- 工作地点为上海
加分项
- 熟悉分布式计算框架(如Spark)
- 有金融行业数据处理经验
- 了解数据湖和数据仓库架构
- 具备云平台(AWS/GCP/Azure)使用经验
- 熟悉数据可视化工具
福利待遇
公司将提供具有市场竞争力的薪酬福利方案,具体面议。


