职位描述
数据云软件工程师将负责设计、开发和优化高性能、可扩展的数据平台，重点关注流式数据处理、海量数据及云基础设施。主要工作包括使用Terraform实现和维护基础设施自动化及自助服务，确保开发和生产环境的可靠性与可重复性，并构建稳健的CI/CD流水线。此外，还需建立数据云与各类关系型/非关系型OLTP数据库的无缝集成，设计开发加速数据管道构建的框架与抽象层，同时贯彻数据工程最佳实践。该职位需制定并维护可观测性、安全及数据治理方案，保障数据管道的高质量与可靠性。
主要职责
- 设计开发流式数据处理系统，支持PB级数据吞吐
- 构建云原生数据平台基础设施的自动化管理方案
- 开发跨数据库系统的标准化数据集成接口
- 创建可复用的数据管道开发框架与工具链
- 实施端到端的数据质量监控与告警机制
- 制定符合行业规范的数据安全与治理策略
职位要求
- 3年以上数据平台/软件/基础设施工程师经验，具备云数据平台建设实战经验
- 精通AWS云服务及架构设计，熟练使用Terraform管理云基础设施
- 具有Apache Flink/Kafka/Spark Structured Streaming等流处理框架开发经验
- 熟悉现代数据湖仓技术栈（Databricks/Snowflake/DBT/Airflow/Delta等）
- 掌握Python/Java及SQL开发，了解AWS网络与安全体系（VPC/IAM等）
- 区块链技术背景或加密货币领域经验者优先
- SaaS或金融科技公司从业经历可作为加分项
附加要求
候选人需具备优秀的问题解决能力，能够在分布式系统中设计高可用方案。对新兴数据技术保持敏锐度，具有从概念验证到生产部署的全周期项目经验。需展示出在复杂技术环境中制定技术决策的能力，并与跨职能团队有效协作。持续优化意识和对工程卓越的追求是本职位的重要素质要求。
