数据工程师 at Yuga Labs

职位描述

核心职责

• 构建健壮的数据库架构与存储方案，用于处理包含文本、图像、视频及结构化数据等多元数据类型的大规模数据集（数百万条记录）。需设计可扩展、安全且高效的数据检索机制，确保分析与业务场景的无缝访问。
• 监管数据全生命周期，保障各阶段数据质量、完整性与一致性。包括建立并维护清洁、可持续的数据管道，提供对产品增长至关重要的可执行洞察。
• 在云基础设施（AWS和GCP）上管理与扩展数据处理工具及技术，确保系统性能最优、成本可控且运行可靠。涵盖系统健康监控、自动化实施及资源调配优化，以支持高可用性与可扩展性。
• 协同游戏开发、Web工程、DevOps及服务工程师等跨职能团队，设计开发遥测库与框架。包括将数据采集机制集成至现有系统，并确保实时监控能力。
• 为团队成员提供代码审查，维护项目代码质量与一致性。包括识别技术风险、提出改进建议，并确保遵循数据工程与软件开发的最佳实践。
• 指导初级工程师并提供技术建议，营造知识共享与职业成长的文化。包括开展培训、审核初级成员工作成果，并支持其复杂数据系统开发能力提升。

任职要求

• 具备区块链数据模型设计、跨游戏分析及AI应用开发经验，专注系统可扩展性与性能优化。
• 精通数据库管理系统（如SQL/NoSQL）及存储技术，能处理文本/图像/视频/结构化数据等多元格式的海量数据集（数百万条记录）。
• 熟练使用AWS和GCP云平台部署、管理及扩展数据基础设施，确保系统可靠性及成本效益。
• 具备卓越的沟通与跨部门协作能力，能与游戏/Web/DevOps/服务团队合作开发遥测系统。
• 掌握机器学习与AI框架，能通过数据分析构建预测模型以支持产品创新与决策。
• 出色的数据管道优化、系统扩展及全周期数据质量保障等复杂问题解决能力。
• 优秀的领导与指导能力，有培养团队成长及促进知识共享的成功经验。