技术总监 at Gate io

职位描述

核心职责

• 构建、运维、管理大数据平台并解决故障，保障业务连续性
• 确保大数据平台高效稳定安全运行，提供集群升级扩容解决方案
• 配置优化Hadoop/Yarn/Kafka/Flink/Doris/MySQL/PostgreSQL等平台组件
• 发布部署大数据任务，熟悉常见执行问题并制定应急预案
• 监控系统性能并实施优化措施以提升运行效率
• 与开发团队协作实施数据处理与存储的最佳实践方案
• 编写系统配置文档及运维流程手册，实现知识共享

任职要求

• 计算机科学、工程或相关专业本科及以上学历
• 3年以上大数据平台运维管理经验
• 精通Hadoop生态组件（HDFS/YARN/MapReduce）
• 熟练掌握流处理框架（Kafka/Flink）
• 具备关系型数据库（MySQL/PostgreSQL）与分析型数据库（Doris）运维经验
• 熟悉Linux系统管理及Shell脚本编写
• 理解分布式系统原理与最佳实践方案
• 能够诊断复杂系统问题并实施解决方案
• 出色的解决问题能力和细节把控意识
• 优秀的沟通协作能力

优先条件

• 具有云平台大数据解决方案（AWS EMR/Azure HDInsight/GCP Dataproc）经验
• 了解容器化技术（Docker/Kubernetes）
• 熟悉基础设施即代码工具（Terraform/Ansible）
• 掌握数据安全与合规性要求
• 持有相关大数据技术认证证书