职位描述
我们正在寻找一名技术精湛的大数据运维工程师加入团队。理想的候选人将全面负责大数据基础设施的管理工作,确保系统性能、安全性和可扩展性达到最优状态。
核心职责
- 构建、运维、管理大数据平台并解决故障,保障业务连续性
- 确保大数据平台高效稳定安全运行,提供集群升级扩容解决方案
- 配置优化Hadoop/Yarn/Kafka/Flink/Doris/MySQL/PostgreSQL等平台组件
- 发布部署大数据任务,熟悉常见执行问题并制定应急预案
- 监控系统性能并实施优化措施以提升运行效率
- 与开发团队协作实施数据处理与存储的最佳实践方案
- 编写系统配置文档及运维流程手册,实现知识共享
任职要求
- 计算机科学、工程或相关专业本科及以上学历
- 3年以上大数据平台运维管理经验
- 精通Hadoop生态组件(HDFS/YARN/MapReduce)
- 熟练掌握流处理框架(Kafka/Flink)
- 具备关系型数据库(MySQL/PostgreSQL)与分析型数据库(Doris)运维经验
- 熟悉Linux系统管理及Shell脚本编写
- 理解分布式系统原理与最佳实践方案
- 能够诊断复杂系统问题并实施解决方案
- 出色的解决问题能力和细节把控意识
- 优秀的沟通协作能力
优先条件
- 具有云平台大数据解决方案(AWS EMR/Azure HDInsight/GCP Dataproc)经验
- 了解容器化技术(Docker/Kubernetes)
- 熟悉基础设施即代码工具(Terraform/Ansible)
- 掌握数据安全与合规性要求
- 持有相关大数据技术认证证书