직무 설명
데이터 플랫폼 개발 엔지니어는 회사의 내부 빅데이터 플랫폼을 설계, 개발 및 유지보수할 책임이 있습니다. 이 역할은 데이터 동기화, 데이터 계보 계산, 비용 최적화, 계산 논리 워크플로우 및 데이터 접근 제어와 같은 다양한 구성 요소 작업을 포함합니다. 엔지니어는 크로스 기능 팀과 협력하여 일반적인 비즈니스 요구 사항을 플랫폼에 통합하고 확장 가능한 솔루션으로 변환할 것입니다. 또한 이 역할은 요구 사항 수집부터 시스템 배포 및 유지보수까지 전체 제품 개발 수명 주기에 참여해야 합니다.
주요 책임
- 데이터 동기화 구성 요소, 계보 추적, 비용 최적화 및 접근 제어 시스템을 포함한 회사의 빅데이터 플랫폼을 개발 및 향상시킵니다.
- 일반적인 비즈니스 요구 사항을 식별하고 통합하여 통합 플랫폼 기능으로 변환합니다.
- 전체 개발 과정(요구 사항 분석, PRD 검토, 기술 설계, 구현, 테스트 및 배포)에서 프론트엔드/백엔드 엔지니어 및 제품 관리자와 협력합니다.
- 오픈 소스 시스템의 2차 개발을 수행하거나 클라우드 기반 솔루션(예: AWS, Alibaba Cloud)을 내부 플랫폼과 통합하여 비즈니스 요구를 지원합니다.
- 시스템적 플랫폼 문제를 해결하여 여러 비즈니스 단위에 혜택을 주는 재사용 가능한 솔루션을 만듭니다.
- AI 도구를 활용하여 개발 효율성을 향상시키고 빅데이터 워크플로우에 AI 기능을 통합합니다.
직무 요구 사항
- 컴퓨터 과학, 통계학, 수학 또는 관련 분야의 학사 학위 이상, 3년 이상의 데이터 관련 업무 경험.
- 대규모 시스템 개발, 멀티 테넌트 아키텍처 및 PB 수준의 빅데이터 처리 경험.
- 클라우드 서비스(예: Alibaba DataWorks, AWS, Flink) 및 오픈 소스 생태계(Spark, Flink, 데이터 레이크, Kafka, KV 저장소)에 대한 깊은 이해.
- 오픈 소스 구성 요소를 맞춤화하고 내부 시스템과 통합하여 비즈니스 요구를 충족할 수 있는 능력.
- 빅데이터 워크플로우 및 플랫폼 제품 개발에 대한 지식을 갖춘 강력한 제품 감각.
- 스타트업과 기업 환경 모두에서의 경험을 선호하며, 다중 역할 책임과 적극적인 커뮤니케이션 기술에 적응할 수 있는 능력.
- Python에 능숙하고 BI 도구(Tableau, Power BI)에 익숙한 경우 우대.
- 빅데이터 시나리오에서 AI 구현 경험이 있는 후보자 우선 고려.
혜택
자세한 내용은 Telegram을 통해 HR 팀에 문의해 주세요. 감사합니다!
