Описание вакансии
Инженер по разработке платформы данных будет отвечать за проектирование, разработку и поддержку внутренней платформы больших данных компании. В обязанности входит работа с такими компонентами, как синхронизация данных, расчет линий данных, оптимизация затрат, рабочие процессы вычислительной логики и контроль доступа к данным. Инженер будет сотрудничать с межфункциональными командами для интеграции общих бизнес-требований в платформу, преобразуя их в масштабируемые решения. Кроме того, роль предполагает участие в полном жизненном цикле разработки продукта — от сбора требований до развертывания и обслуживания системы.
Ключевые обязанности
- Разработка и улучшение платформы больших данных компании, включая компоненты синхронизации данных, отслеживание линий данных, оптимизацию затрат и системы контроля доступа.
- Выявление и консолидация общих бизнес-потребностей с последующим преобразованием их в унифицированные возможности платформы.
- Сотрудничество с инженерами фронтенда/бэкенда и менеджерами продуктов на всех этапах разработки (анализ требований, проверка PRD, техническое проектирование, реализация, тестирование и развертывание).
- Проведение вторичной разработки открытых систем или интеграция облачных решений (например, AWS, Alibaba Cloud) с внутренними платформами для поддержки бизнес-потребностей.
- Решение системных проблем платформы для создания повторно используемых решений, полезных для нескольких бизнес-единиц.
- Использование инструментов ИИ для повышения эффективности разработки и интеграции возможностей ИИ в рабочие процессы больших данных.
Требования к кандидату
- Степень бакалавра или выше в области компьютерных наук, статистики, математики или смежных дисциплин, а также 3+ года опыта работы с данными.
- Подтвержденный опыт разработки крупномасштабных систем, многопользовательских архитектур и обработки больших данных объемом в петабайты.
- Глубокое понимание облачных сервисов (например, Alibaba DataWorks, AWS, Flink) и экосистемы открытого ПО (Spark, Flink, озера данных, Kafka, KV-хранилища).
- Способность адаптировать компоненты открытого ПО и интегрировать их с внутренними системами для удовлетворения бизнес-требований.
- Сильное продуктовое мышление с пониманием рабочих процессов больших данных и разработки платформенных продуктов.
- Предпочтителен опыт работы как в стартапах, так и в устоявшихся компаниях, а также способность адаптироваться к многопрофильным обязанностям и активные коммуникативные навыки.
- Знание Python и знакомство с BI-инструментами (Tableau, Power BI) будет преимуществом.
- Кандидаты с опытом внедрения ИИ в сценариях работы с большими данными получат приоритет.
Условия
Для получения подробной информации свяжитесь с нашим отделом кадров через Telegram. Спасибо!
