Описание вакансии
Мы ищем высококвалифицированного специалиста для руководства разработкой и поддержкой наших крупномасштабных распределенных систем сбора данных. Идеальный кандидат сможет преодолевать сложные анти-скрейпинговые механизмы, обеспечивая стабильный сбор данных для ключевых бизнес-потребностей.
Ключевые обязанности
- Преодоление различных анти-скрейпинговых механизмов и поддержка крупномасштабных распределенных систем сбора данных для стабильного обеспечения ключевых источников данных
- Глубокое понимание логики количественной торговли и тесное сотрудничество с командой для преобразования бизнес-требований в эффективные технические решения
- Взаимодействие с продуктом, дизайном и фронтенд-командами для обеспечения высокого качества результатов
- Проектирование и реализация надежных конвейеров обработки структурированных и неструктурированных данных
- Постоянная оптимизация производительности и стабильности системы в условиях высокой нагрузки
Требования к кандидату
- Прочная инженерная база:
- 3+ года опыта разработки на Python с сильными основами компьютерных наук (структуры данных, алгоритмы, сети, операционные системы)
- Глубокое понимание внутренней работы Python (GIL, управление памятью) и владение моделями процессов/потоков/корутин для высокопроизводительного параллельного проектирования
- Опыт работы с FastAPI, Django и другими веб-фреймворками; экспертные знания MySQL/Redis с навыками проектирования и оптимизации баз данных
- Опыт работы с Docker и знакомство с k8s; способность к самостоятельному развертыванию
- Навыки сбора данных и реверс-инжиниринга:
- 2+ года опыта крупномасштабного сбора данных с использованием фреймворков типа Scrapy и Playwright
- Сильные навыки реверс-инжиниринга JavaScript для отладки и деобфускации кода; знакомство с алгоритмами шифрования (RSA/AES/DES) в анти-скрейпинге
- Полное понимание анти-скрейпинговых механизмов (капчи, блокировки IP, подпись запросов, детекция поведения) с проверенными методами противодействия
- Опыт очистки данных (пропущенные/аномальные значения) и проектирования подходящих решений хранения (RDBMS/NoSQL/временные ряды)
- Предпочтительные квалификации:
- Практический торговый опыт с пониманием рыночных тенденций и индикаторов
- Опыт применения ML/DL в распознавании свечных моделей, робо-советниках или умных стратегиях
- Знакомство с рынками цифровых валют, фьючерсов или ценных бумаг
- Сильное продуктовое мышление
- Опыт внедрения AI/ML
- Владение Golang
Условия
Для получения подробной информации о компенсации и льготах, пожалуйста, свяжитесь напрямую с нашим отделом кадров через Telegram.
