직무 설명
본 포지션은 데이터 수집 및 분석을 위한 웹 크롤러 및 데이터 스크래핑 스크립트를 설계, 개발 및 유지 관리할 숙련된 파이썬 개발자를 요구합니다. 지원자는 크로스 기능 팀과 협력하여 새로운 기능을 구현하고 시스템 성능을 최적화할 것입니다. 이 역할은 트레이딩 시스템 작업, 데이터 정확성 보장 및 지속적인 반복과 기술적 개선을 통해 전반적인 효율성 향상을 포함합니다.
주요 책임
- 금융 플랫폼 및 시장 데이터 피드를 포함한 다양한 소스에서 데이터를 추출하고 처리하기 위한 웹 크롤러 및 데이터 스크래핑 스크립트를 개발 및 유지 관리합니다.
- 팀과 협력하여 시스템 안정성과 확장성을 유지하면서 트레이딩 플랫폼의 발전에 기여하는 새로운 기능을 설계 및 구현합니다.
- 효율적인 데이터 처리 기술을 통해 트레이딩 시스템의 성능을 최적화하여 실시간 응답성과 최소 지연 시간을 보장합니다.
- 병목 현상을 식별하고 알고리즘 개선 또는 인프라 업그레이드와 같은 솔루션을 구현하여 시스템 성능을 지속적으로 개선합니다.
- 데이터 무결성과 신뢰성을 유지하면서 수집된 데이터를 분석하여 실행 가능한 통찰력을 도출하고 의사 결정 과정을 지원합니다.
직무 요구 사항
- asyncio 또는 aiohttp와 같은 라이브러리를 사용한 비동기 프로그래밍에 대한 강력한 이해와 함께 파이썬 프로그래밍에 능숙해야 합니다.
- 캐싱 전략, 데이터베이스 인덱싱 및 대규모 애플리케이션을 위한 코드 수준의 효율성 개선을 포함한 주요 성능 최적화 기술에 익숙해야 합니다.
- 데이터 파이프라인, ETL 프로세스 및 데이터 저장 솔루션에 대한 전문 지식이 필요한 트레이딩 시스템의 데이터 수집, 유지 관리 및 분석 경험이 필요합니다.
- 디버깅, 시스템 아키텍처 설계 및 성능 벤치마킹을 포함한 복잡한 작업을 독립적으로 수행할 수 있는 강력한 문제 해결 능력이 필요합니다.
- 팀원 및 이해관계자와 효과적으로 협력하고 코드를 문서화하며 기술적 통찰력을 공유할 수 있는 우수한 커뮤니케이션 기술이 필요합니다.
- 우대 사항: 시스템 기능을 향상시키기 위한 분산 시스템, 클라우드 컴퓨팅 플랫폼(예: AWS, Azure) 및 금융 시장 데이터 프로토콜(예: FIX, WebSocket)에 대한 지식이 있으면 좋습니다.
