Kỹ sư Dữ liệu at Trendx

Vị trí Data Engineer tại Trendx yêu cầu ứng viên có kỹ năng chuyên sâu về thu thập và xử lý dữ liệu từ nhiều nguồn khác nhau, đặc biệt là từ web.

• Kinh nghiệm thực tế trong việc phát triển và duy trì các công cụ thu thập dữ liệu (web crawlers)
• Hiểu biết sâu về các cơ chế chống thu thập dữ liệu và cách vượt qua chúng
• Thành thạo các kỹ thuật trích xuất dữ liệu như XPath, CSS selectors và regular expressions
• Có khả năng làm việc với nhiều loại cơ sở dữ liệu khác nhau
• Kỹ năng viết mã để làm sạch và loại bỏ dữ liệu trùng lặp

Trendx là một công ty có vẻ tập trung vào phân tích xu hướng và dữ liệu. Việc tuyển dụng vị trí Data Engineer với trọng tâm vào thu thập dữ liệu cho thấy công ty đang muốn xây dựng hoặc mở rộng hệ thống dữ liệu nội bộ của mình. Điều này có thể phục vụ cho các mục đích phân tích thị trường, theo dõi xu hướng hoặc cung cấp dịch vụ dữ liệu cho khách hàng.

Từ tên công ty và mô tả công việc, có thể suy đoán Trendx hoạt động trong lĩnh vực liên quan đến phân tích dữ liệu hoặc cung cấp thông tin thị trường. Họ cần một chuyên gia có thể thu thập dữ liệu từ nhiều nguồn một cách hiệu quả và bền vững, đặc biệt là vượt qua các rào cản kỹ thuật mà các website đặt ra.

Tôi sẽ tập trung đánh giá ứng viên trên các khía cạnh: kinh nghiệm thực tế với các dự án thu thập dữ liệu quy mô lớn, khả năng giải quyết các vấn đề kỹ thuật phức tạp liên quan đến chống thu thập dữ liệu, và tư duy tối ưu hóa hệ thống. Đặc biệt quan tâm đến các case study cụ thể mà ứng viên đã từng xử lý.

Câu hỏi phỏng vấn sẽ tập trung vào các tình huống thực tế như: 'Bạn đã từng xử lý loại cơ chế chống thu thập dữ liệu nào? Cách bạn vượt qua chúng?' hoặc 'Làm thế nào để bạn đảm bảo hệ thống thu thập dữ liệu hoạt động ổn định trong thời gian dài?'