Data Engineer (upto 50M) - Việc làm mới

- Chi tiết công việc:

- Nghiên cứu, thiết kế và duy trì tối ưu hệ thống xử lý dữ liệu cho bảng điều khiển phân tích thời gian thực, theo dõi và báo cáo sự cố. 

- Tự động hóa và tối ưu hóa các quy trình deploy, thiết kế cơ sở dữ liệu để mở rộng quy mô dữ liệu vẫn đảm bảo tính ổn định và toàn vẹn dữ liệu.  

- Xây dựng tool sets/framework tích hợp Web Api nhằm thu thập và bóc tách dữ liệu trên internet với quy mô lớn. 

- Sử dụng Message Queue, MicroService, Docker để kiểm soát data pipeline, cải thiện và mở rộng đường ống chịu lỗi để tích hợp lượng lớn dữ liệu từ nhiều nguồn dữ liệu, với nhiều định dạng dữ liệu. 

- Làm việc với các bên liên quan để xác định thông số kỹ thuật hệ thống, lập kế hoạch và thiết kế kiến trúc hệ thống, lựa chọn phần mềm hoặc phần cứng thích hợp và đề xuất các phương pháp tích hợp. 

- Đánh giá và phát triển các công nghệ / giải pháp mới để làm cho cơ sở hạ tầng đáng tin cậy hơn, tính ...