Senior Data Engineer

Mô tả công việc

1) Xây dựng và vận hành kho dữ liệu:

• Làm việc với các đội ERP, software, các đối tác và phòng ban chức năng để xác định luồng đi và ý nghĩa của dữ liệu

• Thiết kế các phương án thu thập dữ liệu, các tiêu chuẩn thu thập, đảm bảo việc thu thập và ghi nhận dữ liệu đúng và phù hợp cho việc khai thác/ ứng dụng.

• Thực hiện các công việc ETL, tạo và quản lí các nguồn kết nối với kho dữ liệu

• Làm việc với các đội phân tích để thiết kế những bộ dữ liệu phù hợp cho hệ thống báo cáo

• Cập nhật những thay đổi trong các bộ dữ liệu theo quá trình chuyển đổi của business và các nhu cầu khai thác

• Xây dựng các tài liệu liên quan đến kiến trúc và định nghĩa dữ liệu

2) Cải tiến, nâng cấp hiệu suất của kho dữ liệu:

• Xây dựng những kiến trúc dữ liệu phù hợp với nhu cầu từ các đội phân tích, khoa học dữ liệu, học máy và người dùng

• Làm việc với các đội kỹ thuật công nghệ để cải thiện hạ tầng, môi trường kho dữ liệu, tư vấn và xây dựng những giải pháp để dữ liệu có thể được lưu trữ nhiều hơn, đa dạng hơn, truy vấn nhanh hơn và tiết kiệm chi phí

• Nắm bắt chi phí và khả năng đáp ứng của kho dữ liệu, liên tục theo dõi, cảnh báo và xử lí nhanh nhất có thể khi có sự cố phát sinh để đảm bảo hệ thống báo cáo và các sản phẩm dữ liệu khác hoạt động trơn tru hiệu quả

3) Minh bạch và an toàn dữ liệu:

• Xây dựng và quản lí các kết nối vào và ra từ kho dữ liệu

• Đảm bảo các kết nối được ổn định và an toàn

• Theo dõi và cảnh báo nếu có bất kì vấn đề gì khiến dữ liệu có thể bị sai lệch, lấy cắp, dùng sai mục đích

• Tốt nghiệp Đại Học trở lên

• Phân tích kĩ thuật, hạ tầng công nghệ thông tin, phần mềm ứng dụng, quản lý dự án, SQL, ETL Tools, BI Tools (Power BI, SAP BI, Oracle BI), NoSQL...

• Cloud: Azure Synapse, AAS, Databrick, Azure Data Lake, Azure Data Factory