Kỹ sư chất lượng dữ liệu (Data Quality Engineer)

Mô tả Công việc

Trách nhiệm chính:

· Thiết kế, thử nghiệm, triển khai và ghi lại các quy trình chất lượng dữ liệu và đầu ra của chúng

· Các nhiệm vụ chính liên quan đến vai trò này là sử dụng công cụ chất lượng dữ liệu để lập hồ sơ dữ liệu nguồn dự án, xác định hoặc xác nhận định nghĩa của siêu dữ liệu, làm sạch và kiểm tra chính xác dữ liệu dự án, kiểm tra các bản ghi trùng lặp hoặc dư thừa và cung cấp thông tin về cách thức để tiến hành các quy trình ETL phụ trợ

· Hợp tác với người quản lý dữ liệu để cung cấp kết quả tóm tắt về phân tích chất lượng dữ liệu, kết quả này sẽ được sử dụng để đưa ra quyết định về cách đo lường các quy tắc kinh doanh và chất lượng của dữ liệu

· Phân tích và chuyển đổi nhu cầu của khách hàng thành kiến trúc dữ liệu doanh nghiệp hàng đầu trong ngành, tích hợp liền mạch hệ thống hiện tại và tài sản dữ liệu với chiến lược mới

· Tài liệu ở cấp độ chức năng về cách các procedures hoạt động trong các ứng dụng chất lượng dữ liệu

· Phối hợp chặt chẽ với người quản lý dữ liệu, nhà phát triển ETL và nhà phân tích nghiệp vụ công nghệ thông tin thể hiện khả năng hợp tác và duy trì sự tự tin vì nó liên quan đến việc phối hợp thông tin khác nhau trong khi có thể dịch cho downstream consumption.

· Nghiên cứu tất cả các giải pháp và công nghệ chất lượng dữ liệu hiện có, xác định tính phù hợp và đưa ra hướng dẫn về giải pháp tốt nhất cho dự án hiện tại

· Hướng dẫn các thành viên trong nhóm bằng cách cung cấp hỗ trợ, tư vấn và đề xuất các phương pháp hay nhất trong suốt quá trình triển khai dự án

Yêu Cầu Công Việc

Kiến thức:

·        Kỹ năng giao tiếp hiệu quả với khả năng giải thích các khái niệm kỹ thuật cho đội phát triển, người quản lý sản phẩm và đối tác làm việc

·        Kỹ năng giải quyết vấn đề và tư duy phản biện xuất sắc

·        Khả năng và mong muốn làm việc với một nhóm người giải quyết các vấn đề phức tạp thường đòi hỏi nghiên cứu độc lập với sự giám sát tối thiểu

·        Kiến thức về kho dữ liệu, OLAP, lược đồ đa chiều, sao và bông tuyết

·        Kiến thức và kinh nghiệm với các nguyên tắc thiết kế cơ sở dữ liệu bao gồm tính toàn vẹn tham chiếu, chuẩn hóa và lập chỉ mục để hỗ trợ phát triển ứng dụng

·        Kiểm tra tự động multi-tenant Azure Data Factory Data Pipeline for ELT

·        Nhập dữ liệu Thử nghiệm tự động cho multi-tenant của Azure Data Lake Gen 2

·        Thử nghiệm trải nghiệm thực hành nâng cao DW và thử nghiệm tự động về bảo mật dữ liệu (RBAC, RLS, CLS, Data Masking)

·        Trải nghiệm thực hành nâng cao với thử nghiệm tự động API Azure (API cung cấp Azure AD, API Azure Data Lake, API Azure Data Factory)

·        Trải nghiệm thực hành nâng cao với thử nghiệm tự động các mẫu Power BI nhúng, PowerShell, Azure CLI, ARM

Bằng cấp:

·        Học vấn: Cử nhân; Khoa học Máy tính, MIS hoặc Toán học là những chuyên ngành được ưu tiên.

·        Có kinh nghiệm với Bộ chất lượng dữ liệu Infosphere, Talend hoặc Informatica (ưu tiên Talend hoặc Infosphere)

·        Hiểu biết về các nguyên tắc Quản trị dữ liệu và cách Quản trị dữ liệu liên quan đến Quản lý chất lượng dữ liệu

·        Kỹ năng lập mô hình dữ liệu tốt

·        Khả năng truy vấn và phân tích dữ liệu trong hệ thống quản lý cơ sở dữ liệu hoặc tệp hệ thống

·        Nắm vững cách đo lường chất lượng dữ liệu, bao gồm hiểu biết về tính đầy đủ, tính duy nhất, tính hợp lệ, độ chính xác, tính toàn vẹn, tính kịp thời, v.v.

-        Khả năng thực hiện phân tích nguyên nhân gốc rễ để phát triển các giải pháp DQM tốt nhất