Nền tảng Azure Data Engineer DP-203
Khóa học DP-203 có cấu trúc về lưu trữ, biến đổi, pipeline, bảo mật, giám sát và Synapse, kèm câu hỏi.
Tiến độ khóa học
0 / 5
Quay lại khóa học
Bạn sẽ học được
- Mô tả lưu trữ.
- Giải thích biến đổi và pipeline.
- Mô tả bảo mật.
- Giải thích giám sát.
- Mô tả Synapse.
Trước khi bắt đầu
- Kiến thức Azure Data cơ bản hữu ích.
- Nên có kinh nghiệm SQL và Python.
- Không cần chứng chỉ Azure data trước đó.
Bài học 1 Lưu trữ và Tiếp nhận
Blob và Data Lake lưu tệp. Event Hubs nhận luồng và IoT Hub nhận telemetry. Data Factory sao chép giữa nguồn và đích. Data lake lưu thô và ELT tải rồi biến đổi. Partition key phân phối và managed identity bảo vệ thông tin xác thực. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.
Ví dụ
Ví dụ: IoT Hub thu thập dữ liệu cảm biến, Event Hubs đệm sự kiện luồng và Data Factory sao chép tệp batch vào Azure Data Lake Storage.Bài học 2 Biến đổi và Pipeline
Databricks chạy Spark và Synapse SQL biến đổi. Mapping data flow là ETL trực quan. Fact table lưu sự kiện và dimension mô tả. Pipeline dùng activity, trigger, linked service. Checkpoint và idempotency cho phép chạy lại an toàn. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.
Ví dụ
Ví dụ: pipeline dùng mapping data flow làm sạch dữ liệu bán hàng, notebook thêm đặc trưng và Synapse SQL tải lược đồ sao.Bài học 3 Bảo mật và Quản trị
Key Vault lưu bí mật và managed identity xác thực. Mã hóa bảo vệ khi lưu trữ và truyền. Private endpoint và masking giảm phơi bày. Purview lập danh mục và phân loại. RBAC kiểm soát quyền và audit log ghi lại. Áp dụng quyền tối thiểu và tuân thủ. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.
Ví dụ
Ví dụ: pipeline dùng managed identity, kết nối qua private endpoint, lưu thông tin xác thực trong Key Vault và che cột nhạy cảm.Bài học 4 Giám sát và Tối ưu hóa
Azure Monitor thu thập số liệu, log, alert. Diagnostic setting dẫn log. Tối ưu dùng budget, khuyến nghị, tier. Query insight tìm chậm và capacity planning đo quy mô. Xác định mục tiêu và rà soát chi phí. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.
Ví dụ
Ví dụ: kỹ sư dữ liệu tạo alert cho pipeline lỗi, dùng diagnostic setting gửi log đến Log Analytics và xem báo cáo ngân sách hàng tháng.Bài học 5 Synapse và Phân tích
Synapse kết hợp warehouse, Spark, pipeline. Dedicated SQL pool cung cấp điện toán và serverless SQL truy vấn tệp. Spark pool xử lý quy mô lớn. Pipeline điều phối và lake database định nghĩa schema. Chọn SQL hoặc Spark theo tải. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.