Khóa học GCP Data Engineer
Khóa học GCP Data Engineer có cấu trúc về lưu trữ, đường ống, ML, bảo mật, độ tin cậy và kiến trúc, kèm câu hỏi.
Tiến độ khóa học
0 / 5
Quay lại khóa học
Bạn sẽ học được
- Mô tả lưu trữ.
- Giải thích đường ống.
- Mô tả ML.
- Giải thích bảo mật.
- Mô tả độ tin cậy.
Trước khi bắt đầu
- Kiến thức Google Cloud cơ bản hữu ích.
- Nên biết SQL và khái niệm dữ liệu.
- Không cần chứng chỉ Google trước đó.
Bài học 1 Lưu trữ và Xử lý Dữ liệu
BigQuery phân tích, Storage lưu, Pub/Sub gửi, Dataflow xử lý. Dataproc, Bigtable, SQL, Spanner đáp ứng nhu cầu khác nhau. Chọn theo độ trễ và quy mô. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.
Ví dụ
Ví dụ: nhóm lưu log trong Storage, Pub/Sub truyền phát, Dataflow xử lý và BigQuery phân tích.Bài học 2 Đường ống Dữ liệu và Điều phối
Dataflow xử lý, Composer điều phối, Scheduler lên lịch, Functions phản hồi. Thiết kế pipeline idempotent với retry và giám sát. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.
Ví dụ
Ví dụ: Scheduler chạy Dataflow template hàng ngày, Composer điều phối bước và lỗi kích hoạt cảnh báo retry.Bài học 3 ML và Phân tích Nâng cao
BigQuery ML và Vertex AI tạo mô hình, Looker trực quan, notebook khám phá. Chia dữ liệu, dùng batch prediction và model registry. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.
Ví dụ
Ví dụ: BigQuery ML dự đoán rời bỏ, feature store lưu đặc trưng và Vertex AI chạy batch prediction.Bài học 4 Bảo mật và Tuân thủ
IAM kiểm soát, KMS mã hóa, DLP bảo vệ, VPC-SC cô lập. Áp dụng đặc quyền tối thiểu, mã hóa, kiểm toán. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.
Ví dụ
Ví dụ: nền tảng y tế dùng IAM, KMS, DLP, VPC Service Controls và audit log.Bài học 5 Độ tin cậy, Chi phí và Kiến trúc
Monitoring, Logging, hạn mức, vòng đời duy trì độ tin cậy. Kiến trúc dùng batch, streaming, phân vùng, Data Catalog. Hãy luyện tập với ví dụ, xem lại mỗi sai sót và ôn chủ đề yếu nhất mỗi tuần để tiến bộ.