Giới thiệu khóa học :
Data Engineering là lĩnh vực tập trung vào việc xây dựng, vận hành và duy trì các hệ thống lưu trữ, xử lý và phân phối dữ liệu lớn. Các kỹ sư dữ liệu đóng vai trò quan trọng trong việc xây dựng các pipeline (luồng dữ liệu) để trích xuất dữ liệu từ các nguồn khác nhau, chuyển đổi dữ liệu sang dạng phù hợp cho phân tích, và lưu trữ dữ liệu trên các nền tảng lưu trữ lớn.
Nắm bắt nhu cầu thị trường, khóa học “Data Engineering on Microsoft Azure” được thiết kế nhằm cung cấp cho học viên kiến thức và kỹ năng chuyên sâu về Data Engineering trên nền tảng Microsoft Azure. Thông qua khóa học này, Học viên sẽ có cái nhìn tổng quan về Data Engineering, hiểu rõ vai trò của Data Engineer và tại sao họ là những người quan trọng trong việc biến dữ liệu thành thông tin hữu ích cho doanh nghiệp.
Mục tiêu khóa học :
- Trang bị cho học viên kiến thức toàn diện về Data Engineering trên Microsoft Azure
- Rèn luyện kỹ năng thực tế để triển khai, cấu hình, quản lý và bảo mật các giải pháp Kỹ thuật Dữ liệu trên Azure
- Giúp học viên tự tin làm việc với các công nghệ dữ liệu tiên tiến nhất của Microsoft Azure và đáp ứng nhu cầu thực tế của doanh nghiệp
- Bảo mật dữ liệu với Azure Synapse Analytics và nắm kỹ thuật xử lý dự liệu Realtime
- Nắm thao tác sử dụng Azure Data Factory. Tích hợp SQL và Apache Spark trong Azure
- Cập nhật kiến thức và xu hướng phát triển của ngành/nghề Data Engineering
Đối tượng tham gia :
- Chuyên viên CNTT có kinh nghiệm quản trị hệ thống
- Người dùng muốn nâng cao kỹ năng quản trị Microsoft 365
Thời lượng :
- Thời lượng: 40 giờ
- Ngày học: Thứ 2, 4, 6/ Thứ 3, 5, 7/ Thứ 7 - CN
- Thời gian: 18h30 - 21h30
- Hình thức đào tạo: Online
Giáo trình và tài liệu :
- Nội dung đào tạo theo giáo trình chính hãng Microsoft Official Courses (MOC) và kết hợp với kinh nghiệm làm việc thực tế.
Bằng cấp và chứng nhận :
- Chứng Chỉ Quốc Tế: Vượt qua kỳ thi quốc tế DP-203: Data Engineering on Microsoft Azure, học viên sẽ đạt được chứng chỉ quốc tế Azure Data Engineer Associate do Microsoft cấp, có giá trị toàn cầu.
- Chứng Nhận Hoàn Tất Khóa Học: được cấp cho Học Viên tham dự trên 80% số buổi học và vượt qua bài kiểm tra cuối khóa.
Nội dung khóa học :
Module 1: Tìm hiểu các kỹ thuật tính toán và lưu trữ dữ liệu
• Tìm hiểu Azure Synapse Analytics
• Giới thiệu Azure Databricks
• Kiến trúc Azure Databricks Delta Lake
• Các cách lưu trữ Azure Data Lake
• Làm việc với các luồng dữ liệu bằng cách sử dụng Azure Stream Analytic
Module 2: Thực hiện Truy vấn dùng Azure Synapse Analytics serverless SQL
• Tìm hiểu khả năng của Azure Synapse serverless SQL pools
• Truy vấn dữ liệu dùng Azure Synapse serverless SQL pools
• Tạo metadata objects dùng Azure Synapse serverless SQL pools
• Bảo mật dữ liệu và quản lý người dùng trong Azure Synapse serverless SQL pools
Module 3: Tìm hiểu cách chuyển đổi dữ liệu trong Azure DatabricksTìm hiểu cách chuyển đổi dữ liệu trong Azure Databricks
• Tổng quan về Azure Databricks
• Đọc và ghi dữ liệu trong Azure Databricks
• Làm việc với DataFrames trong Azure Databricks
• Làm việc với các phương pháp nâng cao DataFrames trong Azure Databricks
Module 4: Chuyển đổi và tải dữ liệu vào Data Warehouse dùng Apache Spark
• Tổng quan về big data engineering với Apache Spark trong Azure Synapse Analytics
• Nhập dữ liệu với Apache Spark notebooks trong Azure Synapse Analytics
• Chuyển đổi dữ liệu với DataFrames in Apache Spark Pools trong Azure Synapse Analytics
• Tích hợp SQL và Apache Spark trong Azure Synapse Analytics
Module 5: Nhập và tải dữ liệu vào Data Warehouse
• Sử dụng các phương pháp tốt nhất về tải dữ liệu trong Azure Synapse Analytics
• Quá trình nhập quy mô Petabyte với Azure Data Factory
Module 6: Chuyển đổi dữ liệu với Azure Data Factory hay Azure Synapse Pipelines
• Tích hợp dữ liệu với Azure Data Factory hay Azure Synapse Pipelines
• Chuyển đổi không sử dụng mã code với Azure Data Factory hay Azure Synapse Pipelines
Module 7: Điều phối và chuyển đổi dữ liệu trong Azure Synapse Pipelines
• Điều phối và chuyển đổi dữ liệu trong Azure Data Factory
Module 8: End-to-end security với Azure Synapse Analytics
• Secure data warehouse trong Azure Synapse Analytics
• Cấu hình và quản lý secrets trong Azure Key Vault
• Triển khai các biện pháp kiểm soát tuân thủ đối với dữ liệu nhạy cảm
Module 9: Hybrid Transactional Analytical Processing (HTAP) với Azure Synapse Link
• Thiết kế Hybrid Transactional và Analytical Processing dùng Azure Synapse Analytics
• Cấu hình Azure Synapse Link với Azure Cosmos DB
• Query Azure Cosmos DB với Apache Spark pools
• Query Azure Cosmos DB với Serverless SQL pools
Module 10: Xử lý Real-time Stream với Stream Analytics
• Enable reliable messaging cho Big Data applications dùng Azure Event Hubs
• Làm việc với data streams bằng cách dùng Azure Stream Analytics
• Nhập data streams với Azure Stream Analytics.
Module 11: Tạo Stream Processing Solution với Event Hubs và Azure Databricks
• Xử lý Streaming Data với Azure Databricks Structured Streaming
Module 12: Tổng kết kiến thức khoá học
• Tổng kết
• Thực hành bài khảo sát cuối khoá học.
Đăng ký khóa học:
Học viên nhận xét khóa học ?
Văn Toàn
"Rất bất ngờ khi gặp lại các thầy ở Trung Tâm Nhất Nghệ đã từng dạy mình trước đây. Các thầy dạy rất tận tâm và nhiệt tình. Chúc Master Learning Hub ngày càng phát triển nha."
Việt Thanh
"Em chân thành cảm ơn các thầy tại trung tâm đã hỗ trợ em rất nhiều trong suốt khóa học. Các thầy rất nhiệt tình và dạy theo case study thực tế của từng doanh nghiệp. Không khí học tập tại đây thực sự rất thoải mái và hiệu quả."
Đức Huy
"Các giảng viên hỗ trợ mình rất nhiều trong quá trình học và sau giờ học. Các thầy rất nhiệt tình. Giáo trình được biên soạn chi tiết, hướng dẫn từng bước rất dễ thực hành. Chúc Master Learning Hub Academy ngày càng thành công hơn nữa."
Hoàng Khang
"Vô tình biết đến Master Learning Hub Academy, gặp lại thầy Chung Tấn Lộc đã dạy mình MCSA ở Nhất Nghệ cách đây 5 năm. Rất nhiều chương trình học mới, đáp ứng nhu cầu của doanh nghiệp. Vote 5* cho trung tâm."
Ngọc Mai
"Khóa học về Digital Marketing Executive giúp mình có khả năng tự thiết kế website và đưa lên top Google. Tất cả những kiến thức và kỹ năng mà mình đã học được từ khoá học này đều rất bổ ích và thú vị. Mình rất cảm kích sự vui vẻ và ân cần của đội ngũ giáo viên tại Trung Tâm."
