Chia Sẻ Khóa Học AWS Redshift Master [Khóa 5557 A]
Làm chủ Redshift toàn diện: COPY, Spectrum, Data API, Datashare, Federated Query, Kinesis, Operation, ML, Zero-ETL.
Những điều bạn sẽ học:
- ✓ Setup Amazon Redshift (Serverless + Provisioned) với các vai trò IAM phù hợp, networking basic và KMS encryption.
- ✓ Load data vào Redshift bằng COPY (S3, manifest, compression, JSON/Parquet pattern & error handling).
- ✓ Tự động hóa Redshift load với Redshift Job Scheduler và EventBridge-style orchestration pattern.
- ✓ Build các ELT workflow trong Redshift sử dụng các stored procedure (atomic/non-atomic), MERGE, UDF và materialized view.
- ✓ Sử dụng Redshift Data API với AWS Lambda và boto3 để chạy SQL một cách an toàn mà không cần các long-lived connection.
- ✓ Truy vấn dữ liệu S3 sử dụng Redshift Spectrum bằng cách tạo các external table với AWS Glue Data Catalog.
- ✓ Tạo các view và join các external Spectrum table với các internal Redshift table cho các analytics workflow.
- ✓ Share live data bằng Redshift Datashare, bao gồm các sharing pattern & permission giữa các account.
- ✓ Sử dụng Federated Query để truy cập dữ liệu trong RDS/Aurora từ Redshift và hiểu rõ về các performance tradeoff.
- ✓ Ingest streaming data vào Redshift bằng cách sử dụng các Kinesis-based pattern & design cho các phân tích gần thời gian thực.
- ✓ Khắc phục các sự cố hiệu suất: Các vấn đề về WLM queue wait, spill, skew & concurrency bottleneck trong các workload thực tế.
- ✓ Áp dụng các phương pháp vận hành tốt nhất: VACUUM/ANALYZE/GRANT security design và các thói quen về production monitoring.
Đây là khóa học chuyên sâu về Amazon Redshift dành cho các kỹ sư và nhà phân tích dữ liệu chuyên về SQL, những người muốn vượt ra ngoài việc chỉ viết truy vấn và học cách thiết kế, xây dựng và vận hành Redshift trong môi trường sản xuất thực tế.
Khóa học bắt đầu với những kiến thức nền tảng và kiến trúc của Redshift, sau đó chuyển sang thiết lập đúng cách cả Redshift Serverless và Provisioned, bao gồm các nền tảng thực tế như IAM, KMS, permission (GRANT) và các khái niệm cốt lõi về workload.
Từ đó, khóa học tập trung vào data ingestion thực tế bằng lệnh COPY và thực hành nhiều bài tập với tất cả các tùy chọn khác nhau để nhập dữ liệu trong Redshift.
Tiếp theo, khóa học sẽ đề cập đến data processing bên trong Redshift với các phương pháp thực tiễn cho tất cả các data processing mà Redshift cung cấp, chẳng hạn như Unload, Stored Proc, Materialized views, UDF và nhiều hơn nữa.
Nội dung cũng đề cập đến cách Redshift kết nối với các dịch vụ AWS khác thông qua các ví dụ thực tế, bao gồm:
- ✓ Redshift Data API với Lambda và boto3.
- ✓ Redshift Spectrum (các external table & view trên S3 sử dụng Glue Data Catalog).
- ✓ External schema và truy vấn dữ liệu bên ngoài.
- ✓ Cross-account data sharing (Datashare).
- ✓ Các truy vấn liên kết tới RDS.
- ✓ Streaming ingestion bằng Kinesis.
Cuối cùng, khóa học kết thúc với các thao tác vận hành và tinh chỉnh hiệu suất (monitoring, skew/spills/queue waits, vacuum/analyze, concurrency tradeoff) và khép lại với các khả năng hiện đại như Redshift ML và Zero-ETL, chúng phù hợp ở đâu, khi nào không, và những hạn chế của chúng.
Sau khi hoàn thành khóa học, bạn sẽ có được bộ kỹ năng Redshift thực tế, sẵn sàng ứng dụng ngay lập tức.
Mục lục:
- ✓ 01. Giới thiệu.
- ✓ 02. Tổng quan về Redshift.
- ✓ 03. Thiết lập Redshift Serverless & Provisioned.
- ✓ 04. COPY Command - Data Ingestion trong Redshift.
- ✓ 05. Data Processing trong Redshift.
- ✓ 06. Redshift DATA API - Data Ingestion.
- ✓ 07. Redshift Spectrum (External Table trên S3).
- ✓ 08. Redshift Datashare (Chia sẻ dữ liệu giữa các AWS Account).
- ✓ 09. Federated Query (Query RDS từ Redshift).
- ✓ 10. Kinesis Stream + Redshift Integration.
- ✓ 11. Redshift Operation & Access.
- ✓ 12. Redshift ML & Zero ETL.
Khóa học này dành cho ai:
- ✓ Data engineer / analytics engineer muốn có kỹ năng Amazon Redshift sẵn sàng cho môi trường production.
- ✓ Các nhà phân tích chuyên sâu về SQL muốn tìm hiểu về ingestion, performance và các tích hợp thực tế với AWS (Spectrum, Data API, Datashare).
- ✓ Các AWS developer đang xây dựng các pipeline với S3, Glue, Lambda, Kinesis và Redshift.
- ✓ Bất cứ ai đang chuẩn bị cho các cuộc phỏng vấn hoặc công việc liên quan đến COPY, Spectrum, performance tuning và kiến trúc Redshift.