Chia Sẻ Khóa Học Local AI Master - LLM, Diffusion & AI-Agent Trên PC Của Bạn [Khóa 5015 A]
AI Automation & On-Premise AI Agent - với Ollama, LM Studio, n8n, Flowise, Docker, ComfyUI, Supabase, MCP, SQL & RAG.
Những gì bạn sẽ học:
- ✓ Các nền tảng về Local AI: LLM, Diffusion, RAG & On-Premise AI Automation.
- ✓ Cài đặt & Setup Ollama, LM Studio & Anything LLM.
- ✓ Chạy các Local LLM (GPT, Qwen, Deepseek, Gemma, Mistral & v.v).
- ✓ Cách hoạt động của các Diffusion Model: Stable Diffusion, Flux, Wan, Qwen & & v.v.
- ✓ Hiểu về phần cứng: GPU, VRAM, RAM, Unified Memory & Apple Basic.
- ✓ Pinokio: Cài đặt Local AI một cách nhanh chóng và dễ dàng.
- ✓ Prompt Engineering cho LLM, SDXL & Flux Model.
- ✓ Áp dụng RAG (Retrieval-Augmented Generation) & Embeddings Local.
- ✓ Hiểu về các Vector Database & sử dụng chúng với Supabase, Postgres & SQL.
- ✓ Data Preparation trong Markdown: Chunking, Overlap & Optimization.
- ✓ Kết nối Anything LLM với Ollama và Build Chatbot RAG của riêng bạn.
- ✓ Vision Model, OCR & Image Recognition với Google Gemma & Qwen VL.
- ✓ Test-Time Compute & Thinking LLM với DeepSeek R & GPT-OSS.
- ✓ Function Calling & Tool Use: Kết nối các công cụ bên ngoài với LLM.
- ✓ Hiểu về Quantization: FP16, BF16, Q8, Q4, GGUF & Mẹo tối ưu hiệu suất.
- ✓ Sử dụng ComfyUI, Forge, Fooocus & Automatic1111 Local.
- ✓ Generate Image & Video Local với SDXL, Flux, Qwen & các AI Video Model.
- ✓ LoRA Training, ControlNet & Consistent Character dành cho AI Influencer.
- ✓ Sử dụng Local AI Audio: Whisper, TTS, STT & Music Generation.
- ✓ Agentic AI với n8n: Triggers, Actions, MCP Client & Host.
- ✓ Tích hợp Supabase vào n8n cho các Embeddings, SQL & RAG Workflow.
- ✓ Email Agent, Webhooks & Automation với Google & n8n.
- ✓ Kết nối Open WebUI & ComfyUI với n8n cho Image & Video Automation.
- ✓ MCP Server & Client: Tích hợp Local Tool với n8n & LM Studio.
- ✓ Build một Local RAG Agent with Flowise, Postgres & Ollama.
- ✓ Cài đặt dựa trên Docker cho n8n, Supabase, Open WebUI & v.v.
- ✓ OCR & Document Processing: Extract Data từ Image, PDF & Invoice.
- ✓ Privacy, Compliance & Open-Source Licenses (MIT, Apache & v.v).
- ✓ Security: Hiểu về Jailbreak, Prompt Injection, Hallucination & MCP Rug-Pull.
- ✓ Build một On-Premise AI Infrastructure có khả năng mở rộng cho doanh nghiệp và tổ chức.
Bạn có muốn toàn quyền kiểm soát trí tuệ nhân tạo không?
Hãy học cách khai thác sức mạnh của các LLM và các image generator ngay trên máy tính của bạn - không cần cloud, không rủi ro về dữ liệu, hiệu suất tối đa.
AI automation và các agent thông minh đang thay đổi các ngành công nghiệp từng ngày.
Nhưng điều gì sẽ xảy ra nếu bạn không muốn phụ thuộc vào các nhà cung cấp bên ngoài?
Điều gì sẽ xảy ra nếu bạn cần một AI infrastructure nằm trong tầm kiểm soát 100% của bạn - dù là vì quyền riêng tư, hiệu suất vượt trội hay sự tự do sáng tạo không giới hạn?
Khóa học này là hướng dẫn từng bước đưa bạn vào thế giới local AI.
Bạn sẽ không chỉ học cách cài đặt từng công cụ riêng lẻ - bạn sẽ build một hệ sinh thái hoàn chỉnh, liên kết với nhau, nơi các language model (LLM), image & video generator (diffusion model), cùng các AI agent thông minh hoạt động mượt mà với nhau.
Mọi thứ chạy hoàn toàn on-premise - ngay trên phần cứng của chính bạn.
Chúng ta sẽ sử dụng các công cụ mã nguồn mở hàng đầu như Ollama, LM Studio, Anything LLM, Flowise, n8n, Docker, Supabase, ComfyUI, MCP và Open WebUI.
Cùng nhau, chúng ta sẽ xây dựng AI command center cá nhân cho mọi nhu cầu - từ text automation đến image, audio & video production tuyệt đẹp, và thậm chí là các workflow nâng cao dựa trên agent.
Hãy quên đi những hạn chế của cloud services.
Sau khóa học này, bạn sẽ có thể build một hệ thống AI vượt trội hơn các giải pháp tiêu chuẩn như ChatGPT hay Stable Diffusion - về tính năng, bảo mật và tính cá nhân hóa.
NỘI DUNG BẠN SẼ HỌC - CHI TIẾT TỪNG PHẦN:
Phần 1: Giới thiệu & Khởi động nhanh:
- ✓ Có một cái nhìn tổng quan rõ ràng về cấu trúc khóa học và mục tiêu học tập.
- ✓ Truy cập tất cả các tài nguyên và liên kết quan trọng để thành công.
- ✓ Học cách tìm các mô hình mã nguồn mở tốt nhất cho dự án của bạn.
- ✓ Mẹo nhanh: Cài đặt local AI app đầu tiên của bạn trong vài phút với Pinokio.
Phần 2: Phần nền tản - LLM, Diffusion & Hardware:
- ✓ Hiểu các ưu điểm chính của local AI về quyền riêng tư, chi phí và hiệu suất.
- ✓ Làm rõ các yêu cầu về phần cứng - giải thích đơn giản về GPU, VRAM, RAM và unified memory.
- ✓ Khám phá các setup tốt nhất cho Apple Silicon vs NVIDIA GPU.
- ✓ Nắm bắt cách thức hoạt động thực tế của các LLM (GPT, Qwen) và các diffusion model (Stable Diffusion, Flux).
Phần 3: Local LLM in Action - ChatGPT của riêng bạn với Ollama:
- ✓ Cài đặt và cấu hình Ollama từ đầu, học cách sử dụng các mô hình phù hợp.
- ✓ Làm chủ prompt engineering, các khả năng đa phương thức (Gemma Vision hoặc Qwen VL), và các kỹ thuật nâng cao như Test-Time Compute.
- ✓ Tích hợp các công cụ bên ngoài thông qua Function Calling & Tool Use để mở rộng khả năng của mô hình của bạn.
- ✓ Tìm hiểu sâu về RAG & embedding trực tiếp trong Ollama và tối ưu hóa với quantization (GGUF, FP8, Q8, Q4 & v.v).
Phần 4: Knowledge Management với Anything LLM & LM Studio (RAG):
- ✓ Hiểu sâu về RAG (Retrieval-Augmented Generation), embedding và vector database.
- ✓ Build một local RAG chatbot với Anything LLM và Ollama - được huấn luyện trên document của riêng bạn.
- ✓ Sử dụng các tính năng agent như web search & scraping, đồng thời tương tác bằng giọng nói sử dụng Whisper.
- ✓ Tìm hiểu cách LM Studio đóng vai trò là giải pháp thay thế all-in-one mạnh mẽ cho Ollama.
Phần 5: Local Diffusion - Image & Video Creation với ComfyUI:
- ✓ Cài đặt và làm chủ ComfyUI, local image creation tool mạnh mẽ nhất.
- ✓ Hiểu và sử dụng các JSON workflow phức tạp cho SDXL, Qwen và Flux.
- ✓ Train LoRA, áp dụng ControlNet để giữ nhân vật nhất quán và nâng cấp chất lượng hình ảnh chuyên nghiệp.
- ✓ Tạo AI video, chỉnh sửa ảnh với Qwen Image Edit, và khám phá các workflow qua OpenArt.
- ✓ Upscale các AI image của bạn với ComfyUI sử dụng Flux, SDXL và SUPIR để đạt kết quả siêu sắc nét, độ phân giải cao.
Phần 6: Tạo AI Video trên PC của bạn:
- ✓ Generate video trực tiếp từ văn bản hoặc hình ảnh sử dụng các mô hình như Wan.
- ✓ Animate character hoặc thay thế khuôn mặt, trang phục sử dụng Wan Animate.
- ✓ Khám phá các local video tool nâng cao như FramePack.
- ✓ Pro Tip: Tăng tốc tạo video lên đến 7 lần với kỹ thuật LoRA 4 bước tùy chỉnh.
Phần 7: AI Audio - Speech, Voice & Music:
- ✓ Chuyển đổi giọng nói thành văn bản chính xác với Whisper (STT).
- ✓ Tạo giọng nói tự nhiên từ văn bản (TTS) hoặc sao chép giọng nói của chính bạn bằng các công cụ mã nguồn mở.
- ✓ Tạo nhạc AI miễn phí bản quyền ngay trên phần cứng của bạn.
Phần 8: Agentic AI - Build các Automation Agent thông minh với n8n:
- ✓ Cài đặt và cấu hình n8n automation platform local.
- ✓ Setup một local Supabase vector database cho các RAG agent của bạn thông qua Docker.
- ✓ Build một RAG agent hoàn chỉnh kết hợp Ollama, n8n và Supabase.
- ✓ Kết nối các agent của bạn với SQL database và các dịch vụ bên ngoài như Gmail.
Phần 9: Các Workflow nâng cao - Nghệ thuật tích hợp hệ thống:
- ✓ Kết nối mọi thứ bằng MCP làm cầu nối giữa các công cụ của bạn.
- ✓ Sử dụng LM Studio hoặc Open WebUI làm central control hub cho các AI agent được xây dựng trong n8n.
- ✓ Tự động hóa việc tạo hình ảnh và video bằng cách liên kết ComfyUI với n8n.
- ✓ Extract data từ tệp PDF, hình ảnh và hóa đơn tự động thông qua OCR.
- ✓ Khám phá fine-tuning với Unsloth để tùy chỉnh LLM cho dữ liệu của riêng bạn - và hiểu khi nào nỗ lực đó thực sự đáng giá thay vì sử dụng các adapter hoặc RAG.
Phần 10: Khóa học Flowise cấp tốc - Build các Visual RAG Bot:
- ✓ Cài đặt Flowise và Postgres database local với Node và Docker.
- ✓ Build một drag-and-drop RAG agent chạy hoàn toàn trên knowledge base của riêng bạn.
- ✓ Triển khai một Record Manager để duy trì tính toàn vẹn của dữ liệu.
Phần 11: Pháp lý & Bảo mật - Bảo vệ hệ thống AI của bạn:
- ✓ Bảo vệ setup của bạn trước các vấn đề hallucination, jailbreak và prompt injection.
- ✓ Điều hướng các giấy phép mã nguồn mở (MIT, Apache, v.v.) để tránh những rủi ro pháp lý.
TẠI SAO KHÓA HỌC NÀY ĐẶC BIỆT:
Hầu hết các khóa học chỉ hướng dẫn bạn cách cài đặt một công cụ. Khóa học này tiến xa hơn thế - bạn sẽ học cách xây dựng một AI infrastructure độc lập, hoàn chỉnh. Bạn sẽ tạo ra các hệ thống kết nối thông minh giữa LLM, diffusion, audio, video và automation.
Dù bạn là một developer, doanh nhân hay người đam mê công nghệ, vào cuối khóa học này, bạn sẽ có cả sự thấu hiểu sâu sắc về local AI lẫn kỹ năng thực tế để sử dụng, mở rộng và thậm chí kiếm tiền từ nó.
Mục lục:
- ✓ 01. Giới thiệu.
- ✓ 02. Fundamentals: LLM, Diffusion & Suitable Hardware.
- ✓ 03. Local LLM với Ollama & Ollama App.
- ✓ 04. Anything LLM, LM Studio & RAG.
- ✓ 05. Local Diffusion - Tạo Image & Video với ComfyUI.
- ✓ 06. AI Video Creation.
- ✓ 07. Các tính năng AI Audio: Text-to-Speech (TTS), Speech-to-Text (STT) & AI Music.
- ✓ 08. Agentic AI Basic: Tạo Local AI Agent & Automation với n8n.
- ✓ 09. Các Special Workflow: MCP, OpenWebUI, ComfyUI Automation & v.v.
- ✓ 10. Khóa học Flowise cấp tốc: Local RAG & Postgres Record Manager.
- ✓ 11. Law & Security - Tổng quan về Tuân thủ, Quyền riêng tư & Giấy phép.
Khóa học này dành cho:
- ✓ Doanh nhân muốn tối ưu hóa quy trình và cắt giảm chi phí với local AI, automation & AI agent.
- ✓ Developer & người đam mê công nghệ muốn triển khai LLM, diffusion & RAG on-premise.
- ✓ Những người đam mê AI muốn xây dựng các local workflow của riêng họ với n8n, Flowise, Supabase & ComfyUI.
- ✓ Người dùng cá nhân ưu tiên quyền riêng tư dữ liệu và muốn kiểm soát hoàn toàn các mô hình AI của mình.
- ✓ Các công ty đang tìm kiếm các giải pháp triển khai nội bộ mà không phụ thuộc vào cloud.
- ✓ Bất kỳ ai muốn học cách kết hợp các AI agent, automation & LLM on-premise.