Chia Sẻ Khóa Học Xây Dựng Một AI Robot Bằng Android Phone & ESP32 [Khóa 5614 A]
Tạo một Robot được hỗ trợ bởi LLM bằng một Android phone và ESP32 dev board.
Những gì bạn sẽ học được:
- ✓ Xây dựng một Robot hỗ trợ AI có đầy đủ chức năng bằng điện thoại Android và bo mạch phát triển ESP32.
- ✓ Sử dụng block-based coding của MIT App Inventor để tạo một ứng dụng Android tương tác mà không cần kinh nghiệm lập trình trước đó.
- ✓ Hiểu và triển khai giao tiếp Bluetooth giữa điện thoại Android (brain) và ESP32 (body).
- ✓ Tích hợp khả năng trò chuyện được hỗ trợ bởi LLM để cho phép robot của bạn có thể nói, phản hồi và thực hiện các tương tác có ý nghĩa.
- ✓ Sử dụng speech recognition và text-to-speech để cung cấp cho robot của bạn một giao diện giọng nói tự nhiên.
- ✓ Hiển thị đôi mắt kỹ thuật số biểu cảm có thể nhấp nháy, theo dõi người dùng và thể hiện cảm xúc bằng màn hình điện thoại.
- ✓ Thêm tính năng nhận dạng khuôn mặt và theo dõi vật thể để cho phép robot của bạn tự động quay mặt và đi theo người dùng.
- ✓ Điều khiển động cơ và phần cứng đơn giản để hoạt hình và di chuyển robot theo thời gian thực.
- ✓ Triển khai các tính năng của chatbot như joke, phản hồi cảm xúc và trò chuyện được cá nhân hóa.
- ✓ Tùy chỉnh ngoại hình và hành vi của robot, bao gồm các hoạt ảnh khuôn mặt tùy chọn hoặc điều chỉnh tính cách.
- ✓ Khắc phục sự cố và gỡ lỗi các vấn đề thường gặp trong giao tiếp Bluetooth, điều khiển động cơ và logic ứng dụng.
- ✓ Áp dụng các khái niệm nền tảng trong lĩnh vực robot, AI, LLM, cảm biến và mobile app development.
- ✓ Xây dựng sự tự tin trong việc kết hợp phần cứng và phần mềm để tạo ra các dự án AI tương tác thực tế.
Hãy biến người bạn đồng hành AI của riêng bạn thành hiện thực! Trong khóa học thực hành này, bạn sẽ học cách chế tạo một robot tương tác, giàu cảm xúc được điều khiển bởi một Android smartphone và ESP32 development board. Sử dụng MIT App Inventor làm công cụ phát triển cốt lõi, bạn sẽ khám phá việc xây dựng các ứng dụng AI phức tạp dễ dàng như thế nào thông qua block-based coding system của nó, hoàn hảo cho người mới bắt đầu và dễ tiếp cận với bất kỳ ai chưa có kinh nghiệm lập trình.
Android phone sẽ đóng vai trò là "bộ não" của robot, cho phép nhận dạng giọng nói, hội thoại tự nhiên, tính cách và biểu cảm khuôn mặt hiển thị ngay trên màn hình. ESP32 đóng vai trò là thân robot, điều khiển động cơ và phần cứng đơn giản giúp hiện thực hóa sáng tạo của bạn. Bạn chỉ cần một vài linh kiện giá rẻ, dễ kiếm để lắp ráp robot vật lý, giúp dự án này vừa tiết kiệm chi phí vừa dễ dàng cho người mới bắt đầu.
Khóa học này sẽ hướng dẫn bạn thiết kế một robot có thể lắng nghe giọng nói của bạn, phản hồi bằng giọng nói và thực hiện các cuộc trò chuyện ý nghĩa được hỗ trợ bởi công nghệ AI và LLM hiện đại. Robot của bạn có thể kể chuyện cười, làm bạn đồng hành, trả lời câu hỏi và cư xử như một trợ lý cá nhân thân thiện. Thông qua các cảm biến và camera của điện thoại, bạn sẽ bổ sung khả năng theo dõi người dùng và theo dõi vật thể để robot có thể tự động quay mặt về phía người dùng, mang lại sự hiện diện sống động như thật.
Bạn cũng sẽ xây dựng đôi mắt kỹ thuật số biểu cảm, có thể chớp mắt, theo dõi người dùng và thể hiện cảm xúc, cùng với tùy chọn tạo khuôn mặt hoặc hoạt ảnh tùy chỉnh của riêng bạn. Trong quá trình học, bạn sẽ tích lũy các kỹ năng nền tảng về giao tiếp Bluetooth, tích hợp AI và LLM, nhận dạng giọng nói, text-to-speech, nhận dạng khuôn mặt, hành vi chatbot, theo dõi đối tượng, v.v.
Vào cuối khóa học này, bạn sẽ có một robot hoạt động hoàn chỉnh, được điều khiển bằng AI, kết hợp phần cứng, phần mềm, khả năng sáng tạo và trí thông minh đàm thoại - tất cả đều do bạn xây dựng từ đầu!
Mục lục:
- ✓ 1. Chúng ta đang xây dựng gì.
- ✓ 2. Xây dựng thân Robot.
- ✓ 3. Lập trình ESP32.
- ✓ 4. Lập trình Android Phone.
- ✓ 5. Tài nguyên để nghiên cứu thêm.
Khóa học này dành cho ai:
- ✓ Người mới bắt đầu quan tâm đến AI và robot và muốn bắt đầu một dự án đơn giản, dễ tiếp cận.
- ✓ Sinh viên và người có sở thích muốn chế tạo một robot AI tương tác thực sự từ các bộ phận giá cả phải chăng.
- ✓ Maker và đam mê DIY muốn kết hợp phần cứng, phần mềm và sự sáng tạo vào một dự án.
- ✓ Educator và STEM instructor muốn giảng dạy AI, lập trình và robot thông qua các hoạt động thực hành.