huihut/Facemoji

😆 Facemoji — Chatbot giọng nói nhường lại biểu cảm khuôn mặt bạn

Một chatbot âm thanh trên Unity (hiện chỉ Android) kết hợp theo dõi khuôn mặt, mô hình hoá Live2D, ghi GIF và trò chuyện bằng giọng nói.

Facemoji là dự án Unity của huihut, gồm hai module chính: FaceTracking dùng OpenCV và Dlib để nhận diện biểu cảm khuôn mặt, ánh xạ vào mô hình Live2D và ghi lại GIF; và AI (chatbot) kết hợp Turing Robot, Iflytek IAT (nhận dạng giọng nói) và Iflytek TTS (sinh giọng nói) để cho phép người dùng trò chuyện bằng văn bản hoặc giọng nói.

✨ Điểm nổi bật

• Theo dõi khuôn mặt thời gian thực: OpenCV + Dlib phát hiện và nhận diện 68 điểm mốc khuôn mặt.
• Ánh xạ Live2D: Biểu cảm khuôn mặt người dùng được chuyển thành chuyển động của mô hình Live2D.
• Ghi GIF 3 giây: Hỗ trợ ghi lại đoạn GIF ngắn trong quá trình theo dõi.
• Trò chuyện bằng giọng nói: Nhận dạng giọng nói qua Iflytek IAT, xử lý bởi Turing Robot và phản hồi bằng giọng nói TTS.
• Đa chức năng AI: Hỗ trợ trò chuyện, tra cứu tri thức, tính toán, kể chuyện, kể chương, đối thí, xem tử vi và dự báo thời tiết.
• Chỉ hỗ trợ tiếng Trung: Do giới hạn của Turing Robot, chatbot chỉ hoạt động bằng tiếng Trung.
• Triển khai trên Android: Dự án được thiết kế riêng cho nền tảng Android.

💡 Vì sao đáng chú ý

Facemoji kết hợp nhiều công nghệ như OpenCV, Dlib, Live2D và các dịch vụ AI của Iflytek và Turing Robot vào một ứng dụng duy nhất, tạo ra trải nghiệm chatbot cá nhân hóa theo biểu cảm khuôn mặt. Đây là lựa chọn thú vị cho các dự án khám phá tích hợp nhận dạng khuôn mặt với chatbot, đặc biệt trong môi trường giáo dục hoặc giao tiếp giải trí bằng tiếng Trung.

---

#Unity #FaceTracking #Live2D #Chatbot #OpenCV #TuringRobot #TiniX