Hệ thống VR-Autism (Unity Client)

VR-Autism là một giải pháp công nghệ toàn diện kết hợp giữa Kính thực tế ảo (VR) và Trang quản trị Web (Web Dashboard), được thiết kế đặc biệt nhằm hỗ trợ trẻ em mắc Hội chứng Tự kỷ (ASD) rèn luyện các kỹ năng giao tiếp và tự phục vụ trong cuộc sống hàng ngày. Hệ thống cung cấp một môi trường tương tác ảo an toàn, sinh động cho trẻ, đồng thời giúp các chuyên gia và giáo viên giám sát, can thiệp và đánh giá tiến trình trị liệu một cách chính xác theo thời gian thực.

Tổng quan vận hành

Khi trẻ tham gia bài học bằng kính thực tế ảo, giáo viên hoặc trị liệu viên có thể ngồi bên cạnh theo dõi toàn bộ quá trình qua màn hình máy tính và hỗ trợ trẻ từ xa khi cần.

Các phân hệ chính dành cho người học (Trải nghiệm VR)

• Tập làm các công việc hàng ngày: Trẻ thực hành các chuỗi hành động như rửa tay, đánh răng hoặc đi siêu thị bằng cách chạm, cầm nắm các đồ vật ảo.
• Học giao tiếp và trò chuyện: Trẻ thực hành lắng nghe và đáp lại lời thoại của các nhân vật ảo (NPC), rèn luyện phản xạ ngôn ngữ. Nếu trẻ im lặng quá lâu, hệ thống sẽ tự động đưa ra câu hỏi gợi ý để khuyến khích trẻ nói.
• Tham quan và nhận biết: Trẻ tham gia chuyến tham quan vườn thú tự động để làm quen với các âm thanh và hình ảnh loài vật. Ngay sau chuyến tham quan, trẻ sẽ thực hành nhận biết thông qua việc trả lời các câu hỏi trắc nghiệm bằng cách tương tác trực tiếp với các mô hình con vật 3D tương ứng.

Các phân hệ chính dành cho người hướng dẫn (Trang quản lý Web)

• Xem trực tiếp góc nhìn của trẻ: Màn hình máy tính hiển thị chính xác những gì trẻ đang nhìn thấy trong kính với độ trễ cực thấp.
• Hỗ trợ từ xa khi trẻ gặp khó khăn: Giáo viên có thể nhấn nút để làm sáng các đồ vật cần tìm trong kính của trẻ, ra lệnh cho nhân vật ảo nói lời hướng dẫn, hoặc tạm dừng bài học để trẻ nghỉ ngơi.
• Tự động ghi nhận và đánh giá: Hệ thống tự động đo độ tập trung (trẻ có nhìn vào mục tiêu không), khoảng cách tương tác của tay, thời gian phản hồi từ lúc có gợi ý đến khi trẻ thực hiện xong, và độ trễ khi trả lời bằng lời nói. Các số liệu này được lưu trữ và tổng hợp thành biểu đồ tiến triển của trẻ.
• Điều chỉnh bài học theo nhu cầu: Giáo viên dễ dàng cài đặt lại tốc độ di chuyển, giới hạn âm lượng và thời gian nhắc nhở phù hợp với mức độ nhạy cảm của từng trẻ.

Khả năng tương thích thiết bị

Hệ thống hoạt động trên cả kính thực tế ảo không dây Meta Quest và kính cắm máy tính HTC Vive. Chiều cao của camera ảo và hình ảnh tay cầm cũng tự động điều chỉnh phù hợp với vóc dáng của trẻ nhỏ.