สรุปผลการทดลอง 20/5/2024

scenario กาารทดลอง เนื่องจาก HoloLens ที่เกิดความเสียหาย (ไม่สามารถ windows boot ได้ จำเป็นต้องลง windows ใหม่) ทำให้ scenario ของการทดลองมีการเปลี่ยนแปลง ดังนี้ มีการปรับลด user ในการทดสอบให้เหลือครั้งละ 1 คน โดยมีการทดสอบ 2 ครั้ง คือ การทดสอบผ่าน simulation ใน unity และการทดสอบผ่าน HoloLens Application ผู้ทดสอบจะยืนอยู่ประจำหน้ากล้องและสั่งงาน Unitree Go1 …

Class Project: Unity HoloLens Application for Control Unitree Go1 Robot

วัตถุประสงค์ System Scenario ระบบจะเป็นการจำลองการใช้หุ่นยนต์ในการขนส่งสิ่งของระหว่าง 2 สถานที่ (nodes) โดยที่ผู้ใช้งานทั้งสองฝั่งสามารถรับรู้ถึงสถานะการขนส่งของหุ่นยนต์ และสั่งการหุ่นยนต์ให้สามารถเข้าหาตนเอง/หยุดรอเพื่อ load ของ/ส่งของไปยังปลายทางได้ ด้วยภาษามือ Sign Language Data Exploration ผลจากการสำรวจ User (ผู้พิการทางการได้ยิน) เพื่อเก็บข้อมูลลักษณะท่าทางของภาษามือที่จะนำมาใช้ในการสั่ง Robodog Go1 EDU ได้ทั้งหมด 5 ท่าทาง HoloLens Application เขียนโปรแกรมเพื่อสร้าง Interface ในการสื่อสารผ่าน Unitree Go1 ผ่าน MQTT …

Progress Update 3/5/24

Deliverable this week HoloLens Application ที่ส่งข้อมูลให้กับ Robodog ผ่าน MQTT Broker ได้สำเร็จ โดยที่ function ทั้งหมดที่ใช้ในการ publish topic จะมีทั้งหมด 4 topic คือ Robodog (ROS2) สามารถรับคำสั่งจาก HoloLens Application ได้สำเร็จ แต่ยังไม่สามารถ deploy ลง HoloLens 2 ได้เนื่องจากติด system update (ไม่สามารถเข้าดู …

Progress Update 26/4/24

Deliverable this week System Data Flow ทดลองสร้าง HoloLens Server ด้วย PUN2 (Photon Unity Networking) Project ทั้งหมดที่สร้าง ใช้ tutorial มาจาก official Microsoft tutorial: https://learn.microsoft.com/ ปัญหาที่พบ หลังจากขั้นตอนการสร้าง NetworkRoom เพื่อสร้าง Photon Room (Script) component สำหรับ HoloLens 2 ตัวใน environment …

Progress Update 19/4/24

หน้าที่ส่วนที่รับผิดชอบ: ส่วนโปรแกรมที่ใช้คู่กับ HoloLens 2 ภาพรวมของระบบ ระบบนี้จะเป็นการจำลองการใช้หุ่นยนต์ในการขนส่งสิ่งของระหว่าง 2 สถานที่ (nodes) โดยที่ผู้ใช้งานทั้งสองฝั่งสามารถรับรู้ถึงสถานะการขนส่งของหุ่นยนต์ และสั่งการหุ่นยนต์ให้สามารถเข้าหาตนเอง/หยุดรอเพื่อ load ของ/ส่งของไปยังปลายทางได้ ด้วยภาษามือ Application Design แอปพลิเคชัน จะประกอบด้วยส่วนแสดง status ของหุ่นยนต์ โดยที่ส่วนรับ input ภาษามือของระบบนั้นจะอยู่กับตัสหุ่นยนต์โดยใช้กล้อง webcam เป็นหลัก โดยที่ระบบในเป้าหมายสูงสุดจะมีใช้ HoloLens 2 ทั้งหมด 2 ตัวที่อยู่ในเครือข่ายเดียวกัน และส่งข้อมูลตำแหน่งของตนเองไปยัง server เพื่อให้หุ่นยนต์รับรู้ถึงตำแหน่งของ HoloLens …

Defeating hardest boss in elden ring, the hardest 2022 game with mind control (EEG/HCI)

Elden Ring เกมจากผู้พัฒนาจากค่าย FromSoftware, Inc. ผู้สร้างเกมแนว RPG ตี Boss ที่ขึ้นชื่อว่ายากที่สุดในวงการเกม เจ้าของเดียวกับ Dark Souls ซึ่งกลายเป็นมาตรฐานของเกม “souls-like” ประเภทที่ขึ้นชื่อว่า monster ทุกตัวนั้นยากต่อการจัดการและพร้อมจะจบการเดินทางของผู้เล่นได้เสมอหากไม่ระวังตัว แม้ว่าจะเป็นเพียงแค่ monster เลเวลน้อยตามทาง และเน้นการเล่าเรื่องจากสภาพแวดล้อม โดยไม่มีการบ่งบอกเนื้อเรื่องชัดเจน ผู้เล่นต้องคอยปะติดปะต่อเนื้อเรื่องจากสภาพแวดล้อมและสิ่งที่เกิดขึ้นภายในโลกของเกมเหล่านั้นด้วยตนเอง ซึ่ง Elden Ring นั้นขึ้นชื่อว่าเป็นเกมที่ยากมากจนแม้กระทั่งผู้เล่นที่ใช้ controller ปกติยังสามารถจบเกมได้ยาก แต่ถึงกระนั้นก็ยังมีเหล่า “ผู้มัวหมอง” (ชื่อเรียกของผู้เล่นในเกม) หลายท่านที่ท้าทายขีดจำกัดของเกมด้วยการใช้อุปกรณ์แปลกๆมาใช้แทน controller …