ระบบควบคุมวัตถุเสมือน Augmented reality object manipulation system อาจารย์ที่ปรึกษา ผศ.ดร.อรรถวิทย์ สุดแสง อาจารย์ ดร.นัทที นิภานันท์ ผู้จัดทำ นายดิษพงศ์ ธชทรงธรรม ID. 5030167521 นายคมกรณ์ อัศวเมฆี ID. 5031011421
System in brief
ภาพรวมงานในปัจจุบัน Structure planning Structure planning Hand feature extraction Hand feature extraction Stereo vision Stereo vision Physic engine Integration 3D Position Filter 3D Position Filter + Environment + บอกว่าทำอันไหนไปบ้าง Physic engine
Title สรุปความก้าวหน้า
Stereo vision งานที่ทำไปแล้ว งานที่ทำไปแล้ว Epipolar geometry
Stereo vision งานที่ทำไปแล้ว Correspondence problem
Stereo vision งานที่ทำไปแล้ว Reconstruction Triangulation
Camera calibration งานที่ทำไปแล้ว Intrinsic matrix Distortion matrix
งานที่ทำไปแล้ว Hand Segmentation Fast Hand Feature Extraction Based on Connected Component Labeling, Distance Transform and Hough Transform
Too complex
วิธีใหม่ที่จะใช้ ใช้ Marker ติดที่ปลายนิ้วทั้งห้า แล้ว detect หา marker แทนการหามือ เพื่อลด Noise ที่เกิดขึ้นเนื่องจากฉากหลัง จึงกำหนดให้สีของ Marker แตกต่างจากสีของฉากหลัง
วิธีใหม่ที่จะใช้ Smooth ภาพ เพื่อให้สามารถ detect ส่วนที่ต้องการของภาพได้ง่ายขึ้น เปลี่ยนระบบการเก็บข้อมูลภาพ จากระบบสี RGB เป็นระบบสี HSV
วิธีใหม่ที่จะใช้ ตรวจสอบค่าในแต่ละ pixel ว่ามีค่าอยู่ในช่วงที่ต้องการหรือไม่ บันทึกค่าลงใน frame ที่สร้างขึ้นใหม่ โดยถ้า pixel นั้นอยู่ในช่วงที่ต้องการบันทึกสีขาว ถ้าอยู่นอกช่วงที่ต้องการ บันทึกสีดำ
งานที่กำลังทำอยู่ หา Connected Component Algorithms เพื่อให้รู้ว่าส่วนใดเป็น Noise หรือส่วนใดเป็น Marker ที่ต้องการ Algorithms Two-pass
การหาจุดแทน Connected Component โดยสามารถทำได้ 2 วิธี สร้างสี่เหลี่ยมล้อมรอบ Marker และเลือกจุดศูนย์กลางของสี่เหลี่ยม หาจุด Centroid ของ Connected Component
Stereo function In OpenCV งานที่กำลังทำอยู่ งานที่กำลังทำอยู่
งานที่จะทำในอนาคต งานที่จะทำในอนาคต Integrated 3D Position Program structure planning Calibrate with Matlab Find preferred camera property 3D Position Physic engine User interface Integrated
Title ปัญหา และ แผนงาน
ปัญหาในการทำงาน การใช้งาน C++ ความคุ้นเคยในการใช้งาน OpenCV Complex Algorithm
Gantt chart