ความต้องการข้อมูลวิดีโอมุมมองบุคคลที่หนึ่ง (Egocentric) เพื่อพัฒนาปัญญาประดิษฐ์ในหุ่นยนต์กำลังเพิ่มสูงขึ้น โครงการ Open-AoE จึงเกิดขึ้นเพื่อเป็นชุดข้อมูลและเครื่องมือแบบเปิดสำหรับชุมชนนักพัฒนา โดยในเวอร์ชันแรกประกอบด้วยวิดีโอกว่า 2,000 ชั่วโมง ที่รวบรวมโดยอาสาสมัครกว่า 500 คน ผ่านสมาร์ทโฟนกว่า 400 เครื่องในสภาพแวดล้อมจริง
ชุดข้อมูลนี้ไม่เพียงแต่มีวิดีโอ แต่ยังรวมถึงคำบรรยาย (Text Annotations), ท่าทางของมือ (Hand Poses), เส้นทางการเคลื่อนที่ของกล้อง และการระบุขั้นตอนการทำงานย่อย นอกจากนี้ยังมีเครื่องมือ (Toolchain) ที่ช่วยให้นักพัฒนาสามารถนำข้อมูลไปประมวลผลต่อได้ง่าย ไม่ว่าจะเป็นการสร้างแบบจำลองมือ หรือการเตรียมข้อมูลสำหรับฝึกฝนโมเดล VLA และ World Models ซึ่งช่วยลดอุปสรรคและค่าใช้จ่ายในการสร้างหุ่นยนต์อัจฉริยะ
