AI & MACHINE LEARNING

เจาะลึก Gemini Robotics ER 2: สมองกลสำหรับหุ่นยนต์ที่เข้าใจวิดีโอและวางแผนงานได้แบบเรียลไทม์

Google DeepMind30 Jul 2026
1 min read
Key Takeaways
  • ER 2 คือระบบวางแผนที่ช่วยให้หุ่นยนต์ฉลาดพอที่จะตรวจสอบความคืบหน้าของงานผ่านวิดีโอได้แม่นยำ และทำงานร่วมกับหุ่นยนต์ตัวอื่นได้แบบเรียลไทม์

ทำไมเรื่องนี้ถึงสำคัญ

โมเดลนี้แก้ปัญหาใหญ่ของหุ่นยนต์ในเรื่อง 'การรับรู้เรื่องเวลา' (Temporal Intelligence) ทำให้หุ่นยนต์ไม่ได้เพียงแค่ทำตามคำสั่ง แต่เข้าใจว่ากำลังทำอะไรอยู่ถึงขั้นตอนไหน และรู้ว่าเมื่อไหร่ควรจะหยุดหรือเริ่มขั้นตอนต่อไป

Gemini Robotics ER 2 (Embodied Reasoning) ถูกออกแบบมาเพื่อทำหน้าที่เป็น 'สมองส่วนบน' ของหุ่นยนต์ โดยเน้นการวิเคราะห์ภาพวิดีโอแบบต่อเนื่องเพื่อติดตามความคืบหน้าของงานในระดับวินาที โมเดลนี้สามารถตัดสินใจได้ว่างานแต่ละขั้นตอนเสร็จสิ้นสมบูรณ์หรือไม่ และสามารถแก้ไขสถานการณ์เฉพาะหน้าได้ทันทีหากเกิดข้อผิดพลาด เช่น การทำของตกหรือการจัดวางผิดตำแหน่ง

จุดเด่นสำคัญคือการลดการหยุดคิด (latency) ผ่าน Gemini Live API ทำให้หุ่นยนต์ทำงานได้อย่างลื่นไหลต่อเนื่อง นอกจากนี้ยังรองรับการทำงานร่วมกันระหว่างหุ่นยนต์ต่างสายพันธุ์ (Multi-robot collaboration) โดยใช้ความเข้าใจเชิงความหมายร่วมกัน (Shared semantic understanding) เพื่อส่งต่องานและทำงานในพื้นที่เดียวกันได้อย่างมีประสิทธิภาพ

สรุปประเด็นหลัก

ระบบติดตามความคืบหน้างาน (Progress Classification) ด้วยความแม่นยำสูงจากการวิเคราะห์วิดีโอ

รองรับ Multi-robot collaboration ให้หุ่นยนต์ต่างประเภททำงานสอดประสานกันได้

ผสานการทำงานกับ Gemini Live API เพื่อการตัดสินใจที่รวดเร็วแบบ Low Latency

นวัตกรรมและเทคโนโลยี

vision

Temporal Intelligence

ความสามารถในการระบุช่วงเวลาที่สำคัญในวิดีโอ (Moment-finding) และจัดระดับความคืบหน้าของงานเพื่อการทำงานที่แม่นยำ

developer tools

Tool Orchestration

การสั่งการโมเดลระดับล่าง (VLA) หรือ API ภายนอก เช่น Google Search เพื่อช่วยในการวางแผนและปฏิบัติงาน

research

Enhanced Spatial Reasoning

การอ่านค่าจากมาตรวัดและหน้าจอดิจิทัลแบบต่างๆ รวมถึงการตรวจจับความล้มเหลวระหว่างการทำงานผ่านวิดีโอ

Developer Impact
นักพัฒนา AI และวิศวกรระบบสามารถใช้ Gemini API และ Google AI Studio ในการสร้าง Physical AI Agents ที่มีความซับซ้อนสูง โดยอาศัยความสามารถในการสตรีมข้อมูลวิดีโอและเสียงเพื่อการประมวลผลแบบเรียลไทม์
Keywords
#gemini robotics er 2 #embodied reasoning #video understanding #robot collaboration #google ai studio
Original Source

อ่านข้อมูลเพิ่มเติมจากแหล่งข่าวหลัก

Google DeepMind