การสร้างโครงสร้างตัวต่อจากโมเดล 3D ด้วย AI นั้นมีความซับซ้อนมากกว่าการสร้างภาพทั่วไป เพราะต้องคำนึงถึงข้อจำกัดของชิ้นส่วนและความมั่นคงทางกายภาพ งานวิจัยนี้นำเสนอ BrickAnything เฟรมเวิร์กที่ใช้เทคนิค autoregressive และการแปลงข้อมูลเป็นโทเค็นแบบ Tree Tokenization ที่เน้นความสัมพันธ์เชิงโครงสร้าง เพื่อให้การสร้างตัวต่อเป็นไปในทิศทางเดียวกับการประกอบจริงในโลกกายภาพ
ระบบนี้ใช้ Point Cloud เป็นตัวกลางในการรับข้อมูลรูปทรง และใช้กระบวนการที่เรียกว่า adaptive rollback ร่วมกับการถอดรหัสที่ควบคุมด้วยเงื่อนไขความถูกต้อง เพื่อลดสถานะที่ประกอบไม่ได้และเพิ่มความแข็งแรงของโครงสร้าง ผลการทดสอบแสดงให้เห็นว่า BrickAnything สามารถสร้างโมเดลตัวต่อที่แม่นยำตามรูปทรงต้นฉบับและมีความเสถียรพอที่จะประกอบได้จริง ซึ่งดีกว่าวิธีการเดิมๆ ที่มักจะสร้างโครงสร้างที่รับน้ำหนักไม่ได้หรือมีชิ้นส่วนลอยตัว