หลุดโลกอีกแล้ว! Apple เปิดตัว Spatial Reframing เครื่องมือ AI ปรับมุมมองและองค์ประกอบภาพหลังจากถ่ายไปแล้ว

Spatial Reframing ทำงานอย่างไร?

Spatial Reframing ต่อยอดจากการลงทุนอย่างหนักของ Apple ในด้าน Spatial Computing หรือการประมวลผลเชิงพื้นที่ โดยเฉพาะเทคโนโลยีที่พัฒนาขึ้นสำหรับ Apple Vision Pro เพื่อทำความเข้าใจว่าวัตถุต่างๆ อยู่ในตำแหน่งสามมิติอย่างไรเมื่อเทียบกับสิ่งแวดล้อมรอบตัว

เมื่อคุณเปิดใช้งานเครื่องมือนี้ในโหมดแก้ไขภาพ คุณสามารถแตะและลากนิ้วไปบนรูปภาพเพื่อหามุมมองใหม่ที่คุณพอใจ เมื่อคุณเปลี่ยนมุมมอง ภาพจะแพนไปมาราวกับว่ามันเป็นฉาก 3 มิติ ฟีเจอร์นี้ไม่ได้จำกัดอยู่แค่รูปที่ถ่ายด้วยกล้องที่รองรับการถ่ายภาพเชิงมิติ แต่มันทำงานได้กับภาพทุกรูปในคลังของคุณ รวมถึงภาพจากกล้องรุ่นเก่าหรือแม้กระทั่งจากกล้องของค่ายอื่น

เพราะในมุมมองใหม่จะเผยให้เห็น "ช่องว่าง" ที่ไม่เคยปรากฏในภาพสองมิติเดิม AI แบบ Generative ของ Apple จึงก้าวเข้ามาทำหน้าที่ต่อ ในงานนำเสนอ Apple ย้ำว่าโมเดลนี้ทำงานร่วมกันระหว่างการประมวลผลบนอุปกรณ์และระบบ Private Cloud Compute (PCC) โดย "จะสร้างเนื้อหาใหม่เฉพาะเพื่อเติมเต็มช่องว่างที่เกิดขึ้นจากการเปลี่ยนมุมมองเท่านั้น"

ที่สำคัญ เนื้อหาที่ถูกเติมเต็มนี้ไม่ได้ถูกปะติดปะต่อเข้ามาแบบลอยๆ ด้วยพื้นผิวที่คมกริบเกินจริง เพื่อให้ภาพที่ได้ดูเป็นธรรมชาติโดยไม่ผ่านการตกแต่งจนเว่อร์ Apple ได้ใส่เอฟเฟกต์ความเบลอตามระยะชัดลึกที่เป็นธรรมชาติลงไปในส่วนที่ AI สร้างขึ้น เลียนแบบการทำงานของเลนส์ที่จะเรนเดอร์ส่วนนั้นๆ ของฉากออกมา ภาพต้นฉบับที่ถ่ายไว้จะถูกเก็บรักษาไว้เสมอ และการแก้ไขทั้งหมดเป็นแบบไม่ทำลายข้อมูลเดิม

สถาปัตยกรรมความเป็นส่วนตัวและความโปร่งใส

ความท้าทายทางเทคนิคของการเปลี่ยนมุมมองของภาพถ่ายนั้นมีอยู่ไม่น้อย Apple จึงใช้แนวทางแบบลำดับชั้นเพื่อปกป้องความเป็นส่วนตัวของผู้ใช้ในระหว่างการประมวลผล การปรับมุมมองแบบง่ายๆ จะทำงานทั้งหมดบนอุปกรณ์โดยใช้ Foundation Models ของ Apple

สำหรับการปรับเปลี่ยนที่ซับซ้อนขึ้นในเชิงการคำนวณ คำขอจะถูกส่งไปยัง Private Cloud Compute ในสถาปัตยกรรมของ Apple ข้อมูลที่ถูกประมวลผลบนเซิร์ฟเวอร์ PCC นั้นเป็นข้อมูลชั่วคราว มันจะถูกใช้เฉพาะในช่วงเวลาที่ประมวลผลเท่านั้นและจะถูก "ระเหยหายไป" หลังจากนั้น โดยไม่ถูกจัดเก็บหรือเข้าถึงได้โดยใคร รวมถึง Apple เอง

รูปภาพทุกรูปที่ถูกปรับแต่งด้วยเครื่องมือ Apple Intelligence ไม่ว่าจะเป็นการปรับมุมมองเชิงมิติ การขยายขอบภาพ หรือการลบวัตถุที่ไม่ต้องการ จะได้รับการฝังลายน้ำ SynthID ที่มองไม่เห็นโดยอัตโนมัติ มาร์กเกอร์ดิจิทัลนี้พัฒนาขึ้นโดยใช้เทคโนโลยีของ Google DeepMind และถูกซ่อนอยู่ในภาพอย่างแนบเนียน โดยมีเป้าหมายเพื่อระบุว่ารูปภาพนี้ได้รับการดัดแปลงโดยใช้ AI แบบ Generative โดยไม่กระทบต่อคุณภาพของรูป

ชุดเครื่องมือจัดการรูปภาพเต็มรูปแบบใน iOS 27

Spatial Reframing เป็นพระเอกของงาน แต่จริงๆ แล้วมันเป็นส่วนหนึ่งของสามสหายอัปเกรดสำหรับแอป Photos บน iOS 27, iPadOS 27 และ macOS 27 (โค้ดเนม "Golden Gate") อีกสองเครื่องมือคือ :

• Extend: ฟีเจอร์ Generative Outpainting หรือการขยายขอบภาพออกไปจากกรอบเดิม โดยเพิ่มเนื้อหาที่สร้างโดย AI เช่น ขยายท้องฟ้า ภูมิทัศน์ หรือพื้นหลัง เพื่อให้จัดองค์ประกอบภาพได้ดีขึ้น
• Clean Up (อัปเกรด): เครื่องมือลบวัตถุที่ไม่ต้องการเวอร์ชันปรับปรุงใหม่ ที่ปัจจุบันจัดการกับฉากที่ซับซ้อนและมีรายละเอียดมากได้ดีขึ้น และให้ผลลัพธ์ที่สมจริงยิ่งขึ้นเมื่อลบสิ่งของหรือคนแปลกหน้าที่ไม่ต้องการออกไป

กำหนดการเปิดให้ใช้งาน

เวอร์ชันเบต้าสำหรับนักพัฒนาของ iOS 27, iPadOS 27 และ macOS 27 ถูกปล่อยออกมาทันทีหลังจากงาน Keynote ในวันที่ 8 มิถุนายน 2026 ฟีเจอร์เหล่านี้จะถูกปล่อยให้ผู้ใช้ทั่วไปได้ใช้งานในช่วงฤดูใบไม้ร่วงนี้ ซึ่งคาดว่าจะเปิดตัวพร้อมกับ iPhone รุ่นถัดไป การเข้าใช้งานชุดเครื่องมือแก้ไขภาพใหม่ของ Apple Intelligence ต้องใช้ iPhone 16 ขึ้นไป หรือ iPad หรือ Mac ที่ใช้ Apple Silicon