Codex ควบคุมแอปบน macOS ได้แม้ Mac ถูกล็อก ด้วยฟีเจอร์ Remote Computer Use

ใช้งานแอปได้แม้ Mac ถูกล็อก

การอัปเดตล่าสุด (ประกาศในช่วงเดือนพฤษภาคม) เพิ่มความสามารถสำคัญคือ Codex สามารถใช้แอปบน macOS ต่อไปได้แม้เครื่องถูกล็อก และผู้ใช้ยังสามารถควบคุมงานจากมือถือผ่าน Codex Mobile ได้ด้วย

ในอดีต ระบบ AI ที่ควบคุมคอมพิวเตอร์มักต้องมีเงื่อนไขดังนี้

• เครื่องต้องไม่ถูกล็อก
• หน้าจอต้องเปิดอยู่
• agent ต้องมองเห็นหน้าจอแบบเรียลไทม์

ฟีเจอร์ใหม่นี้จึงช่วยให้ AI ทำงานอัตโนมัติระยะยาวได้ เช่น รันงานทดสอบซอฟต์แวร์หรือ workflow เป็นชั่วโมงหรือเป็นวันโดยไม่ต้องเปิดหน้าจอทิ้งไว้

อย่างไรก็ตาม เอกสารที่เผยแพร่สาธารณะยัง ไม่ได้อธิบายกลไกภายใน ที่ทำให้ AI ควบคุมอินพุตและมองเห็นบริบทของแอปเมื่อหน้าจอดับหรือเครื่องล็อก

วิธีเปิดใช้งาน Remote Computer Use

ผู้ใช้สามารถเปิดใช้งานผ่านแอป Codex บน Mac ตามขั้นตอนหลักดังนี้

1. ติดตั้ง Computer Use plugin

ในแอป Codex

• เปิด Settings (Cmd + ,)
• ไปที่เมนู Computer Use
• กด Install เพื่อติดตั้งปลั๊กอิน

2. อนุญาตสิทธิ์ macOS

macOS จะขอสิทธิ์ระดับระบบ ซึ่งผู้ใช้ต้องอนุญาต ได้แก่

• Screen Recording เพื่อให้ Codex มองเห็นหน้าจอแอป
• Accessibility เพื่อให้ Codex ควบคุม UI เช่น คลิกหรือพิมพ์

สิทธิ์สองรายการนี้เป็นกลไกมาตรฐานของ macOS สำหรับซอฟต์แวร์ที่ต้องควบคุมอินเทอร์เฟซของระบบ

3. ตั้งค่าการควบคุมระยะไกลจากมือถือ

หากต้องการควบคุมงานจากอุปกรณ์อื่น

• เริ่มขั้นตอนเชื่อมต่อในแอป Codex บน Mac
• เลือกเชื่อมต่อกับอุปกรณ์มือถือ
• สแกน QR code ผ่านแอป ChatGPT บนมือถือเพื่อจับคู่

หลังเชื่อมต่อแล้ว ผู้ใช้สามารถเริ่มงาน ตรวจสอบสถานะ หรืออนุมัติขั้นตอนต่าง ๆ จากมือถือได้ ขณะที่ Mac ทำงานอัตโนมัติอยู่เบื้องหลัง

ระบบความปลอดภัยที่ OpenAI ใส่มา

การให้ AI ควบคุมคอมพิวเตอร์มีความเสี่ยง OpenAI จึงเพิ่มกลไกความปลอดภัยหลายชั้น

Sandbox ของระบบปฏิบัติการ

Codex ทำงานภายใน OS‑enforced sandbox ที่จำกัดสิ่งที่ agent เข้าถึงได้ เช่น ไฟล์หรือพื้นที่ทำงานบางส่วนเท่านั้น

Approval policy

มีนโยบายที่กำหนดว่าเมื่อใด agent ต้อง หยุดและขออนุญาตผู้ใช้ ก่อนดำเนินการต่อ เช่น การทำงานที่มีความเสี่ยงสูง

ปิด network access เป็นค่าเริ่มต้น

ตามค่าเริ่มต้น Codex จะ ไม่มีสิทธิ์เชื่อมต่อเครือข่าย จนกว่าผู้ใช้จะเปิดใช้งานเอง เพื่อลดความเสี่ยงจากการเชื่อมต่อภายนอกโดยไม่ตั้งใจ

การอนุญาตแอปแบบชัดเจน

macOS จะถามสิทธิ์ Screen Recording และ Accessibility ก่อนใช้งาน และบางกรณีผู้ใช้ต้องอนุญาตแต่ละแอปก่อนที่ Codex จะควบคุมได้

ข้อจำกัดด้านภูมิภาค

ในช่วงเปิดตัว ฟีเจอร์ Computer Use ใช้งานได้เฉพาะ macOS และยังไม่เปิดให้ใช้ในบางภูมิภาค ได้แก่

• European Economic Area (EEA)
• สหราชอาณาจักร (UK)
• สวิตเซอร์แลนด์

OpenAI ยังไม่ได้อธิบายเหตุผลอย่างละเอียด แต่การเปิดตัวแบบจำกัดภูมิภาคมักเกี่ยวข้องกับกฎระเบียบหรือข้อกำหนดด้านความปลอดภัยข้อมูล

ฟีเจอร์ใหม่อื่นที่เปิดตัวพร้อมกัน

อัปเดตเดียวกันยังเพิ่มเครื่องมือใหม่หลายอย่างให้ Codex

Goal Mode

Goal Mode ช่วยให้ Codex ทำงานตามเป้าหมายระยะยาว เช่น งานที่ใช้เวลาหลายชั่วโมงหรือหลายวัน ผู้ใช้สามารถเริ่มได้ด้วยคำสั่ง /goal ในอินเทอร์เฟซ Codex

Appshots

Appshots เป็นฟีเจอร์ที่ช่วยส่งบริบทจากแอปอื่นให้ Codex อย่างรวดเร็ว

เมื่อกด Command + Command ระบบจะส่ง

• ภาพหน้าจอของหน้าต่างแอป
• ข้อความที่ดึงออกจากอินเทอร์เฟซ

วิธีนี้ทำให้ Codex เข้าใจสิ่งที่กำลังเกิดขึ้นในแอปอื่นโดยไม่ต้องคัดลอกหรืออธิบายด้วยตนเอง

สิ่งที่ยังไม่ชัดเจน

แม้ฟีเจอร์จะทรงพลัง แต่ยังมีหลายประเด็นที่เอกสารสาธารณะไม่ได้อธิบาย เช่น

• วิธีทางเทคนิคที่ทำให้ Codex ควบคุมแอปได้เมื่อ Mac ถูกล็อก
• โครงสร้างภายในที่รักษาบริบทของหน้าจอและอินพุตในสถานะนั้น
• การประเมินความเสี่ยงเชิงลึกจากนักวิจัยความปลอดภัยภายนอก

เอกสารปัจจุบันยืนยันเพียงว่าฟีเจอร์นี้มีอยู่และอธิบายวิธีตั้งค่าเท่านั้น

ทำไมฟีเจอร์นี้ถึงสำคัญ

Remote Computer Use เป็นสัญญาณว่าซอฟต์แวร์กำลังเปลี่ยนจาก AI ที่ตอบคำถาม ไปสู่ AI agent ที่ทำงานแทนผู้ใช้จริง ภายในระบบคอมพิวเตอร์

แทนที่จะเพียงขอคำแนะนำ ผู้ใช้สามารถให้ AI เปิดแอป รันขั้นตอน ทดสอบอินเทอร์เฟซ หรือทำงานอัตโนมัติในพื้นหลังได้ต่อเนื่อง และเมื่อรวมกับความสามารถอย่าง Goal Mode ก็ทำให้ Codex สามารถติดตามงานระยะยาวได้เหมือนผู้ช่วยซอฟต์แวร์อัตโนมัติเต็มรูปแบบ