| ภาพอินพุตสามารถเก็บรายละเอียดไว้ได้มากขึ้น โดยเฉพาะข้อความเล็ก UI ซับซ้อน และเอกสารที่มีข้อมูลหนาแน่น. |
| เจาะกลุ่ม screenshot, artifact และเอกสาร | Anthropic ระบุว่าการเพิ่มความละเอียดนี้สำคัญเป็นพิเศษสำหรับ computer use และการทำความเข้าใจ screenshot, artifacts และ documents. | นี่ไม่ใช่แค่การปรับปรุงภาพทั่วไป แต่ตรงกับงานที่ต้องอ่านหน้าจอและเอกสารที่มีรายละเอียดมาก. |
| Low-level perception | Anthropic ระบุการปรับปรุงงานอย่างการชี้ตำแหน่ง การวัด การนับ และงานลักษณะใกล้เคียง. | มีประโยชน์เมื่อถามถึงตำแหน่ง จำนวน หรือรายละเอียดเล็ก ๆ ในภาพและภาพหน้าจอ. |
| Image localization | Opus 4.7 ถูกอธิบายว่าดีขึ้นด้านการระบุตำแหน่งในภาพ รวมถึง bounding box และการตรวจจับวัตถุในภาพธรรมชาติ. | เหมาะกับงานที่ต้องหาปุ่ม ช่องกรอกข้อมูล กราฟ หรือวัตถุเฉพาะในภาพ. |
| พิกัด 1:1 กับพิกเซลจริง | พิกัดที่โมเดลส่งกลับตอนนี้เป็น 1:1 กับพิกเซลจริงของภาพ. | ลดภาระการคำนวณสเกลเองเมื่อต้องนำพิกัดจากคำตอบของโมเดลไปแมปกับภาพต้นฉบับ โดยเฉพาะงาน automation และ computer use. |
หัวใจของการอัปเกรดคือ Opus 4.7 สามารถรับภาพที่มีขีดจำกัดสูงกว่าเดิมได้ หากก่อนหน้านี้ภาพหน้าจอหรือภาพเอกสารต้องถูกย่อมากเพื่อให้เข้าเงื่อนไขอินพุต ข้อความเล็กและรายละเอียดในอินเทอร์เฟซอาจหายไปก่อนที่โมเดลจะได้วิเคราะห์จริง ด้วยเพดาน 2576 px / 3.75 MP ภาพจึงมีโอกาสรักษารายละเอียดเชิงสายตาไว้ได้มากกว่าในรอบการวิเคราะห์เดียว.
อย่างไรก็ตาม ควรตีความอย่างระมัดระวัง: นี่คือการเพิ่มปริมาณข้อมูลภาพที่โมเดลสามารถรับได้ ไม่ใช่คำรับประกันว่าภาพเบลอ ภาพถูกบีบอัดหนัก หรือเอกสารต้นฉบับคุณภาพต่ำจะอ่านได้ถูกต้องเสมอ ประโยชน์จะเด่นที่สุดเมื่อภาพต้นทางคมชัดอยู่แล้ว แต่มีรายละเอียดมากเกินกว่าขีดจำกัดเดิม.
ภาพหน้าจอมักมีองค์ประกอบเล็ก ๆ อยู่ติดกันจำนวนมาก เช่น ปุ่ม เมนู ไอคอน ช่องกรอกข้อมูล ตาราง ข้อความแจ้งเตือน แผงด้านข้าง หรือป้ายกำกับกราฟ Anthropic ระบุชัดว่า high-resolution image support ของ Opus 4.7 มีความสำคัญเป็นพิเศษต่อ computer use และการทำความเข้าใจ screenshot.
สำหรับงาน automation สิ่งที่สำคัญไม่แพ้ความละเอียดคือพิกัดที่เป็น 1:1 กับพิกเซลจริงของภาพ. ใน workflow ที่ต้องคลิก ลาก ตรวจตำแหน่ง หรือกำหนดพื้นที่บนภาพหน้าจอ จุดนี้ช่วยให้การนำพิกัดจากโมเดลไปใช้กับภาพต้นฉบับตรงไปตรงมาขึ้น แทนที่จะต้องคำนวณตัวคูณสเกลหลังจากภาพถูกย่อหรือปรับขนาด.
เอกสารและสไลด์ไม่ได้มีแค่ข้อความยาว ๆ แต่ยังมีตาราง กราฟ คำอธิบายย่อย ป้ายแกน หัวกระดาษ ท้ายกระดาษ และคอลัมน์หลายชุด Anthropic จัด documents และ artifacts ไว้ในกลุ่มเนื้อหาที่ได้ประโยชน์จากการอัปเกรด Vision ของ Opus 4.7.
หน้า Claude Opus 4.7 ของ Anthropic ยังวางโมเดลนี้ไว้ในบริบทของการปรับปรุงด้าน vision และผลงานเชิงมืออาชีพอย่าง interfaces, slides และ docs. ดังนั้น หาก workflow ของคุณต้องอ่านสไลด์จากภาพหน้าจอ วิเคราะห์เลย์เอาต์เอกสาร หรือตรวจเนื้อหาในภาพเอกสาร การอัปเกรดนี้ควรถูกทดสอบกับข้อมูลจริงของคุณ ไม่ใช่ดูจากภาพตัวอย่างเพียงไม่กี่ภาพ.
อีกส่วนสำคัญของ Vision ใน Opus 4.7 คือความสามารถด้านการระบุตำแหน่งในภาพที่ดีขึ้น Anthropic กล่าวถึงความสามารถอย่าง bounding box การตรวจจับวัตถุในภาพธรรมชาติ รวมถึงงาน perception ระดับรายละเอียด เช่น การชี้ตำแหน่ง การวัด และการนับ.
ในภาพหน้าจอและเอกสาร การรู้ตำแหน่งมักสำคัญพอ ๆ กับการอ่านข้อความออก ตัวอย่างเช่น ไม่ใช่แค่รู้ว่ามีปุ่มหนึ่งอยู่ในอินเทอร์เฟซ แต่ต้องรู้ว่าปุ่มนั้นอยู่ตรงไหน หรือไม่ใช่แค่เห็นกราฟ แต่ต้องระบุพื้นที่กราฟหรือจุดข้อมูลที่ต้องการได้ สถานการณ์แบบนี้สอดคล้องกับทิศทางการอัปเกรดที่ Anthropic อธิบายสำหรับ Opus 4.7.
แหล่งข้อมูลทางการที่ใช้ในบทความนี้ไม่ได้ให้ benchmark แยกเฉพาะว่า OCR สำหรับภาพหน้าจอหรือเอกสารดีขึ้นกี่เปอร์เซ็นต์. ดังนั้นถ้าจะพูดให้แม่นกว่า ควรบอกว่า Vision ของ Opus 4.7 ได้รับการอัปเกรดผ่านการรองรับภาพความละเอียดสูงขึ้น การปรับปรุง perception และ localization และ Anthropic ระบุว่าสิ่งนี้สำคัญกับ screenshot, artifact และเอกสาร.
พูดอีกแบบคือ มีเหตุผลที่จะคาดหวังว่า Opus 4.7 จะรับมือกับภาพที่รายละเอียดแน่นได้ดีขึ้นเมื่อความละเอียดเป็นคอขวด แต่ยังไม่มีตัวเลขสาธารณะที่ละเอียดพอให้สรุปว่า OCR จะดีขึ้นในอัตราคงที่สำหรับภาพหน้าจอหรือเอกสารทุกประเภท.
ถ้าคุณกำลังพิจารณาใช้ Opus 4.7 ในผลิตภัณฑ์หรือกระบวนการภายใน ควรทดสอบเป็นชุดงาน ไม่ใช่ถามจากภาพตัวอย่างไม่กี่ภาพเท่านั้น:
การอัปเกรด Vision ของ Claude Opus 4.7 มีค่ามากที่สุดเมื่อภาพมีรายละเอียดเล็กจำนวนมาก หรือเมื่อแอปพลิเคชันต้องระบุตำแหน่งในภาพอย่างแม่นยำ สามจุดที่ควรจำคือ ขีดจำกัดภาพเพิ่มเป็น 2576 px / 3.75 MP, ความสามารถ perception/localization ดีขึ้น และพิกัดที่ส่งกลับเป็น 1:1 กับพิกเซลจริงของภาพ.
นี่เป็นการปรับปรุงที่ชัดเจนสำหรับภาพหน้าจอ เอกสาร artifact และงาน computer use แต่ถ้าเป้าหมายคือ OCR เอกสารในระดับผลิตภัณฑ์ ก็ควร benchmark กับข้อมูลจริงของคุณเอง แทนที่จะสรุปเป็นเปอร์เซ็นต์ตายตัวจากตัวเลขความละเอียดเพียงอย่างเดียว.