องค์กรควรเพิ่มอำนาจให้เอเจนต์ AI ทีละขั้น เมื่อพิสูจน์ได้ว่ามีผู้รับผิดชอบชัดเจน จำกัดการเข้าถึง มีจุดอนุมัติจากคน และตรวจสอบการกระทำย้อนหลังได้ แซนด์บ็อกซ์ของรัฐบาลสิงคโปร์และ Google ซึ่งทดลองราว 4 เดือน แสดงให้เห็นโอกาสในงานทดสอบซอฟต์แวร์ ความปลอดภัยของแชตบอต และการยื่นขอความช่วยเหลือทางสังคม แต่ไม่ได้รับรองว่าเอเ...
เผยแพร่โดยแก้ไขด้วย GPT-6 Lunaรูปภาพสร้างด้วย GPT Image 2
คำตอบการวิจัย

Create a landscape editorial hero image for this Studio Global article: How can enterprises in Singapore’s highly regulated business environment safely scale agentic AI from controlled experiments into accountabl. Article summary: Singapore enterprises should scale agentic AI through progressively earned autonomy, not by giving successful prototypes unrestricted production access. The recommended approach is to treat every agent as a controlled op. Topic tags: general, general web. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts with fake numbers, clic
เอเจนต์ AI ทำได้มากกว่าให้คำแนะนำ เพราะอาจแก้ไขข้อมูลลูกค้า เรียกใช้เครื่องมือ หรือดำเนินงานหลายขั้นตอนต่อเนื่องได้ สำหรับองค์กรในสิงคโปร์ แนวทางที่ปลอดภัยคือค่อย ๆ เพิ่มขอบเขตการทำงาน และทำเมื่อพิสูจน์ได้ว่ามีการกำหนดสิทธิ์ การกำกับดูแล และวิธีกู้คืนเมื่อเกิดปัญหาอย่างชัดเจน กรอบกำกับดูแลของสิงคโปร์ช่วยวางหลักคิด ส่วนแนวทางด้านปฏิบัติการต่อไปนี้ช่วยแปลงหลักการให้เป็นขั้นตอนที่นำไปใช้ได้ 10
11
AI Agents Sandbox ของสิงคโปร์ ซึ่ง Google ทำร่วมกับ CSA, GovTech Singapore และ IMDA ทดลองใช้เอเจนต์กับงานประกันคุณภาพซอฟต์แวร์อัตโนมัติ การทดสอบความปลอดภัยของแชตบอต และการช่วยดำเนินการสมัครขอความช่วยเหลือทางสังคม เป็นเวลาประมาณ 4 เดือน การทดลองแสดงให้เห็นโอกาสในการใช้งาน แต่ก็ชี้ถึงประเด็นเรื่องการกำกับดูแล ความมั่นคงปลอดภัยไซเบอร์ ความเป็นส่วนตัว และธรรมาภิบาลด้วย นี่คือการทดลองในสภาพแวดล้อมที่ควบคุม ไม่ใช่การรับรองว่าเอเจนต์พร้อมใช้งานกับทุกระบบของทุกองค์กร 4
12
แรงผลักดันให้ขยายการใช้งานมีอยู่จริง Deloitte รายงานว่า 72% ของธุรกิจในสิงคโปร์วางแผนนำ Agentic AI ไปใช้ในหลายส่วนของการดำเนินงานภายใน 2 ปี เพิ่มจาก 15% ในช่วงเวลาที่จัดทำรายงาน ขณะที่ผลสำรวจระดับโลกอีกชุดพบว่า 21% ของบริษัทที่สำรวจมีระบบกำกับดูแล Agentic AI ที่成熟แล้ว ตัวเลข 21% นี้เป็นข้อมูลระดับโลก ไม่ใช่อัตราเฉพาะของสิงคโปร์ 24
26
กรอบ Model AI Governance Framework for Agentic AI ของสิงคโปร์จัดแนวทางไว้ 4 ด้าน ได้แก่ ประเมินและจำกัดความเสี่ยงตั้งแต่ต้น ทำให้มนุษย์มีความรับผิดชอบอย่างมีความหมาย วางมาตรการทางเทคนิคตลอดวงจรการใช้งาน และส่งเสริมการใช้งานอย่างรับผิดชอบ กรอบนี้เป็นพื้นฐานสำหรับการกำกับดูแล ไม่ใช่หลักฐานว่าระบบใดระบบหนึ่งปลอดภัยโดยไม่ต้องทดสอบในบริบทที่จะนำไปใช้จริง 10
11
ต้นแบบที่ทำงานได้ดีควรเป็นเหตุผลให้ประเมินขั้นต่อไป ไม่ใช่เหตุผลให้เปิดสิทธิ์ใช้งานจริงแบบไร้ขอบเขต แนวทางที่นำไปปรับใช้ได้อาจแบ่งเป็น 4 ระยะ:
กำหนดเกณฑ์ผ่านก่อนเลื่อนแต่ละระยะ โดยดูมากกว่าความสำเร็จของงาน เช่น มีการกระทำที่ไม่ได้รับอนุญาตหรือไม่ ข้อมูลรั่วไหลหรือไม่ เอเจนต์รับมือกับข้อมูลกำกวมอย่างไร คนเข้าควบคุมได้ผลแค่ไหน และกู้คืนจากความผิดพลาดได้หรือไม่ Agentic Testing Starter Kit ของสิงคโปร์เป็นแหล่งอ้างอิงที่ช่วยวางแนวทางทดสอบได้ แต่องค์กรยังต้องทดสอบเอเจนต์ เครื่องมือ และขั้นตอนการทำงานของตนเอง 1
36
ก่อนเชื่อมเอเจนต์เข้ากับข้อมูลลูกค้า งานการเงิน หรือฐานข้อมูลปฏิบัติการ ให้ระบุอำนาจของเอเจนต์เป็นรูปธรรม กำหนดว่าระบบ ระเบียน ช่องข้อมูล เครื่องมือ และปลายทางใดบ้างที่เข้าถึงได้ อนุญาตให้ทำอะไร และการกระทำใดต้องผ่านการอนุมัติ หากเหมาะกับงานนั้น ควรกำหนดเพดานมูลค่าธุรกรรม ความถี่ในการดำเนินการ และระยะเวลาที่อนุญาตให้ทำงานด้วย
การให้คนตรวจสอบมีประโยชน์ที่สุดเมื่อเป็นจุดคัดกรองก่อนเกิดการกระทำที่มีผลสำคัญ ไม่ใช่แค่ตรวจย้อนหลัง ผู้อนุมัติควรเห็นรายการเปลี่ยนแปลงที่เสนอ ระเบียนที่ได้รับผลกระทบ หลักฐานประกอบ และผลที่อาจตามมา การอนุมัติควรผูกกับการกระทำนั้นโดยเฉพาะ และต้องขออนุมัติใหม่หากข้อมูลหรือการกระทำเปลี่ยนไป
ควรบังคับใช้ข้อจำกัดเหล่านี้นอกตัวโมเดลด้วย เช่น ใช้ช่องทางควบคุมการเรียกใช้เครื่องมือเพื่อตรวจสอบตัวตน สิทธิ์ พารามิเตอร์ของคำสั่ง และข้อกำหนดก่อนส่งคำขอไปยังระบบธุรกิจ สำหรับงานการเงิน ให้แยกการเสนอธุรกรรมออกจากการอนุมัติและการดำเนินการจริง ส่วนการแก้ไขข้อมูลลูกค้า ควรเก็บทั้งค่าเดิมและค่าใหม่ พร้อมเหตุผลประกอบการเปลี่ยนแปลง
ระบบที่แยกส่วน แอปพลิเคชันเก่า เจ้าของข้อมูลหลายฝ่าย และเอกสารกำกวม ทำให้การใช้งานจริงซับซ้อนกว่าการสาธิตในแซนด์บ็อกซ์ ควรมีช่องทางเชื่อมต่อที่ผ่านการตรวจสอบระหว่างเอเจนต์กับระบบธุรกิจ และให้เจ้าของข้อมูลที่เกี่ยวข้องอนุมัติการเข้าถึง ตรวจสอบว่าระเบียนเป็นปัจจุบันและอยู่ในรูปแบบที่คาดไว้ หากพบข้อมูลขัดแย้งหรือไม่ชัดเจน ให้ส่งต่อให้คนพิจารณาแทนการปล่อยให้เอเจนต์คาดเดา
ให้ถือว่าอีเมล เอกสาร และเนื้อหาบนเว็บเป็นข้อมูลนำเข้าที่ไม่น่าเชื่อถือ การโจมตีแบบ prompt injection ทางอ้อมอาจซ่อนอยู่ในเนื้อหาที่เอเจนต์อ่าน ดังนั้นข้อมูลที่ค้นคืนมาไม่ควรเพิ่มสิทธิ์ใหม่หรือเขียนทับนโยบายการดำเนินการ ควรทดสอบก่อนเพิ่มสิทธิ์ว่าเอเจนต์ถูกหลอกให้ใช้เครื่องมือที่ไม่ได้อนุมัติหรือทำงานนอกขอบเขตได้หรือไม่ 35
43
นอกจากความผิดพลาดของโมเดลแล้ว ต้องเตรียมรับมือความขัดข้องในการปฏิบัติงานด้วย ทดสอบคำขอซ้ำ ระเบียนล้าสมัย ระบบขัดข้องบางส่วน และการแก้ไขข้อมูลพร้อมกัน ใช้การตรวจสอบความถูกต้องและการกระทบยอด พร้อมกำหนดวิธีหยุดการทำงานและกู้คืนหรือแก้ไขผลลัพธ์ มาตรการเหล่านี้เป็นแนวทางปฏิบัติที่แนะนำ โดยรายละเอียดควรปรับตามระบบและผลกระทบที่อาจเกิดจากความผิดพลาด
สำหรับการใช้งานในองค์กร อาจนิยามอธิปไตยข้อมูลในทางปฏิบัติว่า องค์กรสามารถแสดงให้เห็นได้ว่าข้อมูลสำคัญถูกส่งไปที่ใด ใครเข้าถึงได้ ถูกนำไปใช้อย่างไรหรือเก็บไว้นานเท่าใด และมีหลักฐานใดรองรับมาตรการเหล่านั้น การรู้เพียงที่ตั้งของเซิร์ฟเวอร์ยังไม่เพียงพอที่จะยืนยันว่าควบคุมข้อมูลได้ครบถ้วน
ทำแผนผังเส้นทางข้อมูลทั้งหมด ตั้งแต่การประมวลผลด้วยโมเดล การค้นคืนข้อมูล การสร้าง embeddings หน่วยความจำของเอเจนต์ ระบบประสานงาน ไปจนถึงบันทึกการทำงาน กำหนดว่าส่วนใดประมวลผลข้อมูลอ่อนไหวได้และภายใต้เงื่อนไขใด แยกการใช้งานเพื่อประมวลผลคำขอทั่วไปออกจากการเก็บความจำต่อเนื่อง การปรับแต่งโมเดล หรือการฝึกโมเดล และขออนุมัติอย่างชัดเจนก่อนเก็บข้อมูลหรือเรียนรู้เกินกว่าวัตถุประสงค์ที่กำหนด
เลือกโครงสร้างพื้นฐานจากมาตรการที่องค์กรตรวจสอบได้ เช่น การจำกัดสิทธิ์ การจัดการกุญแจเข้ารหัส การตั้งค่าการเก็บรักษาข้อมูล ข้อตกลงกับผู้ให้บริการ และเขตอำนาจศาล ไม่ควรสรุปเหมารวมว่าคลาวด์สาธารณะหรือระบบภายในองค์กรปลอดภัยกว่าเสมอไป สถาปัตยกรรมที่เหมาะสมขึ้นอยู่กับข้อมูล ภาระหน้าที่ และการประเมินความเสี่ยงขององค์กร
กำหนดเจ้าของงานฝั่งธุรกิจและผู้ดูแลระบบเทคนิคให้เอเจนต์ทุกตัวที่ใช้งานจริง ระบุเจ้าของข้อมูลและผู้อนุมัติที่รับผิดชอบสิทธิ์และการกระทำ พร้อมบันทึกว่าใครมีอำนาจหยุดหรือปิดระบบได้ บทบาทเหล่านี้ช่วยเปลี่ยนหลักความรับผิดชอบของมนุษย์ให้เป็นมาตรการที่สังเกตและตรวจสอบได้ สอดคล้องกับแนวทางที่เน้นการกำหนดความรับผิดชอบและมาตรการทางเทคนิคอย่างชัดเจน 10
11
เก็บบันทึกแบบมีเวอร์ชันของโมเดล พรอมป์ต์ เครื่องมือ สิทธิ์ และนโยบายที่ใช้อยู่ บันทึกตัวตนของเอเจนต์ แหล่งข้อมูลที่อ้างอิง การเรียกใช้เครื่องมือ การตรวจสอบตามนโยบาย การอนุมัติ และผลการดำเนินการ โดยป้องกันไม่ให้ผู้ไม่มีสิทธิ์แก้ไขบันทึกได้ ควรเก็บหลักฐานที่ใช้ประกอบการตัดสินใจและคำอธิบายที่กระชับไว้ด้วย แต่คำอธิบายที่โมเดลสร้างขึ้นเพียงอย่างเดียวไม่ใช่หลักฐานยืนยันกระบวนการภายในของโมเดล
ติดตามการเข้าถึงที่ผิดปกติ ปลายทางที่ไม่คาดหมาย อัตราความล้มเหลวที่เพิ่มขึ้น หรือความพยายามหลีกเลี่ยงการอนุมัติ กำหนดเกณฑ์ที่ทำให้ต้องหยุดระบบและให้คนตรวจสอบ ทดสอบซ้ำเมื่อมีการเปลี่ยนโมเดล เครื่องมือ แหล่งข้อมูล หรือสิทธิ์ และทบทวนเป็นระยะว่าเอเจนต์ยังเหมาะกับบทบาทที่ได้รับอนุมัติหรือไม่ Agentic Testing Starter Kit ช่วยเป็นแนวทางในการทดสอบ แต่ไม่ทดแทนการประเมินความพร้อมเฉพาะของแต่ละองค์กร 1
36
เกณฑ์ก่อนใช้งานจริงถามได้ตรงไปตรงมา: องค์กรแสดงให้เห็นได้หรือไม่ว่าเอเจนต์มีสิทธิ์เข้าถึงที่ได้รับอนุญาต ทำงานภายในขอบเขตที่กำหนด ถูกหยุดหรือแทรกแซงได้อย่างมีประสิทธิผล และทิ้งบันทึกที่ตรวจสอบย้อนหลังได้? ควรเพิ่มความเป็นอิสระให้เอเจนต์ต่อเมื่อคำตอบคือได้ แซนด์บ็อกซ์ช่วยแสดงศักยภาพ แต่การใช้งานจริงอย่างมีความรับผิดชอบต้องมีหลักฐานว่าควบคุมได้
Studio Global AI
หน้านี้รวมคำตอบที่ได้รับการสนับสนุนจากแหล่งที่มาซึ่งคุณสามารถดำเนินการต่อภายใน Studio Global
องค์กรควรเพิ่มอำนาจให้เอเจนต์ AI ทีละขั้น เมื่อพิสูจน์ได้ว่ามีผู้รับผิดชอบชัดเจน จำกัดการเข้าถึง มีจุดอนุมัติจากคน และตรวจสอบการกระทำย้อนหลังได้
องค์กรควรเพิ่มอำนาจให้เอเจนต์ AI ทีละขั้น เมื่อพิสูจน์ได้ว่ามีผู้รับผิดชอบชัดเจน จำกัดการเข้าถึง มีจุดอนุมัติจากคน และตรวจสอบการกระทำย้อนหลังได้ แซนด์บ็อกซ์ของรัฐบาลสิงคโปร์และ Google ซึ่งทดลองราว 4 เดือน แสดงให้เห็นโอกาสในงานทดสอบซอฟต์แวร์ ความปลอดภัยของแชตบอต และการยื่นขอความช่วยเหลือทางสังคม แต่ไม่ได้รับรองว่าเอเจนต์พร้อมทำงานกับทุกระบบจริง
องค์กรควรเพิ่มอำนาจให้เอเจนต์ AI ทีละขั้น เมื่อพิสูจน์ได้ว่ามีผู้รับผิดชอบชัดเจน จำกัดการเข้าถึง มีจุดอนุมัติจากคน และตรวจสอบการกระทำย้อนหลังได้ แซนด์บ็อกซ์ของรัฐบาลสิงคโปร์และ Google ซึ่งทดลองราว 4 เดือน แสดงให้เห็นโอกาสในงานทดสอบซอฟต์แวร์ ความปลอดภัยของแชตบอต และการยื่นขอความช่วยเหลือทางสังคม แต่ไม่ได้รับรองว่าเอเ...
เผยแพร่โดยแก้ไขด้วย GPT-6 Lunaรูปภาพสร้างด้วย GPT Image 2
คำตอบการวิจัย

Create a landscape editorial hero image for this Studio Global article: How can enterprises in Singapore’s highly regulated business environment safely scale agentic AI from controlled experiments into accountabl. Article summary: Singapore enterprises should scale agentic AI through progressively earned autonomy, not by giving successful prototypes unrestricted production access. The recommended approach is to treat every agent as a controlled op. Topic tags: general, general web. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts with fake numbers, clic
เอเจนต์ AI ทำได้มากกว่าให้คำแนะนำ เพราะอาจแก้ไขข้อมูลลูกค้า เรียกใช้เครื่องมือ หรือดำเนินงานหลายขั้นตอนต่อเนื่องได้ สำหรับองค์กรในสิงคโปร์ แนวทางที่ปลอดภัยคือค่อย ๆ เพิ่มขอบเขตการทำงาน และทำเมื่อพิสูจน์ได้ว่ามีการกำหนดสิทธิ์ การกำกับดูแล และวิธีกู้คืนเมื่อเกิดปัญหาอย่างชัดเจน กรอบกำกับดูแลของสิงคโปร์ช่วยวางหลักคิด ส่วนแนวทางด้านปฏิบัติการต่อไปนี้ช่วยแปลงหลักการให้เป็นขั้นตอนที่นำไปใช้ได้ 10
11
AI Agents Sandbox ของสิงคโปร์ ซึ่ง Google ทำร่วมกับ CSA, GovTech Singapore และ IMDA ทดลองใช้เอเจนต์กับงานประกันคุณภาพซอฟต์แวร์อัตโนมัติ การทดสอบความปลอดภัยของแชตบอต และการช่วยดำเนินการสมัครขอความช่วยเหลือทางสังคม เป็นเวลาประมาณ 4 เดือน การทดลองแสดงให้เห็นโอกาสในการใช้งาน แต่ก็ชี้ถึงประเด็นเรื่องการกำกับดูแล ความมั่นคงปลอดภัยไซเบอร์ ความเป็นส่วนตัว และธรรมาภิบาลด้วย นี่คือการทดลองในสภาพแวดล้อมที่ควบคุม ไม่ใช่การรับรองว่าเอเจนต์พร้อมใช้งานกับทุกระบบของทุกองค์กร 4
12
แรงผลักดันให้ขยายการใช้งานมีอยู่จริง Deloitte รายงานว่า 72% ของธุรกิจในสิงคโปร์วางแผนนำ Agentic AI ไปใช้ในหลายส่วนของการดำเนินงานภายใน 2 ปี เพิ่มจาก 15% ในช่วงเวลาที่จัดทำรายงาน ขณะที่ผลสำรวจระดับโลกอีกชุดพบว่า 21% ของบริษัทที่สำรวจมีระบบกำกับดูแล Agentic AI ที่成熟แล้ว ตัวเลข 21% นี้เป็นข้อมูลระดับโลก ไม่ใช่อัตราเฉพาะของสิงคโปร์ 24
26
กรอบ Model AI Governance Framework for Agentic AI ของสิงคโปร์จัดแนวทางไว้ 4 ด้าน ได้แก่ ประเมินและจำกัดความเสี่ยงตั้งแต่ต้น ทำให้มนุษย์มีความรับผิดชอบอย่างมีความหมาย วางมาตรการทางเทคนิคตลอดวงจรการใช้งาน และส่งเสริมการใช้งานอย่างรับผิดชอบ กรอบนี้เป็นพื้นฐานสำหรับการกำกับดูแล ไม่ใช่หลักฐานว่าระบบใดระบบหนึ่งปลอดภัยโดยไม่ต้องทดสอบในบริบทที่จะนำไปใช้จริง 10
11
ต้นแบบที่ทำงานได้ดีควรเป็นเหตุผลให้ประเมินขั้นต่อไป ไม่ใช่เหตุผลให้เปิดสิทธิ์ใช้งานจริงแบบไร้ขอบเขต แนวทางที่นำไปปรับใช้ได้อาจแบ่งเป็น 4 ระยะ:
กำหนดเกณฑ์ผ่านก่อนเลื่อนแต่ละระยะ โดยดูมากกว่าความสำเร็จของงาน เช่น มีการกระทำที่ไม่ได้รับอนุญาตหรือไม่ ข้อมูลรั่วไหลหรือไม่ เอเจนต์รับมือกับข้อมูลกำกวมอย่างไร คนเข้าควบคุมได้ผลแค่ไหน และกู้คืนจากความผิดพลาดได้หรือไม่ Agentic Testing Starter Kit ของสิงคโปร์เป็นแหล่งอ้างอิงที่ช่วยวางแนวทางทดสอบได้ แต่องค์กรยังต้องทดสอบเอเจนต์ เครื่องมือ และขั้นตอนการทำงานของตนเอง 1
36
ก่อนเชื่อมเอเจนต์เข้ากับข้อมูลลูกค้า งานการเงิน หรือฐานข้อมูลปฏิบัติการ ให้ระบุอำนาจของเอเจนต์เป็นรูปธรรม กำหนดว่าระบบ ระเบียน ช่องข้อมูล เครื่องมือ และปลายทางใดบ้างที่เข้าถึงได้ อนุญาตให้ทำอะไร และการกระทำใดต้องผ่านการอนุมัติ หากเหมาะกับงานนั้น ควรกำหนดเพดานมูลค่าธุรกรรม ความถี่ในการดำเนินการ และระยะเวลาที่อนุญาตให้ทำงานด้วย
การให้คนตรวจสอบมีประโยชน์ที่สุดเมื่อเป็นจุดคัดกรองก่อนเกิดการกระทำที่มีผลสำคัญ ไม่ใช่แค่ตรวจย้อนหลัง ผู้อนุมัติควรเห็นรายการเปลี่ยนแปลงที่เสนอ ระเบียนที่ได้รับผลกระทบ หลักฐานประกอบ และผลที่อาจตามมา การอนุมัติควรผูกกับการกระทำนั้นโดยเฉพาะ และต้องขออนุมัติใหม่หากข้อมูลหรือการกระทำเปลี่ยนไป
ควรบังคับใช้ข้อจำกัดเหล่านี้นอกตัวโมเดลด้วย เช่น ใช้ช่องทางควบคุมการเรียกใช้เครื่องมือเพื่อตรวจสอบตัวตน สิทธิ์ พารามิเตอร์ของคำสั่ง และข้อกำหนดก่อนส่งคำขอไปยังระบบธุรกิจ สำหรับงานการเงิน ให้แยกการเสนอธุรกรรมออกจากการอนุมัติและการดำเนินการจริง ส่วนการแก้ไขข้อมูลลูกค้า ควรเก็บทั้งค่าเดิมและค่าใหม่ พร้อมเหตุผลประกอบการเปลี่ยนแปลง
ระบบที่แยกส่วน แอปพลิเคชันเก่า เจ้าของข้อมูลหลายฝ่าย และเอกสารกำกวม ทำให้การใช้งานจริงซับซ้อนกว่าการสาธิตในแซนด์บ็อกซ์ ควรมีช่องทางเชื่อมต่อที่ผ่านการตรวจสอบระหว่างเอเจนต์กับระบบธุรกิจ และให้เจ้าของข้อมูลที่เกี่ยวข้องอนุมัติการเข้าถึง ตรวจสอบว่าระเบียนเป็นปัจจุบันและอยู่ในรูปแบบที่คาดไว้ หากพบข้อมูลขัดแย้งหรือไม่ชัดเจน ให้ส่งต่อให้คนพิจารณาแทนการปล่อยให้เอเจนต์คาดเดา
ให้ถือว่าอีเมล เอกสาร และเนื้อหาบนเว็บเป็นข้อมูลนำเข้าที่ไม่น่าเชื่อถือ การโจมตีแบบ prompt injection ทางอ้อมอาจซ่อนอยู่ในเนื้อหาที่เอเจนต์อ่าน ดังนั้นข้อมูลที่ค้นคืนมาไม่ควรเพิ่มสิทธิ์ใหม่หรือเขียนทับนโยบายการดำเนินการ ควรทดสอบก่อนเพิ่มสิทธิ์ว่าเอเจนต์ถูกหลอกให้ใช้เครื่องมือที่ไม่ได้อนุมัติหรือทำงานนอกขอบเขตได้หรือไม่ 35
43
นอกจากความผิดพลาดของโมเดลแล้ว ต้องเตรียมรับมือความขัดข้องในการปฏิบัติงานด้วย ทดสอบคำขอซ้ำ ระเบียนล้าสมัย ระบบขัดข้องบางส่วน และการแก้ไขข้อมูลพร้อมกัน ใช้การตรวจสอบความถูกต้องและการกระทบยอด พร้อมกำหนดวิธีหยุดการทำงานและกู้คืนหรือแก้ไขผลลัพธ์ มาตรการเหล่านี้เป็นแนวทางปฏิบัติที่แนะนำ โดยรายละเอียดควรปรับตามระบบและผลกระทบที่อาจเกิดจากความผิดพลาด
สำหรับการใช้งานในองค์กร อาจนิยามอธิปไตยข้อมูลในทางปฏิบัติว่า องค์กรสามารถแสดงให้เห็นได้ว่าข้อมูลสำคัญถูกส่งไปที่ใด ใครเข้าถึงได้ ถูกนำไปใช้อย่างไรหรือเก็บไว้นานเท่าใด และมีหลักฐานใดรองรับมาตรการเหล่านั้น การรู้เพียงที่ตั้งของเซิร์ฟเวอร์ยังไม่เพียงพอที่จะยืนยันว่าควบคุมข้อมูลได้ครบถ้วน
ทำแผนผังเส้นทางข้อมูลทั้งหมด ตั้งแต่การประมวลผลด้วยโมเดล การค้นคืนข้อมูล การสร้าง embeddings หน่วยความจำของเอเจนต์ ระบบประสานงาน ไปจนถึงบันทึกการทำงาน กำหนดว่าส่วนใดประมวลผลข้อมูลอ่อนไหวได้และภายใต้เงื่อนไขใด แยกการใช้งานเพื่อประมวลผลคำขอทั่วไปออกจากการเก็บความจำต่อเนื่อง การปรับแต่งโมเดล หรือการฝึกโมเดล และขออนุมัติอย่างชัดเจนก่อนเก็บข้อมูลหรือเรียนรู้เกินกว่าวัตถุประสงค์ที่กำหนด
เลือกโครงสร้างพื้นฐานจากมาตรการที่องค์กรตรวจสอบได้ เช่น การจำกัดสิทธิ์ การจัดการกุญแจเข้ารหัส การตั้งค่าการเก็บรักษาข้อมูล ข้อตกลงกับผู้ให้บริการ และเขตอำนาจศาล ไม่ควรสรุปเหมารวมว่าคลาวด์สาธารณะหรือระบบภายในองค์กรปลอดภัยกว่าเสมอไป สถาปัตยกรรมที่เหมาะสมขึ้นอยู่กับข้อมูล ภาระหน้าที่ และการประเมินความเสี่ยงขององค์กร
กำหนดเจ้าของงานฝั่งธุรกิจและผู้ดูแลระบบเทคนิคให้เอเจนต์ทุกตัวที่ใช้งานจริง ระบุเจ้าของข้อมูลและผู้อนุมัติที่รับผิดชอบสิทธิ์และการกระทำ พร้อมบันทึกว่าใครมีอำนาจหยุดหรือปิดระบบได้ บทบาทเหล่านี้ช่วยเปลี่ยนหลักความรับผิดชอบของมนุษย์ให้เป็นมาตรการที่สังเกตและตรวจสอบได้ สอดคล้องกับแนวทางที่เน้นการกำหนดความรับผิดชอบและมาตรการทางเทคนิคอย่างชัดเจน 10
11
เก็บบันทึกแบบมีเวอร์ชันของโมเดล พรอมป์ต์ เครื่องมือ สิทธิ์ และนโยบายที่ใช้อยู่ บันทึกตัวตนของเอเจนต์ แหล่งข้อมูลที่อ้างอิง การเรียกใช้เครื่องมือ การตรวจสอบตามนโยบาย การอนุมัติ และผลการดำเนินการ โดยป้องกันไม่ให้ผู้ไม่มีสิทธิ์แก้ไขบันทึกได้ ควรเก็บหลักฐานที่ใช้ประกอบการตัดสินใจและคำอธิบายที่กระชับไว้ด้วย แต่คำอธิบายที่โมเดลสร้างขึ้นเพียงอย่างเดียวไม่ใช่หลักฐานยืนยันกระบวนการภายในของโมเดล
ติดตามการเข้าถึงที่ผิดปกติ ปลายทางที่ไม่คาดหมาย อัตราความล้มเหลวที่เพิ่มขึ้น หรือความพยายามหลีกเลี่ยงการอนุมัติ กำหนดเกณฑ์ที่ทำให้ต้องหยุดระบบและให้คนตรวจสอบ ทดสอบซ้ำเมื่อมีการเปลี่ยนโมเดล เครื่องมือ แหล่งข้อมูล หรือสิทธิ์ และทบทวนเป็นระยะว่าเอเจนต์ยังเหมาะกับบทบาทที่ได้รับอนุมัติหรือไม่ Agentic Testing Starter Kit ช่วยเป็นแนวทางในการทดสอบ แต่ไม่ทดแทนการประเมินความพร้อมเฉพาะของแต่ละองค์กร 1
36
เกณฑ์ก่อนใช้งานจริงถามได้ตรงไปตรงมา: องค์กรแสดงให้เห็นได้หรือไม่ว่าเอเจนต์มีสิทธิ์เข้าถึงที่ได้รับอนุญาต ทำงานภายในขอบเขตที่กำหนด ถูกหยุดหรือแทรกแซงได้อย่างมีประสิทธิผล และทิ้งบันทึกที่ตรวจสอบย้อนหลังได้? ควรเพิ่มความเป็นอิสระให้เอเจนต์ต่อเมื่อคำตอบคือได้ แซนด์บ็อกซ์ช่วยแสดงศักยภาพ แต่การใช้งานจริงอย่างมีความรับผิดชอบต้องมีหลักฐานว่าควบคุมได้
Studio Global AI
หน้านี้รวมคำตอบที่ได้รับการสนับสนุนจากแหล่งที่มาซึ่งคุณสามารถดำเนินการต่อภายใน Studio Global
องค์กรควรเพิ่มอำนาจให้เอเจนต์ AI ทีละขั้น เมื่อพิสูจน์ได้ว่ามีผู้รับผิดชอบชัดเจน จำกัดการเข้าถึง มีจุดอนุมัติจากคน และตรวจสอบการกระทำย้อนหลังได้
องค์กรควรเพิ่มอำนาจให้เอเจนต์ AI ทีละขั้น เมื่อพิสูจน์ได้ว่ามีผู้รับผิดชอบชัดเจน จำกัดการเข้าถึง มีจุดอนุมัติจากคน และตรวจสอบการกระทำย้อนหลังได้ แซนด์บ็อกซ์ของรัฐบาลสิงคโปร์และ Google ซึ่งทดลองราว 4 เดือน แสดงให้เห็นโอกาสในงานทดสอบซอฟต์แวร์ ความปลอดภัยของแชตบอต และการยื่นขอความช่วยเหลือทางสังคม แต่ไม่ได้รับรองว่าเอเจนต์พร้อมทำงานกับทุกระบบจริง