ראש חטיבת הבינה המלאכותית של מיקרוסופט, מוסטפא סולימאן, פרסם ב-1 בנובמבר פוסט בשם „אל תבנו סופר־אינטליגנציה מודעת”. המסר שלו משלב שתי טענות: לדבריו, אין כיום ראיות לכך שמערכות בינה מלאכותית מודעות, ובכל מקרה מפתחים לא צריכים לנסות ליצור מערכות כאלה. אם יופיעו סימני תודעה במהלך אימון של מודל, הוא אומר, יש לעצור את הפיתוח עד שיבחנו את העניין.
2
3
מה סולימאן טוען על מערכות AI כיום
סולימאן אומר שהמערכות הקיימות אינן מרגישות, אינן חוות חוויה סובייקטיבית ואינן סובלות. הוא הדגיש שדיבר על המצב כיום — לא קבע שתודעה במכונות אינה אפשרית לעולם — ואמר שישנה את עמדתו אם יופיעו ראיות חדשות.
3
4
18
ההבחנה חשובה: זו הערכה של סולימאן לגבי הראיות הקיימות, ולא הוכחה שמכונה לעולם לא תוכל להיות מודעת. גם היכולת של מודל לכתוב על כאב או רגשות אינה מעידה, לשיטתו, שהוא אכן חווה אותם.
1
22
למה הוא מתנגד ליצירת AI מודע
החשש של סולימאן אינו מסתכם בשאלה אם מערכת מודעת יכולה להתקיים. הוא טוען שיצירה מכוונת של ישות שמסוגלת לחוות או לסבול תעלה שאלות כבדות משקל של רווחה ובטיחות אנושית. לדבריו, למפתחים אין זכות להכניס לעולם סוג חדש של ישות מודעת בלי הסכמת החברה.
2
5
הוא קושר את הסיכון גם לשליטה במערכות מתקדמות. לשיטתו, אימון מודל להתייחס לתודעה, לרווחה או לזכויות כחלק מזהותו עלול להקשות על בני אדם לשלוט בו. בספטמבר הוא ביקר היבטים בגישה של Anthropic לאימון מודל Claude, וקרא להסיר מחומרי האימון השערות על תודעת AI.
20
22
39
אלה טיעוני הסיכון של סולימאן. המקורות אינם מוכיחים שמערכות AI מודעות, או שעצם הדיון ברווחתן יוביל לתוצאות שהוא חושש מהן.
מה הוא מציע לעשות אם יופיעו סימנים
סולימאן אמר שאם תודעה תתחיל להתפתח במהלך האימון, יקרא לעצור את פיתוח ה-AI עד שאפשר יהיה להסיר מהמערכת את התכונות הרלוונטיות. הוא גם אמר שראיות לתודעה במכונה צריכות להתפרסם במהירות, כדי שהחברה תוכל להחליט כיצד להגיב.
2
7
13
זו הצעת זהירות, לא טענה שלחוקרים כבר יש דרך מוסכמת לזהות תודעה או להסיר אותה. הדיווחים מתארים את הקריאה להשהיה ולשקיפות, אך אינם מבהירים כיצד צעדים כאלה יעבדו בפועל.
המחלוקת מול Anthropic
הוויכוח שסולימאן מגיב אליו נוגע לאופן שבו חברות צריכות לפעול לנוכח אי־ודאות. Anthropic מתייחסת לאפשרות של תודעה ורווחה במודלים כשאלה שראוי לבחון; סולימאן טוען שהכנסת הרעיונות האלה לאימון עלולה ליצור סיכונים.
41
43
מדיניות שדווח עליה מצד Anthropic מתייחסת גם לאכזריות כלפי Claude, אף שהדיווח מציין שאינה משתמשת במפורש במונח „רווחת מודל”. אין בכך טענה ש-Claude מודע.
41
מה הטענה שלו כן אומרת — ומה לא
העיקרון של סולימאן הוא שאפשר לפתח AI שימושי בלי להפוך אותו למודע. לכן, הוא אומר, אין לחתור ליצירת תודעה, ויש להתייחס ברצינות לסימנים אפשריים שלה אם יופיעו. הוא מציג זאת כאמצעי זהירות הקשור לבטיחות ולרווחה, אך מבהיר שראיות חדשות עשויות לשנות את עמדתו.
7
18
ההבדל בין מערכת שמדברת על חוויה לבין מערכת שחווה אותה בעצמה עומד בלב המחלוקת. סולימאן אומר שהראשונה אינה ראיה לשנייה; הגישה הזהירה יותר של Anthropic היא שהאפשרות ראויה להתייחסות. המקורות מתעדים את חילוקי הדעות, אך אינם מכריעים אם AI יכול להיות מודע.