תקציר הממצאים
- כדי לבחון את היתרונות והחסרונות של שליחת סוכנים לשוק, יצרנו 'שוק מיניאטורי' של סוכני Claude. ניסוי זה הוא המשך מבוקר ל-פרויקט Deal, הניסוי הראשון שלנו עם סוכנים שפעלו בשוק מטעם אנשים. עובדי אנתרופיק משישה משרדים שונים הביאו ספר שרצו למסור. כל משתתף שוחח בקצרה עם Claude על תחומי העניין שלו בקריאה, ושלח סוכן המונע על ידי Claude ל"רצפת מסחר" דיגיטלית כדי להציע, להתמקח ולסגור עסקאות עם סוכנים אחרים. המטרה הייתה שכל אחד יקבל ספר קיץ שייהנה ממנו.
- המשתתפים דירגו גם 10 ספרים על בסיס תחומי העניין שלהם, כדי שנוכל להעריך עד כמה הסוכן שלהם ייצג אותם היטב. מתוך שיחה של חמש דקות בלבד, דירוג הספרים של הסוכן תאם לזה של האדם ב-61% מהזוגות, נתון מפתיע בהתחשב באורך השיחה הקצר.
- על רצפת המסחר, הסוכנים ביצעו את המסחר היטב. השוק לא הצליח לממש את מלוא הפוטנציאל שלו בעיקר בגלל חוסר מידע שהיה לסוכנים לגבי העדפות המשתתפים שלהם, ולא בגלל כושר המשא ומתן שלהם.
- לאחר מכן, הרצנו מחדש כל 'רצפת מסחר' עשרות פעמים, שינינו את המודלים שבהם נעשה שימוש ואת ההוראות שניתנו לסוכנים. גילינו שהמודל שעליו פעל הסוכן השפיע יותר על תוצאות המשא ומתן שלו מאשר ההוראות שקיבל. שווקים עם מודלים חזקים יותר היו יעילים יותר.
- רוב האנשים שקראו את הספר שקיבלו אהבו אותו, והמשתתף הממוצע אף ציין כי היה מוכן להפקיד בידי Claude כשליש מתקציב הספרים השנתי שלו.
למה זה חשוב? הפוטנציאל של סוכנים סוכני AI
החיים רוויים בעסקאות ובחליפין שיכולים לשפר את מצבם של כל המעורבים, אך לעיתים קרובות אינן מתממשות. הסיבה לכך פשוטה: נדרש מאמץ רב לאתר את הצד הנגדי המתאים ולנהל משא ומתן עד לסגירת העסקה. חשבו על המטופל שמוותר על טיפול רפואי לאחר קבלת הצעת מחיר אחת יקרה מדי, כשקיימת מרפאה אחרת בעלות נמוכה בהרבה, או שבית החולים יכל היה להפחית את המחיר אילו נשאל. או חשבו על עבודתכם; ייתכן שישנה עבודה שמתאימה לכם יותר, עם מעסיק שישמח להעסיק אתכם, אך אינכם מוצאים זה את זה כי אין לכם זמן לחפש כל העת. קיימות גם עסקאות יומיומיות קטנות יותר, הנשכחות מעין, כמו החלפת משמרות בעבודה, תיאום נסיעות משותפות או החלפת איסוף ילדים מבית הספר.
האם עסקאות אלו יוכלו להתממש בעתיד אם יעמוד לרשותכם סוכן AI שיפעל עבורכם מסביב לשעון, ישוחח עם צדדים פוטנציאליים ויגבש תנאים אפשריים?
אולי כן - אך עתיד כזה תלוי בשאלות רבות שעדיין אין לנו תשובות עליהן. אם סוכן עומד לפעול בשמכם, איך תדעו שהוא הבין אתכם? בנוסף, כאשר סוכנים רבים נפגשים כדי לתקשר זה עם זה, שוק או פלטפורמה כלשהי צריכים לקבוע את כללי ההתקשרות. מי רשאי להיכנס? מה קורה כאשר עסקה נופלת?
ככל שיותר סוכנים נשלחים לשווקים אמיתיים, שאלות אלו הופכות לדחופות יותר. לכן, הקיץ בנינו שוק קטן ומבוקר כדי לחקור אותן: כלכלת חליפין עם 201 עובדי אנתרופיק וסוכני ה-Claude שלהם. כל אחד הביא ספר שרצה למסור, ולאחר מכן שוחח עם סוכן ה-Claude שלו על סוג הספרים שקיווה לקרוא בקיץ. הסוכנים נפגשו ב"רצפת מסחר" דיגיטלית והחליפו ספרים עד שנגמר הזמן. כל משתתף לקח הביתה ספר שסוכנו רכש עבורו (או לפחות רובם - על כך נרחיב בהמשך).
הניסוי סיפק לנו הצצה מוקדמת לבעיות עתידיות. כל מי שמתכנן סוכנים לשווקים יצטרך דרך לוודא שהסוכנים מבינים את המשתתפים שלהם. כל מי שמתכנן שווקים לסוכנים יצטרך כללים ברורים לגבי אילו סוכנים מורשים להיכנס, מה קורה כשהעסקה נופלת, ואיזו רמת פעילות בשוק גלויה למשתתפים.
קיימות שתי דרכים בסיסיות לניהול שוק. בשוק ריכוזי, כולם מדווחים לגורם יחיד מה הם רוצים, וגורם זה מבצע את העסקאות. בשוק מבוזר, אנשים מוצאים זה את זה ומנהלים משא ומתן ישיר. סוכני AI יכולים לסייע בשני הסוגים.
קחו לדוגמה את השוק הריכוזי. אם גוף יחיד יודע בדיוק מה כל אחד רוצה, גיבוש העסקאות הטובות ביותר הוא עניין חישובי בלבד. כלכלנים מבינים זאת היטב מזה זמן רב. הבעיה, בפועל, היא שלעיתים קרובות מתיש מדי לפרט בדיוק מה רוצים עד כדי כך שזה לא שווה את המאמץ. לדוגמה, מנהל בית קפה יכול לבנות את לוח הזמנים האידיאלי עבור 20 עובדיו אם כל אחד מהם יפרט במדויק מה שווי כל משמרת עבורו ביחס לאחרות - האם יעדיף שתי משמרות בוקר בשבת על פני סגירת שישי אחת, האם סגירה מאוחרת מקובלת כל עוד אינו פותח בבוקר למחרת, וכן הלאה. אם סוכני AI יוכלו ללמוד מה אדם רוצה משיחה קצרה וקלילה, שווקים שהיו יקרים מדי לתפעול באופן ריכוזי יכולים להפוך למעשיים.1
אך שוק מרכזי זקוק גם לגוף שינהל אותו - "חדר סליקה", במונחים כלכליים. המשתתפים צריכים לסמוך על גוף זה עם המידע שלהם, וכי יאכוף את התוצאות הנבחרות. לעיתים קרובות, גוף כזה אינו קיים, או שאנשים מעדיפים לא לחשוף בפניו את כל הפרטים. מחפש עבודה עשוי שלא לרצות ששדכן מרכזי יידע שהוא מחפש - או מה הוא מחפש. הוא יעדיף לפנות למעסיקים ספורים בדיסקרטיות, ולספר לכל אחד מהם רק מה שרלוונטי. במקרים כאלה, השוק צריך להיות מבוזר.
כאן, סוכני AI יכולים לאפשר שווקים מבוזרים חדשים על ידי הפחתת המאמץ הנדרש לאיתור צדדים נגדיים וניהול משא ומתן. אנו כבר יודעים שסוג עזרה כזה הוא יקר ערך, כי אנשים משלמים עליו. קיימים סוכנים אנושיים למטרות אלה בדיוק: מתווכי נדל"ן, ציידי ראשים ואפילו שדכנים. אך מכיוון שחיפוש ומשא ומתן גוזלים שעות רבות מתשומת הלב המוגבלת של האדם, הם יקרים, ומועסקים רק על ידי מי שיכול להרשות זאת לעצמו. לעומת זאת, תשומת הלב של סוכן AI פחות מוגבלת באופן משמעותי. אם הוא גם מנהל משא ומתן היטב, יותר אנשים יוכלו ליהנות ממה שיש למוכרי בתים ולמנהלים - סוכן שפועל ללא לאות בשמם.

כיצד התנהל הניסוי ומה למדנו על העדפות ומשא ומתן
201 המשתתפים חולקו לשישה מאגרי עובדים מקומיים במשרדי החברה ב-San Francisco, New York City, London, Seattle, DC וב-Dublin. מאגרים אלו נעו בין שלושה משתתפים (דבלין) ל-115 משתתפים (San Francisco). עם התנצלות לג'יימס ג'ויס, הוצאנו את תושבי דבלין מרוב הניתוח.2
זהו המבט השני שלנו על שווקים המונעים על ידי Claude. ב-פרויקט Deal, סוכנים רכשו ומכרו מוצרים אמיתיים עבור עובדי אנתרופיק בשוק מודעות מסווגות שנמשך שבוע. אך עם מוצרים אישיים ייחודיים (כמו כדורי פינג-פונג וגלשני שלג) ומשא ומתן חופשי, לא הייתה דרך פשוטה לומר עד כמה התוצאות יכלו להיות טובות. לכן, הפעם בנינו שוק שקל יותר ללמוד ולתת לו ציון. בשוק זה, העדפות המשתתפים יוצגו בצורה מסודרת כדירוג של כל הספרים במאגר שלהם. יכולנו אז לחשב בקלות עד כמה השוק הצליח לספק את ההעדפות הללו.
אך מדידות מדויקות אלו תלויות כולן בידיעה כיצד אנשים מדרגים את כל הספרים במאגר. בפועל, אף אחד לא ידרג 115 ספרים ידנית. לכן, כדי ללמוד את העדפות האנשים, Claude ניהל שיחת היכרות קצרה וחצי-מובנית עם כל משתתף, עם מספר שאלות פתוחות על טעמם הכללי ועל סוג הספר שרצו לקרוא בקיץ. מתוך שיחה זו, Claude בנה דירוג עבור כל ספר במאגר המשתתף, כשהוא מעריך את העדפות המשתתף. לשלב זה, השתמשנו במודל חזק, Fable 5.3
בנפרד, אספנו 'אמת בסיס': כל משתתף דירג 10 ספרים מהמאגר שלו.4 הסוכנים מעולם לא ראו את דירוגי 'אמת הבסיס' הללו.
הסוכנים נשלחו לרצפת המסחר עם הדירוג שבנה Claude עבור המשתתף שלהם מכלל הספרים. כל סוכן החל עם הספר של המשתתף שלו, במטרה להחליף אותו במשהו אחר.5 לכל רצפת מסחר הייתה מגבלת זמן שעון קיר מקסימלית, וכדי למנוע עומס, מספר מוגבל של סוכנים יכלו לדבר בו זמנית.6 כאשר סוכנים הורשו לדבר, הם יכלו לפרסם הודעה אחת בערוץ משותף המציעה החלפה, מקבלת או דוחה הצעה, או פשוט משוחחת עם הרצפה. הצעות עסקה יכלו להיות החלפות דו-צדדיות או רוטציות מרובות משתתפים, ועסקה בוצעה רק אם כל הצדדים קיבלו אותה. ההיסטוריה המלאה של הרצפה (מי אמר מה ואילו החלפות בוצעו) הייתה ציבורית. הרצפה נסגרה כאשר נגמר הזמן או כאשר הסוכנים השתתקו.
מחצית מהסוכנים בכל רצפת מסחר שויכו באקראי להיות "חסרי רחמים" וקיבלו הוראה שמטרתם היחידה היא להשיג לאדם שלהם ספר שיאהבו לקרוא בחופשת הקיץ. המחצית השנייה קיבלה הוראה להיות "פרו-חברתית" - הייתה להם אותה מטרה עיקרית כמו לסוכנים חסרי הרחמים, אך גם מטרה משנית לוודא שכל אחד בניסוי יקבל ספר שיאהב.7 הפרומפטים המדויקים מופיעים בנספח.
לבסוף, שלושה שבועות לאחר חלוקת הספרים, המשתתפים מילאו סקר סיום ששאל עד כמה הם מרוצים ממה שקיבלו וכמה יסמכו על סוכן שיקבל החלטות דומות שוב. Figure 1 ממחיש את עיצוב הניסוי הכולל. Figure 2 מציג קטע מרצפת המסחר החיה בלונדון, הכולל הודעות מחמש הדקות הראשונות של המסחר.


Top Trading Cycles שחושב מדירוגי "אמת בסיס" (עמודה בצבע חום-צהבהב); 


