מחקר
מחקרים ופרסומים מצוות המחקר של אנתרופיק - סקירות מעמיקות, ניתוחים טכניים ותובנות מעולם הבינה המלאכותית
21 במאי 2022
מחקר חדש חושף: כך נתוני אימון חוזרים פוגעים קשות במודלי שפה גדולים
חברת אנתרופיק (Anthropic), מובילה בתחום בטיחות ה-AI ומחקר בינה מלאכותית, מפרסמת מחקר חלוצי הבוחן את ההשפעה המפתיעה של נתונים חוזרים במהלך אימון מודלי שפה גדולים (LLM). המחקר מגלה תופעת 'ירידה כפולה' שבה חשיפה חוזרת, אפילו לאחוז קטן של נתונים, עלולה להוביל לירידה דרמטית בביצועי המודל. הממצאים מצביעים על כך ששינון יתר של נתונים צורך נתח ניכר מיכולות המודל, פוגע ביכולת ההכללה שלו ומוריד את ביצועיו לרמה של מודל קטן בהרבה. דוח זה מדגיש את החשיבות הקריטית של אסטרטגיות ניהול נתונים מתקדמות לאימון מודלי AI.
קרא עוד
12 באפריל 2022
לגרום ל-AI להיות טוב: אנתרופיק חושפת את סודות האימון לבינה מלאכותית בטוחה ומועילה
חברת אנתרופיק (Anthropic), מובילה בתחום בטיחות ה-AI, פרסמה מחקר המפרט את גישתה לאימון מודלי שפה גדולים (LLM) כדי שיפעלו כסוכנים מועילים ולא מזיקים. המחקר מציג את השימוש ב-RLHF (Reinforcement Learning from Human Feedback) ובמודלי העדפות לכוונון עדין של מודלים, ומראה כי אימון יישור זה לא רק משפר את הביצועים במגוון משימות NLP, אלא גם תואם באופן מלא לאימון עבור יכולות מיוחדות כמו קידוד Python. בנוסף, המחקר מפרט מודל אימון איטרטיבי מקוון, המעדכן את המודלים על בסיס שבועי עם פידבק אנושי טרי, ובוחן את חוסנו של אימון ה-RLHF, מה שמהווה צעד חשוב בפיתוח בינה מלאכותית אמינה, מפורשת וניתנת לשליטה.
קרא עוד
8 במרץ 2022
אנתרופיק חושפת: ראשי אינדוקציה וסודות הלמידה בהקשר במודלי שפה
אנתרופיק, חברת מחקר ובטיחות AI מובילה, מציגה תובנות חדשות על מנגנוני הליבה שמאפשרים למודלי שפה גדולים (LLMs) ללמוד מתוך הקשר (In-context Learning). המחקר שלהם מתמקד ב"ראשי אינדוקציה" (Induction Heads), רכיבי מפתח ברשתות הטרנספורמר, שמסייעים להבין כיצד המודלים רוכשים ידע ומתאימים את עצמם במהירות. הבנה מעמיקה של תהליכים אלו קריטית לפיתוח מערכות AI אמינות, ניתנות לפרשנות וניתנות לשליטה, כחלק מהמחויבות של אנתרופיק ל-AI אחראי.
קרא עוד
15 בפברואר 2022
חיזוי והפתעה במודלי בינה מלאכותית גנרטיביים: האתגר של אנתרופיק
חברת אנתרופיק (Anthropic), מובילה בתחום בטיחות ומחקר בינה מלאכותית, מפרסמת נייר עמדה חשוב הדן במאפיין פרדוקסלי של מודלים גנרטיביים גדולים: מצד אחד, קיימת יכולת חיזוי גבוהה לגבי ביצועיהם הכלליים באימון (חוקי סקיילינג); מצד שני, היכולות הספציפיות והתוצרים שלהם בלתי צפויים לעיתים קרובות. נייר העמדה מזהיר כי שילוב זה מאיץ את פיתוח המודלים אך מקשה על חיזוי ההשלכות בעת פריסתם, ועלול להוביל להתנהגות מזיקה חברתית. החברה מציעה דרכים להתמודד עם אתגרים אלו במטרה להבטיח השפעה חיובית של ה-AI.
קרא עוד
22 בדצמבר 2021
לפענח את מוחו של ה-AI: אנתרופיק מציגה מסגרת מתמטית להבנת טרנספורמרים
חברת אנתרופיק (Anthropic), מובילה בתחום בטיחות וחקירת AI, חושפת מחקר חדש המציג מסגרת מתמטית פורצת דרך להבנת המבנה הפנימי של מודלי טרנספורמר. מחקר זה נועד לפענח את 'הקופסה השחורה' של מודלי שפה גדולים, ולאפשר פרשנות עמוקה יותר של אופן פעולתם. באמצעות הבנת 'המעגלים' החישוביים הייחודיים בתוך המודלים, אנתרופיק שואפת לבנות מערכות AI אמינות, ניתנות ליישור ובטוחות יותר, תוך קידום היכולת לאתר ולתקן התנהגויות לא רצויות. מדובר בצעד קריטי לקראת פיתוח AI אחראי ואמין לטווח הארוך.
קרא עוד
1 בדצמבר 2021
מעבדת יישור: כך Anthropic בונה סוכני שפה בטוחים ואחראיים
אנתרופיק (Anthropic), חברת מחקר ובטיחות AI מובילה, מציגה תובנות חדשות ממחקר שנועד להפוך מודלי שפה גדולים (LLM) לעוזרים כלליים שמתיישרים עם ערכים אנושיים – כלומר, מועילים, כנים ולא מזיקים. המחקר בוחן שיטות יישור פשוטות כמו פרומפטים, ומגלה כי התערבויות קטנות משפרות את הביצועים ומתרחבות עם גודל המודל, מבלי לפגוע ביכולותיו. בנוסף, נבחנות אסטרטגיות אימון שונות, כאשר אימון מבוסס דירוג העדפות מתגלה כיעיל ביותר בסקיילינג ובהשגת יישור מיטבי. לבסוף, מציגה אנתרופיק שיטת קדם-אימון חדשנית שמטרתה לשפר את יעילות הלמידה מהעדפות אנושיות.
קרא עוד