האבולוציה של שבבי הבינה המלאכותית: כיצד מעבדים ייעודיים משנים את תעשיית החומרה

התפתחות מעבדי ה-AI מציגה את האתגרים בניהול זיכרון ורוחב פס, החל ממעבדי ה-TPU של גוגל ועד לפתרונות החדשניים של Grock המבטלים את התלות בזיכרון חיצוני.

  • AI
  • Nvidia
  • Google
  • Grock
  • TPU
  • GPU
  • ASIC
  • Hardware
  • מעבדי AI ייעודיים כמו TPU ו-LPU מתוכננים במיוחד כדי להתמודד עם מכפלות מטריצות, המשימה המרכזית ברשתות עצביות.
  • הצוואר הבקבוק המרכזי בעיבוד נתונים הוא מהירות העברת הנתונים בין הזיכרון למעבד, אתגר שחברות מנסות לפתור בדרכים שונות.
  • חברת Grock בחרה להשתמש בזיכרון SRAM בלבד ללא זיכרון חיצוני, מה שמאפשר תזמון מדויק של כל פעולה ומהירות גבוהה במיוחד.
  • שילוב כוחות בין סוגי מעבדים שונים, כגון שימוש משותף ב-GPU וב-LPU, מאפשר לנצל את היתרונות של כל טכנולוגיה בשלבי העבודה השונים.

הביקוש העצום לחישובים בתחום הבינה המלאכותית הביא לפיתוח של שבבים ייעודיים המתמחים במשימות ספציפיות, בניגוד למעבדים המסורתיים שנועדו למגוון משימות רחב. בעוד שמעבדי ה-GPU של Nvidia שלטו בתחום הודות לגמישותם ויכולתם להתמודד עם משימות מרובות, חברות ענק וסטארטאפים החלו לפתח מעבדים המותאמים אישית לרשתות עצביות. מעבדי ה-TPU הראשונים של גוגל לדוגמה, תוכננו להסיר את רוב מנגנוני הבקרה המיותרים ולרכז את המאמצים בביצוע חישובי מטריצות מהירים, ובכך לחסוך באנרגיה ולשפר את ביצועי הרשתות.

אחד האתגרים הקריטיים בעיצוב מעבדים הוא הניהול של מעבר הנתונים מזיכרון המערכת אל יחידות העיבוד, בעיה המכונה צוואר הבקבוק של von Neumann. בעוד שרוב השבבים נשענים על זיכרון חיצוני מסוג DRAM כדי לאחסן את משקלי המודל, גישתה של Grock הייתה לסלק לחלוטין את הזיכרון החיצוני ולהסתמך על זיכרון SRAM פנימי מהיר במיוחד. גישה זו מאפשרת לחברה לתכנן ולתזמן כל פעולה ופקודה בדיוק מוחלט עד רמת מחזור השעון, מה שמאיץ משמעותית את יצירת הטקסט ומייתר את הצורך בבדיקות המתנה בזמן אמת.

למרות היתרונות של מעבדים ייעודיים כמו ה-LPU של Grock, לכל ארכיטקטורה יש פשרות משלה מבחינת עלות, גודל מודל וחלוקת המשימות. פתרונות מתקדמים משלבים כיום בין סוגים שונים של מעבדים, תוך חלוקת העבודה לשלבים שונים כמו עיבוד מקביל של הנחיות וניהול זיכרון מטמון. שיתופי פעולה אלו ממחישים כיצד שוק חומרת הבינה המלאכותית ממשיך להתפתח באמצעות התאמה מדויקת של סוג השבב למשימה הספציפית שהוא נדרש לבצע.

אזכורים בכתבה

  • תוכנות ושירותים: XLA · Jax
  • אירועים: GTC
  • אנשים: ג'ונתן רוס · ג'ף דין · ג'ון פון ניומן · ג'ון באקוס
  • מקומות: סיאטל · וושינגטון
  • חברות וארגונים: Nvidia · Google · Amazon · Meta · OpenAI · Grock · DeepMind · Intel · Cerebras
  • מדינות: ארצות הברית
thebuzz · חדשות ורעיונות על בינה מלאכותית