המדריך האסטרטגי להקמת חוות שרתים לבינה מלאכותית

לאחר שבימים האחרונים הכנתי לכם סקירות על הדאטה סנטרים בישראל, ועל העסקה של עומר אדם שהתפרסמה אתמול, בואו נבין את תהליך הבנייה, התשתית והלוגיסטיקה הנדרשת כדי להקים דאטה סנטר.
פירקתי בשבילכם את שלבי ההקמה המורכבים והחלטות המפתח ההנדסיות הנדרשות לבניית מתקני מחשוב מתקדמים אלו.

תשתיות הליבה של מרכז הנתונים

מרכז נתונים המיועד ליישומי בינה מלאכותית מבוסס על ארבע מערכות מרכזיות הפועלות בתיאום מלא. מערכת המחשוב נשענת על מעבדים גרפיים (GPU) ויחידות עיבוד טנזוריאליות (TPU) המאפשרים מחשוב מקבילי בעוצמה גבוהה לטובת אימון מודלים של למידה עמוקה.
מערכת האחסון בנויה בארכיטקטורה מבוזרת המפרידה בין נתונים חמים המאוחסנים על כונני SSD מהירים לבין נתונים קרים הנשמרים על גבי כונני HDD.
מערכת הרשת משתמשת בטכנולוגיות כגון InfiniBand עם רוחב פס של 100GbE ומעלה במטרה למנוע צווארי בקבוק בתנועת הנתונים.
לבסוף מערכת החשמל והקירור מהווה את עמוד השדרה של המתקן שכן עומסי החום הקיצוניים של רכיבי ה-AI מחייבים מעבר לקירור נוזלי ומערכות אנרגיה יציבות.


בתמונות אנו רואים חוות שרתים מבחוץ ומבפנים.

בואו נבין את תהליך הההקמה, שלב התכנון האסטרטגי 

בשלב התכנון הראשוני קיימת חשיבות מכרעת להבחנה בין תשתיות המיועדות לאימון מודלים לבין תשתיות המיועדות להסקה.
תהליך האימון הוא עתיר משאבים ומחייב כוח עיבוד עצום וזיכרון רחב ולכן התשתית תתמקד בצבירי מחשוב מסיביים עם מערכות קירור מתקדמות. מנגד שלב ההסקה מתרחש כאשר המודל כבר מבצע משימות עבור משתמשי הקצה בזמן אמת.
תשתית זו מתמקדת במינימום שיהוי וביעילות אנרגטית והיא תהיה לרוב מבוזרת יותר בשיטת מחשוב קצה כדי להיות קרובה פיזית למשתמשים.
הגדרת היחס בין שני היעדים הללו קובעת את סוג השרתים ואת עלויות התפעול לטווח הארוך.

בחירת אתר ויכולת פינוי חום

מיקום מרכז הנתונים הוא החלטה אסטרטגית המשפיעה על היעילות התפעולית כולה.
מעבר לצורך בקרבה למקורות אנרגיה יציבים קיימת חשיבות עליונה ליכולת פינוי החום, אתרים בעלי גישה למקורות מים טבעיים או כאלו הממוקמים באקלים קר מאפשרים להסתמך על קירור חופשי המפחית את הצורך במערכות מיזוג אוויר זוללות אנרגיה.
תכנון אתר נכון מאפשר הטמעת תשתיות קירור נוזלי המפנות את החום ישירות מהשבבים ובכך מאפשרות צפיפות מחשוב גבוהה בשטח מצומצם תוך שמירה על יציבות המערכת.

קיימות ומרכזי נתונים ירוקים

בעידן הנוכחי הקיימות הפכה מדרישה מוסרית לצורך עסקי ותפעולי מובהק.
מרכז נתונים ירוק מתמקד במקסום היעילות האנרגטית דרך שילוב בין אנרגיות מתחדשות כמו פאנלים סולאריים לבין ניהול חכם של רשת החשמל.
השימוש בבינה מלאכותית לניהול המתקן עצמו מאפשר כיוונון דינמי של מערכות הקירור והחשמל בזמן אמת בהתאם לעומסים.
המטרה היא הגעה למדד הקרוב ככל האפשר לערך 1.0 המעיד על כך שכל יחידת אנרגיה משמשת למחשוב נטו ללא בזבוז על מערכות היקפיות.

עיצוב תשתיות החשמל והמחשוב

עיצוב התשתית דורש סינרגיה בין כוח המחשוב לאספקת האנרגיה שכן שרתי AI מצוידים במערכי GPUs מבצעים מיליארדי חישובים בו זמנית וצורכים כמות חשמל גבוהה משמעותית מהסטנדרט המקובל.
לעיתים הצריכה עולה על 10kW ואף מגיעה ל-50kW לארון שרתים בודד, תכנון מערכת החשמל כולל תשתיות הספק בצפיפות גבוהה ויחידות אל פסק מודולריות המבטיחות רציפות עבודה ללא נקודות כשל. חלוקת עומסים חכמה מונעת התחממות יתר של כבלי ההזנה ומבטיחה ביצועי מחשוב מקסימליים לאורך זמן.

הטמעה ובדיקות עומסים

שלב ההטמעה הפיזי מתבצע כיום בגישה של תשתית כשירות מהירה תוך שימוש בשיטות בנייה מודולריות. הרכיבים מגיעים מהמפעל כיחידות מורכבות מה שמאפשר הרכבת מודולים מהירה באתר וצמצום טעויות אנוש.
לאחר ההרכבה מבוצע שלב קריטי של בדיקות עומסים הכולל סימולציות של אימון מודלים כבדים, הבדיקה מוודאת שמערכת החשמל עומדת בקפיצות המתח ושמערכת הקירור מפנה את החום במהירות הנדרשת ללא תקלות ברשת התקשורת.
רק לאחר עמידה בסטנדרטים הללו המערכת הופכת למבצעית.

אתגרי הביצוע המרכזיים

הקמת חוות שרתים ל-AI מציבה אתגרים הנדסיים מורכבים ובהם צפיפות הספק גבוהה במיוחד של ארונות השרתים הדורשת פתרונות ניהול תרמי מתקדמים.
הקירור המסורתי באמצעות אוויר אינו מספיק עוד וקיים צורך במעבר לפתרונות קירור ישיר לשבב, בנוסף מהירות הפריסה היא קריטית בשוק תחרותי ולכן ההמלצה המקצועית היא לעבור לבנייה מודולרית המקצרת את זמן ההקמה בשיעור של כ-50%.

הנהנות העיקריות

(Vertiv (VRT: מתמחה בפתרונות קירור וניהול חשמל ותרמי, ונהנית מהביקוש הגובר למערכות קירור נוזלי מתקדמות, שהן קריטיות לפינוי החום העצום שמייצרים שבבי ה-AI החדשים בתוך חוות השרתים.

(Quanta Services (PWR: עוסקת בבניית תשתיות חשמל ורשתות הולכה, ומפיקה תועלת מהצורך העצום בבניית קווי מתח גבוה ותחנות משנה ייעודיות לחיבור חוות השרתים עתירות האנרגיה ישירות לרשת החשמל הארצית.

(Eaton (ETN: מספקת ציוד חשמלי וניהול מתח גבוה, ונהנית מצבר הזמנות חסר תקדים למערכות אל-פסק  שנאים ולוחות חשמל הנדרשים כדי להבטיח רציפות ויציבות חשמלית בתוך מתקני המחשוב המורכבים.

(Comfort Systems USA (FIX: מתמחה במערכות מכניות ו-HVAC מורכבות, ומנצלת את מומחיותה בשטח להתקנת תשתיות אוורור, צנרת וקירור באתר הבנייה עצמו, מה שמבטיח את סירקולציית האוויר הנדרשת לפעילותן התקינה של חוות השרתים הענקיות.

כמובן שיש עוד המון חברות שנהנות מהצורך האדיר בבניית הדאטה סנטרים, ואלו שציינתי עבורכם למעלה, הן העיקריות העתידות להמשיך להנות מהמגמה. 

סיכום ותובנות

הקמת מרכז נתונים לבינה מלאכותית היא משימה הנדסית ואסטרטגית המשלבת עוצמת מחשוב חסרת תקדים עם ניהול אנרגטי קפדני.
המעבר לבנייה מודולרית ולקירור נוזלי אינו רק שיפור טכנולוגי אלא תנאי הכרחי ליציבות תפעולית ולרווחיות בשוק המחשוב המודרני, הבנת רכיבי הליבה של התהליך מאפשרת למשקיעים ולמנהלים להעריך נכונה את היכולות של החברות הפועלות בתחום התשתית הטכנולוגית בישראל ובעולם.