אמזון SageMaker לקוחות יכולים להציג ולנהל את מגבלות המכסות שלהם באמצעות מכסות שירות. בנוסף, הם יכולים להציג מדדי ניצול כמעט בזמן אמת וליצור אמזון CloudWatch מדדים כדי להציג ולבצע שאילתות פרוגרמטית במכסות SageMaker.
SageMaker עוזר לך לבנות, לאמן ולפרוס מודלים של למידת מכונה (ML) בקלות. למידע נוסף, עיין ב תחילת העבודה עם Amazon SageMaker. מכסות שירות מפשטות את ניהול ההגבלה בכך שהיא מאפשרת לך להציג ולנהל את המכסות שלך עבור SageMaker ממיקום מרכזי.
עם מכסות שירות, אתה יכול להציג את המספר המרבי של משאבים, פעולות או פריטים בחשבון AWS שלך או באזור AWS. אתה יכול גם להשתמש במכסות שירות כדי לבקש הגדלה עבור מכסות מתכווננות.
עם השימוש ההולך וגובר בפרקטיקות MLOps, ולפיכך הביקוש למשאבים המיועדים לניסויים והכשרה מחדש של מודל ML, יותר לקוחות צריכים להפעיל מספר מופעים, לרוב מאותו סוג מופע בו-זמנית.
צוותי מדעי נתונים רבים עובדים לעתים קרובות במקביל, תוך שימוש במספר מופעים לעיבוד, הדרכה וכיוונון במקביל. בעבר, משתמשים היו מגיעים לפעמים למגבלת חשבון ניתנת להתאמה עבור סוג מופע מסוים ויצטרכו לבקש באופן ידני הגדלת מגבלה מ-AWS.
כדי לבקש הגדלת מכסה באופן ידני מה ממשק המשתמש של מכסות שירות, אתה יכול לבחור את המכסה מהרשימה ולבחור בקש הגדלת מכסה. למידע נוסף, עיין ב מבקש הגדלת מכסה.
בפוסט זה, אנו מראים כיצד ניתן להשתמש בתכונות החדשות כדי לבקש אוטומטית הגדלת הגבלה כאשר מגיעים לרמה גבוהה של מופעים.
סקירת פתרונות
התרשים הבא ממחיש את ארכיטקטורת הפתרונות.
ארכיטקטורה זו כוללת את זרימת העבודה הבאה:
- מדד CloudWatch מנטר את השימוש במשאב. אזעקת CloudWatch מופעלת כאשר השימוש במשאבים חורג מסף מוגדר מראש.
- נשלחת הודעה אל שירות התראה פשוט של אמזון (Amazon SNS).
- ההודעה מתקבלת על ידי א AWS למבדה פונקציה.
- פונקציית Lambda מבקשת להגדיל את המכסה.
מלבד בקשה להגדלת מכסה עבור החשבון הספציפי, פונקציית Lambda יכולה גם להוסיף את הגדלת המכסה ל- תבנית ארגון (עד 10 מכסות). בדרך זו, כל חשבון חדש שנוצר תחת ארגון AWS נתון מקבל את בקשות המכסה המוגדלות כברירת מחדל.
תנאים מוקדמים
השלם את השלבים המוקדמים הבאים:
- הגדר חשבון AWS וליצור AWS זהות וניהול גישה משתמש (IAM). להנחיות, עיין ב אבטח את חשבון AWS שלך.
- התקן את AWS SAM CLI.
פרוס באמצעות מודל יישום ללא שרת של AWS
כדי לפרוס את האפליקציה באמצעות GitHub ריפו, הפעל את הפקודה הבאה בטרמינל:
לאחר פריסת הפתרון, אמורה להיות לך אזעקה חדשה בקונסולת CloudWatch. אזעקה זו עוקבת אחר השימוש עבור מופעי מחברת SageMaker עבור מופע ml.t3.medium.
אם השימוש במשאבים שלך מגיע ליותר מ-50%, האזעקה מופעלת ופונקציית Lambda מבקשת הגדלה.
אם החשבון שיש לך הוא חלק מארגון AWS ויש לך את תבנית בקשה למכסה מופעלת, אתה אמור לראות גם את העליות הללו בתבנית, אם לתבנית יש חריצים זמינים. בדרך זו, לחשבונות חדשים מאותו ארגון יש גם את ההגדלות המוגדרות עם היצירה.
פרוס באמצעות קונסולת CloudWatch
כדי לפרוס את האפליקציה באמצעות קונסולת CloudWatch, בצע את השלבים הבאים:
- במסוף CloudWatch, בחר כל האזעקות בחלונית הניווט.
- לבחור צור אזעקה.
- לבחור בחר מדד.
- לבחור נוֹהָג.
- בחר את המדד שברצונך לנטר.
- בחר את המצב שבו תרצה שהאזעקה תופעל.
לקבלת תצורות אפשריות נוספות בעת הגדרת האזעקה, ראה צור אזעקת CloudWatch על סמך סף סטטי.
- הגדר את נושא ה-SNS כדי לקבל הודעה על האזעקה.
אתה יכול גם להשתמש ב-Amazon SNS כדי להפעיל פונקציית Lambda כאשר האזעקה מופעלת. לִרְאוֹת שימוש ב-AWS Lambda עם Amazon SNS לקבלת מידע נוסף.
- בעד שם אזעקה, הכנס שם.
- לבחור הַבָּא.
- לבחור צור אזעקה.
לנקות את
כדי לנקות את המשאבים שנוצרו כחלק מהפוסט הזה, הקפידו למחוק את כל הערימות שנוצרו. כדי לעשות זאת, הפעל את הפקודה הבאה:
סיכום
בפוסט זה, הראינו כיצד ניתן להשתמש באינטגרציה החדשה של SageMaker עם מכסות שירות כדי להפוך את הבקשות להגדלת המכסה עבור משאבי SageMaker לאוטומטיים. בדרך זו, צוותי מדעי הנתונים יכולים לעבוד במקביל ולצמצם בעיות הקשורות לאי זמינות של מופעים.
אתה יכול ללמוד עוד על מכסות Amazon SageMaker על ידי גישה ל- תיעוד. תוכל גם ללמוד עוד על מכסות שירות כאן.
על המחברים
ברונו קליין הוא מהנדס למידת מכונה בצוות AWS ProServe. הוא נהנה במיוחד ליצור אוטומציות ולשפר את מחזור החיים של דגמים בייצור. בזמנו הפנוי הוא אוהב לבלות בחוץ ולטייל.
פאראס מהרה הוא מנהל מוצר בכיר ב-AWS. הוא מתמקד בסיוע בבניית אמזון SageMaker הדרכה ועיבוד. בזמנו הפנוי, פאראס נהנה לבלות עם משפחתו ולרכוב על אופני כביש באזור המפרץ. אתה יכול למצוא אותו על לינקדין.
- הפצת תוכן ויחסי ציבור מופעל על ידי SEO. קבל הגברה היום.
- Platoblockchain. Web3 Metaverse Intelligence. ידע מוגבר. גישה כאן.
- מקור: https://aws.amazon.com/blogs/machine-learning/best-practices-for-viewing-and-querying-amazon-sagemaker-service-quota-usage/
- :הוא
- $ למעלה
- 10
- 100
- 7
- 8
- a
- אודות
- גישה
- גישה
- חֶשְׁבּוֹן
- חשבונות
- פעולות
- תוספת
- מתכוונן
- אזעקה
- תעשיות
- מאפשר
- אמזון בעברית
- אמזון SageMaker
- ו
- בקשה
- ארכיטקטורה
- AREA
- סביב
- AS
- At
- אוטומטי
- באופן אוטומטי
- זמין
- AWS
- AWS למבדה
- מבוסס
- מִפרָץ
- BE
- הטוב ביותר
- שיטות עבודה מומלצות
- מעבר
- לִבנוֹת
- by
- CAN
- CD
- מֶרכָּזִי
- מסוים
- לבחור
- להשלים
- מצב
- תצורות
- קונסול
- לִיצוֹר
- נוצר
- יוצרים
- יצירה
- לקוחות
- נתונים
- מדע נתונים
- בְּרִירַת מֶחדָל
- דרישה
- לפרוס
- פרס
- יעוד
- יעילות
- מופעל
- מהנדס
- זן
- Ether (ETH)
- משפחה
- תכונות
- מרוכז
- הבא
- בעד
- חופשי
- החל מ-
- פונקציה
- Git
- נתן
- Goes
- יש
- עזרה
- עוזר
- גָבוֹהַ
- טיולים
- איך
- HTML
- http
- HTTPS
- IAM
- זהות
- שיפור
- in
- כולל
- להגדיל
- גדל
- עליות
- גדל
- מידע
- למשל
- הוראות
- השתלבות
- בעיות
- פריטים
- jpg
- לִלמוֹד
- למידה
- רמה
- מעגל החיים
- כמו
- להגביל
- גבולות
- לינקדין
- רשימה
- מיקום
- מכונה
- למידת מכונה
- לעשות
- לנהל
- ניהול
- מנהל
- באופן ידני
- מקסימום
- בינוני
- הודעה
- מטרי
- מדדים
- ML
- MLOps
- מודל
- מודלים
- צג
- צגים
- יותר
- מספר
- שם
- ניווט
- ליד
- צורך
- חדש
- תכונות חדשות
- הבא
- מחברה
- הודעה
- מספר
- of
- on
- ארגון
- בחוץ
- זגוגית
- מקביל
- חלק
- מסוים
- במיוחד
- אפלטון
- מודיעין אפלטון
- אפלטון נתונים
- אפשרי
- הודעה
- פרקטיקות
- קוֹדֶם
- תהליך
- המוצר
- מנהל מוצר
- הפקה
- לְהַגִיעַ
- הגיע
- מגיע
- זמן אמת
- קיבלו
- להפחית
- באזור
- קָשׁוּר
- לבקש
- בקשות
- משאב
- משאבים
- הסבה מקצועית
- כביש
- הפעלה
- בעל חכמים
- סם
- אותו
- מדע
- לחצני מצוקה לפנסיונרים
- ללא שרת
- שרות
- כמה
- צריך
- לְהַצִיג
- פָּשׁוּט
- חריצי
- פִּתָרוֹן
- כמה
- ספציפי
- לבלות
- הוצאה
- ערימות
- החל
- צעדים
- נבחרת
- צוותי
- תבנית
- מסוף
- זֶה
- אל האני
- שֶׁלָהֶם
- לכן
- סף
- דרך
- זמן
- ל
- נושא
- רכבת
- הדרכה
- להפעיל
- מופעל
- נָכוֹן
- תחת
- נוֹהָג
- להשתמש
- משתמש
- משתמשים
- לצפיה
- דֶרֶך..
- עם
- תיק עבודות
- זרימת עבודה
- היה
- זפירנט