מעקב אחרי המצב הבריאותי וניצול המשאבים

אדמינים ב-BigQuery יכולים לעקוב אחרי התקינות של הארגון, השימוש במשבצות והביצועים של העבודות לאורך זמן באמצעות תרשימים של תקינות תפעולית וניצול משאבים. ‫BigQuery מספק תרשימים שניתנים להגדרה כדי לעזור לכם ב:

• מעקב אחרי תקינות התפעול של BigQuery. מעקב בזמן אמת אחרי תקינות הפעילות ב-BigQuery הוא מערכת מעקב מרכזית שמאפשרת לכם לעקוב אחרי השימוש ב-BigQuery בארגון בכמה מיקומים.

• איך צופים בניצול משאבים ב-BigQuery שימוש בנתונים היסטוריים כדי לבצע ניתוח שורש הבעיה, לתכנן את הקיבולת ולאבחן שינויים בביצועים.

כדי לעקוב אחרי משימות של שאילתות ספציפיות או משימות מצטברות לפי בעלים, פרויקט או הזמנה, אפשר לעיין במאמר בנושא מעקב אחרי משימות.

לפני שמתחילים

• כדי לראות את תקינות הפעולה, צריך להשתמש בהזמנות שאפשר לגשת אליהן באמצעות פרויקט ניהול. ההגדרה הזו לא נדרשת כדי לצפות בתרשימים של ניצול המשאבים.

התפקידים הנדרשים

כדי לקבל את ההרשאות שדרושות בשביל להציג את כל הנתונים בתרשימים של תקינות תפעולית וניצול משאבים, אתם צריכים לבקש מהאדמין להקצות לכם את תפקידי ה-IAM הבאים בארגון:

• BigQuery Resource Viewer (roles/bigquery.resourceViewer)
• BigQuery Metadata Viewer (roles/bigquery.metadataViewer)

להסבר על מתן תפקידים, ראו איך מנהלים את הגישה ברמת הפרויקט, התיקייה והארגון.

התפקידים המוגדרים מראש האלה כוללים את ההרשאות שנדרשות כדי להציג את כל הנתונים בתרשימים של תקינות תפעולית וניצול משאבים. כדי לראות בדיוק אילו הרשאות נדרשות, אפשר להרחיב את הקטע ההרשאות הנדרשות:

יכול להיות שתקבלו את ההרשאות האלה באמצעות תפקידים בהתאמה אישית או תפקידים מוגדרים מראש אחרים.

מעקב אחר התקינות התפעולית בארגון

במרכז הבקרה לבדיקת תקינות הפעילות מוצגים מדדים מרכזיים של הארגון וההזמנות שלו בכל המיקומים שבהם יש לכם הזמנות. בלוח הבקרה הזה אפשר לעקוב אחרי המדדים הבאים:

• שימוש ביחידת קיבולת (Slot)
• שימוש בהצגה בסדר אקראי
• הפעלות בו-זמניות של משימות
• שגיאות
• משך העבודה
• בייטים שעובדו
• סה"כ נפח אחסון

צפייה בתרשימים של תקינות תפעולית

כדי לראות מידע על התקינות התפעולית של הארגון, פועלים לפי השלבים הבאים:

1. במסוף Google Cloud , עוברים לדף Monitoring של BigQuery.

   מעבר למעקב

2. בוחרים את פרויקט הניהול שבו השתמשתם כדי לרכוש משבצות וליצור הזמנות.

3. בדף Monitoring, עוברים לכרטיסייה Operational health כדי לראות סיכום של המדדים העיקריים של הארגון לגבי כל המיקומים וההזמנות.

4. אופציונלי: כדי לראות מדדים בזמן אמת, שבהם השאילתות מורצות על נתונים חדשים כל חמש דקות, לוחצים על המתג נתונים בזמן אמת. כברירת מחדל, ההגדרה הזו מושבתת והנתונים לא מתעדכנים במשך שעה לכל היותר.

5. כדי לסנן את המדדים, מגדירים את השדות הבאים:

   • ברשימה Select location (בחירת מיקום), בוחרים אזור למעקב.
   • ברשימה Select reservation, בוחרים את ההזמנה.
   • ברשימה Select project, בוחרים את הפרויקט.
   • ברשימה Time range, בוחרים טווח זמן.

6. אופציונלי: כדי לראות פרטים נוספים על תקינות תפעולית באמצעות תרשים של ניצול משאבים או כלי לבדיקת משימות, לוחצים על מידע נוסף.

מערכת BigQuery אוספת את המדדים על ידי שליחת שאילתות אל INFORMATION_SCHEMA התצוגות הבאות:

• INFORMATION_SCHEMA.JOBS
• INFORMATION_SCHEMA.JOBS_TIMELINE
• INFORMATION_SCHEMA.RESERVATIONS
• INFORMATION_SCHEMA.TABLE_STORAGE

דוגמה לשאילתה שמשכפלת את תרשים ציר הזמן של השימוש במשבצות שנמצא בתרשימי משאבים אדמיניסטרטיביים מופיעה במאמר התאמה של התנהגות השימוש במשבצות מתרשימי משאבים אדמיניסטרטיביים.

תצוגות

בכרטיסייה Operational health מוצגים הסיכום ותצוגות מפורטות של הנתונים הבאים.

תצוגת סיכום

בתצוגת הסיכום אפשר לראות את התקינות של מערכות המשנה בארגון, כולל הזמנות ואזורים, ב-30 הדקות האחרונות.

כדי להציג את תצוגת הסיכום:

• בכרטיסייה Operational health, ברשימה Select location, בוחרים באפשרות All locations.

תצוגה מפורטת

בתצוגה המפורטת מוצגים תרשימי ציר זמן מפורטים של מדדים שונים ברמת המיקום או ההזמנה.

כדי להציג את התצוגה המפורטת:

• בכרטיסייה Operational health, ברשימה Select location, בוחרים את האזור או המהדורה.

אפשר לצמצם את הנתונים שמוצגים בתצוגה המפורטת באמצעות המסננים האופציונליים הבאים:

• ברשימה Select reservation, בוחרים את שם ההזמנה.
• ברשימה Select project, בוחרים את הפרויקט.

תרשימים

‫BigQuery מספק את הטבלה ואת אפשרויות התרשים הבאות, שמאפשרות לכם לבחון את מדדי התקינות התפעולית בפירוט.

טבלת סיכום

בטבלאות הסיכום מוצגים המדדים הבאים:

• שימוש ביחידת קיבולת (Slot). השימוש הממוצע ביחידות קיבולת. הקיבולת הכוללת של המשבצות שווה לקיבולת הבסיסית ולקיבולת המקסימלית שמתרחבת אוטומטית.
• שימוש בהפעלה אקראית. הערך המקסימלי של כל יחסי השימוש הממוצעים בהזמנות ששונו.
• בו-זמניות. המספר המקסימלי של משימות שפועלות בו-זמנית.
• בייטים שעובדו. מספר הבייטים הכולל שעובד על ידי משימות שהושלמו.
• משך העבודה. זמן הריצה הממוצע של המשימות שהושלמו, שמחושב מהזמן שבו המשימה נוצרה ועד הזמן שבו היא הסתיימה.
• נפח אחסון כולל. המספר הכולל של בייטים לוגיים פעילים בזמן העדכון האחרון.

בתצוגה מוצגות שתי טבלאות סיכום: סיכום לפי מיקום וסיכום הזמנות. כל שורה בטבלה מייצגת שימוש במיקום אחד או בהזמנה אחת.

בטבלאות מוצגים מדדים ל-30 הדקות שלפני העדכון האחרון. אם האפשרות נתונים בזמן אמת מופעלת, הנתונים בשאילתה מתעדכנים כל חמש דקות. אם האפשרות נתונים בזמן אמת מושבתת, מידת הטריות המקסימלית של הנתונים היא כשעה.

תא הטבלה מסומן בצבע אם ערך המדד גבוה מהסף שהוגדר מראש, ואם יש מספר מוגדל של תובנות לגבי ביצועים עבור משימות חוזרות:

• אם ערך המדד ב-30 הדקות שלפני העדכון האחרון גדול מערך P99 של השימוש בשבוע שעבר באותו היום, התא בטבלה מסומן ברקע כחול כהה.
• אם ערך המדד במהלך 30 הדקות נמצא בין ערכי האחוזון ה-95 והאחוזון ה-99 של השימוש בשבוע האחרון באותו היום, התא בטבלה יסומן ברקע כחול בהיר.

כל ערכי הסף מוגדרים מראש ואי אפשר להתאים אותם אישית. כדי לבדוק את ערך הסף, לוחצים על מידע מידע.

סינון נתונים

אפשר לסנן את הנתונים בתרשימים לפי הערכים הבאים:

• מיקום אפשר לראות את האזורים שבהם הייתה פעילות בארגון ב-30 הימים האחרונים. בתצוגת הסיכום מוצגת טבלה עם סיכום השימוש בכל האזורים הפעילים.
• הזמנה. השדה הזה זמין רק בתצוגה מפורטת. כל ההזמנות שבבעלות פרויקט האדמין זמינות. אפשר לבחור רק הזמנה אחת.
• פרויקט. השדה הזה זמין רק בתצוגה מפורטת. כל הפרויקטים שיש בהם תנועה בארגון זמינים. אפשר לבחור רק פרויקט אחד.
• טווח תאריכים. השדה הזה זמין רק בתצוגה מפורטת. היא משפיעה על תרשימי ציר הזמן של המדדים ועל תרשים הטבעת של השגיאות בתצוגה המפורטת. הקנה מידה של הנתונים בתרשימי ציר הזמן של המדדים מותאם אוטומטית בהתאם לטווח הזמן שנבחר.

תרשים של שאילתות פעילות מובילות

בתרשים הזה מוצגים עשרת הג'ובים המובילים עם משאבים פעילים, בסדר יורד. בתפריט הנפתח, אפשר לבחור אפשרות מיון לפי השימוש במשבצות הזמן או משך העבודה. מזהה המשימה ומספר השימוש הרלוונטי במשאבים מוצגים בתרשים העמודות. לוחצים על עולם תוכן מורחב או על מזהה המשימה בתרשים העליון של השאילתות הפעילות כדי לראות פרטים נוספים בjobs explorer. כאן אפשר לקרוא מידע נוסף על פרטי הביצוע ועל אבחון בעיות בביצועים של עבודות BigQuery.

תרשים טבעת של שגיאות

בתרשים הזה מוצג החלק היחסי של הסיבות העיקריות לכישלון בתקופת הזמן שנבחרה. בתצוגת הסיכום, ברירת המחדל היא 30 הדקות האחרונות. בתצוגה המפורטת, הכיסוי נקבע לפי הכלי לבחירת טווח התאריכים. אפשר לקבץ את השגיאות לפי סוג, פרויקט בעלים או הזמנה. מספר המשימות שנכשלו מוצג בתרשים הטבעת.

תרשימי ציר זמן של מדדים

בתרשימים מוצגת סקירה כללית של מדדים נתמכים לפרק זמן של עד 30 יום. תקופת הזמן שמוגדרת כברירת מחדל היא שעה אחת. ככל שפרק הזמן שנבחר משתנה, רמת הפירוט של כל נקודה על הגרף בגרף משתנה באופן אוטומטי.

בתרשימים האלה מוצג ערך מצטבר של אזור או הזמנה. הצגת נתונים של כמה אזורים או כמה הזמנות לא אפשרית.

בתרשימי ציר הזמן של המדדים אפשר להשתמש במדדים הבאים:

• שימוש ביחידת קיבולת (Slot). השימוש הממוצע במשבצות הזמן בתקופה שנבחרה. הוא מציג את השימוש הכולל במשבצות מכל המשימות, וממשימות שנכשלו בנפרד.
• בו-זמניות של משימות. המספר המקסימלי של משימות שפועלות בו-זמנית בתקופת הזמן שנבחרה. הוא מציג את מספר המשימות הפעילות ומספר המשימות בהמתנה בנפרד, ומוצג כתרשים עמודות מוערם.
• בייטים שנסרקו. המספר הכולל של הבייטים שעברו עיבוד על ידי משימות שהושלמו בטווח הזמן שנבחר.
• הפעלה אקראית. הערך המקסימלי של כל יחסי השימוש הממוצעים בהזמנות בתקופה שנבחרה.
• משך העבודה. זמן הריצה הממוצע של משימות שהושלמו בתקופה שנבחרה, שמחושב מזמן יצירת המשימה ועד זמן סיום המשימה.
• שגיאה לפי סוג. בתרשים הטבעת של השגיאות מוצג שיעור הגורמים השונים לכישלון בתקופה שנבחרה.

בנוסף למגמות המדדים, בתרשימים מוצגים קווי ייחוס של ערכי המדדים P95 ו-P99 של השימוש בשבוע האחרון באותו היום. בתרשים Job concurrency מוצג הסף של סכום המשימות בהמתנה והמשימות הפעילות. הערכים האלה משמשים כסף הצבעים בטבלת הסיכום.

כדי לקבל מידע נוסף על התרשים, לוחצים על עולם תוכן מורחב. תועברו לכרטיסייה Resource utilization (ניצול משאבים).

טבלת התובנות

בטבלה הזו מוצגות שגיאות שקשורות למכסת השימוש, שגיאות שקשורות לסירוב גישה ותובנות לגבי הביצועים שנאספו במהלך הרצת המשימות בפרק הזמן שנבחר. התובנות מצטברות ברמת ההזמנה. כל שורה מספקת מידע על סוג התובנה, המיקום, ההזמנה, פרטי התובנה ומזהי משימות לדוגמה. לוחצים על מזהי המשימות כדי לראות פרטים נוספים על המשימות בכלי לבדיקת משימות. בתצוגת הסיכום, מסגרת הזמן שמוגדרת כברירת מחדל לתצפית היא 30 הדקות האחרונות. בתצוגה המפורטת, בורר טווח הזמן קובע את התקופה הספציפית שבה מוצגים נתוני התצפית.

מעקב אחרי התקינות התפעולית של פרויקט יחיד

לוח הבקרה של תקינות הפרויקט הוא תצוגת ברירת המחדל שמופיעה אם אין לכם גישה לארגון כולו, או אם הפרויקט לא כולל הזמנות. התצוגה הזו יכולה לעזור לאנליסטים של פרויקטים לעקוב אחרי תקינות המערכת בפרויקטים שלהם, בדומה ללוח הבקרה של התקינות התפעולית ברמת הארגון, אבל היא מציגה רק נתונים ברמת הפרויקט בתרשימים ובמסננים שלה.

הצגת ניצול המשאבים ב-BigQuery

תרשימים של משאבי BigQuery עוזרים לעקוב אחרי השימוש במשאבים בעבר כדי לתכנן את הצרכים העתידיים ולפתור בעיות בביצועים.

התרשימים אוספים מדדים על ידי שליחת שאילתות לתצוגות הבאות של INFORMATION_SCHEMA:

• INFORMATION_SCHEMA.JOBS
• INFORMATION_SCHEMA.JOBS_TIMELINE
• INFORMATION_SCHEMA.RESERVATION_CHANGES

אפשר לעדכן את הנתונים בזמן אמת, עד 30 ימים אחורה.

דוגמה לשאילתה שמשכפלת את תרשים ציר הזמן של השימוש במשבצות שנמצא בתרשימי משאבים אדמיניסטרטיביים מופיעה במאמר התאמה של התנהגות השימוש במשבצות מתרשימי משאבים אדמיניסטרטיביים.

כשמציגים את ניצול המשאבים, אפשר להגדיר את האפשרויות הבאות:

• בתרשים ציר הזמן של האירועים מוצגת סקירה כללית של הנתונים על פני תקופה של עד 30 יום. ברירת המחדל היא 6 שעות.

• בתרשים הראשי מוצגים מדדים נבחרים, כמו שימוש במשבצות זמן או בבייטים שעברו עיבוד, לאורך זמן עבור הארגון או פרויקט הניהול. במקרא של התרשים מופיעים פרטים נוספים על הנתונים שמוצגים.

• בחלונית הגדרת התרשים אפשר לבחור תצוגות מוגדרות מראש של המדדים או להתאים אישית את המדדים לתצוגות.

תרשים ניצול המשאבים כולל את הרכיבים הבאים:

• בכרטיסייה 'ניצול משאבים', מעבירים את הסמן מעל צ'יפ הסטטוס בחלק העליון של התרשים כדי להציג מידע נוסף על מדד.

• בצ'יפים של הסטטוס מוצגים גם הנתונים הבאים:

  • אם המדד עדיין בטעינה, מוצג סמל טעינה.
  • אם המדד מבוסס על נתונים לא עדכניים, מוצג סמל של שעון.
  • אם אי אפשר לטעון את המדד בגלל מסננים ברמת הדף שלא נתמכים, המדד מסומן בקו חוצה.
  • אם המדד לא נטען, צ'יפ הסטטוס מודגש.

הצגה והגדרה של תרשימי ניצול משאבים

כדי לראות ולהגדיר תרשימים של ניצול משאבים:

1. במסוף Google Cloud , עוברים לדף Monitoring של BigQuery.

   מעבר למעקב

2. בוחרים את הפרויקט. אדמינים שמנטרים את השימוש במשאבי הזמנה צריכים לבחור את פרויקט הניהול שבו השתמשו כדי לקנות משבצות וליצור הזמנות. אם אתם אנליסטים של נתונים שרוצים לעקוב אחרי השימוש במשאבי עבודה, אתם צריכים לבחור את הפרויקט המתאים.

3. בדף Monitoring, עוברים לכרטיסייה Resource utilization כדי לראות סיכום של השימוש במשאבים, עם פירוט לפי מיקום.

4. בוחרים תקופת זמן למדדים בתצוגה הזו, למשל יום אחד. כדי לראות מדדים בזמן אמת, שבהם השאילתות מורצות על נתונים עדכניים, לוחצים על המתג נתונים בזמן אמת. ההגדרה הזו מושבתת כברירת מחדל כדי לשפר את הביצועים, והנתונים לא מתעדכנים במשך שעה לכל היותר.

5. בחלונית הגדרת התרשים, מגדירים את השדות הבאים:

   • בשדה תצוגת מדדים, בוחרים אחת מהתצוגות.
   • בשדה מדדים, בוחרים מדד להצגה. אפשר להוסיף או לערוך מדד.
   • בשדה קיבוץ לפי, בוחרים את אופן קיבוץ הנתונים.
   • בשדה Filters, בוחרים איך לסנן את הנתונים.

6. כדי לשמור את השינויים שביצעתם בהגדרות התרשים, לוחצים על החלה.

תצוגת מדדים

‫BigQuery מספק תצוגות מוגדרות מראש של מדדי ניצול המשאבים. בקטעים הבאים מתוארים המדדים שאפשר להגדיר בתצוגות האלה.

שימוש במשבצת הזמנה

בתצוגה הזו מוצגים מדדים לגבי פירוט השימוש במשבצות בהזמנות בפרויקט הניהולי. לכל מדד יש את הגדרות ברירת המחדל הבאות, שאפשר לערוך בחלונית הגדרת התרשים בלחיצה על שם המדד:

• נתוני השימוש שמוצגים כברירת מחדל הם מהמשאבים של ההזמנה.
• ההיקף שמוגדר כברירת מחדל הוא הפרויקט.
• צבירת הנתונים מתבצעת כברירת מחדל לפי השימוש הממוצע בתקופת הזמן שנבחרה.

סקירה כללית על השימוש במהדורה

בתצוגה הזו מוצגים מדדים לגבי השימוש במשבצות והקיבולת של משאבי מהדורות בפרויקט הניהולי. לכל מדד יש הגדרות ברירת מחדל שמוצגות בחלונית הגדרות התרשים. כדי לערוך את ההגדרות, לוחצים על שם המדד.

• נתוני השימוש שמוצגים כברירת מחדל הם מהמשאב של ההזמנה, ונתוני הקיבולת הם מהמשאב של המהדורה.
• ההיקף שמוגדר כברירת מחדל הוא הפרויקט.

סקירה כללית של הפרויקט הנוכחי

בתצוגה הזו מוצגים מדדים לגבי משאבי משימות בפרויקט שבו אתם מריצים שאילתות. לכל מדד יש את הגדרות ברירת המחדל הבאות, שאפשר לערוך בחלונית הגדרות התרשים בלחיצה על שם המדד:

• משאב ברירת המחדל הוא משאב המשימה.
• ההיקף שמוגדר כברירת מחדל הוא הפרויקט.

סקירה כללית של הזמנות שבוצעו ישירות

בתצוגה הזו מוצגים מדדים לגבי פעילות של משימות עם משאבי הזמנה בפרויקט האדמיניסטרטיבי. לכל מדד יש את הגדרות ברירת המחדל הבאות, שאפשר לערוך בחלונית הגדרות התרשים בלחיצה על שם המדד:

• משאב ברירת המחדל הוא משאב ההזמנה.
• ההיקף שמוגדר כברירת מחדל הוא הפרויקט.

תצוגה בהתאמה אישית

כדי ליצור תצוגת מדדים בהתאמה אישית, אפשר להוסיף מדדים מאפס או להתחיל עם אחת מתצוגות המדדים שהוגדרו מראש (לדוגמה, תצוגת המדדים סקירה כללית של הזמנות) ולהתאים אישית את המדדים שבה.

אפשר לשמור תצוגות בהתאמה אישית לשימוש עתידי. התצוגות השמורות שומרות את המדד, את ההגדרות של group by ואת הגדרות הסינון, למעט הסינון לפי כתובת האימייל של המשתמש. תצוגות שמורות מאוחסנות ברמת המשתמש. אתם יכולים ליצור תצוגות שמורות, לעדכן אותן, לשנות את השם שלהן ולמחוק אותן.

מדדים

כשמגדירים תרשים, אפשר להוסיף, לערוך או למחוק את מדדי ניצול המשאבים שהוא עוקב אחריהם.

כדי להגדיר את המדדים של תרשים ניצול המשאבים:

1. במסוף Google Cloud , מעיינים בתרשימים של ניצול משאבי BigQuery.

2. בחלונית הגדרת התרשים, מגדירים את השדה מדדים:

   1. לוחצים על הוספת פריט > בחירת מדד.

   2. בתיבת הדו-שיח בחירת מדד, בוחרים באפשרויות הבאות:

      1. סוג המשאב למעקב: Job,‏ Reservation או Edition.
      2. היקף המעקב. לדוגמה, כדי לעקוב אחרי מדדים של משימות בפרויקט הנוכחי, בוחרים בהיקף Project.
      3. בוחרים מדד למעקב. לדוגמה, כדי לעקוב אחרי השימוש במשבצות של משימות, בוחרים באפשרות Slot usage (שימוש במשבצות).

   3. לוחצים על אישור.

   4. בתיבת הדו-שיח פריט חדש, בוחרים את הצבירה. לדוגמה, כדי לעקוב אחרי השימוש המקסימלי במשבצות מעבר לקיבולת של ההזמנה בתקופת הזמן שנבחרה, בוחרים באפשרות מקסימום.

   5. לוחצים על סיום כדי לשמור את המדד.

3. אופציונלי: כדי לשנות מדד קיים, לוחצים על השם שלו ועורכים את ההגדרות שלו או מוחקים אותו.

סוגי משאבים והיקפים נתמכים למדדים

מדדי ניצול המשאבים מסווגים לפי סוג המשאב וההיקף.

סוגי משאבים

אפשר לעקוב אחרי סוגי המשאבים הבאים:

סוגי היקף

אחרי שבוחרים משאב למדד, בוחרים היקף.

• ברירת המחדל של משאבי ההזמנה והמהדורה היא רמת הפרויקט.
• אפשר להגדיר את משאב העבודה בהיקפים של פרויקט, תיקייה או ארגון. היקפים גדולים יותר דורשים הרשאות נוספות.

קיבוץ לפי

כדי לקבץ נתונים בתרשים של ניצול המשאבים, פועלים לפי השלבים הבאים:

1. במסוף Google Cloud , מעיינים בתרשימים של ניצול משאבי BigQuery.

2. בחלונית הגדרת התרשים, מגדירים את השדה קיבוץ לפי על ידי בחירה באחת מהאפשרויות הבאות:

   • ‫None: האפשרות הזו מספקת סקירה כללית של המדדים שנבחרו, לאורך זמן, בכל הארגון.
   • פרויקט: האפשרות הזו מקבצת את המדדים שנבחרו לפי פרויקט. אם יש יותר מ-50 פרויקטים, יוצגו רק 50 הפרויקטים המובילים עם השימוש הגבוה ביותר במשבצות.
   • כל שאר האפשרויות של Group by: האפשרויות האלה דומות לתצוגת הפרויקט, והנתונים מקובצים לפי המאפיין המתאים. אם אפשרות של'קיבוץ לפי' לא נתמכת בכל המדדים שנבחרו, אי אפשר לבחור באפשרות הזו.

מסנן

כשמגדירים את התרשים של ניצול המשאבים, אפשר להחיל מסננים על הנתונים, למשל להציג את השימוש במשאבים במהדורת Enterprise או לפי מזהה משאב.

כדי לסנן את נתוני התרשים, מפעילים מסננים בחלונית המסננים. אפשר לבחור מסנן רק אם הוא נתמך במדדים שבחרתם. כדי לראות את ההרשאות הנדרשות, לוחצים על התפריט Filter (סינון).

צפייה בנתוני ניצול המשאבים ברמת הפרויקט

אתם יכולים לנתח את ניצול המשאבים ברמת הפרויקט באמצעות אותם שלבי הגדרה שבהם אתם משתמשים כדי להציג נתונים ברמת הארגון. בתרשימים מוצגים רק נתונים ברמת הפרויקט ואפשרויות הגדרה (האפשרויות ברמת הארגון מוצגות באפור). ההיקף הזה ברמת הפרויקט מציג את ניצול המשאבים הכולל, בלי קשר למצב החיוב בפרויקט ההקשרי.

מגבלות של תרשים ניצול המשאבים

• בתרשים ובטבלה שבאמצע הדף מוצגים מדדים שרלוונטיים לתקופה ולרמת הפירוט שנבחרו.
• מדדים עם אותה יחידה חולקים את אותו קנה מידה. התרשים תומך בעד שתי סקאלות שונות.

מעקב אחרי התאמה אוטומטית לעומס

כשעוקבים אחרי השימוש במשבצות באמצעות תרשימים של משאבים אדמיניסטרטיביים, יכול להיות שתראו מספר משבצות מותאם גדול בהרבה מהשימוש במשבצות, כי התרשימים מחליקים את מספר המשבצות שהיו בשימוש במהלך תקופת ההתאמה. כדי לראות פרטים מדויקים יותר על השימוש במשבצות של שינוי גודל אוטומטי, כדאי לצמצם את האפשרות של מסגרת הזמן. הפעולה הזו מעדכנת אוטומטית את תקופת ההתאמה לפרק זמן קצר יותר.

בדוגמה הבאה, בתרשים מוצגים הרבה יותר משבצות זמן מותאמות מאשר דרישות העומס.

עם זאת, אם תקצרו את מסגרת הזמן כך שתקופת ההתאמה תהיה שתי שניות, תוכלו לראות שהמערכת האוטומטית לשינוי קנה מידה משנה את קנה המידה בהתאם לדרישות העומס ומציגה נתונים מדויקים יותר. אפשר לשנות את טווח הזמן באמצעות גרירה של נקודות ההתחלה והסיום של טווח הזמן. כדי להציג את נתוני הביקוש של עומס העבודה בצורה הכי מדויקת, בוחרים באפשרות p99 מתוך הרשימה Metric (מדד).

כדי לקבל תצוגה מדויקת ככל האפשר של השימוש בהתאמת קנה מידה אוטומטית, מומלץ להשתמש בתקופת התאמה של שנייה אחת עד 15 שניות.

במאמר הצגת תרשימים של משאבים אדמיניסטרטיביים מוסבר איך לראות את השימוש בחריצים.

מעקב אחרי ביצועי המשרה

כדי למנוע עלויות גבוהות יותר, יכול להיות שתצטרכו לשנות את ההגדרות של שינוי הגודל האוטומטי max_slots. השאילתה הבאה מספקת הקשר לגבי ביצועי העבודה, כדי שתוכלו לבחור את מספר המשבצות הנכון להתאמה אוטומטית לעומס העבודה.

השאילתה הבאה מספקת פרטים על הביצועים של ההזמנות שלכם בעבר:

SELECT
    AVG(TIMESTAMP_DIFF(end_time, creation_time, MILLISECOND)) as avg_latency_ms,
    SUM(total_bytes_processed) as total_bytes,
    COUNT(*) as query_numbers,
FROM
    `PROJECT_ID.region-REGION_NAME`.INFORMATION_SCHEMA.JOBS_BY_ORGANIZATION
WHERE creation_time >= START_TIME
    AND creation_time < END_TIME
    AND (statement_type != "SCRIPT" OR statement_type IS NULL)
    AND reservation_id = RESERVATION_ID

מחליפים את מה שכתוב בשדות הבאים:

• ‫PROJECT_ID: מזהה הפרויקט
• ‫REGION_NAME: האזור של הפרויקט
• ‫START_TIME: שעת היצירה שרוצים להתחיל לצפות בנתונים
• ‫END_TIME: שעת היצירה שעד אליה רוצים להפסיק את הצגת הנתונים
• ‫RESERVATION_ID: מזהה ההזמנה

בדוגמה הבאה מוצגים פרטי המשרה לתקופה של חמישה ימים:

SELECT
    AVG(TIMESTAMP_DIFF(end_time, creation_time, MILLISECOND)) as avg_latency_ms,
    SUM(total_bytes_processed) as total_bytes,
    COUNT(*) as query_numbers,
FROM
    `myproject.region-us`.INFORMATION_SCHEMA.JOBS_BY_ORGANIZATION
WHERE creation_time >= '2024-06-25 00:00:00-07'
    AND creation_time < '2024-06-30 00:00:00-07'
    AND (statement_type != "SCRIPT" OR statement_type IS NULL)
    AND reservation_id = reservationID

פתרון בעיות שקשורות למחסור ביחידות קיבולת

התחרות על משבצות יכולה לקרות כשאין מספיק משבצות להרצת כל העבודות, מה שגורם לבעיות בביצועים. כדי לנתח אם הירידה בביצועים נובעת מעלייה בעומס העבודה או משינויים בהגדרות הסביבה, אפשר להשוות בין שני מרווחי זמן במערכת בין הזמנות ופרויקטים.

כדי לפתור בעיות שקשורות לתחרות על משבצות, אפשר לפעול לפי השלבים הבאים וליישם את השיטות המומלצות.

אם ניסיתם את השיטות המומלצות האלה ועדיין נתקלתם בבעיות בביצוע המשימות, אתם יכולים לפנות לתמיכה.

עליות חדות בבו-זמניות של משרות

כדי לבדוק אם יש עלייה פתאומית בהפעלות של משימות עם קפיצות בשימוש במשבצות זמן בו-זמניות, אפשר להשתמש בתצוגה המפורטת בתרשימים של משאבים אדמיניסטרטיביים. הזינוקים האלה יכולים להצביע על כך שיש יותר מדי משימות שמתחרות על המשבצות שזמינות בהזמנה שלכם.

שיטה מומלצת: כדאי לבצע אופטימיזציה של שאילתות שצורכות הרבה משאבים או להגדיל את קיבולת המשבצות בהזמנה. מידע נוסף על אופטימיזציה של ביצועי שאילתות זמין במאמר בנושא שיפור חישוב השאילתות.

שימוש גבוה ביחידות קיבולת

כדאי להשתמש בתצוגה המפורטת כדי לבדוק אם משך העבודות התארך, במיוחד אם יש עבודות שחורגות מהקיבולת המקסימלית של ההזמנה. שימוש גבוה ועקבי במשבצות יכול להצביע על תחרות מתמשכת על משבצות.

שיטה מומלצת: כדאי לבדוק את השאילתות באמצעות מסנן התחרות על משבצות בכלי לבדיקת עבודות כדי לזהות את השאילתות שצורכות הכי הרבה משבצות ולבצע אופטימיזציה שלהן.

משך העסקה ארוך

אם משך הזמן להשלמת העבודות ארוך משמעותית, כדאי לבדוק את התצוגה המפורטת. עלייה חדה בשימוש במשבצות ובמקביל במספר גבוה של משימות יכולה להעיד על תחרות על משבצות.

שיטה מומלצת: כדי לבודד משימות קריטיות, אפשר להשהות באופן זמני משימות פחות חשובות או להקטין את קצב שליחת המשימות הכולל.

הודעות על מחלוקת לגבי יחידות קיבולת

בטבלת התובנות יכולות להופיע הודעות כמו There were NUMBER jobs detected with slot_contention in the reservation. שמציינות בעיות שקשורות לתחרות על משבצות. כדאי לבדוק את כלי הבדיקה של המשימות כדי לראות פרטים על המשימות הספציפיות שסומנו בהודעות האלה.

שיטה מומלצת: כדאי לבצע אופטימיזציה של השאילתות שזוהו או לשנות את הקצאת המשבצות בהזמנה.

המאמרים הבאים

• מידע נוסף על הזמנות
• מידע נוסף על רכישת משבצות
• איך מעריכים את דרישות הקיבולת של המשבצות
• איך רואים המלצות לתזמון ומידע נוסף