מבוא לניהול עומסי עבודה

ניהול עומסי עבודה ב-BigQuery מאפשר להקצות ולנהל משאבי מחשוב שזמינים לניתוח ולעיבוד נתונים, וגם להגדיר איך יחויבו על המשאבים האלה.

מודלים לניהול עומסי עבודה

ב-BigQuery יש שני מודלים לניהול עומסי עבודה. בחיוב על פי דרישה, אתם משלמים על מספר הבייטים שעברו עיבוד כשאתם שולחים שאילתה או מעבדים את הנתונים. בחיוב לפי קיבולת, אתם מקצים קיבולת עיבוד לעומסי עבודה עם אפשרות להגדלה אוטומטית של הקיבולת לפי הצורך.

אפשר לעבור בין מודלים של חיוב לפי דרישה לבין מודלים של חיוב לפי קיבולת בכל שלב. אפשר גם להשתמש בשילוב של שני המודלים.

בחירת מודל

כשבוחרים מודל לניהול עומסי עבודה, כדאי להתייחס לנקודות הבאות:

תעסוקה

בכל פעם שטוענים, מייצאים, מריצים שאילתה או מעתיקים נתונים, BigQuery יוצר, מתזמן ומריץ באופן אוטומטי משימה שעוקבת אחרי התקדמות הפעולה.

יכול להיות שייקח הרבה זמן להשלים את המשימות, לכן הן מורצות באופן אסינכרוני ואפשר לבדוק את הסטטוס שלהן. פעולות קצרות יותר, כמו הצגת רשימה של משאבים או קבלת מטא-נתונים, לא מנוהלות כמשימות.

מידע נוסף על משימות זמין במאמר ניהול משימות.

מכונות מזל

יחידת קיבולת של BigQuery היא יחידת מחשוב וירטואלית שמשמשת את BigQuery להרצת שאילתות SQL או סוגים אחרים של עבודות. במהלך ההפעלה של שאילתה, BigQuery קובע באופן אוטומטי כמה משבצות נעשה שימוש בשאילתה. מספר המשבצות שנעשה בהן שימוש תלוי בכמות הנתונים שעוברים עיבוד, במורכבות של השאילתה ובמספר המשבצות שזמינות.

מידע נוסף על משבצות ועל אופן השימוש בהן זמין במאמר הסבר על משבצות.

הזמנות

במודל התמחור לפי קיבולת, משבצות מוקצות במאגרים שנקראים הזמנות. הזמנות מאפשרות להקצות משבצות זמן בדרכים שמתאימות לארגון שלכם. לדוגמה, אפשר ליצור הזמנה בשם prod לעומסי עבודה בסביבת ייצור, והזמנה נפרדת בשם test לבדיקות, כדי שעבודות בדיקה לא יתחרו על הקיבולת עם עומסי עבודה בסביבת ייצור. או ליצור הזמנות למחלקות שונות בארגון.

מידע נוסף על הזמנות זמין במאמר ניהול עומסי עבודה באמצעות הזמנות.

BI Engine

‫BI Engine הוא שירות ניתוח מהיר בזיכרון שמאפשר להריץ שאילתות SQL רבות ב-BigQuery במהירות גבוהה יותר, באמצעות שמירת הנתונים שבהם אתם משתמשים הכי הרבה במטמון בצורה חכמה. ‫BI Engine יכול להאיץ שאילתות SQL מכל מקור, כולל שאילתות שנכתבו על ידי כלי להמחשת נתונים, ויכול לנהל טבלאות במטמון לצורך אופטימיזציה שוטפת.

הזמנות של BI Engine מוקצות ב-GiB של זיכרון ומנוהלות בנפרד מהזמנות של משבצות.

מידע נוסף על BI Engine זמין במאמר מבוא ל-BI Engine.

המאמרים הבאים

• הסבר על משבצות
• הסבר על הזמנות
• מידע נוסף על תמחור לפי דרישה
• מידע על תמחור לפי קיבולת
• הערכת העלויות ושליטה בהן
• יצירת אמצעי בקרה על עלויות בהתאמה אישית