מבוא לתיקיות Notebook

‫notebooks של Colab Enterprise ב-BigQuery מאפשרים לכם לבצע תהליכי עבודה של מדעי הנתונים ולמידת מכונה מקצה לקצה בממשק משולב אחד. בניגוד לעורכי SQL סטנדרטיים, מחברות מאפשרות לשלב שאילתות SQL עם קוד Python, טקסט עשיר והמחשות חזותיות כדי להציג סיפור מקיף באמצעות הנתונים. מחברות הן פתרון אידיאלי לתרחישי השימוש הבאים:

  • תהליכי עבודה של למידת מכונה מקצה לקצה: יצירה, הערכה ופריסה של מודל BigQuery ML בממשק מחברת יחיד.
  • גילוי נתונים: ניקוי וניתוח של מערכי נתונים גדולים באמצעות BigQuery DataFrames.
  • מחקר שיתופי: שיתוף מחברות עם קולגות באמצעות IAM ומעקב אחר היסטוריית הגרסאות.

מחברות הן נכסי קוד ב-BigQuery Studio, לצד שאילתות שמורות, והן מופעלות על ידי Dataform. היכולות האלה זמינות רק במסוף Cloud de Confiance .

יתרונות

המחברות ב-BigQuery מציעות את היתרונות הבאים:

  • שילוב חלק עם Python: אפשר להשתמש ב-BigQuery DataFrames API בלי לבצע הגדרות נוספות.
  • פיתוח מבוסס-AI: שימוש ב-AI גנרטיבי של Gemini לפיתוח קוד בעזרת AI.
  • תכונות מוכרות של עורך: אפשר להשתמש בהשלמה אוטומטית של SQL, בדומה לעורך ה-SQL של BigQuery.
  • המחשות משולבות: אפשר להשתמש בהמחשות אינטראקטיביות של DataFrame או בספריות כמו matplotlib ו-seaborn כדי להמחיש נתונים ישירות בתהליך העבודה.
  • אינטראופרביליות של SQL ו-Python: הפעלת SQL בתאים שמפנים למשתני Python.

גלריית המחברות היא מרכז שבו אפשר למצוא ולהשתמש בתבניות מוכנות מראש של מחברות. התבניות האלה מאפשרות לכם לבצע משימות נפוצות כמו הכנת נתונים, ניתוח נתונים והמחשת נתונים. תבניות של מחברות גם עוזרות לכם להכיר את התכונות של BigQuery Studio, לנהל תהליכי עבודה וליישם שיטות מומלצות.

אתם יכולים להשתמש בתבניות של גלריית מחברות כדי לייעל את כל תהליך העבודה שלכם, מהכוונה להפקת תובנות בכל שלב במחזור החיים של הנתונים – החל מהטמעה וניתוח ועד לניתוח מתקדם ול-BigQuery ML.

גלריית המחברות מספקת תבניות לכל רמת מיומנות. הגלריה כוללת תבניות בסיסיות ל-SQL,‏ Python,‏ Apache Spark ו-DataFrames. אתם יכולים גם לעיין בנושאים כמו AI גנרטיבי וניתוח נתונים מרובי-אופנים ב-BigQuery.

כדי להתחיל לעבוד עם גלריית המחברות, פועלים לפי השלבים הבאים:

  1. עוברים לדף BigQuery.

    כניסה ל-BigQuery

  2. בתפריט Explorer, לוחצים על Notebooks.

  3. לוחצים על התפריט הנפתח מחברת חדשה ובוחרים באפשרות כל התבניות.

מידע נוסף על שימוש בתבניות מגלריית הנוטבוקים זמין במאמר יצירת נוטבוק באמצעות גלריית הנוטבוקים.

ניהול זמן ריצה

‫BigQuery משתמש בזמני ריצה של Colab Enterprise כדי להריץ מחברות.

זמן ריצה של מחברת הוא מכונה וירטואלית ב-Compute Engine שהוקצתה למשתמש מסוים כדי לאפשר הרצת קוד במחברת. כמה מחברות יכולות לחלוק את אותו זמן ריצה. עם זאת, כל זמן ריצה שייך למשתמש אחד בלבד ואי אפשר להשתמש בו על ידי אחרים. סביבות זמן ריצה של מחברות נוצרות על סמך תבניות, שבדרך כלל מוגדרות על ידי משתמשים עם הרשאות אדמין. אפשר לעבור לזמן ריצה שמשתמש בסוג אחר של תבנית בכל שלב.

אבטחת ה-Notebook

אתם יכולים לשלוט בגישה למחברות באמצעות תפקידים בניהול זהויות והרשאות גישה (IAM). מידע נוסף זמין במאמרים איך מעניקים גישה למחברות ושיקולי אבטחה לגבי מחברות.

כדי לזהות נקודות חולשה בחבילות Python שבהן אתם משתמשים ב-notebooks, אתם יכולים להתקין ולהשתמש ב-Notebook Security Scanner (גרסת Preview).

אזורים נתמכים

ב-BigQuery Studio אפשר לשמור מחברות, לשתף אותן ולנהל את הגרסאות שלהן. בטבלה הבאה מפורטים האזורים שבהם BigQuery Studio זמין:

תיאור האזור שם האזור פרטים
אפריקה
יוהנסבורג africa-south1
אמריקה
קולומבוס us-east5
דאלאס us-south1 ‫סמל של עלה רמה נמוכה של CO2‎
אייווה us-central1 ‫סמל של עלה רמה נמוכה של CO2‎
לוס אנג'לס us-west2
לאס וגאס us-west4
מונטריאול northamerica-northeast1 ‫סמל של עלה רמה נמוכה של CO2‎
N. וירג'יניה us-east4
אורגון us-west1 ‫סמל של עלה רמה נמוכה של CO2‎
סאו פאולו southamerica-east1 ‫סמל של עלה רמה נמוכה של CO2‎
דרום קרוליינה us-east1
אסיה ואזור האוקיינוס השקט
הונג קונג asia-east2
ג'קארטה asia-southeast2
מומבאי asia-south1
סיאול asia-northeast3
סינגפור asia-southeast1
סידני australia-southeast1
טייוואן asia-east1
טוקיו asia-northeast1
אירופה
בלגיה europe-west1 ‫סמל של עלה רמה נמוכה של CO2‎
פינלנד europe-north1 ‫סמל של עלה רמה נמוכה של CO2‎
פרנקפורט europe-west3
לונדון europe-west2 ‫סמל של עלה רמה נמוכה של CO2‎
מדריד europe-southwest1 ‫סמל של עלה רמה נמוכה של CO2‎
מילאנו europe-west8
הולנד europe-west4 ‫סמל של עלה רמה נמוכה של CO2‎
טורינו europe-west12
ורשה europe-central2
ציריך europe-west6 ‫סמל של עלה רמה נמוכה של CO2‎
המזרח התיכון
דמאם me-central2
דוחה me-central1
תל אביב me-west1

תמחור

מידע על התמחור של פריטי Notebook ב-BigQuery Studio זמין במאמר תמחור של זמן ריצה של Notebook.

מעקב אחר השימוש ביחידות קיבולת

כדי לעקוב אחרי השימוש במשבצות ב-BigQuery Studio, אפשר לעיין בדוח החיוב ב-Cloud במסוף Cloud de Confiance . בדוח החיוב ב-Cloud, מפעילים מסנן עם התווית goog-bq-feature-type והערך BQ_STUDIO_NOTEBOOK כדי לראות את השימוש במשבצות ואת העלויות של מחברות BigQuery Studio.

דוח שימוש ביחידות קיבולת של מחברת BigQuery Studio.

פתרון בעיות

מידע נוסף זמין במאמר בנושא פתרון בעיות ב-Colab Enterprise.

המאמרים הבאים