איך מתנסים ב-BigQuery באמצעות ארגז החול (sandbox)

מגבלות

ארגז החול של BigQuery כפוף למגבלות הבאות:

• כל המכסות והמגבלות של BigQuery חלות.
• אתם מקבלים מגבלת אחסון של 10GiB לכל משך החיים. המכסה הזו לא מזכה בהחזר כספי כשמוחקים את הנתונים.
• אתם מקבלים את אותה מכסת חישוב בחינם כמו בתוכנית ללא תשלום של BigQuery, כלומר 1TiB של נתוני שאילתות מעובדים בכל חודש.
• לכל מערכי הנתונים ב-BigQuery יש זמן תפוגה שמוגדר כברירת מחדל לטבלאות, וכל הטבלאות, התצוגות והמחיצות נמחקות באופן אוטומטי אחרי 60 יום.

• ארגז החול של BigQuery לא תומך בכמה תכונות של BigQuery, כולל:

  • נתונים בסטרימינג
  • פקודות של שפת טיפול בנתונים (DML)
  • שירות העברת נתונים ל-BigQuery

צפייה במערך נתונים ציבורי

כברירת מחדל, מערכי הנתונים הציבוריים של BigQuery זמינים ב-BigQuery Studio בפרויקט שנקרא bigquery-public-data. במדריך הזה תריצו שאילתות במערך הנתונים NYC Citi Bike Trips. ‫Citi Bike היא תוכנית גדולה להשכרת אופניים, עם 10,000 זוגות אופניים ו-600 תחנות במנהטן, ברוקלין, קווינס וג'רזי סיטי. מערך הנתונים הזה כולל נסיעות ב-Citi Bike מאז שהשירות הושק בספטמבר 2013.

1. במסוף Cloud de Confiance , עוברים אל BigQuery Studio.

   כניסה ל-BigQuery Studio

2. בחלונית השמאלית, לוחצים על explore Explorer:

   

   אם לא רואים את החלונית הימנית, לוחצים על last_page הרחבת החלונית הימנית כדי לפתוח אותה.

3. בחלונית Explorer, לוחצים על addAdd data.

4. בתיבת הדו-שיח הוספת נתונים, לוחצים על מערכי נתונים ציבוריים.

5. בדף Marketplace, בשדה Search Marketplace, מקלידים NYC Citi Bike Trips כדי לצמצם את החיפוש.

6. בתוצאות החיפוש, לוחצים על NYC Citi Bike Trips.

7. בדף Product details, לוחצים על View dataset. בכרטיסייה פרטים אפשר לראות מידע על מערך הנתונים.

הרצת שאילתות במערך נתונים ציבורי

בשלבים הבאים תריצו שאילתות בטבלה citibike_trips כדי לקבוע מהן 100 תחנות Citi Bike הפופולריות ביותר במערך הנתונים הציבורי NYC Citi Bike Trips. השאילתה מאחזרת את השם והמיקום של התחנה, ואת מספר הנסיעות שהתחילו בתחנה הזו.

השאילתה משתמשת בפונקציה ST_GEOGPOINT כדי ליצור נקודה מפרמטרים של קו אורך וקו רוחב של כל תחנה, ומחזירה את הנקודה הזו בעמודה GEOGRAPHY. העמודה GEOGRAPHY משמשת ליצירת מפת חום בכלי המשולב להצגת נתונים גיאוגרפיים.

1. במסוף Cloud de Confiance , פותחים את BigQuery Studio.

   כניסה ל-BigQuery Studio

2. לוחצים על add_box שאילתת SQL.

3. ב עורך השאילתות, מזינים את השאילתה הבאה:

   SELECT
     start_station_name,
     start_station_latitude,
     start_station_longitude,
     ST_GEOGPOINT(start_station_longitude, start_station_latitude) AS geo_location,
     COUNT(*) AS num_trips
   FROM
     `bigquery-public-data.new_york.citibike_trips`
   GROUP BY
     1,
     2,
     3
   ORDER BY
     num_trips DESC
   LIMIT
     100;
   

   אם השאילתה תקינה, יופיע סימן וי לצד כמות הנתונים שהשאילתה מעבדת. אם השאילתה לא תקינה, יופיע סימן קריאה לצד הודעת שגיאה.

   

4. לוחצים על הפעלה. התחנות הכי פופולריות מופיעות בקטע Query results.

   

5. אופציונלי: כדי להציג את משך העבודה ואת כמות הנתונים שעובדו בשאילתה, לוחצים על הכרטיסייה Job information בקטע Query results.

6. עוברים לכרטיסייה Visualization. בכרטיסייה הזו נוצרת מפה שמאפשרת לראות את התוצאות בצורה ויזואלית.

7. בחלונית Visualization configuration:

   1. מוודאים שהאפשרות Visualization type מוגדרת ל-Map.
   2. מוודאים שהשדה Geography column מוגדר לערך geo_location.
   3. בקטע Data column, בוחרים באפשרות num_trips.
   4. משתמשים באפשרות add Zoom in כדי להציג את המפה של מנהטן.

   

שדרוג מארגז החול של BigQuery

ארגז החול של BigQuery מאפשר לכם להתנסות ביכולות מוגבלות של BigQuery ללא עלות. כשתרצו להגדיל את נפח האחסון ואת יכולות השאילתות, תוכלו לשדרג מארגז החול של BigQuery.

כדי לשדרג:

1. מפעילים את החיוב בפרויקט.

2. כדאי לעיין במהדורות של BigQuery ולבחור את מודל התמחור שמתאים לכם.

אחרי שמשדרגים מה-Sandbox של BigQuery, צריך לעדכן את זמני התפוגה שמוגדרים כברירת מחדל למשאבי BigQuery, כמו טבלאות, תצוגות ומחיצות.