טעינה של נתונים והרצת שאילתות

כדי להתחיל להשתמש ב-BigQuery, צריך ליצור מערך נתונים, לטעון נתונים לטבלה ולהריץ שאילתה על הטבלה.

לפני שמתחילים

  1. In the Cloud de Confiance console, on the project selector page, select or create a Cloud de Confiance project.

    Roles required to select or create a project

    • Select a project: Selecting a project doesn't require a specific IAM role—you can select any project that you've been granted a role on.
    • Create a project: To create a project, you need the Project Creator role (roles/resourcemanager.projectCreator), which contains the resourcemanager.projects.create permission. Learn how to grant roles.

    Go to project selector

  2. If you're using an existing project for this guide, verify that you have the permissions required to complete this guide. If you created a new project, then you already have the required permissions.

  3. אם BigQuery API לא מופעל, מפעילים אותו.

    תפקידים שנדרשים להפעלת ממשקי API

    כדי להפעיל ממשקי API, נדרשת ההרשאה serviceusage.services.enable. אם יצרתם את הפרויקט, סביר להניח שכבר יש לכם את ההרשאה הזו דרך התפקיד 'בעלים' (roles/owner). אחרת, תוכלו לקבל את ההרשאה הזו דרך התפקיד 'אדמין בממשק Service Usage' (roles/serviceusage.serviceUsageAdmin). איך מקצים תפקידים

    להפעלת ה-API

    בפרויקטים חדשים, BigQuery API מופעל באופן אוטומטי.

  4. אופציונלי: מפעילים את החיוב בפרויקט. גם אם לא רוצים להפעיל את החיוב או לספק פרטי כרטיס אשראי, אפשר לפעול לפי השלבים שמתוארים במאמר הזה. ‫BigQuery מספק לכם ארגז חול לביצוע השלבים. מידע נוסף זמין במאמר בנושא הפעלת ארגז החול של BigQuery.

התפקידים הנדרשים

כדי לקבל את ההרשאות שדרושות ליצירת מערך נתונים, ליצירת טבלה, לטעינת נתונים ולשאילתת נתונים, צריך לבקש מהאדמין להקצות לכם את תפקידי ה-IAM הבאים בפרויקט:

להסבר על מתן תפקידים, ראו איך מנהלים את הגישה ברמת הפרויקט, התיקייה והארגון.

יכול להיות שאפשר לקבל את ההרשאות הנדרשות גם באמצעות תפקידים בהתאמה אישית או תפקידים מוגדרים מראש.

יצירת מערך נתונים ב-BigQuery

משתמשים במסוף Cloud de Confiance כדי ליצור מערך נתונים לאחסון הנתונים. יוצרים את מערך הנתונים במיקום רב-אזורי בארה"ב. מידע על אזורים ומספר אזורים ב-BigQuery זמין במאמר מיקומים.

  1. במסוף Cloud de Confiance , פותחים את הדף BigQuery.
    2. כניסה לדף BigQuery
  2. בחלונית הימנית, לוחצים על כלי הניתוחים.
  3. בחלונית Explorer, לוחצים על שם הפרויקט.
  4. לוחצים על הצגת פעולות.
  5. לוחצים על יצירת מערך נתונים.
  6. בדף Create dataset, מבצעים את הפעולות הבאות:
    1. בשדה Dataset ID (מזהה קבוצת נתונים), מזינים babynames.
    2. בקטע Location type, בוחרים באפשרות Multi-region ואז בוחרים באפשרות US (multiple regions in United States). מערכי הנתונים הציבוריים מאוחסנים במיקום us עם מספר אזורים. כדי לפשט את התהליך, כדאי לאחסן את מערך הנתונים באותו מיקום.
    3. משאירים את שאר הגדרות ברירת המחדל כמו שהן ולוחצים על Create dataset (יצירת מערך נתונים).

הורדת הקובץ שמכיל את נתוני המקור

הקובץ שאתם מורידים מכיל כ-7 MB של נתונים על שמות פופולריים לתינוקות. הוא מונפק על ידי מינהל הביטוח הלאומי בארה"ב.

מידע נוסף על הנתונים זמין במאמר Background information for popular names של Social Security Administration.

  1. כדי להוריד את הנתונים של רשות הביטוח הלאומי בארה"ב, פותחים את כתובת ה-URL הבאה בכרטיסייה חדשה בדפדפן:

    https://www.ssa.gov/OACT/babynames/names.zip

  2. מחולצים את הקובץ.

    מידע נוסף על סכימת מערך הנתונים זמין בקובץ NationalReadMe.pdf שבקובץ ה-ZIP.

  3. כדי לראות איך הנתונים נראים, פותחים את קובץ yob2024.txt. הקובץ הזה מכיל ערכים מופרדים בפסיקים של שם, מין שנקבע בלידה ומספר הילדים עם השם הזה. בקובץ אין שורת כותרת.

  4. חשוב לרשום את המיקום של קובץ yob2024.txt כדי שתוכלו למצוא אותו מאוחר יותר.

טעינת נתונים לטבלה

לאחר מכן, טוענים את הנתונים לטבלה חדשה.

  1. בחלונית הימנית, לוחצים על כלי הניתוחים.
  2. בחלונית Explorer, מרחיבים את שם הפרויקט.
  3. לוחצים על Datasets (מערכי נתונים), ואז לצד מערך הנתונים babynames לוחצים על View actions (הצגת פעולות) ובוחרים באפשרות Open (פתיחה).
  4. לוחצים על יצירת טבלה.

    אלא אם צוין אחרת, צריך להשתמש בערכי ברירת המחדל לכל ההגדרות.

  5. בדף Create table, מבצעים את הפעולות הבאות:
    1. בקטע מקור, באפשרות יצירת טבלה מ, בוחרים באפשרות העלאה מהרשימה.
    2. בשדה Select file (בחירת קובץ), לוחצים על Browse (עיון).
    3. עוברים אל קובץ yob2024.txt המקומי ופותחים אותו, ואז לוחצים על פתיחה.
    4. ברשימה פורמט הקובץ, בוחרים באפשרות CSV.
    5. בקטע Destination (יעד), בשדה Table (טבלה), מזינים names_2024.
    6. בקטע Schema, לוחצים על המתג Edit as text ומדביקים את הגדרת הסכימה הבאה בשדה הטקסט:
      7. name:string,assigned_sex_at_birth:string,count:integer
    7. לוחצים על יצירת טבלה.

      מחכים עד ש-BigQuery ייצור את הטבלה ויטען את הנתונים.

תצוגה מקדימה של נתוני הטבלה

כדי לראות תצוגה מקדימה של נתוני הטבלה:

  1. בחלונית הימנית, לוחצים על כלי הניתוחים.
  2. בחלונית Explorer, מרחיבים את הפרויקט ולוחצים על Datasets.
  3. לוחצים על מערך הנתונים babynames ובוחרים את הטבלה names_2024.
  4. לוחצים על הכרטיסייה תצוגה מקדימה. ב-BigQuery מוצגות כמה שורות ראשונות מהטבלה.
    5. הכרטיסייה של תצוגה מקדימה של הטבלה.
הכרטיסייה תצוגה מקדימה לא זמינה לכל סוגי הטבלאות. לדוגמה, הכרטיסייה תצוגה מקדימה לא מוצגת לטבלאות או לתצוגות מפורטות חיצוניות.

שליחת שאילתה לנתוני הטבלה

לאחר מכן, מריצים שאילתה על הטבלה.

  1. לצד הכרטיסייה names_2024, לוחצים על האפשרות SQL query (שאילתת SQL). תיפתח כרטיסייה חדשה של עורך.
  2. בעורך השאילתות, מדביקים את השאילתה הבאה. השאילתה הזו מאחזרת את חמשת השמות הפופולריים ביותר לתינוקות שנולדו בארה"ב ב-2024, שסווגו כזכרים בלידה.
    
  SELECT
    name,
    count
  FROM
    `babynames.names_2024`
  WHERE
    assigned_sex_at_birth = 'M'
  ORDER BY
    count DESC
  LIMIT
    5;
  3. לוחצים על הפעלה. התוצאות מוצגות בקטע Query results.
    חלונית תוצאות השאילתה

הצלחתם להריץ שאילתה על טבלה במערך נתונים ציבורי ואז לטעון את נתוני הדוגמה ל-BigQuery באמצעות Cloud de Confiance מסוף Google Cloud.

הסרת המשאבים

כדי לא לצבור חיובים לחשבון Cloud de Confiance על המשאבים שבהם השתמשתם בדף הזה, פועלים לפי השלבים הבאים:

  1. נכנסים לדף BigQuery במסוף Cloud de Confiance .
    2. כניסה לדף BigQuery
  2. בחלונית הימנית, לוחצים על כלי הניתוחים.
  3. בחלונית Explorer לוחצים על Datasets ואז על מערך הנתונים babynames שיצרתם.
  4. מרחיבים את האפשרות View actions (הצגת פעולות) ולוחצים על Delete (מחיקה).
  5. בתיבת הדו-שיח מחיקת מערך נתונים, מאשרים את פקודת המחיקה: מקלידים את המילה delete ולוחצים על מחיקה.

המאמרים הבאים