התנסות ב-BigQuery במסוף Cloud de Confiance

מסוף BigQuery Cloud de Confiance הוא ממשק גרפי שבו אפשר ליצור ולנהל את משאבי BigQuery. אתם יכולים להשתמש במסוףCloud de Confiance כדי להציג טבלאות ומערכי נתונים, ליצור ולהריץ שאילתות SQL, לבנות צינורות עיבוד ולבצע משימות אחרות שיעזרו לכם לנהל את תהליכי העבודה ב-BigQuery.

לפני שמתחילים

1. In the Cloud de Confiance console, on the project selector page, select or create a Cloud de Confiance project.

   Roles required to select or create a project

   • Select a project: Selecting a project doesn't require a specific IAM role—you can select any project that you've been granted a role on.
   • Create a project: To create a project, you need the Project Creator role (roles/resourcemanager.projectCreator), which contains the resourcemanager.projects.create permission. Learn how to grant roles.

   Go to project selector

2. מפעילים את BigQuery API.

   תפקידים שנדרשים להפעלת ממשקי API

   כדי להפעיל ממשקי API, צריך את תפקיד ה-IAM 'אדמין של Service Usage' (roles/serviceusage.serviceUsageAdmin), שכולל את ההרשאה serviceusage.services.enable. איך מקצים תפקידים

   להפעלת ה-API

   בפרויקטים חדשים, BigQuery API מופעל באופן אוטומטי.

3. אופציונלי: מפעילים חיוב בפרויקט. גם אם אתם לא רוצים להפעיל חיוב או לספק כרטיס אשראי, השלבים שבמסמך הזה עדיין רלוונטיים. ‫BigQuery מספק לכם ארגז חול לביצוע השלבים. מידע נוסף זמין במאמר בנושא הפעלת ארגז החול של BigQuery.

פתיחת מסוף Cloud de Confiance

1. נכנסים למסוף Cloud de Confiance .

   כניסה למסוף

2. בסרגל הכלים של מסוף Cloud de Confiance , לוחצים על menu תפריט הניווט.

3. לוחצים על פתרונות > כל המוצרים.

4. בקטע Analytics, לוחצים על BigQuery.

   הדף של Studio ב-BigQuery ייפתח.

5. כדי להרחיב או לכווץ את התפריט, לוחצים על last_page או על first_page החלפת תפריט הניווט ב-BigQuery.

   

אפשר להשתמש בתפריט הניווט כדי לפתוח את הדפים הבאים:

• סקירה כללית (גרסת Preview): מאפשרת לכם למצוא מדריכים, תכונות ומשאבים.
• ‫Studio: מאפשר לכם להציג את המשאבים של BigQuery ולבצע משימות נפוצות.
• ‫Search (תצוגה מקדימה): מאפשר לחפש Cloud de Confiance משאבים מ-BigQuery באמצעות שאילתות בשפה טבעית.
• סוכנים (גרסת Preview): מאפשר ליצור סוכני נתונים ולנהל איתם שיחות. הסוכנים האלה נועדו לענות על שאלות לגבי משאבי BigQuery.

אפשר גם להשתמש בתפריט הניווט כדי לבצע משימות ספציפיות בקטעים הבאים בתפריט:

• צינורות עיבוד נתונים ושילוב: מאפשר ליצור ולהגדיר העברות נתונים, ליצור ולפרט מאגרי Dataform, וליצור ולפרט משאבים מתוזמנים כמו שאילתות מתוזמנות.
• משילות: מאפשרת להציג החלפות נתונים משותפות וחדרי נתונים, לראות תגי מדיניות ולנהל מטא-נתונים.
• ניהול: מאפשר לבצע משימות ניהול כמו מעקב, הצגת מידע על משימות, ניהול הקיבולת, הצגת מידע על תוכנית התאוששות מאסון (DR) והצגת המלצות.
• העברה: מאפשרת לכם לראות ולהגדיר אפשרויות להעברת מחסן הנתונים ל-BigQuery.
• מרכז השותפים: מספק כלים ושירותים משותפים כדי לשפר את תהליך העבודה.
• הגדרות (גרסת Preview): אפשר להתאים אישית את ברירות המחדל של BigQuery או את ההגדרות של ממשק המשתמש.
• הערות המוצר: מכילות את העדכונים וההודעות האחרונים לגבי המוצר BigQuery.

הדף של BigQuery Studio

בדף BigQuery Studio מוצגים משאבי BigQuery, ואפשר לבצע בו משימות נפוצות. הדף ב-Studio כולל את הרכיבים הבאים:

1. הכרטיסייה 'סייר' בחלונית הימנית: משתמשים בכרטיסייה סייר כדי לעבוד עם טבלאות, תצוגות, שגרות ומשאבים אחרים ב-BigQuery, ולצפות בהיסטוריית העבודות.

   בחלונית הימנית יש גם אפשרות להוסיף נתונים ל-BigQuery. כשלוחצים על add הוספת נתונים, אפשר להשתמש ביכולות החיפוש והסינון כדי למצוא מקור נתונים שרוצים לעבוד איתו. אחרי שבוחרים מקור נתונים, אפשר לבצע את הפעולות הבאות בהתאם ליכולות שזמינות למקור הנתונים:

   • הגדרת טבלה ב-BigQuery על נתונים חיצוניים (פדרציה): מאפשרת ל-BigQuery לגשת לנתונים חיצוניים בלי להטמיע אותם ב-BigQuery. אתם יכולים ליצור טבלה כדי לגשת לנתונים חיצוניים או ליצור חיבור למקור חיצוני.
   • טעינת נתונים ל-BigQuery: מאפשרת לכם לטעון נתונים ל-BigQuery על ידי הגדרת העברת נתונים או באמצעות יכולת של שותף. מומלץ לטעון נתונים ל-BigQuery כדי לבצע עיבוד נתונים אופטימלי בקנה מידה נרחב.
   • סימון נתונים שהשתנו (CDC) ל-BigQuery: שכפול נתונים ממקור נתונים ל-BigQuery על ידי לכידה והחלה של שינויים. אתם יכולים להשתמש באפליקציות כמו datastream או פתרונות של שותפים כדי להטמיע נתונים ממקור נתונים.
   • הזרמת נתונים ל-BigQuery: טעינת נתונים ל-BigQuery עם זמן אחזור נמוך. אתם יכולים להשתמש באפליקציות כמו Dataflow,‏ Pub/Sub או פתרונות של שותפים כדי להטמיע נתונים ממקור נתונים.

   מידע נוסף על טעינת נתונים ל-BigQuery זמין במאמר מבוא לטעינת נתונים.

2. הכרטיסייה Classic Explorer בחלונית הימנית: אפשר להשתמש בגרסה הקודמת של החלונית Explorer כדי להציג משאבי BigQuery.

3. הכרטיסייה Files בחלונית הימנית (תצוגה מקדימה): משתמשים בכרטיסייה Files כדי לארגן נכסי קוד כמו שאילתות שנשמרו ומחברות באמצעות תיקיות. מידע נוסף זמין במאמר בנושא ארגון נכסי קוד באמצעות תיקיות.

4. הכרטיסייה Repository בחלונית הימנית (תצוגה מקדימה): אפשר להשתמש בכרטיסייה Repository כדי לאחסן קוד, לערוך קבצים ולעקוב אחרי שינויים באמצעות בקרת גרסאות דרך מאגרי מידע או באמצעות מאגרי מידע מרוחקים מבוססי Git. מידע נוסף מופיע במאמר מבוא למאגרי מידע.

5. הכרטיסייה דף הבית: בכרטיסייה דף הבית אפשר לראות את המשאבים הבאים:

   • בקטע מה חדש ב-Studio מפורטות התכונות החדשות ב-BigQuery Studio. כדי לראות את התכונות, לוחצים על אני רוצה לנסות. אם הקטע לא מוצג, לוחצים על מה חדש ב-Studio כדי להרחיב אותו.
   • הקטע יצירה של חדש, שכולל אפשרויות ליצירת שאילתת SQL חדשה, נוטבוק, נוטבוק של Apache Spark, קנבס נתונים, קובץ להכנת נתונים, פייפליין או טבלה.
   • הקטע Recent שבו אפשר לראות את 10 המשאבים שניגשתם אליהם לאחרונה. מקורות המידע האלה כוללים טבלאות, שאילתות שמורות, מודלים ושגרות.
   • הקטע Try with templates (התנסות בתבניות) שמאפשר לכם להשתמש בתבניות כדי להתחיל להריץ שאילתות על נתונים ולעבוד עם מחברות.
   • הקטע הוספת נתונים משלכם שיעזור לכם להתחיל לטעון נתונים ל-BigQuery.

6. עורך השאילתות: אפשר להשתמש בעורך השאילתות כדי ליצור ולהריץ שאילתה אינטראקטיבית. אפשר גם לראות את התוצאות בחלונית Query results שנפתחת אחרי שמריצים את השאילתה.

הדף 'סטודיו'

הדף Studio ב-BigQuery הוא המקום המרכזי שבו אפשר לראות את המשאבים שלכם ב-BigQuery ולבצע משימות נפוצות כמו יצירת מערכי נתונים ויצירה והרצה של מחברות.

כדי לעיין בדף Studio:

1. במסוף Cloud de Confiance , עוברים לדף Studio של BigQuery.

   אל Studio

   אפשר גם להזין את כתובת ה-URL הבאה בדפדפן:

   https://console.cloud.s3nscloud.fr/bigquery

   הדף Studio ייפתח בפרויקט האחרון שאליו ניגשתם.

2. בחלונית הימנית, לוחצים על explore כלי הניתוחים.

   בחלונית Explorer מוצגים נכסי קוד שונים ומקורות נתונים, ואפשר לחפש בה מקורות מידע ב-BigQuery.

3. עוברים לפרויקט bigquery-public-data, לוחצים על arrow_right Toggle node (החלפת הצומת) כדי להרחיב אותו, ואז לוחצים על Datasets (מערכי נתונים). בכרטיסיית הפרטים תיפתח כרטיסייה חדשה עם רשימה של כל מערכי הנתונים בפרויקט.

   מערכי נתונים ציבוריים של BigQuery מאוחסנים ב-BigQuery וזמינים לציבור הרחב במסגרת Cloud de Confiance התוכנית למערכי נתונים ציבוריים.

4. ברשימה, לוחצים על מערך הנתונים austin_crime.

5. בכרטיסייה סקירה כללית, אפשר לראות את המשאבים שמאוחסנים במערך הנתונים, כמו טבלאות, מודלים ושגרות.

6. לוחצים על הכרטיסייה פרטים. בכרטיסייה הזו מוצגים כל הפרטים של מערך הנתונים, כולל פרטי המטא-נתונים.

7. כדי לנווט בין כרטיסיות ומשאבים שונים, משתמשים בסרגל הניווט כמו בדוגמה הבאה:

   

8. בחלונית Explorer, לוחצים על Job history. תיפתח רשימה של היסטוריית המשרות בכרטיסייה חדשה:

   

   בכל פעם שאתם טוענים, מייצאים, שולחים שאילתה או מעתיקים נתונים, BigQuery יוצר, מתזמן ומריץ באופן אוטומטי משימה שעוקבת אחרי ההתקדמות של הפעולה.

   1. כדי לראות פרטים של משרות שלכם, לוחצים על היסטוריה אישית.

   2. כדי לראות את הפרטים של משימות מהזמן האחרון בפרויקט, לוחצים על היסטוריית הפרויקט.

9. בחלונית הימנית, לוחצים על הכרטיסייה folder_data Repository (Preview).

   אתם יכולים להשתמש במאגרי מידע כדי לבצע ניהול גרסאות בקבצים שבהם אתם משתמשים ב-BigQuery. ‫BigQuery משתמש ב-Git כדי לתעד שינויים ולנהל גרסאות של קבצים.

   אפשר להשתמש בסביבות עבודה בתוך מאגרי קוד כדי לערוך את הקוד שמאוחסן במאגר. כשלוחצים על סביבת עבודה בחלונית מאגר Git, היא נפתחת בכרטיסייה בחלונית הפרטים.

10. בחלונית הימנית, לוחצים על folder קבצים (תצוגה מקדימה).

    בכרטיסייה Files (קבצים) אפשר ליצור תיקיות של משתמשים וצוותים שבהן מאחסנים ומארגנים את נכסי הקוד.

11. לוחצים על הכרטיסייה home דף הבית.

    בכרטיסייה 'דף הבית' יש קישורים ותבניות שיעזרו לכם להתחיל להשתמש ב-BigQuery.

    אם סוגרים את הכרטיסייה דף הבית, אפשר לפתוח אותה מחדש בלחיצה על home דף הבית בכרטיסייה סייר.

12. לוחצים על עורך השאילתות. הכרטיסייה הזו נקראת search_insights Untitled query.

    משתמשים בעורך השאילתות כדי ליצור שאילתות SQL, להריץ שאילתות SQL ולראות את התוצאות.

    אם סוגרים את עורך השאילתות, אפשר לפתוח אותו מחדש בלחיצה על הכרטיסייה דף הבית, ואז בקטע יצירה של שאילתה חדשה לוחצים על add_box שאילתת SQL.

עבודה עם כרטיסיות ב-Studio

בכל פעם שבוחרים משאב או לוחצים על add_box שאילתת SQL בחלונית הפרטים, נפתחת כרטיסייה חדשה. אם פתוחות יותר מכרטיסייה אחת, אפשר לפצל את הכרטיסיות לשני חלוניות ולצפות בהן זו לצד זו.

איך מונעים החלפה של כרטיסיות

כדי לצמצם את מספר הכרטיסיות, כשלוחצים על משאב הוא נפתח באותה הכרטיסייה. כדי לפתוח את המשאב בכרטיסייה נפרדת, פועלים לפי השלבים הבאים:

1. מקישים על Ctrl (או על Command ב-macOS) ולוחצים על המשאב.

2. לחלופין, לוחצים לחיצה כפולה על שם הכרטיסייה. השם משתנה מגופן נטוי לגופן רגיל.

3. אם החלפתם בטעות את הדף הנוכחי, תוכלו למצוא אותו על ידי לחיצה על tab_recent כרטיסיות אחרונות בחלונית הפרטים.

פיצול כרטיסיות וביטול הפיצול

כדי לפצל את הכרטיסיות לשני חלונות, פועלים לפי השלבים הבאים:

1. לצד שם הכרטיסייה, לוחצים על arrow_drop_down פתיחת התפריט.

2. בוחרים באחת מהאפשרויות הבאות:

   • כדי להציב את הכרטיסייה שנבחרה בחלונית הימנית, לוחצים על פיצול הכרטיסייה לצד ימין.

   • כדי להציב את הכרטיסייה שנבחרה בחלונית הימנית, לוחצים על פיצול הכרטיסייה לצד ימין.

3. כדי לבטל את פיצול הכרטיסיות, לוחצים על arrow_drop_down פתיחת התפריט באחת מהכרטיסיות הפתוחות, ואז בוחרים באפשרות העברת הכרטיסייה לחלונית הימנית או העברת הכרטיסייה לחלונית השמאלית.

שליחת שאילתות על נתונים באמצעות כרטיסיות מפוצלות

כדי לפצל כרטיסיות כשמבצעים שאילתות על טבלאות:

1. בתפריט Explorer, לוחצים על הטבלה שרוצים להריץ עליה שאילתה.

2. לוחצים על שאילתה ואז על בכרטיסייה חדשה או על בכרטיסייה מפוצלת:

   

3. לוחצים על שם השדה שרוצים לשלוח לגביו שאילתה:

   

בתמונה הבאה אפשר לראות את חלונית הפרטים עם שתי כרטיסיות פתוחות. בכרטיסייה אחת יש שאילתת SQL, ובכרטיסייה השנייה מוצגים פרטים על טבלה.

העברת כרטיסיות בין חלוניות

כדי להעביר כרטיסייה מחלונית אחת לחלונית השנייה, פועלים לפי השלבים הבאים:

1. לצד שם הכרטיסייה, לוחצים על arrow_drop_down פתיחת התפריט.

2. בוחרים באפשרות העברת הכרטיסייה לחלונית הימנית או העברת הכרטיסייה לחלונית השמאלית (האפשרות שזמינה).

סגירת כל הכרטיסיות האחרות

כדי לסגור את כל הכרטיסיות חוץ מאחת, פועלים לפי השלבים הבאים:

1. לצד שם הכרטיסייה, לוחצים על arrow_drop_down פתיחת התפריט.

2. בוחרים באפשרות סגירת כרטיסיות אחרות.cancel

דף הסקירה הכללית

הדף סקירה כללית של BigQuery הוא המרכז שלכם למציאת מדריכים, תכונות ומשאבים שיעזרו לכם להפיק את המרב מ-BigQuery. הוא מספק נתיבים מודרכים למשתמשים בכל רמות המיומנות, בין אם אתם מריצים את השאילתה הראשונה שלכם או בודקים יכולות מתקדמות של AI/ML.

בדף סקירה כללית תוכלו למצוא מקורות מידע שמסודרים לפי התפקיד או תחומי העניין שלכם, כמו ניתוח נתונים או מדעי הנתונים. מקורות המידע האלה מאפשרים לכם למצוא את התוכן הרלוונטי ביותר כדי להתחיל במהירות.

הדף 'סקירה כללית'

1. במסוף, נכנסים לדף Overview.

   לסקירה הכללית

   אפשר גם לפתוח את הדף Overview של BigQuery על ידי הזנת כתובת ה-URL הבאה בדפדפן:

   https://console.cloud.s3nscloud.fr/bigquery/overview

2. בודקים את הקטעים הבאים בדף סקירה כללית:

   • בקטע מבוא יש סרטון קצר עם סקירה כללית של היכולות של BigQuery.

   • הקטע Get started (איך מתחילים): מיועד ללמידה באמצעות התנסות. כאן תוכלו להפעיל מדריכים אינטראקטיביים שיעזרו לכם ללמוד איך להשתמש בתכונות של BigQuery.

   • בקטע מידע נוסף מוצגים נתוני הגרסה של BigQuery, כדי שתוכלו לראות את ההודעות והעדכונים האחרונים לגבי התכונות.

   • בקטע אפשרויות נוספות יש הדרכות מפורטות והזדמנויות ללמידה על תכונות ספציפיות.

התאמה אישית של דף הסקירה הכללית

אתם יכולים להתאים אישית את הדף סקירה כללית כדי להציג או להסתיר מידע שרלוונטי למשימה או לתפקיד שלכם.

1. בדף סקירה כללית עוברים לסרגל הסינון.

   

2. לוחצים על האפשרות שהכי מתאימה לתפקיד או למשימה הנוכחיים:

   • ניתוח נתונים
   • מדעי הנתונים
   • הנדסת נתונים
   • ניהול נתונים

   בחירת משימה משנה באופן דינמי את התוכן בקטעים מבוא, תחילת העבודה ואפשרויות נוספות, כדי להציג את התוכן הרלוונטי ביותר.

3. אופציונלי: כדי להתאים את התוכן בדף סקירה כללית לצרכים הספציפיים שלכם, אפשר להסתיר כרטיסים ספציפיים:

   1. בכרטיס, לוחצים על more_vert אפשרויות נוספות.

   2. בוחרים באפשרות הסתרת הכרטיס. ההעדפות שלכם לגבי כרטיסים מוסתרים נשמרות לכל משתמש.

   3. כדי לבטל את הסתרת הכרטיס, בסוף הקטע לוחצים על הצגת תוכן מוסתר.

4. אם חלק שלם לא רלוונטי, לוחצים על keyboard_arrow_up כדי לכווץ אותו. העדפות המשתמש שלכם לגבי קטעים מכווצים נשמרות.

דף החיפוש

בדף חיפוש (תצוגה מקדימה) אפשר לחפש משאבים מ-BigQuery באמצעות שאילתות בשפה טבעית. Cloud de Confiance

מידע על הפעלת הדף חיפוש זמין במאמר חיפוש משאבים.

הדף 'סוכנים'

הדף סוכנים (תצוגה מקדימה) הוא מיקום מרכזי ליצירת סוכני נתונים ולשיחה איתם. הסוכנים האלה נועדו לענות על שאלות לגבי משאבי BigQuery.

סוכני נתונים מכילים מטא-נתונים של טבלאות והוראות לעיבוד שאילתות שספציפיות לתרחיש שימוש מסוים. ההוראות האלה מגדירות את הדרך הטובה ביותר לענות על שאלות של משתמשים לגבי קבוצה של טבלאות שאתם בוחרים. המשתמשים יכולים לנהל שיחות עם סוכני נתונים כדי לשאול שאלות על נתונים ב-BigQuery באמצעות שפה טבעית. מידע נוסף זמין במאמר יצירת סוכני נתונים.

מידע על יצירת סוכנים ושימוש בניתוח נתוני שיחות זמין במאמר ניתוח נתוני שיחות ב-BigQuery.

מגבלות

מסוף BigQuery Cloud de Confiance לא תומך ב-Virtual Private Cloud או ב-Private Service Connect.

המאמרים הבאים

• כדי לקבל מידע על הרצת שאילתות במערך נתונים ציבורי ועל שימוש בארגז החול של BigQuery, אפשר לעיין במאמר התנסות ב-BigQuery באמצעות ארגז החול.
• במאמר טעינה של נתונים והרצת שאילתות מוסבר איך לטעון נתונים ולהריץ שאילתות במסוף Cloud de Confiance .