במדריך הזה נסביר איך להשתמש ב-HammerDB כדי לבצע בדיקת עומסים במכונה של SQL Server ב-Compute Engine. במדריכים הבאים מוסבר איך להתקין מכונה של SQL Server:
יש כמה כלים זמינים לבדיקת עומסים. חלק מהכלים הם חינמיים ובקוד פתוח, ואחרים דורשים רישיונות. HammerDB הוא כלי בקוד פתוח שבדרך כלל פועל היטב כדי להדגים את הביצועים של מסד הנתונים של SQL Server. במדריך הזה מוסברים השלבים הבסיסיים לשימוש ב-HammerDB, אבל יש כלים אחרים שזמינים, וכדאי לבחור את הכלים שהכי מתאימים לעומסי העבודה הספציפיים שלכם.
מטרות
המדריך הזה עוסק ביעדים הבאים:- הגדרת SQL Server לבדיקת עומסים
- התקנה והפעלה של HammerDB
- איסוף נתונים סטטיסטיים של זמן ריצה
- הרצת בדיקת העומס של Transaction Processing Benchmark שנגזרת מהמפרט TPC "C" (TPROC-C)
עלויות
בנוסף למכונות הקיימות של SQL Server שפועלות ב-Compute Engine, במדריך הזה משתמשים ברכיבים של Cloud de Confiance by S3NSשצוברים חיובים, כולל:
- Compute Engine
- Windows Server
אפשר להשתמש במחשבון עלויות כדי ליצור הערכת עלות על סמך השימוש החזוי. בקישור שמופיע כאן אפשר לראות את עלות המוצרים שבהם משתמשים במדריך הזה, שיכולה להגיע ל-16 דולר (ארה"ב) ליום בממוצע.
לפני שמתחילים
-
In the Cloud de Confiance console, on the project selector page, select or create a Cloud de Confiance project.
Roles required to select or create a project
- Select a project: Selecting a project doesn't require a specific IAM role—you can select any project that you've been granted a role on.
-
Create a project: To create a project, you need the Project Creator role
(
roles/resourcemanager.projectCreator), which contains theresourcemanager.projects.createpermission. Learn how to grant roles.
-
Verify that billing is enabled for your Cloud de Confiance project.
- אם אתם לא משתמשים ב-Windows במחשב המקומי, התקינו לקוח של פרוטוקול Remote Desktop (RDP) של צד שלישי. מידע נוסף זמין במאמר לקוחות של Microsoft Remote Desktop.
הגדרת המכונה של SQL Server לבדיקת עומסים
לפני שמתחילים, חשוב לוודא שכללי חומת האש של Windows מוגדרים כך שיאפשרו תעבורה מכתובת ה-IP של מכונת Windows החדשה שיצרתם. אחר כך יוצרים מסד נתונים חדש לבדיקת עומס של TPCC ומגדירים חשבון משתמש:
- לוחצים לחיצה ימנית על התיקייה Databases ב-SQL Server Management Studio, ובוחרים באפשרות New Database.
- נותנים למסד הנתונים החדש את השם "TPCC".
- מגדירים את הגודל הראשוני של קובץ הנתונים ל-190,000MB ואת קובץ היומן ל-65,000MB.
מגדירים את המגבלות של Autogrowth לערכים גבוהים יותר על ידי לחיצה על לחצני שלוש הנקודות, כמו שמוצג בצילום המסך הבא:
מגדירים את קובץ הנתונים כך שיגדל ב-64MB עד לגודל בלתי מוגבל.
מגדירים את קובץ היומן כך שהגדילה האוטומטית תושבת.
לוחצים על OK.
בתיבת הדו-שיח New Database, בחלונית הימנית, בוחרים בדף Options.
מגדירים את Compatibility level ל-SQL Server 2022 (160).
מגדירים את Recovery model ל-Simple, כדי שהטעינה לא תמלא את יומני הטרנזקציות.
לוחצים על OK כדי ליצור את מסד הנתונים של TPCC. התהליך יכול להימשך כמה דקות.
התמונה המוגדרת מראש של SQL Server מגיעה רק עם אימות Windows מופעל, כך שתצטרכו להפעיל אימות במצב מעורב ב-SSMS, לפי המדריך הזה.
כך יוצרים חשבון משתמש חדש ב-SQL Server בשרת מסד הנתונים, עם הרשאת DBOwner. נותנים לחשבון את השם "loaduser" ובוחרים סיסמה מאובטחת.
שימו לב לכתובת ה-IP הפנימית של שרת ה-SQL באמצעות ה-commandlet
Get-NetIPAddress, כי חשוב להשתמש בכתובת ה-IP הפנימית מטעמי ביצועים ואבטחה.
התקנת HammerDB
אתם יכולים להריץ את HammerDB ישירות במכונה של SQL Server. עם זאת, כדי לבצע בדיקה מדויקת יותר, צרו מכונה חדשה של Windows ובדקו את המכונה של SQL Server מרחוק.
יצירת מכונה
כדי ליצור מכונה חדשה של Compute Engine:
נכנסים לדף Create an instance במסוף Cloud de Confiance .
בשדה Name, מזינים
hammerdb-instance.בקטע Machine configuration, בוחרים את סוג המכונה עם לפחות חצי ממספר המעבדים של מכונת מסד הנתונים.
בקטע דיסק אתחול, לוחצים על Change ואז:
- בכרטיסייה Public images, בוחרים מערכת הפעלה לשרתים של Windows.
- ברשימה Version, לוחצים על Windows Server 2022 Datacenter.
- ברשימה Boot disk type, בוחרים באפשרות Standard persistent disk.
- כדי לאשר את האפשרויות של דיסק האתחול, לוחצים על Select.
כדי ליצור את המכונה הווירטואלית ולהפעיל אותה, לוחצים על Create.
התקנת התוכנה
כשהוא מוכן, משתמשים בלקוח RDP כדי להתחבר למכונה החדשה של Windows Server ומתקינים את התוכנות הבאות:
הרצת HammerDB
אחרי שמתקינים את HammerDB, מריצים את הקובץ hammerdb.bat. HammerDB לא מופיעה ברשימת האפליקציות בתפריט Start. כדי להריץ את HammerDB, משתמשים בפקודה הבאה:
C:\Program Files\HammerDB-VERSION\hammerdb.batמחליפים את VERSION בגרסה של HammerDB שמותקנת.
יצירת החיבור והסכימה
כשהאפליקציה פועלת, השלב הראשון הוא להגדיר את החיבור כדי ליצור את הסכימה.
- לוחצים לחיצה כפולה על SQL Server בחלונית Benchmark.
- בוחרים באפשרות TPROC-C.
מתוך האתר של HammerDB:
TPROC-C הוא עומס העבודה של OLTP שמוטמע ב-HammerDB, והוא נגזר מהמפרט של TPROC-C עם שינויים שמאפשרים להריץ את HammerDB בצורה פשוטה וחסכונית בכל אחת מסביבות מסדי הנתונים הנתמכות. עומס העבודה של HammerDB TPROC-C הוא עומס עבודה בקוד פתוח שנגזר מהתקן TPROC-C Benchmark Standard, ולכן אי אפשר להשוות אותו לתוצאות TPROC-C שפורסמו, כי התוצאות תואמות לקבוצת משנה ולא לתקן TPROC-C Benchmark Standard המלא. השם של עומס העבודה TPROC-C ב-HammerDB הוא "Transaction Processing Benchmark derived from the TPC "C" specification".
לוחצים על אישור.
לוחצים על סכימה ואז לוחצים לחיצה כפולה על אפשרויות.
ממלאים את הטופס באמצעות כתובת ה-IP, שם המשתמש והסיסמה, כמו שמוצג בתמונה הבאה:
מגדירים את SQL Server ODBC Driver ל-OBDC Driver 18 for SQL Server.
במקרה הזה, הערך של Number of Warehouses (הקנה מידה) מוגדר ל-460, אבל אתם יכולים לבחור ערך אחר. לפי חלק מההנחיות, מומלץ להשתמש ב-10 עד 100 מחסנים לכל מעבד (CPU). במדריך הזה, מגדירים את הערך הזה לפי 10 ממספר הליבות: 160 למכונה עם 16 ליבות.
בשדה Virtual Users to Build Schema, בוחרים מספר שהוא בין פי 1 לפי 2 ממספר המעבדים הווירטואליים של הלקוח. אפשר ללחוץ על הפס האפור שליד פס ההזזה כדי להגדיל את המספר.
מבטלים את הסימון של האפשרות Use BPC Option.
לוחצים על אישור.
לוחצים לחיצה כפולה על האפשרות Build בקטע Schema Build כדי ליצור את הסכימה ולטעון את הטבלאות. בסיום, לוחצים על סמל הפנס האדום בחלק העליון של המסך כדי להשמיד את המשתמש הווירטואלי ולעבור לשלב הבא.
אם יצרתם את מסד הנתונים באמצעות מודל השחזור Simple, יכול להיות שתרצו לשנות אותו בחזרה ל-Full בשלב הזה כדי לקבל בדיקה מדויקת יותר של תרחיש ייצור. השינוי הזה ייכנס לתוקף רק אחרי שתבצעו גיבוי מלא או דיפרנציאלי כדי להפעיל את תחילת שרשרת היומנים החדשה.
יצירת הסקריפט של הדרייבר
HammerDB משתמש בסקריפט הדרייבר כדי לתזמר את זרימת הצהרות ה-SQL למסד הנתונים, כדי ליצור את העומס הנדרש.
- בחלונית Benchmark, מרחיבים את הקטע Driver Script ולוחצים לחיצה כפולה על Options.
- מוודאים שההגדרות תואמות לאלה שהשתמשתם בהן בתיבת הדו-שיח Schema Build.
- בוחרים באפשרות Timed Driver Script.
- האפשרות Checkpoint when complete מאלצת את מסד הנתונים לכתוב הכול בדיסק בסוף הבדיקה, לכן כדאי לסמן אותה רק אם אתם מתכננים להריץ כמה בדיקות ברצף.
- כדי לוודא שהבדיקה תהיה יסודית, מגדירים את Minutes of Rampup Time ל-5 ואת Minutes for Test Duration ל-20.
- לוחצים על אישור כדי לצאת מתיבת הדו-שיח.
- לוחצים לחיצה כפולה על Load בקטע Driver Script בחלונית Benchmark כדי להפעיל את סקריפט מנהל ההתקן.
יצירת משתמשים וירטואליים
כדי ליצור עומס מציאותי, בדרך כלל צריך להריץ סקריפטים כמשתמשים שונים. יוצרים כמה משתמשים וירטואליים לבדיקה.
- מרחיבים את הקטע Virtual Users (משתמשים וירטואליים) ולוחצים לחיצה כפולה על Options (אפשרויות).
- אם מגדירים את מספר המחסנים (קנה מידה) ל-160, צריך להגדיר את המשתמשים הווירטואליים ל-16, כי ההנחיות של TPROC-C ממליצות על יחס של פי 10 כדי למנוע נעילת שורות. מסמנים את התיבה Show Output כדי להפעיל הודעות שגיאה במסוף.
- לוחצים על אישור.
איסוף נתונים סטטיסטיים של זמן ריצה
ב-HammerDB וב-SQL Server לא קל לאסוף נתונים סטטיסטיים מפורטים של זמן ריצה. למרות שהנתונים הסטטיסטיים זמינים בתוך SQL Server, צריך לתעד ולחשב אותם באופן קבוע. אם עדיין אין לכם הליך או כלי שיעזרו לכם לתעד את הנתונים האלה, תוכלו להשתמש בהליך שבקטע הזה כדי לתעד כמה מדדים שימושיים במהלך הבדיקה. התוצאות ייכתבו בקובץ CSV בספרייה temp של Windows. אפשר להעתיק את הנתונים לגיליון אלקטרוני ב-Google Sheets באמצעות האפשרות הדבקה מיוחדת > הדבקת CSV.
כדי להשתמש בפרוצדורה הזו, קודם צריך להפעיל באופן זמני את OLE Automation Procedures כדי לכתוב את הקובץ בדיסק. אל תשכחו להשבית אותה אחרי הבדיקה:
sp_configure 'show advanced options', 1; GO RECONFIGURE; GO sp_configure 'Ole Automation Procedures', 1; GO RECONFIGURE; GO
זה הקוד ליצירת הפרוצדורה sp_write_performance_counters ב-SQL Server Management Studio. לפני שמתחילים את בדיקת העומס, צריך להפעיל את התהליך הזה ב-Management Studio:
USE [master]
GO
SET ANSI_NULLS ON
GO
SET QUOTED_IDENTIFIER ON
GO
/***
LogFile path has to be in a directory that SQL Server can Write To.
*/
CREATE PROCEDURE [dbo].[sp_write_performance_counters] @LogFile varchar (2000) = 'C:\\WINDOWS\\TEMP\\sqlPerf.log', @SecondsToRun int =1600, @RunIntervalSeconds int = 2
AS
BEGIN
--File writing variables
DECLARE @OACreate INT, @OAFile INT, @FileName VARCHAR(2000), @RowText VARCHAR(500), @Loops int, @LoopCounter int, @WaitForSeconds varchar (10)
--Variables to save last counter values
DECLARE @LastTPS BIGINT, @LastLRS BIGINT, @LastLTS BIGINT, @LastLWS BIGINT, @LastNDS BIGINT, @LastAWT BIGINT, @LastAWT_Base BIGINT, @LastALWT BIGINT, @LastALWT_Base BIGINT
--Variables to save current counter values
DECLARE @TPS BIGINT, @Active BIGINT, @SCM BIGINT, @LRS BIGINT, @LTS BIGINT, @LWS BIGINT, @NDS BIGINT, @AWT BIGINT, @AWT_Base BIGINT, @ALWT BIGINT, @ALWT_Base BIGINT, @ALWT_DIV BIGINT, @AWT_DIV BIGINT
SELECT @Loops = case when (@SecondsToRun % @RunIntervalSeconds) > 5 then @SecondsToRun / @RunIntervalSeconds + 1 else @SecondsToRun / @RunIntervalSeconds end
SET @LoopCounter = 0
SELECT @WaitForSeconds = CONVERT(varchar, DATEADD(s, @RunIntervalSeconds , 0), 114)
SELECT @FileName = @LogFile + FORMAT ( GETDATE(), '-MM-dd-yyyy_m', 'en-US' ) + '.txt'
--Create the File Handler and Open the File
EXECUTE sp_OACreate 'Scripting.FileSystemObject', @OACreate OUT
EXECUTE sp_OAMethod @OACreate, 'OpenTextFile', @OAFile OUT, @FileName, 2, True, -2
--Write the Header
EXECUTE sp_OAMethod @OAFile, 'WriteLine', NULL,'Transactions/sec, Active Transactions, SQL Cache Memory (KB), Lock Requests/sec, Lock Timeouts/sec, Lock Waits/sec, Number of Deadlocks/sec, Average Wait Time (ms), Average Latch Wait Time (ms)'
--Collect Initial Sample Values
SET ANSI_WARNINGS OFF
SELECT
@LastTPS= max(case when counter_name = 'Transactions/sec' then cntr_value end),
@LastLRS = max(case when counter_name = 'Lock Requests/sec' then cntr_value end),
@LastLTS = max(case when counter_name = 'Lock Timeouts/sec' then cntr_value end),
@LastLWS = max(case when counter_name = 'Lock Waits/sec' then cntr_value end),
@LastNDS = max(case when counter_name = 'Number of Deadlocks/sec' then cntr_value end),
@LastAWT = max(case when counter_name = 'Average Wait Time (ms)' then cntr_value end),
@LastAWT_Base = max(case when counter_name = 'Average Wait Time base' then cntr_value end),
@LastALWT = max(case when counter_name = 'Average Latch Wait Time (ms)' then cntr_value end),
@LastALWT_Base = max(case when counter_name = 'Average Latch Wait Time base' then cntr_value end)
FROM sys.dm_os_performance_counters
WHERE counter_name IN (
'Transactions/sec',
'Lock Requests/sec',
'Lock Timeouts/sec',
'Lock Waits/sec',
'Number of Deadlocks/sec',
'Average Wait Time (ms)',
'Average Wait Time base',
'Average Latch Wait Time (ms)',
'Average Latch Wait Time base') AND instance_name IN( '_Total' ,'')
SET ANSI_WARNINGS ON
WHILE @LoopCounter <= @Loops
BEGIN
WAITFOR DELAY @WaitForSeconds
SET ANSI_WARNINGS OFF
SELECT
@TPS= max(case when counter_name = 'Transactions/sec' then cntr_value end) ,
@Active = max(case when counter_name = 'Active Transactions' then cntr_value end) ,
@SCM = max(case when counter_name = 'SQL Cache Memory (KB)' then cntr_value end) ,
@LRS = max(case when counter_name = 'Lock Requests/sec' then cntr_value end) ,
@LTS = max(case when counter_name = 'Lock Timeouts/sec' then cntr_value end) ,
@LWS = max(case when counter_name = 'Lock Waits/sec' then cntr_value end) ,
@NDS = max(case when counter_name = 'Number of Deadlocks/sec' then cntr_value end) ,
@AWT = max(case when counter_name = 'Average Wait Time (ms)' then cntr_value end) ,
@AWT_Base = max(case when counter_name = 'Average Wait Time base' then cntr_value end) ,
@ALWT = max(case when counter_name = 'Average Latch Wait Time (ms)' then cntr_value end) ,
@ALWT_Base = max(case when counter_name = 'Average Latch Wait Time base' then cntr_value end)
FROM sys.dm_os_performance_counters
WHERE counter_name IN (
'Transactions/sec',
'Active Transactions',
'SQL Cache Memory (KB)',
'Lock Requests/sec',
'Lock Timeouts/sec',
'Lock Waits/sec',
'Number of Deadlocks/sec',
'Average Wait Time (ms)',
'Average Wait Time base',
'Average Latch Wait Time (ms)',
'Average Latch Wait Time base') AND instance_name IN( '_Total' ,'')
SET ANSI_WARNINGS ON
SELECT @AWT_DIV = case when (@AWT_Base - @LastAWT_Base) > 0 then (@AWT_Base - @LastAWT_Base) else 1 end ,
@ALWT_DIV = case when (@ALWT_Base - @LastALWT_Base) > 0 then (@ALWT_Base - @LastALWT_Base) else 1 end
SELECT @RowText = '' + convert(varchar, (@TPS - @LastTPS)/@RunIntervalSeconds) + ', ' +
convert(varchar, @Active) + ', ' +
convert(varchar, @SCM) + ', ' +
convert(varchar, (@LRS - @LastLRS)/@RunIntervalSeconds) + ', ' +
convert(varchar, (@LTS - @LastLTS)/@RunIntervalSeconds) + ', ' +
convert(varchar, (@LWS - @LastLWS)/@RunIntervalSeconds) + ', ' +
convert(varchar, (@NDS - @LastNDS)/@RunIntervalSeconds) + ', ' +
convert(varchar, (@AWT - @LastAWT)/@AWT_DIV) + ', ' +
convert(varchar, (@ALWT - @LastALWT)/@ALWT_DIV)
SELECT @LastTPS = @TPS,
@LastLRS = @LRS,
@LastLTS = @LTS,
@LastLWS = @LWS,
@LastNDS = @NDS,
@LastAWT = @AWT,
@LastAWT_Base = @AWT_Base,
@LastALWT = @ALWT,
@LastALWT_Base = @ALWT_Base
EXECUTE sp_OAMethod @OAFile, 'WriteLine', Null, @RowText
SET @LoopCounter = @LoopCounter + 1
END
--CLEAN UP
EXECUTE sp_OADestroy @OAFile
EXECUTE sp_OADestroy @OACreate
print 'Completed Logging Performance Metrics to file: ' + @FileName
END
GO
הרצת בדיקת העומס של TPROC-C
ב-SQL Server Management Studio, מריצים את הליך האיסוף באמצעות הסקריפט הבא:
Use master Go exec dbo.sp_write_performance_counters
במכונה של Compute Engine שבה התקנתם את HammerDB, מפעילים את הבדיקה באפליקציית HammerDB:
- בחלונית Benchmark, בקטע Virtual Users, לוחצים לחיצה כפולה על Create כדי ליצור את המשתמשים הווירטואליים, מה שיפעיל את הכרטיסייה Virtual User Output.
- לוחצים לחיצה כפולה על Run (הפעלה) מתחת לאפשרות Create (יצירה) כדי להתחיל את הבדיקה.
- בסיום הבדיקה, החישוב של מספר העסקאות לדקה (TPM) יופיע בכרטיסייה Virtual User Output.
- התוצאות של הליך האיסוף נמצאות בספרייה
c:\Windows\temp. - שומרים את כל הערכים האלה בגיליון אלקטרוני ב-Google Sheets ומשתמשים בהם כדי להשוות בין כמה הרצות בדיקה.
הסרת המשאבים
אחרי שמסיימים את המדריך, אפשר למחוק את המשאבים שנוצרו, כדי שהם יפסיקו להשתמש במכסה ולצבור חיובים. בסעיפים הבאים מוסבר איך למחוק או להשבית את המשאבים האלו.
מחיקת הפרויקט
הדרך הקלה ביותר לבטל את החיוב היא למחוק את הפרויקט שיצרתם בשביל המדריך.
כדי למחוק את הפרויקט:
- במסוף Cloud de Confiance , נכנסים לדף Manage resources.
- ברשימת הפרויקטים, בוחרים את הפרויקט שרוצים למחוק ולוחצים על Delete.
- כדי למחוק את הפרויקט, כותבים את מזהה הפרויקט בתיבת הדו-שיח ולוחצים על Shut down.
מחיקת מכונות
כדי למחוק מכונה של Compute Engine:
- נכנסים לדף VM instances במסוף Cloud de Confiance .
- מסמנים את התיבה של המכונה שרוצים למחוק.
- כדי למחוק את המכונה, לוחצים על More actions ואז על Delete ופועלים לפי ההוראות.
המאמרים הבאים
- מומלץ לקרוא את המדריך לשיטות מומלצות ב-SQL Server.
- כדאי להעמיק את הקריאה ולהכיר דוגמאות לארכיטקטורות, תרשימים ושיטות מומלצות בנושאי Google Cloud. כל אלה זמינים במרכז הארכיטקטורה של Cloud.