ODBC-Treiber für BigQuery verwenden
Mit dem ODBC-Treiber (Open Database Connectivity) für BigQuery können Sie Ihre Nicht-Java-Anwendungen mit BigQuery verbinden und BigQuery-Funktionen mit Ihren bevorzugten Tools und Infrastrukturen nutzen. Wenn Sie Java-Anwendungen mit BigQuery verbinden möchten, verwenden Sie den JDBC-Treiber für BigQuery.
Der ODBC-Treiber für BigQuery ist unter der Apache 2.0-Lizenz verfügbar.
Hinweis
Machen Sie sich mit ODBC-Treibern und Treibermanagern vertraut.
Ihr Betriebssystem muss die folgenden Anforderungen erfüllen:
Betriebssystem Unterstützte Architekturen Mindestversion und Abhängigkeiten Windows 32-Bit (x86), 64-Bit (x64) Version: Windows 10, Windows Server 2016 oder höher
Abhängigkeit: Microsoft Visual C++ Redistributable für Visual Studio 2019 oder 2022macOS 64-Bit (x86_64), ARM64 (Apple Silicon) Version: macOS 12 (Monterey) oder höher
Abhängigkeit: Ein ODBC-Treibermanager (z. B. unixODBC). Fügen Sie das Installationsverzeichnis zuDYLD_LIBRARY_PATHhinzu.Linux 64-Bit (x86_64) Version: Beliebige Distribution mit glibc 2.27 oder höher (z. B. Ubuntu 20.04 LTS+, Debian 11+)
Abhängigkeit: Ein ODBC-Treibermanager (z. B. unixODBC). Achten Sie darauf, dass Sie das Installationsverzeichnis zu IhrerLD_LIBRARY_PATHhinzufügen.Authentifizieren Sie sich bei BigQuery und notieren Sie sich die folgenden Informationen, die später verwendet werden, wenn Sie eine Verbindung mit dem ODBC-Treiber für BigQuery herstellen. Sie müssen nur die Informationen beachten, die der von Ihnen verwendeten Authentifizierungsmethode entsprechen.
Authentifizierungsmethode Authentifizierungsinformationen Beispiel Verbindungsproperty (wird später festgelegt) Standarddienstkonto Dienstkontoschlüssel (JSON-Objekt) my-sa-keyKeyFilePathIdentitätsföderation von Arbeitslasten oder Mitarbeiteridentitätsföderation Zielgruppen-Property der Konfigurationsdatei für das externe Konto //iam.googleapis.com/locations/global/...BYOID_AudienceUrlAbrufen von Tokens und Datei mit Umgebungsinformationen {"file":"/path/to/file"}BYOID_CredentialSourceNutzerprojekt (nur für Personalpool) my_projectBYOID_PoolUserProjectSTS-Tokentyp id_tokenBYOID_SubjectTokenTypeSTS-Tokenaustausch-Endpunkt https://sts.googleapis.com/v1/tokenBYOID_TokenUrlStandardanmeldedaten für Anwendungen Keine – –
ODBC-Treiber installieren und konfigurieren
Sie können den ODBC-Treiber für BigQuery unter Windows oder einem anderen Betriebssystem installieren und konfigurieren.
Windows
Installieren Sie den Treiber, der der Architektur Ihrer Anwendung entspricht:
- Laden Sie die
ODBCDriverforBigQuery_windows_x86.msi-Datei für 32-Bit-Anwendungen herunter. - Laden Sie die
ODBCDriverforBigQuery_windows_x64.msi-Datei für 64-Bit-Anwendungen herunter.
- Laden Sie die
So erstellen Sie einen Datenquellennamen (Data Source Name, DSN):
- Rufen Sie im Windows-Startmenü die ODBC-Datenquellen auf und wählen Sie die Version aus, die dieselbe Bitanzahl wie Ihre Clientanwendung hat.
- Klicken Sie auf der Seite ODBC Data Source Administrator (ODBC-Datenquellenadministrator) auf den Tab Drivers (Treiber).
- Suchen Sie in der Liste der installierten ODBC-Treiber nach ODBC Driver for BigQuery.
- Wählen Sie entweder den Tab System-DSN aus, um einen DSN für alle Nutzer zu erstellen, oder den Tab Nutzer-DSN, um einen DSN für den aktuellen Nutzer zu erstellen. System-DSNs werden im Allgemeinen empfohlen, da einige Anwendungen Daten mit verschiedenen Nutzerkonten laden und möglicherweise keine anderen Nutzer-DSNs erkennen.
- Klicken Sie auf Hinzufügen.
- Wählen Sie im Dialogfeld Neue Datenquelle erstellen die Option ODBC Driver for BigQuery aus und klicken Sie dann auf Fertigstellen. Das Dialogfeld ODBC Driver for BigQuery DSN Setup (ODBC-Treiber für BigQuery – DSN-Einrichtung) wird geöffnet.
- Geben Sie im Feld Name der Datenquelle einen Namen für den DSN ein.
- Verbindungseigenschaften hinzufügen Eine vollständige Liste der Attribute finden Sie unter Verbindungseigenschaften.
Nicht Windows
Installieren Sie den Treiber, der Ihrem Betriebssystem entspricht:
- Laden Sie die Datei
ODBCDriverforBigQuery_linux_latest.zipfür Linux herunter. - Laden Sie die
ODBCDriverforBigQuery_macos_latest.tar.gz-Datei für macOS herunter.
- Laden Sie die Datei
Extrahieren Sie den Inhalt der heruntergeladenen ZIP- oder TAR-Datei.
Verschieben Sie den Inhalt der ZIP- oder TAR-Datei in das Verzeichnis, in dem Sie den Connector installieren möchten. Der freigegebene Objektpfad des ODBC-Treibers für BigQuery ist
INSTALL_DIR/lib/libgoogle_cloud_odbc_bq_driver.so, wobeiINSTALL_DIRIhr Installationsverzeichnis ist.Aktualisieren Sie Ihre
.ini-Dateien, damit sie den neuen Pfad des Connectors widerspiegeln.Im folgenden Beispiel werden die
.ini-Dateien in einem Linux-System aktualisiert:unzip linux_odbc-driver.VERSION.zip -d linux_odbc-driver.VERSION/ cd ./linux_odbc-driver.VERSION export INSTALL_DIR=$(pwd) export ODBCINI=$INSTALL_DIR/odbc.ini export ODBCINSTINI=$INSTALL_DIR/odbcinst.ini export GOOGLEBIGQUERYODBCINI=$INSTALL_DIR/googlebigqueryodbc.ini
Ersetzen Sie
VERSIONdurch die Treiberversion.
Verbindung herstellen
Um eine Verbindung zwischen Ihrer Anwendung und BigQuery mit dem ODBC-Treiber für BigQuery herzustellen, müssen Sie den Verbindungsstring ermitteln. Sie können diesen Schritt überspringen, wenn Sie die Verbindungseigenschaften bereits über Ihren DSN konfiguriert haben.
Der Verbindungsstring hat das folgende Format:
Driver=ODBC Driver for BigQuery;ProjectId=PROJECT_ID;OAuthType=AUTH_TYPE;AUTH_PROPS;OTHER_PROPS
Ersetzen Sie Folgendes:
PROJECT_ID: die ID Ihres BigQuery-Projekts.AUTH_TYPE: Eine Zahl, die den von Ihnen verwendeten Authentifizierungstyp angibt. Wählen Sie eine der folgenden Optionen aus:0: für die Dienstkonto-Authentifizierung3: für die Authentifizierung mit Standardanmeldedaten für Anwendungen4: für die Authentifizierung mit Identitätsföderation von Arbeitslasten oder Mitarbeiteridentitätsföderation
AUTH_PROPS: die Authentifizierungsinformationen, die Sie sich bei der Authentifizierung bei BigQuery notiert haben, im Formatproperty_1=value_1; property_2=value_2;..., z. B.KeyFilePath=my-sa-key, wenn Sie sich mit einem Dienstkonto authentifiziert haben.OTHER_PROPS(optional): zusätzliche Verbindungseigenschaften für den ODBC-Treiber im Formatproperty_1=value_1; property_2=value_2;.... Eine vollständige Liste der Verbindungseigenschaften finden Sie unter Verbindungseigenschaften.
Verbindungsattribute
ODBC-Treiberverbindungseigenschaften sind Konfigurationsparameter, die Sie in die Verbindungszeichenfolge einfügen, wenn Sie eine Verbindung zu einer Datenbank herstellen. Der ODBC-Treiber für BigQuery unterstützt die folgenden Verbindungseigenschaften.
| Verbindungseigenschaft | Beschreibung | Standardwert | Datentyp | Erforderlich |
|---|---|---|---|---|
AdditionalProjects |
Projekte, auf die der Treiber für Abfragen und Metadatenvorgänge zugreifen kann, zusätzlich zum primären Projekt, das durch die ProjectId-Property festgelegt wird.
|
– | Kommagetrennter String | Nein |
AllowHtapiForLargeResults |
Gibt an, ob der Treiber die BigQuery Storage Read API verwenden kann. | 0 |
Boolesch | Nein |
AllowLargeResults |
Bestimmt, ob der Treiber Abfrageergebnisse verarbeitet, die größer als 128 MB sind, wenn die Eigenschaft QueryDialect auf BIG_QUERY gesetzt ist. Wenn das Attribut QueryDialect auf SQL gesetzt ist, verarbeitet der Treiber immer große Abfrageergebnisse.
|
0 |
Boolesch | Nein |
BYOID_AudienceUrl |
Enthält den Ressourcennamen für den Workload Identity-Pool oder den Personalpool und die Anbieter-ID in diesem Pool. | – | String | Nur, wenn OAuthMechanism=4 |
BYOID_CredentialSource |
Legt die erforderlichen Informationen zum Abrufen des Tokens selbst sowie einige Umgebungsinformationen fest. | – | String | Nur, wenn OAuthMechanism=4 |
BYOID_PoolUserProject |
Legen Sie das Projekt fest, wenn es sich um einen Personalpool und nicht um einen Workload Identity-Pool handelt. | – | String | Nur bei OAuthMechanism=4 und Verwendung eines Personalpools |
BYOID_SubjectTokenType |
Legt den STS-Tokentyp basierend auf der Spezifikation für den OAuth2.0-Tokenaustausch fest. Mögliche Werte:
|
– | String | Nur, wenn OAuthMechanism=4 |
BYOID_TokenUrl |
Legt den STS-Tokenaustausch-Endpunkt fest. | https://sts.googleapis.com/v1/token |
String | Nein |
DefaultDataset |
Dient als festgelegtes Dataset in einem Projekt, auf das der Treiber automatisch verweist, wenn Sie Abfragen ausführen, ohne ein Dataset explizit anzugeben. | – | String | Nein |
FilterTablesOnDefaultDataset |
Bestimmt den Umfang der Metadaten, die von den Methoden für Tabellen- oder Spaltenmetadaten zurückgegeben werden. Wenn „false“, erfolgt keine Filterung. Sie müssen auch das Attribut DefaultDataset festlegen, um die Filterung zu aktivieren.
|
FALSE |
Boolesch | Nein |
EnableSession |
Legt fest, ob durch eine Verbindung eine Sitzung gestartet wird. Wenn diese Option aktiviert ist, wird mit der ersten Abfrage, die über diese Verbindung ausgeführt wird, eine Sitzung gestartet. Der Treiber übergibt die Sitzungs-ID an alle nachfolgenden Abfragen. | 0 |
Boolesch | Nein |
JobCreationMode |
Ermöglicht das Aktivieren des Abfragepfads mit geringer Latenz. Wählen Sie eine der folgenden Optionen aus:
|
2 |
Ganzzahl | Nein |
KeyFilePath |
Der Pfad zum Dienstkontoschlüssel bei Verwendung der Dienstkonto-Authentifizierung. | – | String |
Nur, wenn OAuthMechanism=0
|
KMSKeyName |
Gibt den Namen des KMS-Schlüssels an, der zum Verschlüsseln und Entschlüsseln von Daten verwendet werden soll. | – | String | Nein |
LargeResultsDataSetId |
Gibt das Ziel-Dataset zum Speichern umfangreicher Abfrageergebnisse an. | – | String | Nein |
LargeResultsDatasetExpirationTime |
Gibt die Lebensdauer aller Tabellen im Dataset mit großen Ergebnissen in Millisekunden an. | 3600000 |
Lang | Nein |
Location |
Gibt den Speicherort an, an dem der Treiber Datasets erstellt oder abfragt. | – | String | Nein |
LogLevel |
Beschränkt die Details, die der Treiber während der Interaktionen protokolliert. Wählen Sie eine der folgenden Optionen aus:
|
0 |
Ganzzahl | Nein |
LogPath |
Gibt das Verzeichnis an, in das der Treiber Logdateien schreibt. | – | String | Nein |
LogFileCount |
Gibt die maximale Anzahl der aufzubewahrenden Logdateien an. | 0 |
Ganzzahl | Nein |
LogFileSize |
Gibt die maximale Größe jeder Logdatei in Byte an. | 0 |
Lang | Nein |
MaxResults |
Gibt die Anzahl der Ergebnisse pro Seite im BigQuery API-Ergebnis an. | 10000 |
Lang | Nein |
MaxThreads |
Definiert die maximale Anzahl von Threads, die der Connector für die gleichzeitige Verarbeitung in einem Thread-Pool verwenden kann. Wenn Sie dieses Attribut als connectorweite Einstellung für Nicht-Windows-Connectors konfigurieren möchten, geben Sie es in der Datei googlebigqueryodbc.ini an.
|
8 |
Ganzzahl | Nein |
OAuthMechanism |
Der Authentifizierungstyp. Wählen Sie eine der folgenden Optionen aus:
|
– | Ganzzahl | Ja |
ProjectId |
Die Standardprojekt-ID für den Treiber. Der Treiber verwendet dieses Projekt zum Ausführen von Abfragen und rechnet die Ressourcennutzung darüber ab. | – | String | Ja |
ProxyHost |
Hostname oder IP-Adresse eines Proxyservers. | – | String | Nein |
ProxyPort |
Portnummer, die der Proxyserver überwacht. | – | String | Nein |
ProxyPwd |
Passwort für die Authentifizierung bei der Verbindung über einen Proxyserver. | – | String | Nein |
ProxyUid |
Nutzername für die Authentifizierung bei der Verbindung über einen Proxyserver. | – | String | Nein |
PrivateServiceConnectUris |
Benutzerdefinierte Endpunkte zum Überschreiben von Standardendpunkten. Beispiele:
|
– | Kommagetrennter String | Nein |
QueryDialect |
Gibt an, welcher Abfragedialekt verwendet werden soll. Verwenden Sie SQL für GoogleSQL (dringend empfohlen) und BIG_QUERY für Legacy-SQL.
|
SQL |
String | Nein |
QueryProperties |
Konfiguriert Attribute, die das Abfrageverhalten ändern können. | – | Map<String, String> | Nein |
UniverseDomain |
Gibt die Universe-Domain für Ihre Organisation an. | googleapis.com |
String | Nein |
UseQueryCache |
Aktiviert die Funktion für das Zwischenspeichern von Abfragen in BigQuery. | true |
Boolesch | Nein |
Datentypzuordnung
Wenn Sie Abfragen über den ODBC-Treiber für BigQuery ausführen, erfolgt die folgende Datentypzuordnung:
| GoogleSQL-Typ | ODBC-SQL-Typ |
|---|---|
INT64 | SQL_BIGINT |
BOOL | SQL_BIT |
DATE | SQL_TYPE_DATE |
FLOAT64 | SQL_DOUBLE |
TIME | SQL_TYPE_TIME |
TIMESTAMP | SQL_TYPE_TIMESTAMP |
DATETIME | SQL_TYPE_TIMESTAMP |
BYTES | SQL_VARBINARY |
STRING | SQL_VARCHAR |
ARRAY | SQL_VARCHAR |
STRUCT | SQL_VARCHAR |
INTERVAL | SQL_VARCHAR |
JSON | SQL_VARCHAR |
GEOGRAPHY | SQL_VARCHAR |
RANGE | SQL_VARCHAR |
NUMERIC | SQL_NUMERIC |
BIGNUMERIC | SQL_NUMERIC |
Beispiele
Die folgenden Beispiele zeigen, wie parametrisierte Abfragen und Scripts mit mehreren Anweisungen mit dem ODBC-Treiber verwendet werden.
Parametrisierte Abfragen
// 1. Prepare statement std::string insert_stmt = "INSERT INTO MyTable VALUES (?, ?, ?)"; status = SQLPrepare(hstmt, (SQLCHAR*)insert_stmt.c_str(), SQL_NTS); // 2. Bind parameters std::string str_val = "example_string"; long long int_val = 12345; double float_val = 1.2345; // Bind string field status = SQLBindParameter( hstmt, 1, SQL_PARAM_INPUT, SQL_C_CHAR, SQL_VARCHAR, 50, 0, (SQLPOINTER)str_val.c_str(), str_val.size(), NULL); // Bind integer field status = SQLBindParameter( hstmt, 2, SQL_PARAM_INPUT, SQL_C_UBIGINT, SQL_BIGINT, 0, 0, &int_val, 0, NULL); // Bind float field status = SQLBindParameter( hstmt, 3, SQL_PARAM_INPUT, SQL_C_DOUBLE, SQL_DOUBLE, 0, 0, &float_val, 0, NULL); // 3. Execute statement status = SQLExecute(hstmt);
Skripts mit mehreren Anweisungen
// 1. Prepare and execute the multi-statement script std::string query = "CREATE OR REPLACE TABLE MyTable (StringField STRING, IntegerField INTEGER); " "INSERT INTO MyTable VALUES ('example', 123); " "SELECT * FROM MyTable;"; status = SQLExecDirect(hstmt, (SQLCHAR*)query.c_str(), SQL_NTS); // 2. Process results for each statement using SQLMoreResults do { SQLSMALLINT num_cols; status = SQLNumResultCols(hstmt, &num_cols); if (num_cols > 0) { // This is a result-returning statement (e.g., SELECT) while (SQLFetch(hstmt) == SQL_SUCCESS) { // Process rows... } } else { // This is a non-result statement (e.g., CREATE, INSERT) SQLLEN row_count; SQLRowCount(hstmt, &row_count); // Process affected rows... } } while (SQLMoreResults(hstmt) == SQL_SUCCESS);
Preise
Sie können den ODBC-Treiber für BigQuery kostenlos herunterladen. Wenn Sie den Treiber verwenden, gelten jedoch die standardmäßigen Preise für BigQuery-Analysen.