BigQuery Omni for Multi-Cloud Data Analytics

Prøv Instrumentet Vårt For Å Eliminere Problemer

BigQuery Omni er en ny evne fra Google Cloud som tillater løping BigQuery spørringer på tvers av data som er lagret i flere skyleverandører og lokale datasentre. Det gir et enhetlig SQL-grensesnitt og klassens beste analysefunksjoner på toppen av data som er lagret i AWS , Azure , på stedet, og selvfølgelig Google Cloud .

Unified Analytics Interface

BigQuery Omni gjør det mulig for brukere å analysere data på tvers av flere skydatavarehus, inkludert Amazon Redshift , Azure Synapse Analytics , Snøfnugg på AWS og Azure, og andre JDBC/ODBC-kompatible datakilder ved å bruke de kjente BigQuery SQL-syntaks og funksjoner. Dette gir ett enkelt grensesnitt for å spørre og analysere data uavhengig av hvor de er lagret.

Hovedfordeler

  • Unified SQL analytics grensesnitt ved hjelp av BigQuery SQL-dialekt
  • Forenede søk på tvers av datakilder med flere skyer
  • Klassens beste ytelse med BigQuery sin akselererte analysemotor
  • Samlet identitets- og tilgangsadministrasjon på tvers av datakilder
  • Integrert erfaring med andre Google Cloud analysetjenester

Støttede datakilder

Den første forhåndsvisningen av BigQuery Omni støtter forent tilgang til følgende datakilder:



  • Amazon Redshift
  • Azure Synapse Analytics
  • Snøfnugg på AWS og Azure
  • Teradata
  • Databricks
  • Andre JDBC/ODBC-kilder
Datakilde Spørringstilgang Streaming og replikering
Amazon Redshift Ja Framtid
Azure Synapse Analytics Ja Framtid
Snøfnugg på AWS/Azure Ja Framtid

Slik fungerer BigQuery Omni

Under panseret, BigQuery Omni utnytter forent søketilgang ved å bruke standardgrensesnitt som JDBC for å kjøre SQL-spørringer på tvers av data som sitter i andre skydataplattformer. Dette gir tilgang til eksterne data via SQL uten å måtte flytte eller replikere dataene inne BigQuery .

Arkitektur

På et høyt nivå er BigQuery Omni arkitektur ser slik ut:

  • Data forblir i eksisterende skydatavarehus som Rødforskyvning , Snøfnugg , etc.
  • Standard grensesnitt som JDBC/ODBC brukes til å koble til BigQuery til eksterne kilder
  • BigQuery håndterer spørringsoptimalisering, planlegging og utførelse på tvers av data som sitter i og utenfor Google Cloud.
  • Resultatene returneres til brukeren for nedstrømsanalyse og visualisering.

Identitets- og tilgangsstyring

En av de viktigste fordelene med BigQuery Omni er enhetlig identitets- og tilgangsadministrasjon på tvers av ulike datakilder. Dette tillater enhetlig styring, revisjon og tilgangskontroller. Nærmere bestemt:

  • Brukere får tilgang til data via deres Google Cloud-legitimasjon og identitet.
  • Finkornede tilgangskontroller er tilordnet eksterne kilder.
  • All spørringshistorikk og revisjonslogger er tilgjengelig i Google Cloud.

Brukssaker

Her er noen vanlige brukstilfeller for BigQuery Omni :

Multi-Cloud Analytics

Kjør fødererte SQL-spørringer og analyser på tvers av data som er lagret i flere offentlige skyer, f.eks AWS , Azure , og Google Cloud uten å flytte noen data.

Skymigrering

Bruk BigQuery Omni for å spørre og analysere data som fortsatt sitter inne Amazon Redshift , Snøfnugg eller Azure Synapse Analytics for å hjelpe deg med å planlegge og validere migreringen til BigQuery . Du trenger ikke å flytte data flere ganger.

Hybrid og Multi-Cloud BI

Koble business intelligence-verktøy som Looker, Tableau og Power BI til data som sitter på tvers av multi-skyer via BigQuery Omni i stedet for komplekse kontakter og drivere.

Dataforbund og katalog

Bruk BigQuery Omni som en multisky-datakatalog som gir konsistente metadata, skjemaer og enhetlig styring på tvers av analysemiljøer.

Prissetting

BigQuery Omni er for øyeblikket tilgjengelig i forhåndsvisning uten ekstra kostnader utover eksisterende BigQuery prissetting. Referere til Google Cloud priskalkulator for detaljer.

Viktige hensyn

  • Ingen ekstra kostnader under forhåndsvisning utover BigQuery bruk i dag
  • Liten føderasjonsavgift for spørringer som involverer eksterne datakilder
  • Ingen datareplikering eller bevegelseskostnader

Forvent en liten inkrementell 'føderasjonsavgift' for søk som involverer eksterne datakilder gjennom BigQuery Omni for å ta hensyn til noen tilleggskostnader for nettverk mellom tjenester.

Starter

Her er hvordan du kommer i gang med forhåndsvisningen av BigQuery Omni :

  1. Aktiver BigQuery Omni flagger inn Google Cloud Console
  2. Opprett eksterne datakilder for å referere til spørringer
  3. Skriv SQL-spørringer som refererer til eksterne kilder
  4. Kjør spørringer, analyser resultater og overvåk ytelsen

Sjekk ut BigQuery Omni dokumentasjon for skjermbilder og kodeeksempler for å komme i gang.

Tilleggsressurser

  • Blogginnlegg på multi-sky-analyse
  • Bransjeforskning om adopsjonstrender for flere skyer
  • Analytikerrapporter som sammenligner kapasiteten til datavarehus

Begrensninger

Den første forhåndsvisningsutgivelsen har noen begrensninger å være klar over:

  • Skrivebeskyttet tilgang til eksterne kilder. Ingen skriver.
  • Begrenset til utvalgte datakilder (Redshift, Snowflake, Synapse)
  • Ingen strømming eller replikering av eksterne data ennå.
  • Føderasjonsavgift for tilgang til eksterne data.

Disse begrensningene forventes å bli adressert i fremtidige utgivelser i år.

Fremtiden er Multi-Cloud

Multisky- og hybridmiljøer er i ferd med å bli normen for bedriftsanalyse. BigQuery Omni representerer Google Cloud sine visjon og veikart for å gi enhetlig SQL-analyse på toppen av data hvor som helst – enten i Google Cloud eller andre skyer.

Over tid kan du forvente dypere integrasjoner, ekstra datakilder, lese- og skrivetilgang, strømme- og replikeringsmuligheter på tvers av skyer drevet av BigQuery sine klassens beste analysefunksjoner.

Fremtiden er multi-sky og BigQuery Omni har som mål å gi analysebroen over heterogene dataøkosystemer.

Se Også: