Suchergebnisse für Anfrage "google-bigquery"
Was ist die Latenz der Streaming-Protokolldaten zwischen AWS- und Google Cloud-Diensten?
at jemand Erfahrung mit: Senden von gestreamten / mikro-gestapelten Protokolldaten von Amazon an BigQuery zur Verarbeitung und Aufklärung von Latenzproblemen?Senden von (Mikro-Batch-) Protokollen von Google DataFlow an Amazon (Kinesis / S3 / ...
Google Bigtable vs BigQuery zum Speichern einer großen Anzahl von Ereignissen
Hintergrun Wir möchten unsere unveränderlichen Ereignisse in einem (vorzugsweise) verwalteten Dienst speichern. Die durchschnittliche Größe eines Ereignisses beträgt weniger als 1 KB und es gibt zwischen 1 und 5 Ereignisse pro Sekunde. Der ...
Wie skaliere ich Pivoting in BigQuery?
Sagen wir mal, ich habe eine Tabelle mit Spielstatistiken für Musikvideos mydataset.stats für einen bestimmten Tag (3B Zeilen, 1M Benutzer, 6K Künstler). Das vereinfachte Schema lautet: UserGUID String, ArtistGUID String Ich benötige Pivot- / ...
Wie installiere ich gcp in Python?
Viele der BigQuery-Beispiele beginnen mit: import gcp.bigquery as bqAber ich bekommeImportError: No module named gcp.bigquery wann immer ich versuche, dies auszuführen. Wie installiere ich diese Bibliothek? Ich arbeite in einer virtuellen ...
So extrahieren Sie mit BigQuery @ alle Schlüssel in einem JSON-Obje
BigQuery bietet Funktionen zum Parsen von JSON in interaktiven Echtzeitabfragen: Speichern Sie das JSON-codierte Objekt einfach als Zeichenfolge und fragen Sie in Echtzeit mit Funktionen wie JSON_EXTRACT_SCALAR ab. Ich kann jedoch nicht alle ...
Wie führe ich Trigrammoperationen in Google BigQuery durch?
Ich benutze daspg_trgm -Modul in PostgreSQL zur Berechnung der Ähnlichkeit zwischen zwei Zeichenfolgen mithilfe von Trigrammen. Insbesondere benutze ich: similarity(text, text)Which gibt eine Zahl zurück, die angibt, wie ähnlich die beiden ...
Löschen / Aktualisieren von Tabelleneinträgen durch Verknüpfen von 2 Tabellen in Google BigQuery ohne Import / Export
Wir haben einen Usecase, in dem wir Hunderte Millionen Einträge in einer Tabelle haben und Probleme haben, diese weiter aufzuteilen. 99% der Vorgänge sind nur anhängbar. Es gibt jedoch gelegentliche Aktualisierungen und Löschvorgänge, die laut ...
Wie werden große Abfrageergebnisse am besten verarbeitet, die in die Zwischentabelle in App Engine geschrieben wurden?
Wir führen große Abfrageaufträge aus, bei denen die Antwortgröße von 128 MB erreicht wurde und BigQuery die Meldung "Antwort ist zu groß, um zurückgegeben zu werden. Setzen Sie" allowLargeResults "in Ihrer Auftragskonfiguration auf" true ". Wir ...
Erstelle eine Tabelle mit dem Spaltentyp RECORD
Ich verwende eine große Abfrage und möchte einen Job erstellen, der eine Tabelle mit Spalten vom Typ "Datensatz" auffüllt. Die Daten werden von einer Abfrage ausgefüllt. Wie kann ich also eine Abfrage schreiben, die Spalten vom Typ "Datensatz" ...
Wie kann ich programmgesteuert auf "Gespeicherte Abfragen" zugreifen?
In der BigQuery Web-Benutzeroberfläche gibt es einen Abschnitt "Gespeicherte Abfragen". Ist es möglich, programmgesteuert auf diese zuzugreifen (Lese- / Schreibzugriff)? Jede API?