Historische Daten in S3? AWS Aurora holt sie jetzt direkt

Amazon Web Services Nachrichten

Historische Daten in S3? AWS Aurora holt sie jetzt direkt
Cloud Computing, Datenanalyse, Datenbanken

Amazon Aurora PostgreSQL kann nun Daten aus einem Data Lake gemeinsam mit Inhalten aus der Datenbank abfragen, ohne die Data-Lake-Daten zuvor zu kopieren.

Amazon Aurora PostgreSQL kann Daten aus einem Data Lake nun gemeinsam mit Daten aus der laufenden Datenbank abfragen. Die neue Funktion greift auf Apache-Iceberg-Tabellen und Parquet-Dateien zu, ohne sie zuvor nach Aurora zu kopieren.

Anwendungen können dafür ihre bestehenden PostgreSQL-Verbindungen und SQL-Abfragen nutzen.ist AWS’ verwalteter relationaler Datenbankdienst, den es unter anderem in einer PostgreSQL-kompatiblen Variante gibt. Er richtet sich an Betreiber von Cloud-Anwendungen, die eine Datenbank nicht selbst verwalten wollen.. Eine Abfrage kann so etwa aktuelle Transaktionen aus Aurora mit älteren, als Parquet-Dateien in Amazon S3 abgelegten Transaktionen zusammenführen. Bisher mussten Anwendungen solche historischen Daten für diesen Zweck häufig erst in die Datenbank laden und anschließend mit dem Bestand synchron halten.

Aurora unterstützt Iceberg-Tabellen im AWS Glue Data Catalog sowie Iceberg- und Parquet-Daten in S3 und S3 Tables. Externe Kataloge mit Iceberg-REST-Catalog-Schnittstelle lassen sich über eine Föderation mit Glue einbinden. Für die Abfragen legt man in Aurora Foreign Tables an, die auf die externen Daten verweisen. Bei Parquet kann Aurora das Schema aus den Dateimetadaten lesen;Voraussetzung sind Aurora PostgreSQL 17 ab Version 17.11 oder Aurora PostgreSQL 18 ab Version 18.6; unterstützt wird auch Aurora Serverless v2.

Administratoren müssen dem Cluster eine IAM-Rolle mit dem FeatureUm unnötige Lesezugriffe zu vermeiden, schränkt Aurora die gelesenen Spalten und Daten anhand der Abfrage ein. Häufig genutzte Daten hält die Instanz zudem im Cache. Kennzahlen zu gelesenen S3-Bytes und Cache-Treffern liefert. Leseabfragen können sowohl auf der Writer-Instanz als auch auf Read Replicas laufen.

Wer Daten für besonders kurze Antwortzeiten dauerhaft in Aurora benötigt, kann sie weiterhin in eine reguläre Tabelle übernehmen; die dafür nötigen Schreibbefehle laufen auf dem Writer. Die Funktion ist in allen kommerziellen AWS-Regionen und den GovCloud-US-Regionen verfügbar. Einen Aufpreis erhebt AWS dafür nicht. Zusätzliche Rechenlast in Aurora und S3-Anfragen für das Lesen der Dateien werden jedoch berechnet.

Rubbel die nächste Story frei

0% freigerubbelt · 100 Pkt.
Wir haben diese Nachrichten zusammengefasst, damit Sie sie schnell lesen können. Wenn Sie sich für die Nachrichten interessieren, können Sie den vollständigen Text hier lesen. Weiterlesen:

heiseonline /  🏆 11. in DE

Cloud Computing Datenanalyse Datenbanken Duckdb IT Postgresql S3 SQL

 

Deutschland Neuesten Nachrichten, Deutschland Schlagzeilen

Similar News: Sie können auch ähnliche Nachrichten wie diese lesen, die wir aus anderen Nachrichtenquellen gesammelt haben.

Smartbroker Holding, Aspermont, Goldgroup - Daten sind das neue GoldSmartbroker Holding, Aspermont, Goldgroup - Daten sind das neue GoldAn den Kapitalmärkten wird Information immer wertvoller. Anleger müssen aus einer Flut von Kursen, Unternehmensmeldungen und geopolitischen Entwicklungen die entscheidenden Signale herausfiltern. Gleichzeitig
Weiterlesen »

Indonesische Rupiah legt angesichts robuster chinesischer EMI-Daten und Haushaltssicherheit zuIndonesische Rupiah legt angesichts robuster chinesischer EMI-Daten und Haushaltssicherheit zuIDR stärkt sich angesichts starker PMI-Daten aus dem verarbeitenden Gewerbe und dem Dienstleistungssektor aus China, Indonesiens wichtigstem Handelspartner - Der indonesische Finanzminister Suahasil Nazara
Weiterlesen »

MÄRKTE EUROPA/Fester nach Williams-Aussagen und China-DatenMÄRKTE EUROPA/Fester nach Williams-Aussagen und China-DatenDJ MÄRKTE EUROPA/Fester nach Williams-Aussagen und China-Daten DOW JONES--Dank taubenhafter Kommentare von John Williams, Präsident der Federal Reserve Bank in New York, sind Europas Börsen mit kräftigen
Weiterlesen »

PCE-Daten im Fokus: Was Anleger von den US-Inflationszahlen erwarten können Von Investing.comPCE-Daten im Fokus: Was Anleger von den US-Inflationszahlen erwarten können
Weiterlesen »