Tag Apache Iceberg

Iceberg Table Support und native Konnektoren für Snowflake beschleunigen Dateninitiativen von Unternehmen in den Bereichen KI, Analytik und andere

(Bildquelle: Fivetran)

München, 18. Juni 2024 – Fivetran (https://www.fivetran.com/de), der weltweit führende Anbieter für Data Movement, vertieft seine Partnerschaft mit Snowflake, dem Unternehmen für AI Data Cloud. Die erweiterte Kooperation wurde im Rahmen des Snowflake Data Cloud Summit 2024 (https://www.snowflake.com/summit/save-the-date/) bekannt gegeben. Im Mittelpunkt stehen dabei die Unterstützung des Iceberg Tabellenformats und die Entwicklung nativer Konnektoren für Snowflake durch Fivetran.

Der Iceberg Table Support durch Fivetran bietet Snowflake-Kunden die Möglichkeit, eine vollständig automatisierte und skalierbare Lakehouse-Architektur mit Apache Iceberg zu erstellen, und zwar innerhalb der Snowflake AI Data Cloud. Diese gewährleistet die Datenqualität, umfassende Governance und Benutzerfreundlichkeit. Fivetran-Kunden können so die Komplexität und mangelnde Kontrollmöglichkeit vermeiden, die die Einführung von Data Lakes im großen Maßstab oft behindern.

Zur weiteren Vertiefung der Partnerschaft hat Fivetran auch die Entwicklung von Native Apps angekündigt. Dadurch können Snowflake-Kunden die Konnektoren von Fivetran schneller und direkt über den Snowflake Marketplace nutzen, um Daten in die AI Data Cloud zu replizieren. Fivetran wird diese Konnektoren mit Hilfe der Snowpark Container Services von Snowflake erstellen, sie werden im Snowflake Marketplace öffentlich verfügbar sein.

„Wir freuen uns, unsere Partnerschaft mit Fivetran zu vertiefen“, sagt Kieran Kennedy, Leiter des Snowflake Marketplace. „Zusätzlich zur Unterstützung von Data Lakes mit Iceberg können Unternehmen die innovativen Funktionen zur Datenintegration von Fivetran nutzen und native Konnektoren in ihrem Konto ausführen, ohne externen Zugriff auf ihre Daten gewähren zu müssen. Das bedeutet Sicherheit auf Enterprise-Niveau, vereinfachte Bereitstellung und schnellere Wertschöpfung für unsere Kunden.“

Als viermaliger Snowflake Technology Partner of the Year mit 10 Snowflake Industry Competency Badges und dem Vertrauen von mehr als 6.000 globalen Unternehmen, erfüllt Fivetran die strengsten Sicherheitsanforderungen der größten Unternehmen der Welt und investiert weiterhin in Innovationen, die für Unternehmen wichtig sind. Mit dem Iceberg Table Support bietet Fivetran einen vollständig verwalteten, bereinigten und abfragebereiten Data Lake ohne manuellen Wartungsaufwand. Mit Native Connectors for Snowflake gibt Fivetran Unternehmen die vollständige Kontrolle über ihre Daten und erlaubt ihnen Pipelines in ihrer lokalen Snowflake-Umgebung mit der gleichen Leichtigkeit zu betreiben wie bei einem Cloud-Angebot. Fivetran Native Connectors für Snowflake tauschen ausschließlich Metadaten zwischen Fivetran und dem Snowflake-Kundenkonto aus.

„Unser Iceberg Table Support und die neuen Native Connectors, die Snowflake-Kunden in der AI Data Cloud nutzen können, sind ein weiterer bedeutender Fortschritt in unserer Partnerschaft“, so George Fraser, CEO von Fivetran. „Unternehmen können Daten aus geschäftskritischen SaaS-Anwendungen, Datenbanken und ERP-Systemen einfach zu Snowflake verschieben, wo sie diese für datengesteuerte Entscheidungen und KI/ML-Workloads nutzen können.“

„Unternehmen brauchen Zugang zu Daten, um die betriebliche Effizienz zu verbessern, prädiktive Analysen mit KI durchzuführen, Large Language Models zu erstellen und vertrauenswürdige Datenprodukte zu liefern“, sagt Ryan Bosshart, CEO bei phData. „Die Unterstützung von Fivetran für Iceberg Tables und Native Connectors für Snowflake wird die Einführung von Advanced Analytics in Unternehmen auf globaler Ebene beschleunigen. Wir sind stolz darauf, mit Snowflake und Fivetran zusammenzuarbeiten, um wirkungsvolle Kundenlösungen zu liefern und gleichzeitig eine Innovationskultur zu fördern, die den Geschäftserfolg vorantreibt.“

Über Fivetran
Fivetran, der weltweit führende Anbieter für Data Movement, unterstützt Kunden bei der Nutzung ihrer Daten für KI-Anwendungen, ML-Modelle, Predictive Analytics und operative Workloads. Die Fivetran-Plattform zentralisiert zuverlässig und sicher Daten aus Hunderten von SaaS-Anwendungen und Datenbanken in jede beliebige Destination – on-premise, in der Cloud oder in einer hybriden Umgebung. Tausende von globalen Marken, darunter Autodesk, Conde Nast, JetBlue und Morgan Stanley, vertrauen Fivetran, um ihre wertvollsten Datenbestände zu bewegen, Analysen zu verbessern, die betriebliche Effizienz zu steigern und Innovationen voranzutreiben.
Der deutschsprachige Markt wird aus dem Büro in München betreut. Zu den Kunden in Deutschland zählen DOUGLAS, Hermes, Lufthansa, Merck, Siemens und VW Financial Services. Weitere Informationen unter fivetran.com/de

Firmenkontakt
Fivetran
Tobias Knieper (Marketing Lead DACH)
Arnulfstraße 122
80636 München
.
https://fivetran.com

Pressekontakt
Lucy Turpin Communications
Christine Schulze & Thomas Hahnel
Prinzregentenstraße 89
81675 München
+49 89 417761- 0

Home

Neuer Delta Lake Support vereinfacht Datenmanagement: Unternehmen haben schnellen Zugriff auf Daten und können diese einfach in Large Language Models (LLM) integrieren

München, 29. November 2023 – Fivetran (https://www.fivetran.com/), der weltweit führende Anbieter von Datenintegration,
präsentiert den Support für Delta Lake auf Amazon Simple Storage Service (Amazon S3). Damit baut Fivetran seine Unterstützung für Amazon S3 als Data Lake Destination weiter aus. Hunderttausende
von Data Lakes laufen bereits heute auf Amazon S3. Der Object Storage Service von Amazon Web Services (AWS) bietet branchenführende Skalierbarkeit, Datenverfügbarkeit, Sicherheit und
Performance. Mit dem weitergehenden Support von Fivetran für Amazon S3 können Fivetran Anwender ihre Daten in Amazon S3 ablegen und einfach auf ihre Delta Lake Tabellen zugreifen.

Data Lakes eignen sich aufgrund ihrer Flexibilität und Skalierbarkeit hervorragend für den Umgang mit großen Mengen an unstrukturierten und semistrukturierten Daten. Die Automatisierung dieses Prozesses von Fivetran verwandelt Data Lakes von traditionell nicht verwalteten Datenspeichern in organisierte, kontrollierte, benutzerfreundliche Repositories. So können Unternehmen schnell auf Daten zugreifen und sie für eine Vielzahl von Anwendungsfällen nutzen: Dazu gehören Predictive Analytics , Generative AI (künstliche Intelligenz), Machine Learning Modelle (ML) und große Sprachmodelle (Large Language Models, LLMs).

Bereits im April 2023 präsentierte Fivetran den Support für Amazon S3 (https://www.fivetran.com/press/fivetran-supports-the-automation-of-the-modern-data-lake-on-amazon-s3)mit Apache Iceberg, einem weiteren führenden Hochleistungsformat, dessen Verfügbarkeit auf der AWS re:Invent 2023 angekündigt wurde.

„Wir sind begeistert, dass wir unseren Kunden die nahtlose Nutzung von Delta Lake auf Amazon S3 ermöglichen können“, sagt Fraser Harris, VP of Product bei Fivetran. „Data Lakes haben sich als
ideale Grundlage für Machine Learning, KI-Projekte sowie für Generative AI erwiesen. Mit dieser Erweiterung vereinfachen wir das Datenmanagement für solche Projekte erheblich.“

Fivetran bietet Data Governance Funktionen, branchenführende Sicherheit und Compliance, Kosteneffizienz und Benutzerfreundlichkeit für den Umgang mit Datenzielen. Die No Code Plattform von Fivetran bietet Unternehmen eine einfache, flexible Möglichkeit, Daten aus nahezu jeder Datenquelle an jede Destination zu übertragen. Unabhängig davon, ob sich Kundendaten in lokalen
Datenbanken, Data Warehouses oder Lakes, Software-as-a-Service (SaaS)-Anwendungen, Dateien oder anderen Quellen befinden, kann Fivetran sie mit einer Up-Time von 99,9 % von einer Quelle zur
anderen verschieben und replizieren. Gängige Anwendungsfälle reichen von der Migration strategischer Daten-Workloads aus einem Cloud-Data-Warehouse in einen Data Lake zur Verwendung bei der KI/ML Modellierung oder dem Aufbau generativer KI-Anwendungen bis hin zur Replikation kompletter lokaler Produktionsdatenbanken in der Cloud – alles unter gleichzeitiger Erfassung der sich ändernden Daten, so dass Cloud-Daten jederzeit synchron gehalten werden.

Fivetran-Kunden vermeiden somit die Komplexität und mangelnde Kontrollmöglichkeiten, die die Einführung eines Data Lake im großen Maßstab sonst erschweren. Die Datenplattform von Fivetran
konvertiert Kundendaten automatisch in das Delta Lake Format und gewährleistet die Datenqualität durch Anonymisierung persönlich identifizierbarer Informationen (PII) sowie durch Bereinigung und
Normalisierung der Daten.

Die über 400 vorgefertigten Konnektoren und die vollständig verwaltete Datenpipeline-Plattform von
Fivetran unterstützen lokale und Cloud-Datenbanken, Data Warehouses, SaaS-Anwendungen, Data Events und Dateien. Auf Wunsch erstellt Fivetran auch benutzerdefinierte Konnektoren. Das heißt unabhängig von der Datenquelle kann Fivetran Unternehmen unterstützen, so dass diese keine wertvollen technischen Ressourcen für die Entwicklung von Konnektoren aufwenden müssen. Mit
diesem breiten Portfolio an Quellenkompatibilität können Kunden ihre Daten im Data Lake vereinheitlichen, unabhängig davon, wo diese sich derzeit befinden.

Erfahren Sie mehr über die Data Lake Destinationen von Fivetran. (https://www.fivetran.com/data-movement/data-lakes-warehouses)

Über Fivetran
Fivetran automatisiert alle Arten von Data Movement im Zusammenhang mit Cloud-Datenplattformen. Das gilt vor allem für die zeitaufwendigsten Teile des ELT-Prozesses (Extract, Load, Transform) – von der Extraktion von Daten über das Handling von Schema-Drifts bis hin zu Daten-Transformationen. Damit können sich Data Engineers auf wichtigere Projekte konzentrieren, ohne sich um die Data Pipelines kümmern zu müssen. Mit einer Up-Time von 99,9 % und sich selbst reparierenden Pipelines ermöglicht Fivetran Hunderten von führenden Marken weltweit, darunter Autodesk, Conde Nast, JetBlue, Lufthansa, Morgan Stanley und Pitney Bowes, datengestützte Entscheidungen zu treffen und so ihr Unternehmenswachstum voranzutreiben. Fivetran hat seinen Hauptsitz in Oakland, Kalifornien, und verfügt über Niederlassungen auf der ganzen Welt.
Der deutschsprachige Markt wird aus dem Büro in München betreut. Zu den Kunden in Deutschland zählen DOUGLAS, Hermes, Lufthansa, Siemens, VW Financial Services und Westwing. Weitere Informationen unter fivetran.com.

Firmenkontakt
Fivetran
Tobias Knieper (Marketing Lead DACH)
Arnulfstraße 122
80636 München
.
https://fivetran.com

Pressekontakt
Lucy Turpin Communications
Christine Schulze & Thomas Hahnel
Prinzregentenstraße 89
81675 München
+49 89 417761- 0

Home