W-JAX | 5. - 9. November 2018, München

(Big) Datenserialisierung mit Avro und Protobuf

Session
Nur bis 16. August ✓ Gratis Agile Day ✓ Kollegenrabatt ✓ Bis zu 837 € sparen Jetzt anmelden

Das Konzept des "Data Lake" ist heute in aller Munde. Die Idee, alle Daten, die im Unternehmen anfallen an einer zentralen Stelle abzuspeichern und verfügbar zu machen klingt fürs Erste natürlich sehr interessant. Der Data Lake kann sich jedoch schnell vom klaren, schönen Bergsee in einen riesigen Tümpel verwandeln, insbesondere dann, wenn man ihm unbedarft sämtliche Quellen-Datenformate anvertraut, die heute in den Unternehmen gängig sind, wie z.B. XML, JSON, CSV oder unstrukturierte Textdaten. Wer hat hier nach geraumer Zeit noch die Übersicht, welche Daten, welches Format haben und wie sich diese über verschiedenen Versionen weiterentwickelt haben? Jeder der sich aus dem Data Lake bedienen will, muss sich immer wieder die selben Fragen stellen: welche Informationen werden zur Verfügung gestellt, welche Datentypen haben sie und wie hat sich der Inhalt über die Zeit verändert?Abhilfe schaffen können Datenserialisierungs-Frameworks wie z.B. Apache Avro und Google Protocol Buffer (Protobuf), die eine plattform-unabhängige Datenmodellierung und Datenspeicherung ermöglichen. Dieser Vortrag geht auf die Möglichkeiten von Avro und Protobuf ein und zeigt, wie man diese im Kontext eines Data Lakes einsetzen kann und welche Vorteile man damit erzielen kann. Die Unterstützung on Avro und Protobuf durch Big Data und Fast Data Plattformen ist dabei ebenfalls ein Thema.

Alle News der Java-Welt:
Alle News der Java-Welt:

Behind the Tracks of W-JAX 2018

Agile & Culture
Teamwork & Methoden

Big Data & Machine Learning
Speicherung, Processing & mehr

Clouds, Container & Serverless
Alles rund um Cloud

Core Java & JVM Languages
Ausblicke & Best Practices

DevOps & Continuous Delivery
Deployment, Docker & mehr

Microservices
Strukturen & Frameworks

Web Development & JavaScript
JS & Webtechnologien

Performance & Security
Sichere Webanwendungen

Serverside & Enterprise Java
Spring, JDK & mehr

Digital Transformation & Innovation
Technologien & Vorgehensweisen

Software Architecture
Best Practices