Query Engine as Code with HashiCorp

   
  • Joern StenkampSr. Solutions Engineer
  • Viktor KesslerSr. Solutions Engineer

Session Abstract

Provision Dremio with HashiCorp TerraformWenn es um ihre Daten geht, entscheiden sich Unternehmen immer öfter für Data Lakes als Kernelement Ihrer Datenstrategie. Aufgrund der Skalierbarkeit, niedrigen Kosten und Hochverfügbarkeit sind diese Storage-Systeme geradezu prädestiniert für große Datensätze jeder Art. Allerdings, Analysen und Abfragen direkt auf den Daten in einem Data-Lake sind schlicht zu langsam und auch die Bereitstellung von teils komplexen Applikationen nimmt häufig viel Zeit in Anspruch.Dremio revolutioniert den Zugriff auf den Data Lake mit den OpenSource-Technologien um Apache Arrow. Damit sind blitzschnelle Abfragen direkt auf die im Data Lake gespeicherten Daten möglich. Data Warehouses, ETL-Prozesse, Cubes und Extrakte werden überflüssig Analysten und Konsumenten werden durch den Semantic-Layer in die Lage versetzt via Self Service benötigte Daten intuitiv zu finden und direkt auszuwerten ohne im Vorfeld eine teure Entscheidung über Datenauswahl oder -aggregation zu treffen. DEPLOY, QUERY, DESTROY!Genau hier setzt HashiCorp an – den Lifecycle von Ressourcen hunderter oder tausender unterschiedlicher Applikationen bzw. Workloads als einheitlichen Workflow abzubilden. Terraform ist das weltweit am häufigsten eingesetzte Tool zur Infrastruktur Provisionierung mittels Infrastructure as Code (IaC). In diesem Webinar zeigen wir, wie einfach sich komplexe Applikationen wie Dremio mittels Terraform automatisiert und reproduzierbar erzeugen lassen. Dadurch wird der Lifecycle der benötigten Ressourcen automatisiert und ganzheitlich gemanaged.

Ready to Get Started? Here Are Some Resources to Help

Webinars

Automating the Open Data Lakehouse Using an Open Intelligent Metastore

This webinar focuses on how coupling governance with an intelligent metastore can transform a data lake into a data lakehouse that can support the organization’s data workflows and analytics applications.

read more

Analyst Report

DZone Data Pipelines Trend Report

DZone has released their Data Pipelines Trend Report. It is a survey of software developers, architects, platform engineers, and IT professionals to understand the challenges and potential solutions around ingesting, processing, and leveraging data.

read more

Webinars

How Enel Group Built a Data Mesh Architecture with Dremio and AgileLab

In this webinar, learn how Enel Group worked with Agile Lab to implement Dremio as a data mesh solution for providing broad access to a unified view of their data, and how they use that architecture to enable a multitude of use cases.

read more

Get Started Free

No time limit - totally free - just the way you like it.

Sign Up Now

Watch Demo

Not ready to get started today? See the platform in action.

Check Out Demo