Mit duckdb schell und einfach Daten analysieren – egal wo sie gespeichert sind

duckdb – eine leichtgewichtig Datenbank mit Fokus auf Datenanalyse und schnelle Query Engine, die vielfältig einsetzbar ist: 

• Daten, gespeichert auf der eigenen Festplatte oder irgendwo im Internet, im Browser mit SQL analysieren? Kein Problem.
  
• Schnell mal die ganzen JSON Dateien in S3 per SQL checken? Nichts leichter als das.
  
• Eine riesige parquet-Datei, größer als mein Arbeitsspeicher. Und ich muss sie jetzt lokal analysieren. Easy!
  
• csv vom Blob Storage lesen, verarbeiten und in einer Postgres-Datenbank speichern. Nur ein Kommando.
  

duckdb entwickelt sich immer mehr zum Universalwerkzeug für den Zugriff auf und die Analyse von Daten.

Vorkenntnisse

SQL/Python-Grundlagen sind hilfreich. Tiefergehendes Know-How ist allerdings nicht erforderlich.

Lernziele

In diesem Talk zeige ich mit wenigen Slides und viel Live-Demo warum es so populär ist und es auch in den Werkzeugkoffers eines jedes Data Scientist, ML Engineer oder Data Engineers gehört. Das Gelernte und Gezeigte kann unmittelbar im Arbeitsalltag eingesetzt werden.