QA im Data Engineering | Episode 4

https://is1-ssl.mzstatic.com/image/thumb/Podcasts211/v4/9d/5a/52/9d5a52ea-d7ae-4426-9cb0-b7bd5ca563d8/mza_6100568135085740558.jpg/600x600bb.jpg

The Data Rant.

Orell Garten und Ulrich Ludmann

6 episodes

2 days ago

Wir sprechen über unsere Erfahrungen aus der Praxis des Data Engineering, die wir als Freelancer jeden Tag in Projekten erleben.

Technology

RSS

All content for The Data Rant. is the property of Orell Garten und Ulrich Ludmann and is served directly from their servers with no modification, redirects, or rehosting. The podcast is not affiliated with or endorsed by Podjoint in any way.

Wir sprechen über unsere Erfahrungen aus der Praxis des Data Engineering, die wir als Freelancer jeden Tag in Projekten erleben.

Technology

https://d3t3ozftmdmh3i.cloudfront.net/staging/podcast_uploaded_nologo/43781274/43781274-1748606964573-6633fc63654fc.jpg

QA im Data Engineering | Episode 4 | The Data Rant.

The Data Rant.

31 minutes 57 seconds

2 months ago

QA im Data Engineering | Episode 4 | The Data Rant.

In dieser Episode des Data Rant Podcasts diskutieren Uli und Orell die Herausforderungen und Strategien im Bereich der Datenqualität und -verarbeitung. Sie betonen die Bedeutung von Agilität, Qualitätssicherung und Teststrategien, um sicherzustellen, dass Datenpipelines korrekt und zuverlässig funktionieren. Zudem wird die Rolle von Mock-Daten und die Notwendigkeit von Observability in der Datenverarbeitung hervorgehoben.

00:00 Einführung in die Datenqualität04:56 Herausforderungen der Datenverarbeitung09:53 Qualitätssicherung in Datenpipelines14:36 Gemeinsamkeiten zwischen Software Engineering und Datenverarbeitung16:17 Herausforderungen bei Datenquellen und Transformationen19:37 Testing-Strategien im Data Engineering22:27 Test Driven Development und seine Herausforderungen27:05 Die Bedeutung von Mock-Daten und Observability30:12 Ausblick auf Dashboarding und Datenpräsentation