Augenmaß für Datenmengen: Warum „viel“ keine Größe ist

Summary

Augenmaß für Datenmengen: Warum „viel“ keine Größe ist close notice This article is also available in English. It was translated with technical assistance and editorially reviewed before publication. Don’t show this again. Vor einigen Tagen sind zwei Beiträge erschienen, die mir immer noch im Kopf herumgehen. Der eine ist ein Interview, das ich mit Hannes Mühleisen geführt habe, dem Mitschöpfer von DuckDB. Der andere ist ein Artikel, den ich kurz darauf für unseren Firmenblog geschrieben habe und in dem ich argumentiere, dass ein Read-Model in einem Event-Sourcing-System oft gar keine Datenbank braucht, sondern problemlos im Arbeitsspeicher Platz findet. Beide Texte stehen nebeneinander, betreffen verschiedene Architekturebenen, und doch haben sie im Kern dasselbe Argument: Die Standardarchitektur, die wir reflexhaft wählen, ist viel öfter überdimensioniert, als wir glauben. Weiterlesen nach der Anzeige Was mich bei beiden Texten beschäftigt, ist allerdings weniger ihre jeweilige Aussage als die Reaktion, die solche Aussagen erfahrungsgemäß auslösen. Wenn ich vorschlage, ein Read-Model einfach im RAM zu halten, oder wenn jemand mit Hannes’ Datenpunkten argumentiert, dass eine einzelne Maschine für die allermeisten analytischen Lasten ausreicht, dann ist die häufigste Reaktion nicht Widerspruch, sondern Unglauben. Und dieser Unglauben ist, soweit ich das beurteilen kann, kein logisches Problem, sondern ein Wahrnehmungsproblem. Es hat damit zu tun, dass Entwicklerinnen und Entwickler heute kaum noch ein Gefühl für Datenmengen haben. Golo Roden ist Gründer und CTO von the native web GmbH. Er beschäftigt sich mit der Konzeption und Entwicklung von Web- und Cloud-Anwendungen sowie -APIs, mit einem Schwerpunkt auf Event-getriebenen und Service-basierten verteilten Architekturen. Sein Leitsatz lautet, dass Softwareentwicklung kein Selbstzweck ist, sondern immer einer zugrundeliegenden Fachlichkeit folgen muss. Zwei Beobachtungen, eine gemeinsame Pointe Hannes Mühleisen ver...