Stackable: Open Source Dataplatform lost Hadoop-uitdagingen op

Hadoop is een open-source softwareframework, oorspronkelijk van Doug Cutting en Mike Cafarella, dat is ontworpen voor de gedistribueerde opslag en verwerking van grote datasets op clusters van standaard hardware. Het maakt gebruik van het Hadoop Distributed File System (HDFS) voor dataopslag en het MapReduce-paradigma voor parallelle gegevensverwerking. Hadoop is een drijvende kracht achter de populariteit van big data, biedt enorme opslagcapaciteit en verwerkingskracht, en kan worden uitgebreid met diverse andere open-source tools en frameworks in het bredere Hadoop-ecosysteem.

Hadoop maakte het mogelijk om enorme datasets te verwerken, maar de implementatie was complex. Commerciële spelers als Cloudera en Hortonworks vereenvoudigden dit, maar door de fusie van de bedrijven, prijsverhogingen en het verdwijnen van de Community Edition verloor Hadoop veel draagvlak. IBM stopte volledig met zijn Hadoop-aanbod. Veel organisaties gingen op zoek naar een opvolger.

Stackable biedt die opvolger met een open source platform gebaseerd op Kubernetes. Het combineert infrastructuur als code met een modulaire aanpak, waardoor data-applicaties eenvoudig zijn toe te voegen of te verwijderen. Het draait zowel on-premises, in de cloud als hybride.

Het platform integreert naadloos met populaire open source data-apps zoals Apache Kafka, Apache Druid, Trino en Apache Spark. Bedrijven kunnen hiermee data lakes, lakehouses, moderne datawarehouses of machine learning pipelines opzetten. De kracht ligt in de schaalbaarheid en flexibiliteit: alle componenten zijn open source en werken samen binnen één uniforme architectuur.

Het licentiemodel van Stackable is transparant en gebaseerd op het aantal nodes. Dit verlaagt de drempel voor adoptie en voorkomt afhankelijkheid van hyperscalers, die hun prijzen hebben verhoogd en vaak lock-in veroorzaken. Datasoevereiniteit is daardoor een belangrijk argument voor veel klanten.

Stackable telt momenteel een team van circa 20 specialisten en werkt samen met partners zoals SVA, Suse, b.telligent en Red Hat. Onder de klanten bevinden zich IONOS, HUK, Pro7, Swisscom, het Britse Ministerie van Defensie en Danske Bank. IONOS nam in 2021 een belang van 25,1% in het bedrijf, wat de positie van Stackable verder verstevigde.

Volgens Liebau zijn nog niet alle organisaties klaar voor Kubernetes, maar de interesse groeit snel. Stackable ondersteunt bedrijven met consultancy en snelle support. Het doel is organische groei, zonder afhankelijk te worden van durfkapitaal.

Met een focus op open source, flexibiliteit en datasoevereiniteit biedt Stackable een aantrekkelijk alternatief voor traditionele big data-platformen. Voor IT-professionals die werken aan moderne data-architecturen vormt het een oplossing die zowel toekomstbestendig als kostenefficiënt is.