Tabsdata vervangt dure datapijplijnen door een pub-/subarchitectuur
Het onttrekken van de juiste data uit een datalake of database voor nadere analyse, is een kostbare aangelegenheid. De traditionele oplossingen naderen de grenzen van de mogelijkheden. Daarom is Tabsdata op zoek gegaan naar een alternatieve benadering en komt nu met een pub/sub-model. Tijdens de IT Press Tour in Californië wist CEO en co-founder Arvind Prabhakar Dutch IT Channel bij te praten over de voordelen van deze aanpak.

De markt voor data-infrastructuur is aan grote veranderingen onderhevig nu traditionele ETL-benaderingen hun economische en operationele grenzen bereiken. Tabsdata komt daarom met een alternatief in de vorm van een pub/sub-model. Als het idee aanslaat kan deze aanpak de data-economie van ondernemingen fundamenteel veranderen, door de kostbare inefficiënties van conventionele pijplijnarchitecturen te elimineren.
Het huidige datapijplijnmodel staat onder toenemende economische druk die onhoudbaar wordt voor bedrijfsactiviteiten. Organisaties verwerken doorgaans miljoenen records om tientallen bruikbare inzichten te ontsluiten, wat resulteert in een enorme verspilling van rekenkracht, opslagcapaciteit en andere bronnen. Deze inefficiëntie wordt nog groter naarmate de gegevensvolumes exponentieel groeien, terwijl zakelijke vereisten snellere en betrouwbaardere toegang tot vertrouwde datasets vereisen.
Economische pijnpunten zijn vooral merkbaar in gereguleerde sectoren, waar de herkomst van gegevens en nalevingsvereisten extra operationele lasten met zich meebrengen. Tabsdata's pub/sub for tables-strategie pakt deze economische uitdagingen aan door middel van fundamentele veranderingen in de architectuur. Door over te schakelen van data-extractie naar datacontracten, elimineren organisaties de enorme dataverplaatsing en -verwerking die kenmerkend is voor traditionele pijplijnen. In plaats van hele databases te kopiëren en complexe transformaties uit te voeren, publiceren domeinteams alleen de specifieke datasets die andere teams nodig hebben. ‘U krijgt wat u vraagt en niets meer.’
Deze architecturale verschuiving heeft onmiddellijk impact op de kosten. De opslagvereisten nemen drastisch af wanneer organisaties stoppen met het onderhouden van meerdere kopieën van onbewerkte gegevens voor transformatiedoeleinden. De verwerkingskosten dalen wanneer complexe zoektochten over miljoenen records worden vervangen door gerichte publicatie van datasets. Het gebruik van de netwerkbandbreedte daalt wanneer gegevensverplaatsing event gestuurd wordt in plaats van batchgericht.
De ingebouwde versiebeheer- en herkomstmogelijkheden van het platform elimineren de noodzaak van afzonderlijke herkomst- en governancetools. Organisaties kunnen compliance en controleerbaarheid bereiken via native platformfuncties in plaats van dure aanvullende oplossingen die vaak geen volledige zichtbaarheid bieden.