Datawarehouse of datalake? Waarom betrouwbare brondata belangrijker is

Welke rol speelt een datawarehouse of datalake binnen de informatievoorziening?

Zodra datakwaliteit op de agenda komt, verschuift het gesprek vaak snel naar architectuur. Er wordt gesproken over een datawarehouse, een datalake, leveranciers en dashboards. Allemaal relevante onderwerpen. Alleen kunnen ze de aandacht afleiden van een fundamentelere vraag: klopt de informatie die je straks in die omgeving stopt?

De aantrekkingskracht van techniek is begrijpelijk. Een platform is concreet, af te bakenen en zichtbaar. Het onderliggende dataprobleem is veel rommeliger. Dat zit verspreid over processen, afdelingen, definities en dagelijkse werkwijzen.

Wat is het verschil tussen een datawarehouse en een datalake?

Een datawarehouse en een datalake hebben ieder hun functie. Een warehouse is geschikt voor gestructureerde rapportages en vaste definities. Een datalake kan juist verschillende soorten ruwe data bij elkaar brengen, zoals documenten, beelden of sensordata. In de praktijk kunnen die vormen prima naast elkaar bestaan.

Hoe werken ERP, VERA, een datawarehouse en datalake samen?

Bij woningcorporaties staat vastgoedinformatie vaak verspreid over verschillende systemen. Het ERP bevat bijvoorbeeld administratieve woninggegevens, terwijl gespecialiseerde vastgoedsoftware meer gedetailleerde informatie over gebouwen, ruimtes, installaties en onderhoud kan bevatten.

Een datawarehouse of datalake kan gegevens uit deze systemen samenbrengen voor analyses en rapportages. Maar daarvoor moet eerst duidelijk zijn waar de oorspronkelijke gegevens worden beheerd en hoe verschillende systemen dezelfde informatie interpreteren.

Daarin hebben de onderdelen ieder een eigen rol:

  • ERP en gespecialiseerde vastgoedsoftware: ondersteunen dagelijkse processen en bevatten gegevens die binnen die processen worden vastgelegd en beheerd.
  • Bronregistratie: de afgesproken plek waar een bepaald gegeven leidend wordt vastgelegd en bijgewerkt. Dat kan per gegeven een ander systeem zijn.
  • VERA: biedt woningcorporaties gemeenschappelijke definities en afspraken voor gegevensuitwisseling, zodat verschillende systemen informatie eenduidig kunnen delen.
  • Datawarehouse: brengt gegevens uit verschillende bronnen gestructureerd samen voor rapportages, dashboards en analyses.
  • Datalake: maakt het mogelijk om grotere hoeveelheden verschillende soorten data te bewaren en te analyseren, bijvoorbeeld documenten, beelden en sensordata.

Stel dat een corporatie de onderhoudskosten per woning wil analyseren. Dan moeten gegevens over woningen, installaties en uitgevoerde werkzaamheden aan elkaar gekoppeld kunnen worden. Daarvoor is niet alleen een technische verbinding nodig, maar ook duidelijkheid over de betekenis en herkomst van die gegevens.

VERA kan helpen om die gegevensuitwisseling te standaardiseren. Het datawarehouse kan vervolgens de informatie samenbrengen voor een analyse. Maar als het installatietype in de bronregistratie verouderd is, blijft ook de analyse gebaseerd op onjuiste informatie.

Een datawarehouse of datalake vervangt dus geen betrouwbare bronregistratie. Het maakt gegevens uit verschillende bronnen bruikbaar voor nieuwe inzichten.

Hoe je deze samenhang tussen systemen organiseert, lees je in ons artikel VERA en integraties: van losse systemen naar รฉรฉn waarheid.

Waarom wordt slechte brondata niet beter in een nieuw platform?

Een nieuw datawarehouse of datalake maakt slechte brondata niet goed. Een technisch sterke omgeving kan het probleem zelfs minder zichtbaar maken. Ik zag bij een corporatie een geavanceerde omgeving waarin gegevens via meerdere geautomatiseerde bewerkingen in dashboards terechtkwamen. Toen een uitkomst naast een andere analyse werd gelegd, bleken de cijfers niet overeen te komen. Waar het verschil ontstond, was moeilijk te achterhalen.

Het risico is dat een professioneel dashboard vertrouwen wekt, ook wanneer de herkomst van een getal niet meer goed te reconstrueren is. Onzekerheid ziet er dan vooral overtuigender uit.

โ€œEen professioneel dashboard maakt een onzeker getal niet betrouwbaarder.โ€

Waar moet je dan wel beginnen?

data warehouse datalake 2

Beginnen doe je bij de brondata, niet bij het platform. Bepaal eerst welke gegevens voor de organisatie leidend zijn, waar ze ontstaan en wie ze beheert. Daarbij spelen ook eenduidige definities en afspraken over gegevensuitwisseling een rol. VERA biedt woningcorporaties hiervoor gestandaardiseerde afspraken over gegevens en hun uitwisseling. Daarmee ontstaat een gemeenschappelijke basis waarop verschillende systemen informatie op dezelfde manier kunnen interpreteren. Bronhouderschap blijft daarbij essentieel: ook met gestandaardiseerde gegevens moet duidelijk zijn welk systeem leidend is en wie verantwoordelijk is voor de actualiteit.

Wil je weten hoe woningcorporaties afspraken maken over gegevensdefinities en gegevensuitwisseling? Lees meer over VERA en CORA en hun rol binnen het applicatielandschap van woningcorporaties.

Zorg vervolgens dat wijzigingen bij mutaties, werkorders en inspecties daadwerkelijk worden verwerkt op de plek waar de betreffende gegevens worden beheerd. Pas wanneer duidelijk is wat gegevens betekenen, waar ze vandaan komen en hoe betrouwbaar ze zijn, kun je gericht bepalen hoe je ze opslaat en toegankelijk maakt.

Het helpt om te beginnen bij de besluiten die je wilt ondersteunen. De verduurzamingsvolgorde, investeringsruimte en onderhoudsbegroting vragen ieder om betrouwbare informatie. Als duidelijk is welke gegevens daarvoor nodig zijn en hoe actueel ze zijn, wordt de technische keuze een stuk minder spannend.

Wanneer wordt de platformkeuze relevant?

De platformkeuze wordt relevant zodra de brondata op orde is. Een platform is dan een middel om betrouwbare informatie beschikbaar te maken. Het hoeft niet achteraf orde te scheppen in gegevens waarvan de betekenis en herkomst al onzeker zijn.

Je kunt slechte data in ieder platform kwijt. De kunst is te voorkomen dat een mooi systeem de indruk wekt dat het antwoord daarmee ook klopt. 

Waar begin je als woningcorporatie?

Een betrouwbaar datawarehouse of datalake begint niet bij de keuze voor een platform, maar bij de informatie die je nodig hebt.

Drie vragen helpen om de juiste basis te leggen:

  1. Welke informatie wil je analyseren? Bepaal welke vastgoedgegevens nodig zijn voor rapportages, onderhoudsplanning of investeringsbeslissingen.
  2. Waar worden deze gegevens beheerd? Breng in kaart welke systemen de leidende informatie bevatten en wie verantwoordelijk is voor de actualiteit.
  3. Hoe worden de gegevens uitgewisseld? Onderzoek hoe systemen informatie delen, welke afspraken en standaarden daarbij worden gebruikt en hoe wijzigingen vanuit de bron doorwerken in analyses.

Pas daarna kun je goed bepalen welke rol een datawarehouse of datalake binnen het applicatielandschap moet vervullen.

De technologie maakt analyses mogelijk. Betrouwbare brondata en goede gegevensuitwisseling bepalen of je de uitkomsten kunt vertrouwen.

Directeur Bryder
Bart Jalink is CEO van Bryder en bepaalt de strategische koers van het bedrijf. Hij zet zich dagelijks in voor duurzame innovatie en het bouwen van sterke teams. Met jarenlange ervaring in strategie, digitale transformatie en vastgoedoplossingen helpt hij organisaties om toekomstbestendig te werken. Zijn expertise ligt in het verbinden van technologie en mens, zodat groei niet alleen slim maar ook duurzaam is. In zijn vrije tijd combineert Bart zijn passie voor data met sportieve uitdagingen: wielrennen en fitness houden hem scherp.

Vastgoeddata actualiseren na een mutatie Er is nauwelijks een moment waarop een woning in korte tijd zoveel kan

Hoe proces, mensen, systemen en vastgoeddata tijdens een mutatie samenkomen Een mutatie lijkt een overzichtelijk proces. Een huurder

Workflow en verantwoordelijkheden tijdens het mutatieproces De zwakke plek in een mutatieproces zit vaak na de uitvoering. De

Welke woninggegevens moeten kloppen voordat een woning opnieuw wordt verhuurd? Bij een mutatie verandert er vaak meer aan

ERP en vastgoedsoftware moeten bij woningcorporaties steeds beter samenwerken. Naast het ERP-systeem gebruiken corporaties gespecialiseerde toepassingen voor inspecties,

Data-uitwisseling met aannemers, leveranciers en andere ketenpartners Woningcorporaties besteden veel werk uit. Daardoor ontstaat een belangrijk deel van

Solliciteren