Wat is data ingestion?
Data ingestion is het binnenhalen van gegevens uit allerlei bronnen naar één centrale plek, zoals een datawarehouse of data lake, waar ze klaarstaan voor analyse en AI-toepassingen. Zie het als de laadkade van je datahuishouding: alles wat binnenkomt, passeert dit punt.
Hoe werkt het?
Er zijn twee smaken. Bij batch ingestion worden gegevens periodiek opgehaald, bijvoorbeeld elke nacht de verkoopcijfers van die dag. Dat is eenvoudig en goedkoop, en voor de meeste rapportages ruim voldoende. Bij real-time (streaming) ingestion stromen gegevens direct na het ontstaan binnen, zoals sensordata van machines of transacties voor fraudedetectie. Dat is nodig wanneer je direct wilt reageren. Moderne cloudplatformen hebben dit werk sterk vereenvoudigd: waar vroeger maatwerk nodig was, sluit je veelgebruikte systemen nu aan met standaardconnectoren.
Wat heb je eraan als bedrijf?
Voor de meeste MKB-bedrijven is dit techniek die een IT-partner regelt, maar het principe is belangrijk: dashboards, rapportages en AI zijn maar zo actueel als de data die erin stroomt. Vraag je dus af wat je echt nodig hebt. Een dashboard dat elke nacht ververst is vaak prima en aanzienlijk goedkoper dan real-time. Betaal alleen voor snelheid waar die snelheid ook beslissingen verandert.
Gerelateerde begrippen
Data ingestion volgt op data extraction en is onderdeel van ETL-processen. Eenmaal binnen wordt de data met data preprocessing opgeschoond en eventueel via data fusion gecombineerd.
Je hele organisatie AI-geletterd?
Bij elke incompany training krijgt iedereen in je organisatie toegang tot de e-learning AI Geletterdheid. In 90 tot 120 minuten leert elke medewerker wat AI is, wat je ermee kunt en hoe je er veilig mee werkt. Per rol en sector, met certificaat, zoals de EU AI Act vraagt.
Bekijk de trainingen →