Bestanden uit Azure Blob Storage laden in je datawarehouse en Power BI
Bestanden uit Azure Blob Storage
Yres leest CSV-, Excel- en Parquet-bestanden rechtstreeks uit een container in Azure Blob Storage. Je geeft de naam van het storage-account, de container en een SAS-token met minimaal de rechten Read en List op. Per bestand of bestandspatroon maak je een tabel aan en kies je hoe die geladen wordt. De structuur leidt Yres af uit de bestanden zelf. De inhoud komt in een Azure SQL-database in je eigen tenant en is daar beschikbaar voor Power BI, naast je andere bronnen.
In het kort
- Verbinding
- Rechtstreeks op de blob-container, met één SAS-token. Geen gebruikersnaam of wachtwoord
- Bestandsformaten
- CSV, Excel en Parquet
- Benodigde rechten
- Een SAS-token met minimaal Read en List op de container; een vervaldatum wordt aanbevolen
- Tabellen
- Eén tabel per bestand of bestandspatroon. Er is geen databasecatalogus: je legt de bestanden en de leesopties vast bij het toevoegen
- Manieren van laden
- FULL, OVERWRITE of IMAGE; bij onderhoud achteraf ook RELOAD en ADDITIONAL. Delta op een wijzigingskolom bestaat niet voor bestanden
- Alleen recente bestanden
- Per tabel stel je een terugkijkvenster in op de wijzigingsdatum van het bestand, bijvoorbeeld 7 dagen. Zonder venster komen alle bestanden in aanmerking
- Waar draait het
- Op de cloud-runtime van Azure Data Factory. Een self-hosted integration runtime is niet nodig. De SAS-URL staat als geheim in de Key Vault van je eigen omgeving
Wat je zelf regelt
- 1Zorg voor een storage-account met een blob-container waarin de bronbestanden staan of worden afgeleverd.
- 2Maak een SAS-token aan via Security + networking → Shared access signature: kies Blob als service, minimaal Read en List, en een vervaldatum. Een token voor één container kan via Container → Shared access tokens.
- 3Bewaar het token direct (het deel na het vraagteken); Azure toont het maar één keer.
- 4Voeg in Yres de bron Azure Blob Storage toe met accountnaam, containernaam en SAS-token, en vul de vervaldatum in bij de vervaldatum van de inloggegevens.
- 5Voeg per bestand of bestandspatroon een tabel toe en kies de manier van laden.
Wanneer heb je dit nodig — en wanneer niet
Een losse connector is genoeg als…
Staat er één bestand in een container dat één rapport voedt, dan leest Power BI dat zelf uit Blob Storage. Dat is eenvoudiger en goedkoper.
Yres voegt iets toe als…
Yres wordt zinvol als een leverancier of een ander systeem regelmatig bestanden in de container zet en je daar een betrouwbare, geplande tabel van wilt maken: alleen nieuwe bestanden oppakken, de stand per aanlevering bewaren en de cijfers koppelen aan je overige bronnen.
Veelgestelde vragen: Azure Blob Storage
Welke rechten moet het SAS-token hebben?
Minimaal Read en List op de container. Read om de bestanden te lezen, List om te zien welke bestanden er staan. Schrijfrechten zijn voor het laden niet nodig. Je mag een token op accountniveau gebruiken (met Blob als toegestane service) of een token dat alleen voor die ene container geldt.
Wat gebeurt er als het SAS-token verloopt?
Dan kan Yres de container niet meer lezen en falen de loads tot je een nieuw token invult. Vul daarom bij het toevoegen van de bron de vervaldatum van het token in. Yres waarschuwt je dan op tijd voordat het verloopt.
Kan Yres alleen de nieuwe bestanden in de container oppakken?
Ja. Bestanden hebben geen wijzigingskolom, dus Yres kijkt naar de wijzigingsdatum van het bestand. Per tabel stel je een terugkijkvenster in met een getal en een eenheid, bijvoorbeeld 7 en DAY. Let op de eenheid: een onbekende waarde wordt zonder foutmelding als seconden gelezen. Laat je het venster leeg, dan worden alle bestanden meegenomen.
Is dit hetzelfde storage-account als de opslag die Yres zelf gebruikt?
Nee. Yres heeft eigen opslag voor tussenstappen en voor de Data Lake van je omgeving. Het account dat je hier koppelt is een bronaccount dat je zelf kiest en staat daar los van. Controleer bij twijfel of je het juiste account en de juiste container opgeeft.
Volledige technische beschrijving in de kennisbank →·Laatst gecontroleerd:
Datawarehouse-automatisering die in je eigen Azure draait
Gebouwd voor organisaties op Azure en Power BI. Yres koppelt je bronnen, bewaart de historie en rolt wijzigingen gecontroleerd uit, zonder handwerk.