Retries binnen ADF zijn onmisbaar!
De afgelopen dagen was het al volop in het nieuws, Microsoft zag een toename van +775% in het gebruik van Azure-diensten. Natuurlijk schaalt alles lekker mee zou je denken, en …
ADF: AFAS GetConnector (REST/JSON) ontsluiten
AFAS is voor velen een lastige bron om te ontsluiten voor het Data Warehouse (DWH). Voorheen hadden ze een (SOAP-)service dat alleen maar XML teruggaf, maar daar is verandering in …
ADF pipelines zonder SSIS?
Binnen slechts 11m11sec in staat zijn om 5 verschillende (type) bronnen te verwerken, een dimensioneel model met Facts en Dimensies te vullen, exports te draaien en ook een Analysis Services …
ADF E-mail notifications
Om een lang verhaal kort te maken, zijn er veel manieren om e-mails te versturen bij bepaalde evenementen (zoals bij Errors). In dit scenario kijken we naar een Runbook, deze …
ADF SSIS-IR runtime available memory usage
Wist je dat je binnen Azure ook een service hebt genaamd ‘Metrics‘? Super handig, een soort alles-in-een oplossing dat in feite alle performance logging voor je verzamelt. Zelfs voor …
Gebruik van WebHooks
Even een korte introductie over wat WebHooks nu eigenlijk zijn: Wat is een webhookEen webhook is een API concept en groeit snel in populariteit. Steeds meer van wat we doen …
ADF Wrangling Data Flow
Yes! Vanochtend ontving ik een e-mail van niemand minder dan Panas, dat Wrangling Data Flow voor me was geactiveerd binnen ADF 🙂 Ik was er toch al redelijk …
ADF zonder SSIS(-IR)?
ADF zonder een SSIS-IR, kan dat? Jazeker! Natuurlijk nog wel sterk leunend op database activiteiten m.b.v. stored procedures. Laten we beginnen met de ‘scope’ om een situatie te schetsen. Voor …
ADF: Data Flow voorbeelden
Microsoft heeft een aantal voorbeelden gemaakt en deze geven een goede indruk m.b.t. de mogelijkheden (en ook de opbouw van de code in JSON) Curreny Converter Data Flow: Curreny …
ADF Data Flow (intro)
Azure Data Factory (ADF) Data Flow is de 2019 web-variant van SSIS. Nu nog in Preview, maar gebruiken gaan we het zeker. Maar hoe ziet het er uit? Net …