Continuous Data in Snowflake
- Type product
Continuous Data in Snowflake
Opleiderscore:
Beschrijving
Gegevens worden over het algemeen verwerkt met behulp van een batch- of stroommethode, afhankelijk van hoeveel tijd tussen het genereren en verwerken van gegevens acceptabel is.
Gegevens worden over het algemeen verwerkt met behulp van een batch- of stroommethode, afhankelijk van hoeveel tijd tussen het genereren en verwerken van gegevens acceptabel is. De Snowflake-functie Snowpipes verwerkt gegevens in microbatches die tussen deze twee scenario's in vallen. In deze training behandel je de implementatie van Snowpipes, wanneer gegevens afkomstig zijn uit een interne Snowflake-fase. Je begint met het bekijken van opties voor gegevensopname in Snowflake vanuit een theoretisch oogpunt, inclusie…
Veelgestelde vragen
Er zijn nog geen veelgestelde vragen over dit product. Als je een vraag hebt, neem dan contact op met onze klantenservice.
Gegevens worden over het algemeen verwerkt met behulp van een batch- of stroommethode, afhankelijk van hoeveel tijd tussen het genereren en verwerken van gegevens acceptabel is.
Gegevens worden over het algemeen verwerkt met behulp van een batch- of stroommethode, afhankelijk van hoeveel tijd tussen het genereren en verwerken van gegevens acceptabel is. De Snowflake-functie Snowpipes verwerkt gegevens in microbatches die tussen deze twee scenario's in vallen. In deze training behandel je de implementatie van Snowpipes, wanneer gegevens afkomstig zijn uit een interne Snowflake-fase. Je begint met het bekijken van opties voor gegevensopname in Snowflake vanuit een theoretisch oogpunt, inclusief de verschillen tussen het laden van bulkgegevens en Snowpipes. Vervolgens krijg je hands-on tools om de infrastructuur voor gegevensopname op te zetten: een interne fase voor CSV-gegevens, een bestemmingstabel voor een gegevensbelasting en een pijp om de belasting in microbatches uit te voeren. Vervolgens implementeer je de automatische opname van CSV-bestanden van externe Snowflake-fasen die zich op de AWS- en Azure-cloudplatforms bevinden om zo een pijplijn voor continue gegevensopname op te zetten. Deze pijplijn zal verschillende componenten bevatten, zoals wachtrijen, bedrijfsapplicaties en opslagintegraties, evenals de machtigingen die nodig zijn om deze onder...
Blijf op de hoogte van nieuwe ervaringen
Deel je ervaring
Heb je ervaring met deze cursus? Deel je ervaring en help anderen kiezen. Als dank voor de moeite doneert Springest € 1,- aan Stichting Edukans.Er zijn nog geen veelgestelde vragen over dit product. Als je een vraag hebt, neem dan contact op met onze klantenservice.