Plattform zur Entwicklung KI-basierter Geschäftsmodelle https://app.wiwien-projekt.de/ 2026-04-30T15:20:06+00:00 https://app.wiwien-projekt.de/ https://app.wiwien-projekt.de/_media/wiki:dokuwiki.svg text/html 2023-12-19T07:46:30+00:00 Anonymous (anonymous@undisclosed.example.com) https://app.wiwien-projekt.de/prozess:phase5:modul2:lektion1?rev=1702971990&do=diff Arten von Datenpipelines Grundsätzlich können zwei Hauptarten von Datenpipelines unterschieden werden: * Stapelverarbeitung * Streamingdaten Stapelverarbeitung Bei der Stapelverarbeitung werden „Stapel“ von Daten in festen Zeitintervallen verarbeitet und in den Datenspeicher geladen. In der Regel werden sehr große Mengen an Daten verarbeitet, die das Gesamtsystem beeinflussen können. Durch die Stapelverarbeitung werden andere Workloads aber weniger beeinflusst, da die sehr großen Daten… text/html 2024-01-08T07:09:58+00:00 Anonymous (anonymous@undisclosed.example.com) https://app.wiwien-projekt.de/prozess:phase5:modul2:lektion2?rev=1704697798&do=diff Daten anonymisieren Gemäß der Datenschutzgrundverordnung (DS-GVO) und auch des europäischen Data Acts kann es notwendig sein, personenbezogene Daten zu anonymisieren. Die Anonymisierung von Daten hat als Ziel, einen Rückschluss von Daten auf Personen zu verhindern. Anonymisierte Daten fallen dann nicht mehr in den Bereich der DS-GVO. Dabei sollte aber eine ausreichende Sicherheit bestehen, dass eine Anonymisierung gemäß gesetzlicher Standards erfolgt ist. text/html 2023-12-20T12:10:33+00:00 Anonymous (anonymous@undisclosed.example.com) https://app.wiwien-projekt.de/prozess:phase5:modul2:lektion3?rev=1703074233&do=diff Datenpipeline umsetzen Erstellung einer Pipeline ist ein zeit- und ressourcenintensiver Prozess, vor allem sinnvoll für Unternehmen mit speziellen Anforderungen und sehr großen Datenmengen. Für andere Unternehmen kann oft auf Standardtools zurückgegriffen werden. text/html 2024-01-05T13:00:25+00:00 Anonymous (anonymous@undisclosed.example.com) https://app.wiwien-projekt.de/prozess:phase5:modul2:start?rev=1704459625&do=diff Überblick Bei einer Datenpipeline handelt es sich um ein Verfahren zur Aufnahme von Rohdaten aus verschiedenen Datenquellen, Verarbeitung dieser Daten und Portierung hin zu einem Datenspeicher, damit sie später zur Analyse bereitstehen. Was ist zu tun?