Azure Synapse Analytics: Die ursprüngliche Architektur und ihre Vorteile

Einführung

Im November 2019, auf seiner Ignite-Konferenz in Orlando, Florida, stellte Microsoft Azure Synapse Analytics vor. Die Plattform wurde als wegweisende Initiative angepriesen und sollte den unübersichtlichen Markt der Daten- und Analyseplattformen vereinheitlichen und strukturieren.

Diese Technologie hat im vergangenen Jahr beachtliche Anhängerschaft gewonnen. Schauen wir uns also genauer an, warum Microsoft dieses neue Produkt entwickelt hat, was es beinhaltet, wie es funktioniert und warum Sie es in Betracht ziehen sollten.

Microsoft Azure Synapse Analytics: Der Ursprung

Vor etwa fünf Jahren, als die Migration in die Cloud aufgrund der Vorteile von großflächigem Computing und Datenspeicherung rasant voranschritt, bemerkte Microsoft ein gravierendes Problem aus Kundensicht. Es gab zwar viele weit verbreitete Anwendungen, die Speicherung, Rechenleistung und Analyse boten, aber irgendetwas stimmte nicht.

Diese Plattformen wurden unabhängig voneinander entwickelt und boten keine Möglichkeit zur Vernetzung, was zu Zeit-, Arbeits- und Kostenaufwand für das Erlernen der einzelnen Plattformen und zur Abhängigkeit von der IT-Abteilung führte. Ironischerweise sollten diese Anwendungen eigentlich Self-Service-Funktionen für Geschäftsanwender bieten.

Raghu Ramakrishnan, Chief Technology Officer für Daten bei Microsoft, formuliert es so : „Anstatt zu versuchen, jedem unserer Dienste weitere Funktionen hinzuzufügen, haben wir uns entschieden, einen Schritt zurückzutreten und herauszufinden, wie wir ihre Kernfunktionen zusammenführen können, um es den Kunden zu erleichtern, all ihre zunehmend vielfältigen Daten zu erfassen und zu analysieren, Datensilos aufzubrechen und enger zusammenzuarbeiten.“

Und diese Rückschau brachte Azure Synapse Analytics in seiner heutigen Form hervor.

Was ist Azure Synapse Analytics?

Es handelt sich um eine Erweiterung vonAzure SQL Data Warehouse (DW)mit wichtigen Verbesserungen wie On-Demand-Abfragen als Dienst. Durch die tiefere Integration mit anderen Technologie-Stacks ermöglicht es Benutzern, Daten sicher aus Quellen wie Data Warehouses, Data Lakes und Big-Data-Analysesystemen abzurufen und so den Weg von Rohdaten zu Geschäftseinblicken zu beschleunigen.

Darüber hinaus ermöglicht die Plattform den Kunden, zukunftsweisende Technologien wiePower BI, Azure Machine Learning & Künstliche Intelligenzzu nutzen – genau den Technologie-Stack, der auch für Wettervorhersagen oder die Einrichtung absichtsbasierter Suchmaschinen verwendet wird.

Kurz gesagt, es handelt sich um eine zentrale Plattform zur Analyse all Ihrer Daten, ohne dass Terabytes an Daten kopiert oder verschoben werden müssen. Dadurch werden die Self-Service-Funktionen weiter ausgebaut. Geschäftsanwender mit geringen technischen Kenntnissen können Daten aus verschiedenen Abteilungen zusammenführen.

WieRohan Kumar, Corporate Vice President für Azure Data,erklärt: „Nehmen wir an, eine Führungskraft benötigt einen detaillierten Bericht über die Vertriebsleistung im Osten der USA der letzten sechs Monate. Aktuell muss ein Dateningenieur viel Aufwand betreiben, um den Speicherort dieser Daten zu finden und fehleranfälligen Code zu schreiben, um verschiedene Dienste zu verknüpfen. Unter Umständen muss sogar ein Systemintegrationspartner hinzugezogen werden. Mit Azure Synapse ist kein Code erforderlich. Die Bedienung ist deutlich intuitiver.“

Azure Synapseist ein unbegrenzterAnalysedienst, der sich durch umfangreiche Funktionen (allgemein verfügbar oder Vorschau) auszeichnet, wie z. B. bereitgestellte Rechenleistung, Workload-Isolation, Integration mit Power BI, Azure ML & Apache Spark, Streaming Analytics, hybride Datenerfassung, Sicherheit auf Spalten- und Zeilenebene, dynamische Datenmaskierung und vieles mehr.

Weitere Informationen finden Sie hier: https://azure.microsoft.com/en-in/services/synapse-analytics/

Wie funktioniert Azure Synapse Analytics? – Die Architektur

Wie bereits erwähnt, vereint Azure Synapse dasenterprise data warehouseund Big-Data-Analysen und verbindet so die beiden Welten. Dadurch wird eine einheitliche Benutzererfahrung für die Erfassung, Aufbereitung, Verwaltung und Bereitstellung von Daten für sofortige BI- und ML-Operationen geboten.

Diese Behauptung wird weiter untermauert, indem unbegrenzte Informationsanalysedienste sowohl über Serverless-Optionen (die Flexibilität zur Skalierung bieten, wenn ein enormer Rechenaufwand erforderlich ist) als auch über bereitgestellte Ressourcenoptionen angeboten werden.

Wie funktioniert es also?

Dies sind die vier Hauptkomponenten von Azure Synapse:

Dies sind die vier Hauptkomponenten von Azure Synapse:

• Synapse SQL:Vollständige T-SQL-basierte Analysen
  SQL-Pool (Bezahlung pro DWU-Provision)
  SQL auf Abruf (Bezahlung pro verarbeitetem TB)


• Funke:Tief integriertes Apache Spark
• Datenintegration:Hybride Datenintegration
• Studio:Einheitliches Benutzererlebnis

Hier ist eine typische Synapse SQL-Architektur (Quelle: Microsoft Docs)

Hier eine kurze Beschreibung der Funktionsweise der wichtigsten Synapse SQL-Komponenten:

T-SQL:Benutzer senden Transact- oder T-SQL-Befehle an die Steuerknoten. T-SQL-Befehle bieten gegenüber SQL mehrere zusätzliche Funktionen, wie z. B. Transaktionssteuerung, Fehler- und Ausnahmebehandlung sowie Zeilenverarbeitung.

Kontrollknoten:Sie fungieren als Gehirn und einziger Zugang zu Synapse SQL. Sie führen die MPP-Engine aus, um parallele Abfragen zu optimieren und zu ermöglichen.

Rechenknoten:Die Rechenleistung richtet sich nach der Verfügbarkeit von Rechenknoten. Die Anzahl der Rechenknoten variiert je nach gewähltem Servicelevel für Synapse SQL zwischen 1 und 60.

Azure-Speicher:Azure Synapse nutzt Azure Data Lake Storage Gen2, dessen Abrechnung sich nach Ihrem Speicherverbrauch richtet. Die Daten werden hier zur Optimierung der Systemleistung in verteilte Daten (Sharding, Round Robin oder Replicate) aufgeteilt.

Warum sollten Sie Azure Synapse nutzen? – Vorteile

Es handelt sich um eine Plattform, die Unternehmen dabei unterstützt, ihre bestehenden Investitionen in die digitale Transformation zu optimieren. Mit leistungsstarken Funktionen wie der vollständigen Unterstützung von Standard-CSV-Dateien, der benutzerdefinierten Dateiauswahl, der Erweiterung von Machine-Learning-Funktionen oder der Integration mit Data Lakes oder IoT- und Event-Hubs für Streaming bietet sie alles auf einer einzigen Plattform. Sicherheit war bei Microsoft, einem führenden Unternehmen im Bereich Sicherheit und Datenschutz, noch nie ein Problem.

Falls Sie noch nicht überzeugt sind, gehören Sie wohl zu denjenigen, die gerne in Zahlen argumentieren. Hier sind einige Berichte und Studien, die die Behauptungen untermauern:

• Es ist der unangefochtene Marktführer in puncto Preis-Leistungs-Verhältnis und im Vergleich zu anderenCloud-Service-Anbieternbis zu14-mal schnellerundkostet 94 % wenigerDie


• Tatsächlich berichten Unternehmen, die Azure Synapse nutzen, von einemdurchschnittlichen ROI von 271%.


• Und es gibt keinen besseren Zeitpunkt als jetzt, um damit zu beginnen – im Allgemeinen. Sie können bis zu 76 % bei der Migration zu Azure Synapse sparen. Nutzen Sie die Vorteile, solange das Angebot gilt. Die Migrationsaktion ist bis zum 31. Januar 2021 verfügbar.


• Es gibt ein einzigartiges Gemeinschaftsangebot, mit dem Sie durch die Kombination von Azure, Power BI und Qlik Data Integration (ehemals Attunity) wertvolle Einblicke in Ihre SAP-basierten ERP-Daten gewinnen können. Hier finden Sie eine Übersicht des Angebots.

Betrachten wir einige Anwendungsfälle von Azure Synapse Analytics für die Industrie.

1. Einzelhandel und E-Commerce

Azure Synapse Analytics ermöglicht Einzelhändlern umfassende Einblicke in das Kundenverhalten, optimiert die Bestandsverwaltung und verbessert personalisierte Marketingstrategien. Es analysiert große Datenmengen aus Verkaufstransaktionen, Website-Interaktionen, sozialen Medien und Treueprogrammen und liefert Echtzeit-Analysen und Prognosen für fundiertere Entscheidungen.

2. Finanzen und Bankwesen

Im Finanzsektor unterstützt Synapse Analytics Unternehmen bei der Analyse großer Mengen an Finanzdaten, der Erkennung von Betrugsmustern und der Durchführung von Risikobewertungen. Die Lösung ermöglicht präzise Finanzprognosen, optimiert die Einhaltung regulatorischer Berichtspflichten und bietet Echtzeitanalysen zur Betrugsprävention und -aufdeckung.

3. Gesundheitswesen und Lebenswissenschaften

Azure Synapse Analytics unterstützt Gesundheitsdienstleister und Pharmaunternehmen bei der Analyse und Integration komplexer Gesundheitsdaten. Es ermöglicht Echtzeitanalysen von Patientenakten, medizinischen Bilddaten, Genomdaten und Daten aus klinischen Studien. Dies trägt zur Verbesserung der Behandlungsergebnisse, zur Optimierung von Abläufen und zum Fortschritt in der medizinischen Forschung und Arzneimittelentwicklung bei.

4. Fertigung und Lieferkette

Hersteller können Synapse Analytics nutzen, um Produktionsprozesse zu optimieren, die Effizienz der Lieferkette zu steigern und Betriebskosten zu senken. Durch die Integration von Daten aus Sensoren, Produktionslinien, Logistik und Qualitätskontrolle erhalten Unternehmen Echtzeit-Einblicke, können Wartungsbedarfe prognostizieren und Lagerbestände für die Just-in-Time-Produktion optimieren.

5. Energie und Versorgung

Azure Synapse Analytics ermöglicht Energie- und Versorgungsunternehmen die Analyse großer Mengen an Sensordaten aus Stromnetzen, intelligenten Zählern und Anlagen. Es unterstützt vorausschauende Wartung, Netzoptimierung und Energiebedarfsprognosen und führt so zu einer besseren Ressourcenzuweisung, reduzierten Ausfallzeiten und einer insgesamt höheren Effizienz.

Dies sind nur einige Beispiele, die sich auf viele andere Branchen anwenden lassen und es Organisationen ermöglichen, ihre Daten effektiv zu nutzen und wertvolle Erkenntnisse für fundierte Entscheidungen und kontinuierliche Verbesserungen zu gewinnen.

Abschluss

Durch die Nutzung von Azure Synapse Analytics können sich Unternehmen an die Spitze der Datenrevolution setzen, Erfolge erzielen und ihre Geschäftsziele in einem zunehmend wettbewerbsintensiven Umfeld erreichen.

Wenn Sie Fragen haben oder die Möglichkeiten von Azure Synapse Analytics erkunden möchten, helfen wir Ihnen als Microsoft Gold Partner gerne beim schnellen Einstieg und der optimalen Nutzung der verfügbaren Angebote. Vereinbaren Sie jetzt eine kostenlose Beratung mit unseren Experten. Wir freuen uns, Ihnen weiterzuhelfen.