Problembeskrivning
Kunden är Global Capability Center (GCC) hos ett ledande globalt läkemedelsföretag, som hanterar företagsdata- och analysplattformar som stödjer verksamheter inom forskning, tillverkning, regulatoriska och kommersiella funktioner.
Analys-ekosystemet, byggt på Azure Databricks, hanterar fler än 150 000 datamängder och fler än 40 000 datapipelines. I takt med att plattformsanvändningen expanderade över team och domäner började GCC möta utmaningar relaterade till molnkostnadsinsyn, arbetsbelastningsstyrning och operativ effektivitet. Begränsad transparens i molnutgifter, fragmenterade övervakningsmetoder och brist på enhetlig datalinje gjorde det svårt att hantera kostnader, genomdriva styrning och skala dataekosystemet effektivt.
Viktiga utmaningar
- Begränsad insyn i Azure Databricks utgifter över regioner, domäner och projekt
- Snabb spridning av datamängder och pipelines, vilket ökar dubbelarbete och infrastrukturkostnader
- Fragmenterade kostnadsövervakningsmetoder mellan team och resursgrupper
- Brist på enhetlig datalinje över källsystem? Azure Data Factory? Databricks? Power BI
- Inkonsekventa styrningsrutiner för återanvändning av dataset, pipeline-utveckling och klusterkonfigurationer
Lösning implementerad
- Implementerade ett centraliserat FinOps- och styrningsramverk för Azure Databricks
- Utvecklade FinOps-dashboards för att ge detaljerad insyn i molnutgifter över domäner, projekt och arbetsbelastningar
- Möjliggjorde realtidsövervakning av konsumtionsmönster för att stödja proaktiv kostnadshantering
- Implementerade ett heltäckande ramverk för dataavstamning över källsystem, Azure Data Factory, Databricks och Power BI
- Standardiserade styrningsrutiner för återanvändning av dataset, pipeline-distribution och klusterkonfiguration
- Optimerade kluster och autoskalningskonfigurationer för att förbättra infrastrukturutnyttjandet
- Genomförde FinOps-workshops för att främja kostnadsmedveten utveckling och plattformsanvändning i alla team
Arkitektur med den bästa teknikstacken
Några utmaningar?
Våra branschexperter kan lösa ditt problem.