En ny start med Data Mesh

TechRadar 2023: Hovedtema – Datadrevet intelligens

Denne artikkelen er et utvalg av Devoteams TechRadar 2023 og er skrevet for å gi kontekst til emnet, gjennom å dekke et hett emne i bransjen! 

Årets fokus for TechRadar er Cloud Native-æraen – en ny æra der teknologi og virksomhet er mer sammenkoblet enn noen gang. Bedrifter må forberede seg på disruptive forretningsmodeller bygget med, i og for skyen. Stort sett alle teknologiene presentert i TechRadar 2023 er den del av denne bevegelsen.

Fra Business Intelligence til Data Mesh

Leter du etter en måte å få en detaljert forståelse av forholdet mellom dataene dine? Her kan Data Mesh hjelpe til. Basert på organisatoriske strategier for skalering av programvareutvikling i stor skala, er Data Mesh en sosioteknisk tilnærming som gjør det mulig for en organisasjon å skalere med data.

Store dataplattformer står overfor tre utfordringer: For det første er det utfordringer knyttet til bruken av sentraliserte, monolittiske dataarkitekturer for å håndtere data fra operasjonelle systemer. For det andre krever hyper-spesialiserte verktøy et hyper-spesialisert personale. Dette skaper hyper-spesialiserte siloer mellom generering og bruk av data, som igjen fører til driftsproblemer. Til slutt oppstår det utfordringer når det gjelder sentraliserte silomodeller som hemmer prosessen. Dette medfører vanskeligheter både for forbrukere og plattformleverandører, enten det er knyttet til oppstart av store plattformer eller vekst og differensiering.

Overgangen til Data Mesh: Transformering av datavarehus

Data Mesh løser utfordringene med datavarehus ved å gi dataeiere større frihet og fleksibilitet. Dette gjør det enklere for dataeiere å eksperimentere og komme med nye ideer, samtidig som det gjør det enklere for datateam å imøtekomme behovene til alle databrukere gjennom en enkelt kanal. Data Mesh bygger på fire hovedpilarer: føderert styring, desentralisert domeneeierskap av data, data som et produkt og selvbetjent infrastruktur som en plattform.

Devoteams anbefaling for å komme i gang med Data Mesh

Data Mesh gir solide grunnleggende løsninger for et selskap å skalere med data, slik det allerede er gjort innen programvareutvikling. Vi forventer at «å omfavne data mesh» vil erstatte «å ha en data mesh» som standard formulering for dette konseptet i nær fremtid.

Implementeringen av data mesh bør være et langsiktig mål, og det er ikke nødvendig å implementere alle komponentene i hver pilar samtidig, men heller over tid. Dette vil sikre at alle ansatte har tilgang til dataene når de trenger det. Likevel garanterer ikke bare det å følge pilarene i seg selv, implementeringen. Mange organisasjoner implementerer trinnvise praksiser i samsvar med Data Mesh-pilarene.

Data Mesh har mange potensielle bruksområder, inkludert:

• Smidighet og skalering går hånd i hånd ved bruk av data mesh, da det støtter desentraliserte dataoperasjoner som bidrar til å redusere tiden det tar å bringe et produkt til markedet, øke skaleringsevnen og forbedre smidigheten i forretningsområdet.
• Muliggjøring av spørringsutførelse på tvers av flere datakilder for utviklere og DevOps-team gjennom en selvbetjent modell.
• Innføring av en universell, domeneuavhengig, automatisert tilnærming for standardisering av data i datateam.
• Fremme åpenhet på tvers av team gjennom desentralisert dataeierskap og deling på tvers av spesialiserte grupper som jobber i ulike områder.

Data Mesh er i utgangspunktet en metode for organisering av data, det er ikke et produkt som kan kjøpes. Likevel spiller teknologi en avgjørende rolle, da den muliggjør Data Mesh, og kun praktiske og enkle løsninger vil overbevise domene-teamene som skal bruke dem. Du kan bygge en dataplattform for din Data Mesh ved å benytte deg av eksisterende tilbud fra skytjenesteleverandører, som inneholder et omfattende utvalg av sterke selvbetjente datatjenester.