Fra rådata til innsikt – Dataworkshop med BearingPoint
Store mengder data finnes allerede der ute. Utfordringen er ikke bare å analysere dem, men å få dem inn, strukturere dem og bygge en løsning som gjør at de faktisk kan brukes videre.
I denne workshopen skal dere jobbe med et case fra et fiktivt norsk fiskeri. Gjennom caset følger vi dataene hele veien fra rådata til et ferdig dataprodukt i Databricks.
Vi bygger opp løsningen etter en medallion-arkitektur, der dataene gradvis foredles gjennom Bronze-, Silver- og Gold-lag. Underveis ser vi på hvorfor denne måten å strukturere en datapipeline på brukes i virkelige dataprosjekter, og hvordan hvert lag gjør dataene mer tilgjengelige og nyttige for analyse.
Dere vil blant annet få jobbe med hvordan man:
henter inn rådata fra ulike datakilder
strukturerer og kvalitetssikrer data
kobler sammen ulike datasett
bygger en datapipeline
lager analyseklare datasett
bruker dataene til analyse, prediksjon og visualisering
bygger et enkelt dashboard basert på de ferdige dataene
Alt gjøres hands-on i Databricks og Python.
Gjennom oppgavene lærer dere hvordan de ulike delene av en moderne dataplattform henger sammen. Vi starter med relativt rå data og bygger steg for steg frem mot data som kan brukes til rapportering, analyse og prediksjon.
Underveis trekker vi også inn erfaringer fra dataprosjekter i BearingPoint. Hva fungerer fint når man gjør en analyse én gang, men blir vanskelig når nye data skal komme inn kontinuerlig? Hva skjer når data mangler eller endrer seg? Og hvorfor er det nyttig å skille mellom rådata, bearbeidede data og ferdige datasett for rapportering og analyse?
Du trenger ikke ha brukt Databricks tidligere. Litt erfaring med Python er en fordel, men dere får det dere trenger for å komme i gang.
Ta med egen PC/Mac!
For at vi skal kunne bruke mest mulig av tiden på selve caset, anbefaler vi at dere oppretter en gratis Databricks Free Edition-bruker før workshopen:
https://docs.databricks.com/aws/en/getting-started/free-edition
Tentativ plan
16:30–17:00: Velkomst, BearingPoint og introduksjon til kveldens case
17:00–19:30: Case og workshop, med middagspause underveis
Burrito fra Héctor
19:30 →: Vi tar turen videre til Midtbyen for mingling og forfriskninger på ØX Tap Room
Informasjon fra Fagkom:
Vi minner om at dørene åpner kl. 16:15 og fysisk venteliste 16:25
Påfølgende dag kl. 14:30 vil det her på abakus.no bli gjort tilgjengelig en spørreundersøkelse som du må svare på for å kunne melde deg på nye arrangementer. Svarfrist: 1 uke.
Hvem er BearingPoint?
BearingPoint har Norges største og mest erfarne fagmiljø innen data og analyse, og solid kompetanse innen verdikjede, teknologi, strategi og bærekraft. Vi hjelper selskaper å løse utfordringer de mangler kompetanse og kapasitet til å håndtere på egenhånd. Vårt arbeid spenner fra å sette fart på startups til digitalisering av norsk jernbane og fornying av landets helsevesen. Som konsulent hos oss blir du en del av et team på 140 dyktige og engasjerte kolleger som omtaler hverandre som venner.
Våre konsulenter er fordelt på tre team som jobber sammen for å finne gode og helhetlige løsninger for hver enkelt kunde. Som nyansatt blir du tilknyttet det teamet som matcher dine interesser best, og fungerer som ditt «faglige hjem». Den tverrfaglige sammensetningen gjør oss i stand til å se kundens utfordringer både fra et forretningsmessig og teknologisk perspektiv. Ofte jobber konsulenter fra ulike team sammen på samme prosjekt.