Giggabytes

Giggabytes OyDatainsinöörityöSemanttiset mallitPower BI

Dataratkaisuja raportointiin, joka kestää tarkastelun.

Giggabytes suunnittelee lakehouse-alustoja, semanttisia malleja sekä kalenteri-, asiakas- ja kampanjalogiikkaa, joiden ansiosta viikko- ja kuukausitason tunnusluvut pysyvät yhdenmukaisina.

Datainsinöörityö, BI-kehitys ja ratkaisuarkkitehtuuri sekä 18 vuoden kokemus yritystason dataratkaisujen toimittamisesta.
Rakennetaan omalle alustallenne, dokumentoidaan ja jää teille.

Databricks Partner Program -kumppaniohjelman merkki, Bronze-taso

Databricks-kumppaniConsulting & SI -kumppani, Databricks Partner Program -kumppaniohjelman jäsenDatabricks-työmme

Järjestelmä tietueet lähteestä päätökseen

Kuvitteellinen

Valitse vaihe, niin näet, mitä siinä tapahtuu.

Nettomyynti · jakso P03

NäkymäOikopolkuYhteinen kalenteri
Viikkokooste4,82 M5,11 M
Kuukausinäkymä5,11 M5,11 M
Ero5,7 %0,0 %

Molemmat näkymät lukevat nyt samaa kalenteria.

Kuvitteellinen dataputki. Tietueet ERP-, CRM- ja POS-järjestelmistä, tapahtumista, tiedostoista ja rajapinnoista luetaan yhden sisäänlukupisteen kautta raakaan Bronze-kerrokseen, validoidaan Silver-kerroksessa, jossa hylätyt tietueet siirretään karanteeniin, mallinnetaan Gold-kerroksessa ja tarjotaan semanttisen mallin kautta, jonka päivämääräulottuvuus sisältää kalenterin. Esimerkkiraportissa viikkokooste on 4,82 miljoonaa ja kuukausinäkymä 5,11 miljoonaa, joten ero on 5,7 prosenttia. Kun molemmat lukevat samaa päivämääräulottuvuutta ja kalenteria, kumpikin näyttää 5,11 miljoonaa.
  • ERP · CRM · POS · tapahtumat · tiedostot · rajapinnat. Jokaisella järjestelmällä on omat avaimensa, rakeisuutensa ja kellonsa. Mikään niistä ei ole samaa mieltä siitä, mikä viikko on.
  • Fabric pipelines · Data Factory · Auto Loader. Inkrementaaliset, idempotentit lataukset. Jokainen tietue säilyttää lähteensä, latausaikansa ja jäljitettävyytensä.
  • Delta Lake · OneLake. Raakahistoria säilyy täsmälleen sellaisena kuin se toimitettiin: vain lisäyksiä, uudelleenajettavissa, auditoitavissa.
  • dbt · PySpark · SQL. Duplikaattien poisto, tietotyyppien ja avainten valvonta, laatusäännöt. Hylätyt tietueet siirretään karanteeniin, niitä ei pudoteta pois.
  • Kimball · Data Vault 2.0 · Unity Catalog. Yhdenmukaiset dimensiot ja faktat määritellyllä rakeisuudella, hallittuina yhdessä katalogissa.
  • Power BI -semanttiset mallit. Yksi päivämääräulottuvuus, yksi kalenteri ja yksi määritelmä kullekin mittarille, kaikille raporteille yhteisinä.
  • Power BI. Viikko- ja kuukausinäkymät täsmäävät, koska ne rakentuvat samalle mallille.

03 Ongelma

Epäjohdonmukainen raportointi alkaa harvoin koontinäkymästä.

Viikko- ja kuukausiraportit lukevat samoja transaktioita. Luvut eroavat, koska kumpikin päättää eri tavalla, mitkä päivät kuuluvat mihinkin jaksoon. Se on mallinnuspäätös, joka tehdään dataketjun alkupäässä, kauan ennen kuin kukaan avaa raporttia.

  1. Samat faktatyksi myyntitaulu
  2. Eri kalenterilogiikkaviikkosääntö vs. kuukausisääntö
  3. Eri tunnuslukukaksi ”oikeaa” lukua

Yksi kauppaviikko kuukauden vaihteen yli

Kuvitteellinen
Viikkologiikka
Koko viikko → kuukausi A
Kalenterikuukausi
Kuukausi AKuukausi B
Perjantai, lauantai ja sunnuntai, kolme vilkkainta myyntipäivää, osuvat säännöstä riippuen eri kuukausiin. Kumpikaan raportti ei ole väärässä. Ne vastaavat samalla nimellä eri kysymyksiin.

04 Mitä Giggabytes rakentaa

Alustat, mallit ja niiden välinen logiikka.

Raportointi hajoaa saumakohdissa: sisäänluvun ja mallinnuksen välillä, mallin ja mittarin välillä sekä kalenterin ja tunnusluvun välillä. Giggabytes rakentaa ratkaisut kaikkiin kolmeen saumakohtaan.

  1. 01API
  2. 02Raaka
  3. 03Laatu
  4. 04Malli
  5. 05Semanttinen
  6. 06KPI
  7. 07Raportti

Valitse osa-alue, niin näet sen paikan dataputkessa.

01

Data-alustat

  1. Lähde
  2. Sisäänluku
  3. Lakehouse
  4. Hallittu data

Lakehouse-alustat, joissa inkrementaalinen sisäänluku, medallion-kerrokset ja hallinta on suunniteltu mukaan ensimmäisestä taulusta lähtien eikä lisätty jälkikäteen ensimmäisen auditoinnin jälkeen.

Azure Databricks · Microsoft Fabric · Snowflake · Delta Lake · Unity Catalog · Terraform

02

Semanttinen analytiikka

  1. Gold
  2. Malli
  3. Mittarit
  4. Power BI

Tähtimallit, joissa rakeisuus on määritelty, dimensiot ovat yhdenmukaiset ja jokaisella mittarilla on yksi määritelmä. Power BI:n semanttiset mallit, joita analyytikot voivat laajentaa rikkomatta niitä.

Kimball · Power BI -semanttiset mallit

03

Tunnuslukujen eheys

  1. Fakta
  2. Päivä
  3. Kalenteri
  4. Liiketoimintalogiikka
  5. Yhdenmukainen tunnusluku

Kalenteri-, asiakas- ja kampanjalogiikka, joka ratkaisee, mikä luku on oikea. Kirjoitetaan kerran malliin ja testataan kuin koodi.

dbt-testit · SQL · päivämääräulottuvuuden suunnittelu

05 Näin työ etenee

Ensimmäisestä puhelusta luovutukseen.

Kaikki rakennetaan omalle alustallenne, dokumentoidaan työn edetessä ja luovutetaan lopuksi teille. Mikään ei jää riippumaan meistä.

  1. 30 minuutin puhelu

    Maksuton

    Alustanne, raporttinne ja luvut, jotka eivät täsmää.

  2. Arviointi

    1–2 viikkoa

    Mittaamme omalla datallanne, missä ja miksi raportit poikkeavat toisistaan, ja ehdotamme korjauksen kiinteään hintaan.

  3. Toteutus

    Sovitaan etukäteen

    Omassa ympäristössänne, pieninä tarkistettavina vaiheina ja jokaisella ajolla toistuvin tarkistuksin.

  4. Luovutus

    Viimeinen viikko

    Koodi, dokumentaatio ja läpikäynti tiiminne kanssa. Ratkaisu jää teille, ilman sitoumuksia meihin.

07 Projektikokemus

Kokemusta johtavissa organisaatioissa.

Giggabytes on toteuttanut näille organisaatioille datainsinöörityön ja BI:n konsultointiprojekteja.

  • Allianz
  • Euroclear
  • Nokia
  • Sodexo
  • Sympa
  • THG
  • Vattenfall

Logot ovat omistajiensa tavaramerkkejä, ja ne näytetään ainoastaan niiden organisaatioiden tunnistamiseksi, joille Giggabytes on tehnyt konsultointityötä. Niiden käyttö ei tarkoita, että nämä organisaatiot suosittelisivat Giggabytesia.

Projektikokemus

08 Kuka rakentaa

Kokenutta toteutusta Lahdesta.

Kokenutta työtä ensimmäisestä puhelusta luovutukseen ilman siirtoa myynnistä toteutukseen.

Kokemus
18 vuotta yritystason dataratkaisujen toimittamista vuodesta 2008
Osaaminen
Datainsinöörityö, BI-kehitys ja ratkaisuarkkitehtuuri
Toimialat
Vähittäis- ja päivittäistavarakauppa, rahoituspalvelut, energia, yrityspalvelut
Kielet
Suomi ja englanti
Kumppanuus
Databricks-kumppani, Consulting & SI
Yritys
Giggabytes Oy, Y-tunnus 3147928-8

→ Päätös

Aloitetaan maksuttomalla 30 minuutin puhelulla.

Kertokaa sähköpostitse luvuista, jotka eivät täsmää, niin sovimme puhelun. Lakehouse-alustat, semanttisten mallien katselmoinnit, tunnuslukujen täsmäytys ja alennushintojen tarkistukset.