Beoordelingscriteria

AOO BK - Economische Data Analyse ECONAN 2023/2024

Officiële beoordelingsstructuur volgens HAN richtlijnen. Beide methodologiepaden (AI-augmented en Conventional) worden op dezelfde criteria beoordeeld.

🎯 Capability Self-Assessment (Week 1 Pre-Werk)

Vóór de Week 1 sessie vul je een korte self-assessment in om je startniveau te bepalen. Dit helpt jou én je team bij het kiezen van de juiste rol (Management of Analist) en tool path (AI-Augmented of Conventional).

Wat wordt beoordeeld?

  • Data-Analyse Ervaring - Excel, Power BI, Python/R, statistische analyse
  • BEDROM Sector Kennis - Diepgang conceptuele analyse, strategische uitdagingen
  • Werkstijl Voorkeur - Strategisch denken vs. Analytisch werk
  • AI Tools Comfort - ChatGPT/Claude ervaring, prompt engineering vertrouwen
📝 Vul Assessment In ⏱️ Duurt ~10 minuten | 💾 Auto-save in browser | 🖨️ Download als PDF

⚠️ Belangrijk: Neem je ingevulde formulier (geprint of op laptop) mee naar de Week 1 sessie. Je hebt het nodig tijdens teamdiscussies over rolverdeling en methodologie keuzes.

⚡ Beoordeling in 60 seconden

📊 Wegingen

  • Opdracht 1: 30% - Kengetallen analyse
  • Opdracht 2: 30% - Regressie analyse
  • Opdracht 3: 40% - Scenario-analyse

✅ Vier Beoordelingscriteria (CRISP-DM)

Elke opdracht wordt beoordeeld op deze vier criteria:

  • A. Business Understanding - Vertaling opdracht naar datavraagstuk, kwaliteit gekozen kentallen
  • B. Data Understanding & Preparation - Data verzamelen, gereedmaken, inlezen uit bronnen, kwaliteitsanalyse
  • C. Modeling - Model ontwikkeling (formules en visualisatie), keuzes en onderbouwing
  • D. Deployment & Evaluation - Inhoudelijke interpretatie resultaten, evaluatie model, businessvraag beantwoorden

📈 Bloom's Taxonomy Niveaus

  • 0.0 - Ontbreekt
  • 4.0 - Begrijpen (voldoende begrip maar onvoldoende toepassing)
  • 5.5 - Toepassen (voldoende toepassing van concepten)
  • 8.0 - Analyseren (goede analyse en onderbouwing)
  • 10.0 - Evalueren / Creëren (uitstekende evaluatie en aanbevelingen)

⚠️ Knock-out Regels

  • Minimaal een 3 op elk criterium (A, B, C, D) - compensatie is niet mogelijk
  • Score 0 op één criterium = automatisch onvoldoende eindcijfer

📋 CRISP-DM Beoordelingsmatrix

Overzichtelijke tabel met alle minimumcriteria (niveau "Toepassen" 5.5) per CRISP-DM fase en opdracht. Perfect als snel naslagwerk tijdens het werken aan je opdrachten.

Bekijk Matrix →
📊

Beoordelingsstructuur

Belangrijke Regels

  • Minimum per criterium: Op alle vier criteria (A, B, C, D) minimaal een 3 scoren. Compenseren kan niet.
  • Knock-out: Is er op één criterium een 0 gescoord, dan wordt het eindcijfer een onvoldoende.
  • Weging: Opdracht 1 = 30%, Opdracht 2 = 30%, Opdracht 3 = 40%

Opdracht 1: Kengetallen

30%

IST Situatie Bepalen

Benchmark analyse: Waar staan we competitief gezien?

Opdracht 2: Regressie

30%

Marktdynamieken Begrijpen

Welke factoren drijven prestatie in onze sector?

Opdracht 3: Scenario-analyse

40%

Groeistrategieën Evalueren

Welke strategie creëert waarde? (Winstsprong/Groei/Risico)

🎯 Strategisch Framework

De drie opdrachten vormen een strategische rode draad: IST → Dynamieken → Groeistrategieën. Zie het Strategisch Framework voor de complete uitleg van deze aanpak.

Knock-out Criteria

Formele vereisten - moet aanwezig zijn

Verplichte Informatie

  • Titel
  • Naam en contactgegevens studenten
  • Studentnummers
  • Naam docent
  • Datum en plaats
  • Versienummer / versiedatum
  • Literatuurlijst en bronvermelding volgens APA-normen
  • Voor schriftelijke producten ook:
  • Naam digitale document volgens vereisten
  • Ephorus check
  • Paginanummering
  • Overzichtelijke en consequente opzet
  • Tekstueel goed verzorgd taalgebruik
  • Geen tot weinig spellings-, stijl-, of grammaticale fouten

⚠️ Niet aan ontvankelijkheidseisen voldaan = eindcijfer 4,0

Beoordelingsschaal

Voor alle drie opdrachten en alle vier criteria

Niveau Cijfer Betekenis
Ontbreekt 0,0 Criterium is niet aanwezig of onvoldoende uitgewerkt
Begrijpen 4,0 Je begrijpt de concepten maar de uitvoering is onvoldoende
Toepassen 5,5 Je past de methodologie correct toe in voldoende mate
Analyseren 8,0 Je analyseert diepgaand en maakt goede verbindingen
Evalueren / Creëren 10,0 Je evalueert kritisch en doet gefundeerde aanbevelingen (vereisten = Analyseren + Evalueren)

Opdracht 1: Algemene Economische Analyse (30%)

A. Business & Data Understanding

Niveau Criteria
Ontbreekt (0) • De vertaling van de opdracht in een datavraagstuk ontbreekt.
Begrijpen (4.0) • Je begrijpt voldoende hoe de context van de opdracht is te vertalen naar een datavraagstuk binnen de gekozen rol maar de kwaliteit van de gekozen kentallen is onvoldoende en/of de vertaling van de kentallen naar de nodige data is onvoldoende.
Toepassen (5.5) • Je vertaalt de opdracht in voldoende mate naar een datavraagstuk binnen de gekozen rol.
• De kwaliteit van gekozen kentallen is voldoende.
Analyseren (8.0) • Je vertaalt de opdracht goed door naar een datavraagstuk passend binnen de gekozen rol.
• De kwaliteit van de gekozen kentallen met minimaal één branchespecifiek kental is goed.
Evalueren (10) • Je vertaalt de opdracht uitstekend door naar een datavraagstuk passend binnen de gekozen rol en vult de uitwerking ter versterking aan.
• De kwaliteit van de gekozen kentallen met meerdere branchespecifieke kentallen is uitstekend.

💡 Methodologie-agnostisch: AI-prompts of Python/R code kunnen beide bewijslast leveren voor begrip van business context en datavraagstuk.

B. Data Preparation

Niveau Criteria
Ontbreekt (0) • Het gereed maken van de data is niet benoemd.
Begrijpen (4.0) • Je begrijpt voldoende hoe data gereed gemaakt moet worden maar past dit onvoldoende toe voor de volgende fase.
Toepassen (5.5) • Je leest data uit verschillende bronnen in en maakt deze correct gereed voor de volgende fase.
Analyseren (8.0) • Je onderwerpt de kwaliteit van de data aan een grondige analyse alvorens deze te prepareren en in te lezen.
Evalueren (10) • Je formuleert gefundeerde aanbevelingen voor verbetering van de datakwaliteit en voert deze door alvorens de data te prepareren en in te lezen.

💡 Bewijs: AI-prompts voor data cleaning + verificatie logs, of Python/R scripts + transformation logs, of Power Query stappen.

C. Modeling

Niveau Criteria
Ontbreekt (0) • Je benoemt niet hoe tot het model (formules en visualisatie) is gekomen en welke keuzes hierin zijn gemaakt.
Begrijpen (4.0) • Je benoemt voldoende hoe tot het model (formules en visualisatie) is gekomen en welke keuzes hierin zijn gemaakt maar dit sluit onvoldoende aan op de opdracht, businesscontext en gekozen rol.
Toepassen (5.5) • Je hebt voldoende benoemd hoe tot het model (formules en visualisatie) is gekomen en welke keuzes hierin zijn gemaakt in relatie tot de opdracht, businesscontext en gekozen rol.
Analyseren (8.0) • Je presenteert het model (formules en visualisatie) en benoemt op overtuigende wijze welke keuzes hierin zijn gemaakt in relatie tot de opdracht, businesscontext en gekozen rol.
Evalueren (10) • Je doet gefundeerde aanbevelingen over verbeteringen van het model (formules en visualisaties).

💡 AI-pad: Prompts voor analyse + validatie van AI output. Conventional: Python/R code of Power BI models met uitleg.

D. Deploy & Evaluate

Niveau Criteria
Ontbreekt (0) • Je bespreekt de inhoudelijke uitkomsten van het model niet en/of evalueert niet in welke mate het model oplevert wat het op had moeten leveren.
Begrijpen (4.0) • Je toont aan de uitkomsten van de analyse te begrijpen maar brengt het onvoldoende in verband met de opdracht, businesscontext en gekozen rol en/of benoemt onvoldoende in welke mate het model oplevert wat het op had moeten leveren.
Toepassen (5.5) • Je geeft een inhoudelijke uiteenzetting van de analyseresultaten, bespreekt in voldoende mate de inhoudelijke betekenis van de analyseresultaten en/of evalueert in voldoende mate.
Analyseren (8.0) • Je analyseert de inhoudelijke betekenis van de analyseresultaten, legt de koppeling met de businessvraag en evalueert het model diepgaand.
Evalueren (10) • Je evalueert in welke mate het model volstaat om de businessvraag te beantwoorden en doet aanbevelingen voor vervolgonderzoek met als doel het model te verbeteren.

💡 Focus op business vertaling: Beide paden moeten analyseresultaten vertalen naar actionable recommendations.

Opdracht 2: Lineaire Regressie Analyse (30%)

Specifieke focus op regressieanalyse

A. Business & Data Understanding (Regressie)

Niveau Criteria
Ontbreekt (0) • De data om lineaire regressie toe te kunnen passen ontbreekt.
Begrijpen (4.0) • Je begrijpt welke data benodigd is om een regressieanalyse uit te voeren, maar verzamelt dit niet correct.
Toepassen (5.5) • Je vertaalt de hoofdvraag correct naar een datavraagstuk en je verzamelt deze data.
Analyseren (8.0) • Je vertaalt de hoofdvraag correct naar een datavraagstuk, verzamelt de data correct en onderneemt stappen om de regressieanalyse te versterken.
Evalueren (10) • Je geeft een kritische beschouwing over de kwaliteit van de data.

B. Data Preparation (Regressie)

Niveau Criteria
Ontbreekt (0) • Het gereedmaken van de data is niet benoemd.
Begrijpen (4.0) • Je begrijpt voldoende hoe data gereed gemaakt moet worden maar past dit onvoldoende toe voor de volgende fase.
Toepassen (5.5) • Je leest data uit verschillende bronnen in en maakt deze correct gereed voor de volgende fase.
Analyseren (8.0) • Je onderwerpt de kwaliteit van de data aan een grondige analyse alvorens deze te prepareren en in te lezen.
Evalueren (10) • Je formuleert gefundeerde aanbevelingen voor verbetering van de datakwaliteit en voert deze door alvorens de data te prepareren en in te lezen. Bijvoorbeeld het zoeken naar een beursgenoteerd bedrijf binnen de sector om als benchmark te fungeren.

C. Modeling (Regressiemodel)

Niveau Criteria
Ontbreekt (0) • Je hebt niet benoemd welke keuzes in het tot stand komen van het regressiemodel zijn gemaakt.
Begrijpen (4.0) • Je benoemt welke keuzes in het tot stand komen van het regressiemodel zijn gemaakt, maar interpreteert het regressiemodel niet goed in de context van de businessvraag.
Toepassen (5.5) • Je benoemt welke keuzes in het tot stand komen van het regressiemodel zijn gemaakt en interpreteert het regressiemodel voldoende in de context van de businessvraag.
Analyseren (8.0) • Je benoemt op overtuigende wijze welke keuzes bij het tot stand komen van het regressiemodel zijn gemaakt en interpreteert het regressiemodel goed in de context van de businessvraag.
Evalueren (10) • Je doet gefundeerde aanbevelingen over verbeteringen van het regressiemodel (regressievergelijking en visualisaties).

💡 AI-pad: Prompt "Perform regression analysis on X and Y..." + interpretatie. Conventional: sklearn, statsmodels, of Power BI analytics.

D. Deploy & Evaluate (Regressie)

Niveau Criteria
Ontbreekt (0) • Je bespreekt de inhoudelijke uitkomsten van het model niet en/of de evaluatie in welke mate het model oplevert wat het op had moeten leveren ontbreekt.
Begrijpen (4.0) • Je bespreekt de inhoudelijke uitkomsten van het regressiemodel maar de inhoudelijke interpretatie is onvoldoende en/of evalueert onvoldoende in welke mate het model oplevert wat het op had moeten leveren.
Toepassen (5.5) • Je geeft een inhoudelijke uiteenzetting van de analyseresultaten, bespreekt in voldoende mate de inhoudelijke betekenis van de analyseresultaten en/of evalueert in voldoende mate.
Analyseren (8.0) • Je analyseert de inhoudelijke betekenis van de analyseresultaten, legt de koppeling met de businessvraag en evalueert het model diepgaand.
Evalueren (10) • Je evalueert in welke mate het model volstaat om de businessvraag te beantwoorden en doet aanbevelingen voor vervolgonderzoek met als doel het model te verbeteren.

Opdracht 3: Scenarioanalyse (40%)

Specifieke focus op scenarioanalyse

A. Business & Data Understanding (Scenario)

Niveau Criteria
Ontbreekt (0) • De data om een scenarioanalyse toe te kunnen passen ontbreekt.
Begrijpen (4.0) • Je begrijpt voldoende hoe de op te zetten scenarioanalyse is te vertalen naar een datavraagstuk maar de kwaliteit van de gekozen variabelen en factoren aansluitend op het kental is onvoldoende en/of de vertaling naar de nodige data is onvoldoende.
Toepassen (5.5) • De vertaling van het kental naar variabelen en factoren is voldoende.
• Je vertaalt de factoren in voldoende mate naar een datavraagstuk ten behoeve van de scenarioanalyse.
Analyseren (8.0) • De vertaling van het kental naar variabelen en factoren is goed.
• Je vertaalt de factoren goed naar een datavraagstuk ten behoeve van de scenarioanalyse waarbij de impact van de factoren op het uiteindelijke kental goed is uitgewerkt.
Evalueren (10) • Je onderneemt stappen om de vertaling van kental naar variabelen en factoren en de vertaling van de factoren naar nodige data verdergaand te versterken.

B. Data Preparation (Scenario)

Niveau Criteria
Ontbreekt (0) • Het gereed maken van de data is niet benoemd.
Begrijpen (4.0) • Je begrijpt voldoende hoe data gereed gemaakt moet worden maar past dit onvoldoende toe voor de volgende fase.
Toepassen (5.5) • Je leest data uit verschillende bronnen in en maakt deze correct gereed voor de volgende fase.
Analyseren (8.0) • Je onderwerpt de kwaliteit van de data aan een grondige analyse alvorens deze te prepareren en in te lezen.
Evalueren (10) • Je formuleert gefundeerde aanbevelingen voor verbetering van de datakwaliteit en voert deze door alvorens de data te prepareren en in te lezen.

C. Modeling (Scenariomodel)

Niveau Criteria
Ontbreekt (0) • Je benoemt niet hoe tot het model (formules en visualisatie) is gekomen en welke keuzes hierin zijn gemaakt.
Begrijpen (4.0) • Je benoemt voldoende hoe tot het model (formules en visualisatie) is gekomen en welke keuzes hierin zijn gemaakt maar dit sluit onvoldoende aan op de vereiste scenarioanalyse.
Toepassen (5.5) • Je hebt voldoende benoemd hoe tot het model (formules en visualisatie) is gekomen en welke keuzes hierin zijn gemaakt in relatie tot de vereiste scenarioanalyse.
Analyseren (8.0) • Je presenteert het model (formules en visualisatie) en benoemt op overtuigende wijze welke keuzes hierin zijn gemaakt in relatie tot de vereiste scenarioanalyse.
Evalueren (10) • Je doet gefundeerde aanbevelingen over verbeteringen van het model (formules en visualisaties).

💡 Scenarioanalyse: What-if scenarios met variabele manipulatie. Beide paden kunnen verschillende scenario's doorrekenen.

D. Deploy & Evaluate (Scenario)

Niveau Criteria
Ontbreekt (0) • Je bespreekt de inhoudelijke uitkomsten van het model niet en/of evalueert niet in welke mate het model oplevert wat het op had moeten leveren.
Begrijpen (4.0) • Je toont aan de uitkomsten van de analyse te begrijpen maar brengt het onvoldoende in verband met de opdracht en businesscontext en/of benoemt onvoldoende in welke mate het model oplevert wat het op had moeten leveren.
Toepassen (5.5) • Je geeft een inhoudelijke uiteenzetting van de analyseresultaten, bespreekt in voldoende mate de inhoudelijke betekenis van de analyseresultaten en/of evalueert in voldoende mate.
Analyseren (8.0) • Je analyseert de inhoudelijke betekenis van de analyseresultaten, legt de koppeling met de businessvraag en evalueert het model diepgaand.
Evalueren (10) • Je evalueert in welke mate het model volstaat om de businessvraag te beantwoorden en doet aanbevelingen voor vervolgonderzoek met als doel het model te verbeteren.

Purpose • Autonomy • Mastery (PAM)

Voor programma kwaliteitsmeting - NIET voor studentbeoordeling

⚠️ Belangrijk: PAM is GEEN beoordelingscriterium voor studenten. PAM wordt gebruikt voor kwaliteitsmeting van het onderwijsprogramma (PDCA cyclus).

Wat is PAM?

PAM (Purpose, Autonomy, Mastery) is een framework uit Daniel Pink's Drive theorie voor het meten van intrinsieke motivatie. In ECONAN gebruiken we PAM om te meten of het programma voldoende Purpose, Autonomy en Mastery biedt aan studenten.

Purpose

Ervaren studenten waarom deze module ertoe doet? Zien ze de relevantie voor hun toekomstige carrière?

Autonomy

Hebben studenten voldoende keuzevrijheid in sector, rol, methodologie en complexiteit?

Mastery

Ervaren studenten groei in hun competenties? Is de uitdaging optimaal (niet te makkelijk, niet te moeilijk)?

Hoe meten we PAM?

  • Wekelijkse retrospectives: Studenten geven zichzelf een 1-5 score op Purpose, Autonomy en Mastery
  • Tool: Student Retrospective Tool
  • Doel: Programma verbetering (PDCA) - als PAM scores laag zijn, passen we het programma aan
  • NIET voor cijfers: Deze scores tellen NIET mee voor de studentbeoordeling

Waarom is dit belangrijk?

Het hybride ECONAN model (AI-augmented vs. Conventional) is ontworpen om 5/5 scores op alle drie PAM dimensies te bereiken. Door PAM wekelijks te meten, kunnen we het programma continu verbeteren en zorgen dat studenten intrinsiek gemotiveerd blijven.

Assessment Resources