In resultatenbeoordeling is feitenmateriaal het verzamelde voorbeeld van opdrachten van studenten. Dit feitenmateriaal wordt geëvalueerd voor de evaluatie van programma's, cursussen, onderzoeksprojecten, prestaties van de faculteit en studenten, enzovoort.

In Ultra-cursussen kan feitenmateriaal worden verzameld uit beoordelingen die geen individueel beoordeelde vragen bevatten.

Beoordelingsmanagers en beoordelingsbeheerders kunnen verzamelingen van feitenmateriaal maken, een steekproef nemen van de verzamelingen en evaluatoren toewijzen.

Verzamelingen van feitenmateriaal maken

Je kunt verzamelingen van feitenmateriaal maken om feitenmateriaal te verzamelen uit cursussen die relevant zijn voor een specifiek project of beoordelingsactiviteit. Maak bijvoorbeeld een verzameling van feitenmateriaal om alle inzendingen voor opdrachten te verzamelen uit cursussen binnen een bepaald programma of een bepaalde business unit die zijn afgestemd op een bepaald doel.

Je kunt een verzameling van feitenmateriaal instellen door de criteria te definiëren die worden gebruikt voor het verzamelen van werkstukken uit Blackboard Learn-cursussen.

  1. Open Doelen en beoordelingen in deze gebieden:
    • Originele ervaring
      • Configuratiescherm voor systeembeheer > Tools en functies
      • Tabblad Resultaten
      • Het tabblad Mijn instelling > Tools

    • Ultra-ervaring 

      • Configuratiescherm voor systeembeheer > Tools en functies
      • Pagina Tools

  2. Selecteer Verzameld feitenmateriaal weergeven om een lijst met bestaande verzamelingen weer te geven.
  3. Selecteer +Feitenmateriaal verzamelen om een nieuwe verzameling te maken.
  4. Selecteer Doelen zoeken op de pagina Feitenmateriaal verzamelen.
  5. Selecteer in het venster Doelen ontdekken de doelen waarmee het feitenmateriaal in overeenstemming moet worden gebracht om in de verzameling te worden opgenomen. Selecteer Verzenden.
  6. Selecteer bij Verzamelingsopties definiëren waar het feitenmateriaal moet worden verzameld: het gehele systeem, een beperkt bereik, of afkomstig uit specifieke plaatsen. Binnen elk van deze opties kun je de criteria verder verfijnen door specifieke sets met studenten te kiezen of door datums te beperken. Als je gekoppeld bent aan hiërarchieknooppunten binnen de instelling, kun je alleen de knooppunten selecteren. Je kunt meer informatie bekijken over het beheren van hiërarchieknooppunten binnen de instelling. Gebruik de knop Terug in je browser om hier terug te komen.
  7. Geef de verzameling een naam. Geef begin- en einddatums op zodat je de tijdlijnen van verschillende verzamelingsprojecten kunt beheren en kunt begrijpen wanneer projecten zijn voltooid.
  8. Selecteer Verzenden als je klaar bent of Meer feitenmateriaal verzamelen als je nog een verzameling van feitenmateriaal wilt maken.

Om feitenmateriaal te verzamelen, moet de inhoud in cursussen in overeenstemming worden gebracht met de relevante doelen.

Meer informatie over het maken en afstemmen van doelen

Een steekproef van een verzameling nemen om een set met feitenmateriaal te maken

Een set met feitenmateriaal is de subset van werkstukken. Dit zijn inzendingen van studenten die voldoen aan de verzamelingscriteria en die willekeurig uit de verzameling van het feitenmateriaal zijn getrokken. Je kunt een set met feitenmateriaal maken door een steekproef te nemen van de verzameling van feitenmateriaal om het aantal werkstukken dat wordt geëvalueerd voor beoordelingsactiviteiten van de instelling te verminderen. Na de steekproef kan evaluatie plaatsvinden.

  1. Selecteer op de pagina Verzameld feitenmateriaal weergeven een naam voor de verzameling.
  2. Op de pagina van de verzameling heb je toegang tot deze items:
    • Status van de verzameling bovenaan de pagina
    • Knoppen voor je volgende beschikbare actie
    • Tabblad Verzamelen om de items weer te geven die voldoen aan de criteria voor het verzamelen van feitenmateriaal
    • Tabblad Steekproef om de willekeurig geselecteerde subset met werkstukken uit de verzameling weer te geven. Dit tabblad verschijnt nadat er een steekproef is uitgevoerd.
  3. Selecteer Voorbeeldwerkstukken. Als er al een steekproef van de verzameling is uitgevoerd, kun je Nieuwe steekproef selecteren.
  4. Kies in het venster dat verschijnt de optie Alle werkstukken of Werkstukken willekeurig selecteren. Als je willekeurig kiest, typ je het totale aantal vereiste werkstukken en, eventueel, het minimale aantal werkstukken dat nodig is voor elke opdracht.
  5. Selecteer Verzenden. Het steekproefproces wordt direct uitgevoerd en duurt slechts een paar seconden.

Werkstukken in een set met feitenmateriaal evalueren

Je selecteert een of meer evaluatoren om werkstukken in een set met feitenmateriaal te bekijken. Ze gebruiken een rubriek om de werkstukken te evalueren die aan hen zijn toegewezen. Elke gebruiker van het systeem kan aan een evaluatiesessie worden toegevoegd. Ze hebben geen speciale toestemming of toegang nodig. Evaluatoren krijgen automatisch uitnodigingen via e-mail en het Blackboard-meldingssysteem om een toegewezen selectie werkstukken binnen een set met feitenmateriaal te bekijken.

Een evaluatiesessie maken

  1. Selecteer op de pagina Verzameld feitenmateriaal weergeven een naam voor de verzameling. Je moet een steekproef van de verzameling uitvoeren voordat je een evaluatiesessie kunt maken.
  2. Selecteer Evaluatiesessie maken.
  3. Schakel in het pop-upvenster onder Evaluatoren selecteren een of meer evaluatoren in.
  4. Selecteer bij Evaluatie-instelling het aantal evaluatoren dat elk werkstuk moet evalueren.
  5. Blader bij Beoordelingsrubrieken naar een rubriek die evaluatoren kunnen gebruiken.
  6. Selecteer een einddatum.
  7. Schakel het selectievakje Privacy in om anonieme evaluatie in te schakelen.
  8. Selecteer Sessie starten. Gebruikers krijgen automatisch per e-mail bericht dat je ze als evaluatoren hebt geselecteerd voor deze sessie. In de originele ervaring wordt een melding ook gepost in het gedeelte Updates van Mijn Blackboard. Zowel de e-mail als de melding bevatten een koppeling naar de evaluatorweergave.

Over evaluatiesessies

Evaluatoren zien alleen de werkstukken die aan hen zijn toegewezen. Op deze manier kan de beoordelingsmanager de scores van verschillende evaluatoren van hetzelfde werkstuk effectiever vergelijken en meer inzicht krijgen in de interbeoordelaarsbetrouwbaarheid.

De beoordelingsmanager kan teruggaan naar de pagina met evaluatiesessies om de voortgang van verschillende evaluatoren te volgen. Diegene kan ervoor kiezen om de werkstukevaluaties zelf te controleren, evaluatoren te verwijderen of toe te voegen, en de sessie te sluiten. Als er evaluatoren worden toegevoegd of verwijderd, worden de resterende niet-beoordeelde werkstukken automatisch opnieuw verdeeld over de bijgewerkte lijst met evaluatoren.

De evaluatorweergave openen

Nadat je een evaluatiesessie hebt gemaakt, ontvangen evaluatoren automatisch uitnodigingen via e-mail. In de originele ervaring wordt een melding ook gepost in het gedeelte Updates van Mijn Blackboard.

  1. Evaluatoren selecteren de link naar hun toegewezen evaluaties in het e-mailbericht of op de pagina Updates . Als evaluatoren de evaluatie openen vanuit het e-mailbericht, moeten ze zich aanmelden bij Blackboard Learn voordat ze de link selecteren. 
  1. Alleen de werkstukken uit de bijbehorende sets met feitenmateriaal worden weergegeven. Evaluatoren openen het menu voor een werkstuk en selecteren Evalueren. 
  1. De inzending van de student wordt weergegeven. De evaluator selecteert Evalueren of Evalueren in nieuw venster om de rubriek weer te geven en puntwaarden te selecteren.
  2. De evaluator selecteert Verzenden.

De resultaten van de evaluatie analyseren

Nadat de evaluatie van een set met feitenmateriaal is voltooid, kunnen beoordelingsmanagers een rapport uitvoeren om de resultaten te begrijpen. Als ze er niet voor kiezen om een afzonderlijke resultatenevaluatie uit te voeren op verzameld feitenmateriaal, kunnen ze in plaats daarvan verslag uitbrengen over de rubriekscores die zijn verzameld op basis van opdrachten binnen de cursus.

Als de verzamelde opdrachtinzendingen zijn beoordeeld in de cursus met een rubriek, worden ook die rubriekevaluaties verzameld. De cursusrubrieken worden weergegeven in de lijst met beschikbare rubrieken bij de analyse van resultaten.

  1. Selecteer op de pagina Verzameld feitenmateriaal weergeven een naam voor de verzameling. Je moet een steekproef van de verzameling uitvoeren voordat je resultaten kunt analyseren.
  2. Selecteer Resultaten analyseren.
  3. Op de pagina Resultaten van verzameling van feitenmateriaal analyseren kun je de resultaten nu bekijken of de resultaten downloaden.
  4. Selecteer een rubriek. De lijst met rubrieken bevat rubrieken voor resultatenbeoordeling en rubrieken die zijn gekoppeld aan de opdracht binnen een cursus.
  5. Als je ervoor kiest om de resultaten nu te bekijken, krijg je aanvullende opties: selecteer het datumbereik voor het resultatenrapport en hoe je de resultaten kunt vergelijken.
  6. Selecteer Resultaten bekijken. Als je ervoor kiest om de resultaten nu te bekijken, verschijnen ze op het scherm. Als je ervoor kiest om te downloaden, wordt je gevraagd het bestand op te slaan.