Bij deze werkwijze wordt de rubric die aan de assignment is gekoppeld op meerdere tabbladen getoond:

• een tabblad voor de eerste beoordelaar
• een tabblad voor de tweede beoordelaar
• en een tabblad voor de gezamenlijke beoordeling.

Elke beoordelaar kan alleen het eigen tabblad invullen én het gezamenlijke tabblad. Een beoordelaar kan wel de beoordeling van de andere beoordelaar(s) bekijken, maar niet wijzigen.

1. Maak een Assignment aan op de manier zoals je dit gewend bent (zie Assignments aanmaken) en koppel daarbij ook de beoordelingsrubric.
2. Onder de gekoppelde rubric zie je bij het kopje ‘Evaluators’ hoeveel beoordelaars er in de omgeving aanwezig zijn.

3. Klik op Select Evaluators om de beoordelaars te koppelen die deze assignment mogen beoordelen.

4. Klik op Done om je selectie vast te leggen.

Heb je een poule van beoordelaars, koppel dan nu of op een later moment specifieke beoordelaars per student.

Het toewijzen van beoordelaars aan studenten gaat als volgt:

1. Klik in de Assignment bij Evaluation & Feedback op Manage Allocations. Je ziet dan een tabel met een rij per student en een kolom per geselecteerde beoordelaar.
2. Bepaal hoe je wilt toewijzen:
   1. Wil je beoordelaars automatisch toewijzen, selecteer dan bij Default Allocation Method hoe je beoordelaars wilt toewijzen aan studenten en klik op Apply Allocation Method:
      1. Alle beoordelaars koppelen aan alle studenten (bijv. als er maar twee docenten in de omgeving aanwezig zijn).
      2. 'At random' twee of drie beoordelaars per student toewijzen.
   2. Wil je handmatig beoordelaars toewijzen, klik dan rechts boven de tabel op Clear Table Selections.
      
      Je kunt nu handmatig twee of drie docenten selecteren per student.  

3. Klik onderaan op Done om de toewijzingen op te slaan. Je kunt de toewijzingen per student blijven wijzigen totdat het cijfer van die student gepubliceerd is. Zelfs daarna zou je ook nog kunnen wijzigen mits het je eerst het cijfer weer 'terugtrekt' (via Retract).
4. Selecteer de optie ‘Multiple individual evaluations' om aan te geven dat meerdere beoordelaars elk hun eigen rubric en vervolgens een gezamenlijke rubric (aggregated) zullen invullen.
5. Bij Publishers kun je instellen wie de cijfers mag publiceren. Daarbij zijn er drie opties:
   • alle beoordelaars mogen alle cijfers publiceren;
   • beoordelaars mogen alleen de cijfers publiceren die ze zelf gegeven hebben;
   • je selecteert slechts enkele personen die cijfers mogen publiceren.

Beoordelen volgens het vierogenprincipe via de beoordelingsopties voor meerdere beoordelaars.

Een andere mogelijkheid om het vierogenprincipe toe te passen bij het beoordelen van een Assignment, is het koppelen  van drie rubrics aan één Assignment. Dit gaat als volgt:

1. Maak de rubric aan die je wilt gebruiken voor de eerste beoordelaar en maak hier twee kopieën van, zodat je in totaal drie dezelfde rubrics hebt:
   • Naam rubric - eerste beoordelaar
   • Naam rubric - tweede beoordelaar
   • Naam rubric - gezamenlijk oordeel

2. Bij de rubrics voor de eerste en tweede beoordelaar stel je in dat deze verborgen blijven voor studenten, evenals de scores:

3. Maak de Assignment aan die beoordeeld moet worden.
4. Koppel alle drie de rubrics aan deze assignment en stel daarbij de gezamenlijke rubric in als de default rubric voor het cijfer:

Zodra er werk is ingeleverd kun je dit beoordelen volgens het vierogenprincipe met drie gekoppelde rubrics.

1. Maak een normale assignment aan en koppel er een rubric aan die alle criteria bevat waarop de assignment beoordeeld moet worden.
2. Maak daarbij eventueel gebruik van Criteria Groups die je een naam geeft die overeenkomt met de verschillende expertises van de betrokken beoordelaars.
3. Kijk onder de gekoppelde rubric bij het kopje ‘Evaluators’. Daar zie je hoeveel beoordelaars er in de omgeving aanwezig zijn. Klik op Select Evaluators om er twee of meer te koppelen aan de Assignment.
   Daarna zie je pas de onderstaande opties.

4. Selecteer bij ‘Coordinate multiple evaluators’ de optie One shared evaluation.
5. Standaard kunnen alle geselecteerde beoordelaars alle studenten beoordelen. Bij ‘One shared evaluation’ maakt het niet uit of alle geselecteerde beoordelaars ook daadwerkelijk beoordeeld hebben. Toch is het ook hier mogelijk om via Manage Allocations per (groep) student(en) specifieke beoordelaars toe te wijzen. (zie uitleg hierboven)
   
   Daarbij kun je echter niet aangeven welke beoordelaar welke criteria of criteria group beoordeelt. Dat moeten de beoordelaars onderling afstemmen en opvolgen, want er is geen beveiliging die voorkomt dat je de verkeerde criteria beoordeelt. Vanwege de verschillende expertises die hierbij een rol spelen is het echter logisch dat elke beoordelaar gewoon de criteria zal beoordelen die bij de eigen expertise passen.
   
6. Selecteer bij ‘Publishers’ wie de cijfers mogen publiceren. Daarbij zijn er drie opties:
   • Alle beoordelaars mogen alle cijfers publiceren
   • Beoordelaars mogen alleen de cijfers publiceren die ze zelf gegeven hebben
   • Je selecteert slechts enkele personen die cijfers mogen publiceren
7. Klik onderaan op Save and Close om de wijzigingen op te slaan.

Met meerdere beoordelaars tegelijk verschillende criteria van dezelfde rubric beoordelen

1. Maak een normale assignment aan.
2. Koppel een rubric aan de assignment die alle criteria bevat waarop de assignment beoordeeld moet worden.
   
   Eventueel kun je werken met meerdere Criteria Groups in de rubric en daarbij elke Criteria Group een naam geven die overeenkomt met de verschillende expertises van de betrokken beoordelaars. Hierover lees je in Rubrics aanmaken.

Verder hoef je niets bijzonders in te stellen.

Nadat de ene docent heeft beoordeeld wordt de rubric opgeslagen als Draft en dan kan de volgende ermee verder. Het publiceren van het resultaat aan de student gaat op dezelfde manier als bij andere assignments.