Hodnotiace kritériá pre porotu: vzor hodnotiaceho formulára s váhami a stupnicou

Čo obsahujú hodnotiace kritériá

Hodnotiacim kritériám s váhami a stupnicou sa hovorí aj hodnotiaci formulár, hodnotiaca tabuľka alebo bodové hodnotenie. Najdôležitejšou časťou sú popisy bodov: krátke opisy toho, čo daný počet bodov znamená, aby 4 body od jedného porotcu znamenali zhruba to isté ako 4 body od iného.

• Kritériá: 3 až 6, každé meria jednu vec.
• Otázka: jedna veta ku každému kritériu, napríklad „Dokáže to tento tím vybudovať?“
• Váha: koľko kritérium váži, v percentách alebo ako násobok.
• Stupnica a popisy bodov: napríklad 1 až 5, s popisom pre 1, 3 a 5. Hodnotenie 2 alebo 4 leží medzi dvoma popismi.
• Komentár: jedna až tri vety, ktoré body zdôvodnia.

Ako zvoliť hodnotiace kritériá

Vychádzajte z účelu výzvy. Ak ocenenie odmeňuje merateľné výsledky, najväčšiu váhu má dopad. Ak grant platí za plán, najviac rozhoduje kvalita plánu a hospodárnosť.

Každé kritérium by malo merať jednu vec. Napríklad inovácia a originalita zvyčajne merajú tú istú vlastnosť dvakrát. Každému kritériu by mali zodpovedať otázky v prihláške, aby uchádzači dali porotcom podklady, ktoré potrebujú.

Držte sa 3 až 6 kritérií. Zverejnite ich aj s váhami vo výzve, aby uchádzači vedeli, ako ich budú hodnotiť.

Juryline má v šablónach hotové hodnotiace kritériá pre ocenenia, startupové súťaže, granty, štipendiá, študentské súťaže a hackathony. Pred otvorením kola môžete zmeniť ktorékoľvek kritérium, váhu aj stupnicu.

Váhy a stupnice

Váha hovorí, koľko kritérium váži v celkovom súčte. Najľahšie sa čítajú percentá, ktoré dávajú spolu 100. Rovnako fungujú násobky, napríklad 1; 1,5 a 2: rozhodujú len pomery.

Najväčšiu váhu dajte kritériu, ktoré má najbližšie k účelu výzvy. Žiadne kritérium by nemalo mať viac ako zhruba polovicu celkovej váhy, aby jeden názor na jedno kritérium nemohol sám rozhodnúť o výsledku.

Stupnica 1 až 5 je rýchla a väčšine porôt stačí. Stupnica 1 až 10 dáva viac priestoru, keď je veľa prihlášok blízko seba; vtedy opíšte 1 až 2, 5 až 6 a 9 až 10 bodov. Pri jednotlivých kritériách sa vyhnite stupnici 0 až 100: sugeruje presnosť, ktorú porotcovia nedokážu uplatňovať jednotne.

Príklad: váhy 30, 30, 20 a 20 % a hodnotenia 4, 3, 5 a 2 na stupnici 1 až 5 dajú 0,3 × 4 + 0,3 × 3 + 0,2 × 5 + 0,2 × 2 = 3,5 z 5.

V Juryline sú váhy relatívne: váha 2 sa počíta dvakrát viac ako 1. Každé hodnotenie sa prepočíta na súčet zo 100 bodov, pričom spodok stupnice znamená 0 % daného kritéria a jej vrch 100 %. Príklad vyššie dá 62,5 bodu.

Vzor hodnotiacich kritérií pre startupové súťaže

Pre užší výber, prijímanie do akcelerátora alebo finále pitchov. Najväčšiu váhu má tím, pretože produkty sa v ranej fáze menia, kým tímy zostávajú.

Stupnica 1 až 5 (2 a 4 ležia medzi popismi).
Výsledok = súčet (váha × body), najviac 5.

1. Problém a trh (20 %): Je problém skutočný a trh dostatočne veľký?
   1 = nejasný problém alebo veľmi malý trh
   3 = skutočný problém, trh zatiaľ nepreukázaný
   5 = pálčivý problém na veľkom rastúcom trhu

2. Produkt a inovácia (20 %): Nakoľko je riešenie nové a dobré?
   1 = kopíruje existujúce riešenia
   3 = zjavné zlepšenie oproti tomu, čo existuje
   5 = nový prístup s trvalou výhodou

3. Trakcia (20 %): Sú dôkazy, že to zákazníci chcú?
   1 = zatiaľ žiadni používatelia
   3 = piloty alebo prví používatelia
   5 = platiaci zákazníci a stabilný rast

4. Tím (25 %): Dokáže to tento tím vybudovať?
   1 = chýbajú kľúčové zručnosti
   3 = solídny tím s niekoľkými medzerami
   5 = kompletný tím s preukázanými výsledkami

5. Potenciál (15 %): Môže rásť aj mimo domáceho trhu?
   1 = len domáci trh
   3 = môže rásť v regióne
   5 = môže rásť medzinárodne

Komentár: [prečo ste dali tieto body]

Hodnotiace kritériá grantovej výzvy: vzor

Pre projektové granty, dotácie a výzvy na predkladanie projektov. Relevantnosť, plán a dopad nesú väčšinu váhy; hospodárnosť kontroluje rozpočet.

Stupnica 1 až 5 (2 a 4 ležia medzi popismi).
Výsledok = súčet (váha × body), najviac 5.

1. Relevantnosť (25 %): Nakoľko projekt zodpovedá cieľom výzvy?
   1 = slabý súlad s cieľmi
   3 = zodpovedá niektorým cieľom
   5 = presne zodpovedá cieľom a napĺňa stanovenú prioritu

2. Kvalita plánu (25 %): Sú aktivity a harmonogram jasné a realistické?
   1 = nejasné aktivity a harmonogram
   3 = realistický plán s niekoľkými medzerami
   5 = jasné aktivity, harmonogram aj riziká

3. Dopad (25 %): Čo sa zmení pre cieľovú skupinu a ako sa to meria?
   1 = nejasný prínos, bez merania
   3 = jasný prínos, slabé ukazovatele
   5 = jasný prínos pre vymedzenú skupinu, merateľné výsledky

4. Hospodárnosť (15 %): Sú náklady nevyhnutné a zdôvodnené?
   1 = nezdôvodnené alebo neprimerané náklady
   3 = väčšinou primerané, niektoré položky nejasné
   5 = každý náklad je nevyhnutný a zdôvodnený

5. Kapacita (10 %): Dokáže žiadateľ projekt zrealizovať?
   1 = bez preukázaných relevantných skúseností
   3 = relevantné skúsenosti s niekoľkými medzerami
   5 = už zrealizoval podobné projekty

Komentár: [prečo ste dali tieto body]

Vzor hodnotiacich kritérií pre ocenenia a hackathony

Pri ocenení použite kvalitu (30 %), originalitu (20 %), dopad (35 %) a prezentáciu prihlásenej práce (15 %). Popisy pri dopade oprite o dôkazy: 1 znamená, že výsledky nie sú preukázané; 3 znamená preukázané výsledky, merané len čiastočne; 5 znamená merané výsledky pre klientov, používateľov alebo spoločnosť.

Porotcovia na hackathone hodnotia počas ukážok alebo hneď po nich, preto majte kritériá krátke a popisy bodov konkrétne.

Stupnica 1 až 5 (2 a 4 ležia medzi popismi).
Výsledok = súčet (váha × body), najviac 5.

1. Dopad (25 %): Rieši skutočný problém?
   1 = žiadny jasný problém
   3 = skutočný problém, vyriešený čiastočne
   5 = skutočný problém vyriešený tak, že by to ľudia používali

2. Technická náročnosť (25 %): Aké náročné bolo riešenie vytvoriť?
   1 = väčšinou poskladané existujúce komponenty
   3 = sčasti náročná práca
   5 = náročné problémy vyriešené v dostupnom čase

3. Dizajn (20 %): Je to použiteľné a dobre spracované?
   1 = ťažko sa používa
   3 = použiteľné, ale nedotiahnuté
   5 = ľahko sa používa a je dobre spracované

4. Funkčné demo (30 %): Funguje to?
   1 = žiadne funkčné demo
   3 = funguje s medzerami alebo na ukážkových dátach
   5 = v deme funguje od začiatku do konca

Komentár: [prečo ste dali tieto body]

Ako s kritériami pracuje porota

Hodnotiace kritériá fungujú, len ak ich všetci porotcovia uplatňujú rovnako.

1. Najprv sa zlaďte: nechajte porotcov ohodnotiť dve či tri ukážkové prihlášky a prediskutujte každý rozdiel 2 a viac bodov.
2. Ohodnoťte každé kritérium a pripíšte krátky komentár, ktorý body zdôvodní.
3. Pravidlo pre rovnosť bodov si dohodnite ešte pred začiatkom hodnotenia, napríklad kritérium s najvyššou váhou.
4. Aj pri dobrých popisoch bodov rátajte s prísnymi aj miernymi porotcami. Keď každý porotca hodnotí len časť prihlášok, porovnajte obyčajný priemer s normalizovaným poradím.

V Juryline vidia porotcovia na obrazovke hodnotenia popisy pre nízke, stredné a vysoké hodnotenie a svoje body si môžu porovnať vedľa seba. Kolo môže určiť kritérium, ktoré rozhoduje pri rovnosti bodov.

Otázky

Koľko hodnotiacich kritérií by mal formulár mať?

Tri až šesť. Pri menšom počte porotcovia ťažko rozlíšia prihlášky; pri väčšom je hodnotenie pomalé a o váhach sa ťažko uvažuje.

Mám použiť stupnicu 1 až 5 alebo 1 až 10?

Väčšine porôt vyhovuje stupnica 1 až 5. Stupnicu 1 až 10 použite, keď je veľa prihlášok blízko seba a porotcovia potrebujú jemnejšie kroky. Pre všetkých porotcov použite rovnakú stupnicu.

Aký je rozdiel medzi hodnotiacimi kritériami a hodnotiacim formulárom?

Hodnotiace kritériá sú súbor kritérií, váh a popisov bodov. Hodnotiaci formulár je tlačivo, do ktorého porotca zapisuje body za jednu prihlášku. Mnohí organizátori používajú oba pojmy pre ten istý dokument.

Majú uchádzači vidieť hodnotiace kritériá?

Áno. Kritériá a ich váhy zverejnite vo výzve. Uchádzači tak odpovedajú presne na to, čo bude porota hodnotiť. Aj rozhodnutie sa potom ľahšie vysvetľuje.

Čo ak dve prihlášky dosiahnu rovnaký súčet?

Pravidlo určte pred hodnotením: rozhodne vyššie hodnotenie v kritériu s najväčšou váhou, hlasovanie poroty alebo delené miesto. Zaznamenajte, ktoré pravidlo ste použili.