Combien de points doivent être attribués pour réussite / partiel et échec lors d'une évaluation heuristique?
Dans le système actuel que j'utilise, c'est 2/1/-2 mais je commence à douter de la justesse de cette situation; si quelque chose a 4 passes et 1 échec alors c'est sûrement 80% de réussite? Pourtant, avec cette façon de calculer les points, ce ne serait que 60%.
Les échecs sont-ils si critiques qu'ils méritent d'être punis de cette manière?
Il y a cependant la considération que si un échec valait 0 points, cela mettrait un échec sur un pied d'égalité sans pertinence (par exemple, une règle expliquant comment formater les tableaux sur un site qui n'a pas de tableaux). Et il semble vraiment injuste qu'un non pertinent soit égal à un pourcentage de basculement qui peut être caché (un 0 qui compte pour le score contre un 0 qui est ignoré) mais en termes de points bruts, il se démarquera.
Comme vous pouvez le voir ici, je pense vraiment à un côté moins important des évaluations heuristiques, le point le plus important est bien sûr de trouver des erreurs. mais quand même, les parties prenantes aiment les chiffres.
Existe-t-il des recommandations pour la notation des évaluations heuristiques?
Les évaluations heuristiques peuvent être aussi simples ou complexes que vous en avez besoin, et la règle générale est de la rendre aussi simple que possible et de fournir un résultat exploitable en cas d'échec.
Dans votre cas, si vous constatez qu'un système de notation simpliste ne fonctionne pas pour vous, vous pouvez essayer un certain nombre de choses:
- Changer le système de notation de 2/1/-2 à autre chose?
- Autoriser une plus grande plage de valeurs afin qu'il y ait des degrés d'échecs et de passes
- Évaluez le score par rapport à d'autres critères, comme l'impact (par exemple, le nombre de personnes qu'il affecte, l'importance de cet élément particulier par rapport aux autres)
- Évaluez le score par rapport à l'effort requis pour traiter l'élément
- Si un élément échoue en raison de son lien ou de sa dépendance à l'égard d'un autre élément, vous pouvez également en tenir compte pour réduire la pondération de cet élément.
Mais comme vous pouvez le voir, la prise en compte d'un certain nombre de ces stratégies peut produire un score plus précis qui reflète l'état du système (mais rend également le résultat final plus difficile à digérer et à comprendre), mais la vraie mesure est probablement contre un métrique plus centrée sur l'utilisateur.
La principale chose à retenir à propos des évaluations est que vous ne devez pas vous fier à une seule source/méthode pour essayer de comprendre l'ensemble du tableau.