Sur SUS Questions d'utilisabilité, la première "Je pense que je voudrais utiliser ce site Web fréquemment" n'a pas de sens
Sur SUS - la question "Je pense que je voudrais utiliser ce système fréquemment" n'a pas de sens pour les sites qui sont rarement utilisés, par exemple un site de paiement hypothécaire.
Comment cette question reflète-t-elle la convivialité globale du site Web? Des idées?
System Ergonomie Scale est principalement destiné à une comparaison entre des systèmes similaires . C'est très général de lui permettre de comparer des systèmes, et ça donne un point de référence facile. Il est généralement admis que les produits que vous comparez ont des cas d'utilisation similaires, ce qui atténue le problème de certaines questions qui ne s'appliquent pas.
En comparant les sites de paiement hypothécaire, la question "Je pense que je voudrais utiliser ce système fréquemment" est susceptible d'être notée négativement pour les deux systèmes similaires. Les scores est vraisemblablement toujours comparable pour les deux systèmes, car la question est également mauvaise pour les deux produits.
Comme pour toutes les évaluations coupées et séchées, le SUS n'est qu'un outil général et vous devez considérer la validité de chaque question dans votre cas d'utilisation. Vous ne pouvez pas l'utiliser comme seule analyse de l'utilisabilité; c'est un excellent outil de comparaison, mais beaucoup trop général pour un seul élément.
Si vous effectuez votre propre analyse d'utilisabilité et ne comparez pas deux produits, n'hésitez pas à omettre certaines questions si vous pensez qu'elles sont déroutantes ou non pertinentes lorsqu'elles sont appliquées à votre produit. Créez une revue heuristique qui s'applique à votre produit. Voici une grande Liste de contrôle d'évaluation heuristique avec beaucoup de questions. Ce n'est pas une échelle de likert ni un libellé pour un utilisateur final, mais vous pouvez avoir une bonne idée de certaines questions que vous pouvez poser pour évaluer votre système.
SUMI est une échelle d'utilisation plus complète, pratiquement l'opposé du SUS "rapide et sale". SUMI peut vous fournir beaucoup plus de données, mais encore une fois, envisagez de créer un bref questionnaire personnalisé pour votre produit si vous pensez qu'aucun questionnaire ne s'applique. SUMI est assez approfondi et une enquête plus brève est souvent plus facile à obtenir (et honnêtement).
Dans ce type de questionnaires, les énoncés (appelés "éléments" dans la littérature technique) ne sont pas choisis principalement parce qu'ils décrivent ce qu'est l'utilisabilité mais parce qu'ils en sont affectés (c.-à-d. La question n'est pas "comment cela affecte-t-il l'utilisabilité" mais " comment la convivialité affecte-t-elle cela ") et les notes sont corrélées entre elles. Pour le SUS, ils ont été initialement sélectionnés à partir d'un pool de 50 déclarations de candidats sur la base d'une petite étude avec deux systèmes qui auraient pu être utilisés fréquemment par les participants, ce qui pourrait expliquer pourquoi cette question a été retenue.
Si une déclaration ne semble pas avoir trait à la convivialité du site Web pour les participants, vous vous attendez à peu de variabilité, aucune différence entre les produits concernant cette déclaration particulière et aucune corrélation avec le reste du questionnaire. Techniquement parlant, cela pourrait limiter le score maximum théorique que vous pourriez obtenir avec le questionnaire (c'est-à-dire biais) ou contribuer à une erreur aléatoire dans le score total. Cela limiterait à son tour légèrement le pouvoir de détecter les différences mais, comme l'a noté Ben, cela ne fausserait pas une comparaison entre deux sites Web de la même catégorie (itération précédente de votre conception, concurrents…)
Il est également concevable que certains répondants le voient et répondent de toute façon en fonction de leur perception du site Web lui-même, et non de la tâche qu'il est censé soutenir. Cependant, si vous avez plusieurs déclarations non pertinentes ou maladroitement formulées dans un questionnaire, les répondants peuvent réagir négativement, s'en plaindre ou devenir moins coopératifs en général (je l'ai vu arriver avec le SUMI).
Si vous voulez en savoir plus sur le SUS, la référence d'origine est
- Brooke, J., (1996). SUS: une échelle d'utilisation "rapide et sale". Dans P.W. Jordanie, B. Thomas, B.A. Weerdmeester et A.L. McClelland (éd.), Évaluation de l'utilisabilité dans l'industrie (p. 189-194). Londres: Taylor et Francis.
J'ai également donné quelques autres références intéressantes dans cette réponse à une autre question sur le SUS Vous pouvez également vérifier cette question qui a soulevé des problèmes similaires et inclut même une réponse du créateur du SUS.