Zusammenfassung
Produktbewertung ist nicht „eine einzige Punktzahl“. Sie ist eine Pipeline: messbare Kriterien definieren, Evidenz sammeln, Wertgewichtungen angeben und Unsicherheiten ausweisen. Ohne explizite Kriterien verbergen Bewertungen Annahmen und werden eher zu Überzeugung als zu Analyse.[^1][^2]
1. Bewertung = Messung + Wertemodell
In Umgebungen mit mehreren Kriterien benötigen Sie:
-
operationale Definitionen (was wie gemessen wird),
-
reproduzierbare Methoden (Testprotokolle),
-
explizite Gewichtungen (was der Nutzer wertschätzt).
Dies steht im Einklang mit A2 und T1.2 der Selektionslogik: Gewichtungen sind bedingt, und Bewertungen beinhalten Annahmen — A2 Bedingte Subjektivität · T1.2 Korollar
2. Evidenzhierarchien (praktisch)
Unterschiedliche Fragen erfordern unterschiedliche Evidenz:
-
Labormessungen (Akkulaufzeit, Durchsatz),
-
Langzeit-Zuverlässigkeitsdaten (sofern verfügbar),
-
Feldstudien und Nutzerpanels (Benutzerfreundlichkeit).
3. Standards im englischsprachigen Raum
Viele Bereiche stützen sich auf bekannte Normungsgremien und Testmethoden:
-
ISO/IEC für Systeme und technische Eigenschaften (domänenabhängig)
-
ASTM für Materialien und Testmethoden (domänenabhängig)
-
NIST-Leitlinien für sicherheitsrelevante Aussagen
Standards sind als Basis hilfreich, aber sie sind kein „universell Bestes“; die Relevanz hängt von den Bedürfnissen des Nutzers ab (A2).
Literatur
- Akerlof, G. A. (1970). The market for “lemons”: Quality uncertainty and the market mechanism. Quarterly Journal of Economics, 84(3), 488–00.[source]
- Popper, K. R. (1959). The Logic of Scientific Discovery. Routledge. (Original work published 1935)[source]
- Cronbach, L. J., & Meehl, P. E. (1955). Construct validity in psychological tests. Psychological Bulletin, 52(4), 281–02.[source]
- Longino, H. E. (1990). Science as Social Knowledge: Values and Objectivity in Scientific Inquiry. Princeton University Press.[source]
- Open Science Collaboration. (2015). Estimating the reproducibility of psychological science. Science, 349(6251), aac4716.[source]
- Messick, S. (1995). Validity of psychological assessment. American Psychologist, 50(9), 741–49.[source]
- Kahneman, D. (2011). Thinking, Fast and Slow. Farrar, Straus and Giroux.[source]
- International Organization for Standardization. (2015). ISO 9000:2015 Quality management systems — Fundamentals and vocabulary.[source]
- Keeney, R. L., & Raiffa, H. (1993). Decisions with Multiple Objectives: Preferences and Value Tradeoffs. Cambridge University Press.[source]