Einige der Punkte treffen auf Tests aller Art zu. Filmtests, Spieletests usw. Die Kriterien sind schwammig und häufig subjektiv. Wenn man dann noch versucht, etwas eigenes zu bewerten, kann das nur schief gehen.

Performancetests sind so eine Sache. Man kann Zahlen gegeneinander antreten lassen. Aber wie du schon sagst: das bringt wenig. Spannender sind Codeanalysen, um Optimierungsmöglichkeiten zu finden. Das hilft zwar nicht im Vergleich von Plugins, verbessert aber das untersuchte Plugin. Davon hat dann auch jeder etwas.