This document gives guidelines for assessing the overall performance of a quantitative descriptive panel and the performance of each panel member.
This document is applicable to the validation of the training of individual assessors or panels, as well as to the performance monitoring of established panels.
This document does not apply to the panel performance for descriptive methods where the individual scores of each assessor are not recorded, where there is no single list of attributes that is common to all the assessors, or where dominance rather than intensity is measured. Consequently, the performance of descriptive panels using methods such as consensus profile, free-choice profile, flash profile and temporal dominance of sensations (TDS) are out of scope.
The methods specified in this document are for monitoring and assessing the ability of a panel and its assessors to discriminate between products, the agreement between assessors of the same panel and the repeatability of these assessors in their intensity scoring.
Reproducibility, including both the comparison between panels and the comparison within the same panel of several evaluations conducted under different conditions (i.e. separated in time), is out of scope of this document.
The methods specified in this document can be used, in full or a selection only, by the panel leader to appraise continuously the performance of panels or individual assessors. The methods listed are not exhaustive and other appropriate methods can also be used.
Dieses Dokument enthält Leitlinien zur Bewertung der allgemeinen Leistungsfähigkeit eines quantitativ beschreibenden Panels und der Leistungsfähigkeit jedes Panelmitglieds.
Dieses Dokument ist anwendbar auf die Validierung der Schulung einzelner Prüfpersonen oder Panels sowie auf die Überprüfung der Leistungsfähigkeit bestehender Panels.
Dieses Dokument gilt nicht für die Leistungsfähigkeit eines Panels für beschreibende Verfahren, bei denen die einzelnen Punktzahlen jeder Prüfperson nicht aufgezeichnet werden, oder für Fälle, bei denen es keine einzelne Liste mit Merkmalen gibt, die allen Prüfpersonen gemein ist, oder für den Fall, dass eher die Dominanz als die Intensität gemessen wird. Folglich ist die Leistungsfähigkeit von beschreibenden Panels, die Verfahren wie Konsensprofil, freies Auswahlprofil, Flash Profil und zeitliche Dominanz von Empfindungen (TDS, en: temporal dominance of sensations) anwenden, nicht im Anwendungsbereich erfasst.
Die in diesem Dokument festgelegten Verfahren dienen der Überprüfung und Bewertung der Fähigkeit eines Panels und dessen Prüfpersonen, zwischen Produkten zu unterscheiden, der Übereinstimmung zwischen den Prüfpersonen desselben Panels und der Wiederholbarkeit dieser Prüfpersonen in ihren Intensitätspunktzahlen.
Die Vergleichbarkeit, einschließlich des Vergleiches zwischen Panels und des Vergleiches innerhalb desselben Panels bei verschiedenen Bewertungen, die unter verschiedenen Bedingungen durchgeführt werden (d. h. zeitlich gesondert), liegt nicht im Anwendungsbereich dieses Dokumentes.
Die in diesem Dokument festgelegten Verfahren können im Ganzen oder nur in einer Auswahl durch den Leiter des Panels angewendet werden, um die Leistungsfähigkeit des Panels oder einzelner Prüfpersonen fortlaufend einzuschätzen. Bei den aufgeführten Verfahren handelt es sich nicht um eine vollständige Aufführung und andere geeignete Verfahren können ebenfalls angewendet werden.