оценки Съвместимост експертни
След получаване независими протоколи между изчислените протоколи, добре известни на психолози на Университета коефициенти конюгат (аналогови корелационните коефициенти за качествените характеристики - Runyon, 1982). Стойността на изчисленото съотношение показва конюгиране Съставният показател "надеждност валидност +". Най-близо до единство е съотношението, по-надеждни и валидни метода на наблюдение се взема предвид при изпълнението на екипа от наблюдатели. Степента на различие коефициент 1 показва едновременно наличие на случаен принцип (ненадеждни) и систематично (невалидни) наблюдение грешка. Загрубяването може да се каже, че относителният дял на правилното кодиране по отношение на общия брой на кодировки и е мярка за "надеждност-валидност" на наблюдение. По този начин, по какъвто и начин на партньорски проверки като мярка за "надеждност-валидност", за хармонизиране на независими експертни оценки.
Очевидно е, че такъв експеримент за измерване на надеждността и валидността на наблюдението, не е съдба и практически проблеми. Това ще бъде за тези, които се развиват на стандартизирана методология за мониторинг. Но. Но за разлика от психометричните тестове стандартизация (виж следващия раздел. 2.3), е важно да се провери не само на качеството и уникалността на ръчни техники, но също така да се провери степента, в която квалифицирани художници бяха точно тези монитори, енкодери.
Отклонение да се обясни. Как да се научите да се измери кръвното налягане, лекарите? Оценяват слушате записано на аудио касети шум стандартен набор. Те се научават да правят разлика между систоличното и диастоличното сърдечни звуци. Те са така наречените "стандартизация". Само след постигането на определено ниво на точност (надеждност), лекарят получава съответния сертификат атестация, която записва правото да прави измерването на кръвното налягане.
В идеалния случай, такава стандартизация на референтния материал трябва да преминат всички енкодери наблюдатели за извършване на всяка техника стандартизиран наблюдение. Това означава, че след проверка на техниката се състоя в референтната набор от наблюдатели, и техниката, разработена от призната, всеки нов наблюдател-художник отива стандартизация по отношение на материала, които са били успешни (това е, като се има одобрения протокол), първите наблюдатели. Това е общата логика на развитието на всеки метод за партньорски проверки. Първоначално, че основният материал за оценка и оценката на обучение се считат нестандартизирани, а в онези първи експерти, които са запознати с това и първата за постигане на съгласуваност (често чрез повторни ревизии и модификации в инструкциите, кодифицирани признаци) действа като ориентир. Но след това се тълкува това (влезете) материал от своя страна счита за позоваване, както и нови експерти са стандартизирани по отношение на този материал. Ясно е, че по-независими експерти, доведени до степен на основното минно кодифицирана система от знаци и колкото повече програмисти, които участват в практически наблюдението, толкова по-надеждни са резултатите от това наблюдение. Това се дължи на факта, че и двете случайни грешки (поради колебания на вниманието), както и систематични грешки (поради неправилно тълкуване на всички разпоредби на знаците), направени от един експерт, се анулира, когато се сумират с резултатите от други експерти. Тези други експерти също правят грешки, но това е - различни грешки. Ако вероятността от една единствена грешка на средната експерта е, да речем, 0,2, тогава вероятността, че същата грешка ще направи три (или повече) от експерти от 5, е само около 0,05. Това е отбор, както виждаме, е много по-надежден от сингъла. Когато значителна вероятност за единични грешки от експертен екип на вероятностите грешка е вече близо до незначителна вероятност. (Припомнете си, че нивото на пет процента на грешки е признат стандарт приемливо ниво вероятността от грешки в секторите на човешкото познание).
Сумиране на партньорски проверки се използва широко в такива известни област като спорт. Спомнете си, например, практиката на фигурното пързаляне. Минималният брой на съдиите награди победата в бокса - пет. И дори ако двамата е направил грешка и е награден с победа слаб боксьор, победата все още е присъдена на най-силните - достатъчно е оглед на останалите трима.
Свързани статии