วิธีการคำนวณคัปปาของ fleiss ใน excel

Fleiss’ Kappa เป็นวิธีการวัดระดับข้อตกลงระหว่างผู้ประเมินตั้งแต่ 3 คนขึ้นไป เมื่อผู้ประเมินกำหนดระดับการให้คะแนนตามหมวดหมู่ให้กับชุดของรายการ

Fleiss ‘Kappa เปลี่ยนจาก 0 เป็น 1 โดยที่:

• 0 แสดงว่าไม่มีข้อตกลงระหว่างผู้ตรวจสอบ
• 1 หมายถึงข้อตกลงที่สมบูรณ์แบบระหว่างผู้ประเมิน

บทช่วยสอนนี้จะแสดงตัวอย่างวิธีคำนวณ Fleiss ‘Kappa ใน Excel

ตัวอย่าง: Fleiss Kappa ใน Excel

สมมติว่าคน 14 คนให้คะแนนผลิตภัณฑ์ที่แตกต่างกัน 10 รายการจากระดับแย่ไปจนถึงยอดเยี่ยม

ภาพหน้าจอต่อไปนี้แสดงคะแนนรวมที่ได้รับจากแต่ละผลิตภัณฑ์:

ภาพหน้าจอต่อไปนี้แสดงวิธีคำนวณ Fleiss ‘Kappa สำหรับข้อมูลนี้ใน Excel:

การคำนวณที่ยากที่สุดในภาพหน้าจอนี้อยู่ในคอลัมน์ J สูตรที่ใช้สำหรับการคำนวณเหล่านี้จะแสดงในกล่องข้อความที่ด้านบนของหน้าจอ

โปรดทราบว่า Fleiss Kappa ในตัวอย่างนี้กลายเป็น 0.2099 สูตรจริงที่ใช้ในการคำนวณค่านี้ในเซลล์ C18 คือ:

ฟลิสส์คัปปา = (0.37802 – 0.2128) / (1 – 0.2128) = 0.2099

แม้ว่าจะไม่มีวิธีที่เป็นทางการในการตีความ Fleiss ‘Kappa แต่ค่าต่อไปนี้จะแสดงวิธีตีความ Kappa ของ Cohen ซึ่งใช้ในการประเมินระดับข้อตกลงระหว่างผู้ประเมินระหว่างผู้ประเมินเพียงสองคน:

• <0.20 | ยากจน
• .21 – .40 | ยุติธรรม
• .41 – .60 | ปานกลาง
• 0.61 – 0.80 | ดี
• .81 – 1 | ใช้ได้

จากค่าเหล่านี้ Fleiss Kappa ของ 0.2099 ในตัวอย่างของเราจะถูกตีความว่าเป็นข้อตกลงระหว่างผู้ประเมินในระดับที่ “ยุติธรรม”