პუნქტების ანალიზის (item analysis) კალკულატორი
ჩასვით თქვენი გამოცდის პასუხების მატრიცა და მყისიერად მიიღეთ ტესტირების კლასიკურ თეორიაზე (classical test theory) დაფუძნებული პუნქტების სრული ანალიზი: სირთულე, დისკრიმინაცია, წერტილოვან-ბისერიული კორელაცია (point-biserial), დისტრაქტორების ეფექტიანობა (distractor efficiency) და KR-20. ყველაფერი თქვენს ბრაუზერში გამოითვლება: გამოცდისა და სტუდენტების მონაცემები არსად იტვირთება.
ატვირთეთ თქვენი პასუხები
ჩასვით Excel-იდან / Sheets-იდან (სტუდენტები რიგებში, პუნქტები სვეტებში)
თქვენი მონაცემები იკითხება და მუშავდება ლოკალურად. გადასამოწმებლად გახსენით ბრაუზერის ქსელის (network) ჩანართი: ვერაფერს ვერ ნახავთ ატვირთულს.
მეთოდოლოგია
თითოეული სტატისტიკური მაჩვენებელი ემყარება ტესტირების კლასიკური თეორიის (classical test theory) სტანდარტულ განმარტებებს, რომლებიც სამედიცინო და უმაღლეს განათლებაში გამოიყენება, და ემთხვევა StudyDrome-ის შეფასების სისტემაში განხორციელებულ რეალიზაციას. წყაროები თითოეული მაჩვენებლისთვის:
- სირთულის ინდექსი (difficulty index) (p)
- სწორად მოპასუხე სტუდენტების წილი. პუნქტები p ≥ 0.8 მონიშნულია როგორც ზედმეტად მარტივი, p ≤ 0.3 კი როგორც ზედმეტად რთული. NBME Item-Writing Guide
- დისკრიმინაციის ინდექსი (discrimination index)
- სწორი პასუხების მაჩვენებლის სხვაობა ჯამური ქულით დალაგებული სტუდენტების ზედა და ქვედა 27%-ს შორის; 27%-იანი გამიჯვნა ჯგუფებს შორის კონტრასტს მაქსიმალურად ზრდის. Kelley 1939, J. Educational Psychology
- წერტილოვან-ბისერიული კორელაცია (point-biserial correlation)
- პუნქტზე სწორ პასუხსა და ჯამურ ქულას შორის კორელაცია, გამოთვლილი გენერალური ერთობლიობის სტანდარტული გადახრით (population SD) და დაყვანილი [−1, 1] დიაპაზონზე. Crocker & Algina, Introduction to Classical and Modern Test Theory
- არაფუნქციონირებული დისტრაქტორები და ეფექტიანობა (non-functioning distractors & efficiency)
- დისტრაქტორი, რომელსაც გამოცდაზე მყოფთა 5%-ზე ნაკლები ირჩევს, არაფუნქციონირებულია; ეფექტიანობა ფუნქციონირებადი დისტრაქტორების წილია. Tarrant, Ware & Mohammed 2009, BMC Medical Education
- KR-20 სანდოობა და გაზომვის სტანდარტული ცდომილება (SEM)
- შინაგანი შეთანხმებულობის (internal consistency) სანდოობა დიქოტომიური პუნქტებისთვის; SEM = SD·√(1−r). მაღალი მნიშვნელობის მქონე (high-stakes) გამოცდებისთვის სასურველია ≥ 0.85-0.90. Kuder & Richardson 1937, Psychometrika
ეს იგივე ფორმულებია, რომლებსაც StudyDrome ავტომატურად იყენებს ყოველ გამოცდაზე.
ხშირად დასმული კითხვები
იტვირთება თუ არა ჩემი საგამოცდო მონაცემები სადმე?
არა. მონაცემთა წაკითხვა და ყველა სტატისტიკური გამოთვლა თქვენს ბრაუზერში სრულდება. ამ გვერდის ერთადერთი ქსელური მოთხოვნებია ანონიმური აგრეგირებული მრიცხველები (რომელი ინსტრუმენტი და რომელი მოქმედება) და, მხოლოდ თქვენი არჩევით, ექსპორტის ფორმა, რომელიც მხოლოდ თქვენს ელფოსტის მისამართს აგზავნის. ამის გადამოწმება შეგიძლიათ ბრაუზერის ქსელის (network) ჩანართში.
რომელი შეყვანის ფორმატები მუშაობს?
ჩასვით პირდაპირ Excel-იდან ან Google Sheets-იდან (ტაბულაციით გამოყოფილი) ან ატვირთეთ CSV/XLSX ფაილი. ორი განლაგება ავტომატურად ამოიცნობა: შეფასებული (უჯრებში 0/1, ცარიელი = 0) და ნედლი პასუხები (უჯრებში პასუხის ვარიანტების ასოებია A-E, მონაცემთა პირველი რიგი კი პასუხების გასაღებია). ნედლი პასუხების შემთხვევაში დამატებით ხელმისაწვდომია დისტრაქტორების ანალიზი (distractor analysis). სათაურის რიგი და სახელების/ID-ის სვეტები ავტომატურად ვლინდება; თუ ამოცნობა შეცდება, ხელით გადამრთველებს გამოიყენეთ.
რამდენი სტუდენტია საჭირო სანდო სტატისტიკისთვის?
ინსტრუმენტი ყველაფერს ითვლის 2 სტუდენტიდან, მაგრამ 10 სტუდენტზე ნაკლების შემთხვევაში პუნქტების ნიშნულებს და წერტილოვან-ბისერიულ კორელაციას (point-biserial correlation) არ აჩვენებს, რადგან ისინი მეტისმეტად არასტაბილურია გადაწყვეტილების საფუძვლად. იგივე ზღვარს იყენებს StudyDrome-ის ძრავაც. დისკრიმინაციის ინდექსები საგულისხმო ხდება დაახლოებით 30 სტუდენტიდან; სანდოობის შეფასებები უფრო სტაბილურია, როცა პუნქტებიცა და სტუდენტებიც მეტია.
რას ნიშნავს KR-20?
KR-20 აფასებს, რამდენად თანმიმდევრულად ზომავს თქვენი გამოცდა: 0-დან (ხმაური) 1-მდე (სრულად თანმიმდევრული). დაახლოებით 0.7 ზოგადად მისაღებია სასწავლო გამოცდებისთვის; მაღალი მნიშვნელობის მქონე გადაწყვეტილებებისთვის საჭიროა 0.85-0.90+. დაბალი მნიშვნელობა, როგორც წესი, პუნქტების სიმცირეზე ან რამდენიმე ხარვეზიან პუნქტზე მიუთითებს; ჯერ მონიშნული პუნქტები გამოასწორეთ.
ნამდვილად უფასოა?
დიახ. ანალიზი უფასოა და ანგარიშის გახსნა არ სჭირდება; XLSX/PDF ექსპორტისთვის მხოლოდ ელფოსტის მისამართია საჭირო. ინსტრუმენტი იმისთვის შეიქმნა, რომ დაინახოთ, როგორ პუნქტების ანალიტიკას აწარმოებს StudyDrome ავტომატურად ყოველ გამოცდაზე.