შინაარსზე გადასვლა
უფასო · რეგისტრაციის გარეშე · თქვენი კითხვები არსად იტვირთება

MCQ კითხვების ხარვეზების შემმოწმებელი

ჩასვით მრავალვარიანტიანი კითხვა და მიიღეთ NBME-ის სტილის სტრუქტურული ხარვეზების ანგარიში: ყოველი ნიშნული მიუთითებს კითხვების შედგენის გაიდლაინზე (item-writing guideline), რომელსაც ეფუძნება, და გთავაზობთ გასწორების გზას. შეამოწმეთ ერთდროულად 50-მდე კითხვა და ნახეთ, როგორ შეესაბამებით გამოქვეყნებულ ეტალონს ხარვეზების მიხედვით. ყველაფერი თქვენს ბრაუზერში სრულდება.

შეამოწმეთ თქვენი კითხვა

მონიშნეთ განზრახ სწორი პასუხი, რომ გააქტიურდეს ყველაზე გრძელი ვარიანტის შემოწმება.

კითხვები ლოკალურად მუშავდება: გახსენით ბრაუზერის ქსელის (network) ჩანართი და დარწმუნდით, რომ არაფერი იტვირთება.

ფორმულირების შემოწმებები (აბსოლუტური სიტყვები, ბუნდოვანი სიხშირის სიტყვები, უარყოფითი პირობები, „ყველა ან არც ერთი ზემოთ ჩამოთვლილი“, გრამატიკული მინიშნებები და სიტყვების გამეორება) ინგლისურ სიტყვებს კითხულობს, ამიტომ მხოლოდ ინგლისურად დაწერილ კითხვებზე მუშაობს. ვარიანტების სიგრძის, რიცხვითი ვარიანტების, ვარიანტების რაოდენობისა და დუბლირებული ვარიანტების შემოწმება ნებისმიერ ენაზე მუშაობს.

დამუშავებული მაგალითი

ეს ინსტრუმენტის ჩაშენებული ნიმუშია: დამაჯერებლად გამოიყურება, თუმცა სამ კლასიკურ ხარვეზს შეიცავს. ქვემოთ მოცემულ ანგარიშს რეალურ დროში ითვლის იგივე ძრავა, რომელსაც ზემოთ იყენებთ:

A patient newly diagnosed with type 2 diabetes asks about lifestyle measures. Which of the following is the best initial recommendation?

  1. A) Exercise only when symptoms appear
  2. B) A structured program of regular aerobic exercise combined with dietary changes and ongoing glucose monitoring✓ სწორი პასუხი
  3. C) Bariatric surgery
  4. D) All of the above
Dსკრინინგის შეფასებამხოლოდ სტრუქტურული სკრინინგია: შინაარსობრივი ვალიდურობა ადამიანის მიერ შემოწმებას საჭიროებს.

აღმოჩენილია 3 სტრუქტურული ხარვეზი:

  • აბსოლუტური ტერმინებიგაფრთხილება · ვარიანტი A

    ვარიანტი A შეიცავს აბსოლუტურ ტერმინს: ტესტის გაქნილობაზე გათვლილი სტუდენტები გაურბიან ვარიანტებს სიტყვით „only“.

    გამოსწორება: გადააფორმულირეთ კონკრეტული დეტერმინანტის (specific determiner) გარეშე ან გახადეთ ვარიანტი დასაბუთებულად აბსოლუტური. Haladyna, Downing & Rodriguez 2002, Applied Measurement in Education

  • ყველა ზემოაღნიშნულიგაფრთხილება · ვარიანტი D

    „ყველა ზემოაღნიშნული“ პასუხდება ნაწილობრივი ცოდნითაც: ორი სწორი ვარიანტის ამოცნობა მას ამხელს.

    გამოსწორება: ჩაანაცვლეთ შინაარსიანი ვარიანტით. NBME Item-Writing Guide

  • ყველაზე გრძელი ვარიანტი სწორი პასუხიაკრიტიკული · ვარიანტი B

    სწორი პასუხი ვარიანტების მედიანურ სიგრძეზე 4.27× გრძელია. „აირჩიე ყველაზე გრძელი პასუხი“ ტესტის გაქნილობაზე გათვლილი ყველაზე ცნობილი მინიშნებაა.

    გამოსწორება: შეამოკლეთ სწორი პასუხი ან გააგრძელეთ დისტრაქტორები, სანამ ერთნაირი სიგრძის არ გახდება. NBME Item-Writing Guide

ჩატვირთეთ ეს ნიმუში ზემოთ მოცემულ შემმოწმებელში, რათა გამოსწორებები საკუთარ თავზე სცადოთ.

რას ეძებს თითოეული შემოწმება

სრული წესების ნაკრები: რა იწვევს თითოეულ შემოწმებას, რატომ არის ხარვეზი მნიშვნელოვანი და რომელ გაიდლაინს ეფუძნება. ქვემოთ მოცემული ყველა მაგალითი ჩვენს სატესტო კომპლექტში რეალურ ძრავზე სრულდება, ამიტომ ეს დოკუმენტაცია ვერ გაემიჯნება იმას, რასაც ინსტრუმენტი რეალურად აკეთებს.

  • კრიტიკული: მინიშნება, რომელიც პასუხს ამჟღავნებს; გამოასწორეთ გამოცდამდე
  • გაფრთხილება: დოკუმენტირებული ხარვეზი, რომლის გასწორებაც ღირს
  • ინფორმაცია: სტილისტური ნაკლი; გამოასწორეთ, როცა მოიხერხებთ

აბსოლუტური ტერმინები

გაფრთხილება · ამოწმებს პასუხის ვარიანტებს

ვარიანტი შეიცავს კონკრეტულ დეტერმინანტს: ყოველთვის, არასდროს, ყველა, არცერთი, მხოლოდ, აუცილებლად.

ნებისმიერ სფეროში ცოტა რამ არის აბსოლუტური და ტესტის გაქნილობაზე გათვლილი სტუდენტები ამას კარგად იციან: აბსოლუტური ტერმინების მქონე ვარიანტები არაპროპორციულად ხშირად არასწორია, ამიტომ ცოდნის გარეშეც შეიძლება მათი გამორიცხვა.

მაგალითი, რომელიც ნიშნულს იწვევს:

Which statement about beta blockers is correct?

  1. A) They always lower heart rate
  2. B) They can mask hypoglycemia ✓
  3. C) They are contraindicated in hypertension

გამომწვევი პირობა: always

გამოსწორება: გადააფორმულირეთ დეტერმინანტის გარეშე ან გახადეთ ვარიანტი დასაბუთებულად აბსოლუტური. Haladyna, Downing & Rodriguez 2002, Applied Measurement in Education

ბუნდოვანი სიხშირის სიტყვები (vague frequency terms)

გაფრთხილება · ამოწმებს კითხვის პირობას და პასუხის ვარიანტებს

პირობა ან ვარიანტი ბუნდოვანდება სიტყვებით: ხშირად, ზოგჯერ, ჩვეულებრივ, იშვიათად, არაერთხელ, როგორც წესი ან „შეიძლება მოხდეს“.

არაზუსტი სიხშირის სიტყვებს სხვადასხვა გამოსაცდელი სხვადასხვაგვარად აღიქვამს, ამიტომ კითხვა ცოდნის ნაცვლად ლექსიკაზე დავად იქცევა.

მაგალითი, რომელიც ნიშნულს იწვევს:

Which finding commonly occurs in early sepsis?

  1. A) Tachycardia ✓
  2. B) Bradycardia
  3. C) Hypothermia

გამომწვევი პირობა: commonly

გამოსწორება: ჩაანაცვლეთ კონკრეტული სიხშირით, პროპორციით ან პირობით. NBME Item-Writing Guide

უარყოფითი პირობა (negative stem)

გაფრთხილება · ამოწმებს კითხვის პირობას (stem)

კითხვის პირობა არასწორ პასუხს მოითხოვს: არა, გარდა, მცდარი, ყველაზე ნაკლებად. მეორე, უმნიშვნელო ნიშნული ჩნდება, როცა უარყოფითი სიტყვა დიდი ასოებით არ არის დაწერილი.

უარყოფითი პირობა ცოდნასთან ერთად ყურადღებით კითხვის უნარსაც ზომავს: მასალის მცოდნე სტუდენტებიც კი დროის სიმცირისას მათში შეცდომას უშვებენ.

მაგალითი, რომელიც ნიშნულს იწვევს:

Which of the following is not a beta blocker?

  1. A) Atenolol
  2. B) Amlodipine ✓
  3. C) Metoprolol

გამომწვევი პირობა: not

გამოსწორება: გადააფორმულეთ დადებითად, ხოლო თუ უარყოფა აუცილებელია, დაწერეთ დიდი ასოებით (NOT). Tarrant et al. 2006, Nurse Education Today (item-flaw frequency study)

„ყველა / არც ერთი ზემოთ ჩამოთვლილი“

გაფრთხილება · ამოწმებს პასუხის ვარიანტებს

ერთ-ერთი ვარიანტი სიტყვასიტყვით არის „ყველა ზემოთ ჩამოთვლილი“ ან „არც ერთი ზემოთ ჩამოთვლილი“.

„ყველა ზემოთ ჩამოთვლილზე“ შეიძლება პასუხის გაცემა ნაწილობრივი ცოდნითაც: ორი სწორი ვარიანტის ამოცნობა პასუხს ცხადყოფს. „არც ერთი ზემოთ ჩამოთვლილი“ პასუხის ცოდნას კი არა, მცდარის ამოცნობას ამოწმებს.

მაგალითი, რომელიც ნიშნულს იწვევს:

Which are established cardiovascular risk factors?

  1. A) Smoking
  2. B) Hypertension
  3. C) All of the above ✓

გამომწვევი პირობა: All of the above

გამოსწორება: ჩაანაცვლეთ შინაარსიანი ვარიანტით. NBME Item-Writing Guide

ყველაზე გრძელი ვარიანტი სწორი პასუხია

კრიტიკული · ამოწმებს პასუხის ვარიანტებს

მონიშნული სწორი პასუხი ვარიანტების მედიანური სიგრძის 1.5×-ზე გრძელია. საჭიროა, რომ სწორი პასუხი მონიშნული იყოს.

„აირჩიე ყველაზე გრძელი პასუხი“ ტესტის გაქნილობაზე გათვლილი ყველაზე ცნობილი სტრატეგიაა (testwiseness): სწორი პასუხები იგრძელებს, რადგან კითხვების შემდგენლები მას დაზუსტებებით ამძიმებენ, ვიდრე დასაცავი არ გახდება.

მაგალითი, რომელიც ნიშნულს იწვევს:

What is the best initial management?

  1. A) Watchful waiting
  2. B) A structured multidisciplinary plan with regular specialist follow-up and staged escalation of therapy ✓
  3. C) Immediate surgery
  4. D) Discharge

გამომწვევი პირობა: გრძელი სწორი პასუხი

გამოსწორება: შეამოკლეთ სწორი პასუხი ან გააგრძელეთ დისტრაქტორები, ვიდრე ისინი ერთგვაროვანი არ გახდება. NBME Item-Writing Guide

ვარიანტების სიგრძის დისბალანსი

ინფორმაცია · ამოწმებს პასუხის ვარიანტებს

რომელიმე ვარიანტი (სწორი პასუხი იქნება თუ არა) მედიანურ სიგრძეზე 1.5×-ზე მეტია. ნიშნულდება მაშინაც, როცა სწორი პასუხი მონიშნული არ არის.

ვიზუალურად გამორჩეული ვარიანტები შინაარსის მიუხედავად იპყრობს ყურადღებას; პარალელური აგებულება არჩევანს ცოდნაზე აფუძნებს.

მაგალითი, რომელიც ნიშნულს იწვევს:

Which is a first-line treatment?

  1. A) Metformin
  2. B) A carefully titrated combination of several second-line agents chosen case by case
  3. C) Insulin ✓
  4. D) Diet

გამომწვევი პირობა: გრძელი დისტრაქტორი

გამოსწორება: დააბალანსეთ ვარიანტების სიგრძე, რომ არცერთი არ გამოირჩეოდეს. Haladyna, Downing & Rodriguez 2002, Applied Measurement in Education

გრამატიკული მინიშნება (ევრისტიკა)

გაფრთხილება · ამოწმებს კითხვის პირობას და პასუხის ვარიანტებს

კითხვის პირობის გრამატიკა ზოგ ვარიანტს ცოდნის გამოყენებამდე გამორიცხავს. მაგალითად, პირობა მთავრდება „an“-ით, მაშინ როცა ხმოვნით მხოლოდ ზოგი ვარიანტი იწყება, ან მრავლობითი რიცხვის ზმნას მხოლობითი რიცხვის ვარიანტები მოსდევს.

გრამატიკული შეუსაბამობა დისტრაქტორებს უფასოდ გამორიცხავს. ეს შემოწმება ევრისტიკულია: ის სავარაუდო შემთხვევებს ნიშნავს და ამას პირდაპირ აღნიშნავს.

მაგალითი, რომელიც ნიშნულს იწვევს:

Scurvy is caused by a deficiency of an

  1. A) ascorbic acid ✓
  2. B) thiamine
  3. C) riboflavin

გამომწვევი პირობა: an

გამოსწორება: დაასრულეთ კითხვის პირობა ისე, რომ ყველა ვარიანტი გრამატიკულად ერგებოდეს (მაგ., „…რომელი ვიტამინის დეფიციტია?“). NBME Item-Writing Guide

ბგერითი მსგავსების ასოციაცია (clang association)

გაფრთხილება · ამოწმებს კითხვის პირობას და პასუხის ვარიანტებს

ზუსტად ერთი ვარიანტი იმეორებს კითხვის პირობის გამორჩეულ სიტყვას (6+ ასო), რომელიც სხვა ვარიანტებში არ გვხვდება.

კითხვის პირობასა და ერთ ვარიანტს შორის სიტყვების გამეორება პასუხზე მიანიშნებს: სტუდენტები ირჩევენ ვარიანტს, რომელიც კითხვას „ჰგავს“.

მაგალითი, რომელიც ნიშნულს იწვევს:

Which hormone regulates calcium homeostasis?

  1. A) Parathyroid hormone, which controls calcium directly ✓
  2. B) Insulin
  3. C) Glucagon

გამომწვევი პირობა: calcium

გამოსწორება: ამოიღეთ განმეორებული სიტყვა ვარიანტიდან ან გაიმეორეთ ის რამდენიმე ვარიანტში. NBME Item-Writing Guide

არაერთგვაროვანი ვარიანტები (non-homogeneous options)

ინფორმაცია · ამოწმებს პასუხის ვარიანტებს

ვარიანტებში შერეულია რიცხვითი და სიტყვიერი პასუხები, რიცხვითი ვარიანტები დალაგებული არ არის ან რიცხვითი დიაპაზონები ერთმანეთს ფარავს.

არაერთგვაროვანი ვარიანტები ინფორმაციას ავრცელებს (გამორჩეული ვარიანტი ყურადღებას იპყრობს); გადაფარული დიაპაზონების გამო ორი ვარიანტი ერთდროულად შეიძლება სწორი აღმოჩნდეს.

მაგალითი, რომელიც ნიშნულს იწვევს:

What is the usual adult starting dose?

  1. A) 500 mg ✓
  2. B) 250 mg
  3. C) 1000 mg

გამომწვევი პირობა: დალაგებული არ დოზები

გამოსწორება: ვარიანტები ერთი სახის უნდა იყოს, რიცხვითი ვარიანტები დაალაგეთ, დიაპაზონები კი ერთმანეთს არ უნდა გადაფარავდეს. Haladyna, Downing & Rodriguez 2002, Applied Measurement in Education

ვარიანტების რაოდენობის შემოწმება

ინფორმაცია · ამოწმებს პასუხის ვარიანტებს

3-ზე ნაკლები ვარიანტი (ინფორმაცია) ან ორი ვარიანტი ერთნაირი ტექსტით (გაფრთხილება).

კვლევები აჩვენებს, რომ 3 კარგად შედგენილი ვარიანტი საკმარისია, თუმცა 2 ვარიანტის შემთხვევაში გამოცნობა მონეტის აგდებას ჰგავს, დუბლიკატები კი აშკარა ხარვეზია.

მაგალითი, რომელიც ნიშნულს იწვევს:

Is aspirin an antiplatelet agent?

  1. A) Yes ✓
  2. B) No

გამომწვევი პირობა: 2 ვარიანტი

გამოსწორება: დაამატეთ მინიმუმ ერთი დამაჯერებელი დისტრაქტორი; დუბლიკატები ჩაანაცვლეთ. Haladyna, Downing & Rodriguez 2002, Applied Measurement in Education

წესები და მათი წყაროები

თითოეული შემოწმება ეფუძნება დოკუმენტირებულ კითხვების შედგენის გაიდლაინს (item-writing guideline), რომელიც მითითებულია ნიშნულის გვერდით. სკრინინგის შეფასება ნიშნულებს სიმძიმის მიხედვით აწონის. ქვემოთ ზუსტი წონებია მოცემული, რათა მათ არ დაეთანხმოთ, თუ საჭიროდ ჩათვლით:

კრიტიკული = 3 ქულა · გაფრთხილება = 1 · ინფორმაცია = 0.25. შეფასება A = 0 ქულა, B ≤ 1, C ≤ 3, D ამაზე მეტი. შეფასება მხოლოდ სტრუქტურას ამოწმებს და ფსიქომეტრიულ დასკვნას არ წარმოადგენს.

ეს არის სტრუქტურული სკრინინგი გამოქვეყნებული გაიდლაინების მიხედვით. ის ვერ განსაჯავს, სწორია, რელევანტურია თუ სამართლიანია შინაარსი: ამას მაინც ადამიანი (ან თქვენი საგამოცდო კომისია) სჭირდება.

გირჩევნიათ დასაბეჭდი ვერსია? კითხვების შედგენის საკონტროლო სიის შაბლონი ამ შემოწმების სტატიკური წყვილია: იგივე ათი შემოწმება იმავე წყაროებით, დასაბეჭდად მზა XLSX ფორმატში.

მიიღეთ საკონტროლო სიის შაბლონი →
Share this tool

ხშირად დასმული კითხვები

იტვირთება თუ არა ჩემი კითხვები სადმე?

არა. წესები მთლიანად თქვენს ბრაუზერში სრულდება. ეს გვერდი მხოლოდ ანონიმურ აგრეგირებულ მრიცხველებს აგზავნის (რომელი ინსტრუმენტი, რომელი მოქმედება) და, მხოლოდ თუ გამოიყენებთ, ექსპორტის ფორმას, რომელიც გადასცემს თქვენს ელფოსტას და სხვა არაფერს. შეგიძლიათ გადაამოწმოთ ბრაუზერის ქსელის (network) ჩანართში.

რას ამოწმებს ეს ინსტრუმენტი და რას ვერ ამოწმებს?

ინსტრუმენტი ამოწმებს კითხვის შედგენის (item-writing) იმ სტრუქტურულ ხარვეზებს, რომლებიც დეტერმინისტულად ვლინდება: ტესტის გაქნილობაზე გათვლილი მინიშნებები (testwiseness cues), როგორიცაა აბსოლუტური ტერმინები, ყველაზე გრძელი ვარიანტის მინიშნება, გრამატიკული მინიშნებები და სიტყვების გამეორება (word echoes); ორაზროვნება, კერძოდ ბუნდოვანი კვალიფიკატორები და უარყოფითი პირობა; ასევე ფორმატის პრობლემები: „ყველა ზემოთ ჩამოთვლილი“ და „არცერთი ზემოთ ჩამოთვლილი“ ვარიანტები, დაუბალანსებელი ან არაერთგვაროვანი ვარიანტები და დუბლიკატები. ის ვერ განსაზღვრავს, სამედიცინო ან ფაქტობრივი თვალსაზრისით სწორია თუ არა შინაარსი, დამაჯერებელია თუ არა დისტრაქტორები (distractors) და ამოწმებს თუ არა კითხვა იმას, რისი შემოწმებაც გსურთ. ამისთვის საჭიროა ექსპერტული განხილვა.

როგორ მუშაობს მასობრივი რეჟიმი?

ჩასვით 50-მდე კითხვა, თითო კითხვა ცალკე ბლოკად, ბლოკები გამოყავით ცარიელი ხაზით. ვარიანტების სტრიქონები იწყება ასოთი, „A)“ ან „A.“, ხოლო წინ დართული * სწორ პასუხს აღნიშნავს (გასაღების მონიშვნა ააქტიურებს ყველაზე ძლიერ შემოწმებას, ყველაზე გრძელი ვარიანტის მინიშნებას). მიიღებთ თითოეული კითხვის შეფასების ცხრილს და თქვენი ხარვეზების საერთო მაჩვენებელს გამოქვეყნებულ 46.2%-იან ეტალონთან შედარებით.

რას ნიშნავს 46.2%-იანი ეტალონი?

მაღალი მნიშვნელობის მქონე საექთნო შეფასებებში გამოყენებული მრავალვარიანტიანი კითხვების რეცენზირებულმა აუდიტმა (Tarrant et al. 2006) აჩვენა, რომ კითხვების 46.2% შეიცავდა კითხვის შედგენის მინიმუმ ერთ ხარვეზს. ერთი გულწრფელი დათქმა: იმ აუდიტში ექსპერტები ამოწმებდნენ ხარვეზების უფრო ფართო ჩამონათვალს, ვიდრე ათი სტრუქტურული წესია, რომელსაც ეს ინსტრუმენტი ამოწმებს, ამიტომ თქვენი მაჩვენებელი ბუნებრივად უფრო დაბალი გამოვა. ეტალონზე დაბალი მაჩვენებელი ასაჩემებელია, თუმცა არა გადამწყვეტი. ხარვეზების სიიდან კი ზუსტად ნახავთ, რის გასწორებაა საჭირო.

ნამდვილად უფასოა?

დიახ. შემოწმებისთვის და კოპირებადი ანგარიშისთვის არაფერია საჭირო, ხოლო ბეჭდვისთვის მზა PDF-ის ექსპორტი მხოლოდ ელფოსტის მისამართს მოითხოვს. ინსტრუმენტი იმისთვის არსებობს, რომ ნახოთ, როგორი ხარისხის შემოწმებებს ატარებს StudyDrome რეალურ გამოცდებზე ჩატარებამდე და ჩატარების შემდეგ.