การทำวิจัยมีขั้นตอนสำคัญมากตอนหนึ่งก็คือ เครื่องมือที่ใช้เก็บข้อมูล ต้องมีคุณภาพ มิฉะนั้น ข้อมูลที่ได้ก็เละเทะ (เปรียบได้กับขยะ)ขั้นต่อมานำข้อมูลมาวิเคราะห์และเสนอผลการวิจัยก็กลายเป็นผลงานที่ขาดความน่าเชื่อถือ หรือเป็นบาปต่อผู้ที่เอาผลงานไปใช้ เพราะเป็นผลงานเท็จ ดังนั้น เพื่อป้องกันไม่ให้เครื่องมือขาดคุณภาพจึงมีการตรวจสอบ ตามขั้นตอนดังนี้
1.สร้างเครื่องมือขึ้นจำนวนหนึ่ง (โดยมีจำนวนมากกว่าที่ต้องการใช้จริง 20% – 50%)
2 หาความเที่ยงตรงทั้งฉบับ (Validity) โดยอาศัยผู้เชี่ยวชาญ จำนวน 3–5 คน ให้ช่วยพิจารณารายละเอียดของเครื่องมือทุกชนิดที่จะใช้เก็บรวบรวมข้อมูล โดยจำนวนข้อของเครื่องมือแต่ละชนิดที่ผ่านเกณฑ์ต้องมากกว่าที่จะใช้จริง (สร้างเผื่อไว้ 20%–50% ผ่านเกณฑ์อาจจะเหลือมากกว่า 20 % แต่น้อยกว่า 50% ก็ได้)
3 หาความยากรายข้อ (สำหรับแบบทดสอบ) และอำนาจจำแนกรายข้อ โดยการทดลองใช้เครื่องมือ (Try out) กับกลุ่มบุคคลที่คล้ายกับกลุ่มตัวอย่าง แล้วคัดเลือกจำนวนข้อที่ผ่านเกณฑ์ให้ได้พอดีกับจำนวนที่ต้องการใช้จริง
4 นำจำนวนข้อของเครื่องมือแต่ละชนิดที่จะใช้จริงซึ่งคัดเลือกไว้แล้ว ไปหาความเชื่อมั่นทั้งฉบับ (Reliability)
5 พิมพ์เครื่องมือเป็นฉบับจริง