تعریف پایایی، به مثابه میزان همسانی نمره آزمون، منظور کلی را از آن چه باید پایا باشد می‌رساند - نمره‌های آزمون باید با چیزی همسان باشند - ولی این تعریف فاقد مشخصات چیزهایی است که نمره‌های آزمون باید در آن‌ها همسانی داشته باشند. تعریف کامل‌تر پایایی ممکن است چنین باشد: «پایایی، میزان همسانی نمره‌های آزمون با مجموعه دیگری از نمره‌هاست که در فرایند مشابهی به دست آمده‌اند.»