Поскольку стандартная погрешность коэффициента корреляции, служащего для оценки надежности, связана с объемом выборки, на которой она получена, то должны использоваться достаточно большие выборки.
Вопрос о минимальной выборке решается в той или иной степени произвольно. Например, Дж.П.Гилфорд, рассматривая этот вопрос применительно к факторно-аналитическим исследованиям, считал, что минимумом является 200 испытуемых.
Более важным, чем объем выборки, является ее состав. Необходимо, чтобы выборка отражала ту категорию людей, для которой создан тест. При этом для теста, предназначенного для различных выборок, должно быть показано, что он надежен для каждой из групп в отдельности. В этом случае допускаются объемы менее 200 человек в каждой группе (например, по 100). Причем при определении надежности нет необходимости в столь тщательной комплектации выборок, как при стандартизации, главное, чтобы данные выборки различались прежде всего по критерию валидизации.