Проблема объективности психологических данных имеет в литературе разное звучание. Во многом критерии объективности повторяют те, что были сформулированы не специально для психологической области знаний. Обсуждается проблема воспроизводимости данных, т.е. возможность повторных исследований с получением тех же феноменов и закономерностей. Воспроизводимость рассматривается, таким образом, как возможность сравнения опытных данных, полученных для разных испытуемых или разных популяций.
Речь также может идти о воспроизводимости данных применительно к индивидуальному опыту или субъективной реальности одного и того же человека. Различают стабильность данных, когда они однозначно связаны с демонстрацией определенной закономерности (например, иллюзии кажущегося движения) или выражают лишь некоторые сдвиги в фиксируемых показателях, но эти сдвиги всегда имеют одну и ту же направленность.

Например, в социальной и педагогической психологии обсуждается такая закономерность, как лучшее согласование субъективных оценок учителей, когда предметом оценивания являются свойства учеников, и худшее, когда учителя оценивают своих коллег. В одном из примеров демонстрации особенностей корреляционного исследования будут рассмотрены и другие установленные зависимости – улучшения прогноза в оценивании свойств преподавателей высшей школы как самими преподавателями, так и студентами.

Для сходных случаев построения исследования важно указать, что психологическая закономерность выявляется при сравнении рядов выборочных показателей, т.е. зависимости имеют характер вероятностно, т.е. статистически, оцениваемых.
В контексте статистического оценивания достоверности эмпирических результатов вводится понятие надежности данных. Надежными считаются данные, которые при повторном их получении в тех же процедурных условиях дают незначимые отклонения от первоначальных величин. В этом случае надежность связывается не просто со стабильностью тех или иных эффектов, а также с требованием их вероятностной оценки на основе статистических решений. Ненадежность данных психологического исследования может быть следствием множества причин: колебания самих измеряемых переменных, ошибки измерения, влияния побочных факторов, обеспечивающих несистематические сдвиги в фиксируемых показателях, и т.д.
С проблемой воспроизводимости данных связана и проблема их интерсубъективности, т.е. возможности быть полученными разными исследователями. То, что субъективная реальность не может быть доступна взору другого человека, не означает требования отказа от критерия интерсубъективного характера знания. В психологии методические средства в разной степени зависят от толкований исследователем данных субъективного опыта другого человека – испытуемого.

Одной из классификаций, предложенной в учебнике «Методология и методики в психологии» [95], является, в частности, подразделение всего арсенала психологических методик на методики достижения, методики суждения и методики толкования. К последним отнесены все те случаи методик, когда продуцирование испытуемым тех или иных идей подвергается последующему качественному анализу психологом, в результате чего получаются данные, относимые к классу толкований (пример – проективные методики). Если методики достижений и суждений позволяют говорить об интерсубъективности получаемых с их помощью данных, поскольку они воспроизводимы другими исследователями как бы без вмешательства в их качество, то для методик толкования это условие невыполнимо. При их использовании вполне ожидаемо несогласие экспертов по поводу анализа индивидуального случая вследствие ненадежности данных и разных схем качественной интерпретации этих данных. Типичным примером методик толкования называют проективные методики, для которых несогласие психологов относительно анализа индивидуальных показателей может иметь принципиальный характер, если мнения экспертов опосредованы разными теоретическими подходами к интерпретации рассказов испытуемых [61].

Отметим, что надежность данных есть условие оценки валидности исследования, или, буквально, его «полноценности». Итак, ненадежность данных может определяться нестабильностью самой психологической реальности (примером могут служить эффекты утомления или научения), опосредованностью их субъективным миром другого человека (если речь идет об элементах непосредственного наблюдения), ненадежностью методической процедуры измерений или присутствием эффектов, которые не могут быть подвергнуты экспериментальному контролю. Предполагается, что культура построения метода исследования и использования психологической методики включает решение всех тех проблем, которые связаны с тщательностью сбора данных, снижением возможности их искажения при фиксации или интерпретации, с учетом возможных смешений с другими процессами (кроме изучаемого).

Требования к тщательности сбора данных не полностью перекрываются с понятием их воспроизводимости. Устанавливаемые в психологии зависимости отнюдь не всегда повторяемы или воспроизводимы. Так, можно создать условия для творческого решения задачи, но нельзя гарантировать это творческое решение, поскольку оно связано с активностью самого испытуемого и эффект часто непредсказуем для него самого.
Возникновение паники в одном случае не обусловливает наблюдения сходного эффекта в другом случае. Управление дискуссией может привести к ожидаемому эффекту (например, к сдвигу в личностных предпочтениях), а может не привести. Уникальность психологических феноменов часто связана именно с незаданностью их какими-либо управляющими процедурами (со стороны исследователя), что не означает, однако, невозможности их изучения в рамках тех или иных исследовательских методов.