Science에 Estimating the reproducibility of psychological science라는 제목의 연구가 발표되었다. 유명 심리학 저널에 발표된 연구 결과 100가지를 재실험한 결과 원래 연구 결과 지지하는 못하는 것이 상당수였다는 내용이다. 특히 효과 크기(effect size)가 전반적으로 감소했다고도 언급하고 있다. NYT에서 지지되지 않은 세 가지 실험에 대한 사례를 이야기 했다.
자유 의지와 컨닝
2008년 Psychological Science에 실린 연구는 사람들이 행동이 환경적 요인에 의해 결정된다는 글을 읽은 후 실험에서 컨닝을 할 확률이 높다고 밝혔다. 저자들은 실험 결과가 자유 의지에 대한 믿음이 사회적 영향을 가진다는 것을 의미한다고 했다.
다시 이루어진 실험에서 효과는 같은 방향을 나타냈으나 훨씩 약했다.
[expand title=English]
In 2008, a paper in Psychological Science found that people were more likely to cheat on a test after they had read an essay arguing that behavior was predetermined by environmental factors. The authors suggested from their findings that belief in free will had societal implications.
The redone study found an effect pointing in the same direction as the original, but far weaker.[/expand]
청결과 도덕성
2008년 Psychological Science는 사람들이 청결에 대해 생각하거나 손을 씻은 후에 도덕적 판단에서 덜 가혹하다는 결과를 밝혔다. 연구자들은 도덕적 순수성에 대한 판단이 신체적 청결이라는 개념과 연결되어 있다고 제안했다.
재실험 결과는 원래 결과보다 상당히 작았다.
[expand title=English]
In 2008, a study in Psychological Science found that people were less severe in their moral judgments after they had thought about the idea of cleanliness, or washed their hands in the wake of feeling disgust. The researchers suggested that judgments of moral purity were linked to concepts of physical cleanliness.
The retest found a substantially smaller effect than the original study.[/expand]
외로움과 무생물
2008년 Psychological Science에 발표된 연구는 외로운 사람들은 인간이 아닌 것들과 인간관계를 만들어냄으로써 보상받으려고 한다고 했다. 연구자들은 사람들이 사물을 의인화할 때 함의를 가질 수 있다고 제안했다.
재실험 결과는 본래 연구의 어떤 효과도 발견되지 않았고, 연구자들이 피실험자의 감정을 어떻게 유도했는지와 관련있을 수 있다.
[expand title=English]
A study published in 2008 in Psychological Science found that people who are lonely compensate by creating human connections to things that are not human. The researchers suggested that their findings had implications for when people choose to anthropomorphize things.
The reproduced study found none of the effects of the original, and part of the explanation may have to do with how the researchers induced emotions in the subjects.[/expand]
이번 연구가 기존 실험들이 완전히 거짓이라거나 잘못되었다는 사실을 발견한 것은 아니다. 하지만 기존 실험들의 효과가 주장하는 것 만큼 강하지 않다는 사실을 보여준다.