심리학 연구를 읽는 법: 상관관계와 인과관계부터 재현성까지

 

•  

목차

1. 심리학은 관찰할 수 있는 질문에서 출발한다
2. 함께 변하는 것과 원인이 되는 것은 다르다
3. 평균과 통계적 유의성을 개인의 운명으로 읽지 않는다
4. 재현성과 근거의 누적을 함께 살핀다

심리학을 다룬 글에는 ‘연구 결과 밝혀졌다’라는 표현이 자주 등장합니다. 그러나 연구라는 말이 붙었다고 해서 모든 사람에게 적용되는 사실이 되는 것은 아닙니다. 누가 참여했는지, 무엇을 측정했는지, 어떤 비교를 했는지에 따라 결론의 범위가 달라집니다. 심리학을 제대로 이해하려면 흥미로운 결론을 모으는 것만큼 그 결론이 만들어진 과정을 읽는 일이 필요합니다. 이 글에서는 일상에서 접하는 심리학 정보를 검토하는 기준과 실제로 활용할 수 있는 읽기 순서를 설명합니다.

1. 심리학은 관찰할 수 있는 질문에서 출발한다

‘집중력이 좋은 사람은 성공한다’는 문장은 그럴듯하지만 그대로는 검증하기 어렵습니다. 집중력이 방해 자극을 무시하는 능력인지, 한 가지 일을 오래 하는 행동인지부터 정해야 합니다. 성공도 시험 점수, 업무 정확도, 소득처럼 서로 다른 지표가 될 수 있습니다. 연구자가 추상적인 개념을 관찰하거나 측정할 수 있도록 구체화하는 과정을 조작적 정의라고 합니다. 같은 단어를 사용한 두 연구가 서로 다른 결과를 낼 때에는 먼저 이 정의를 비교해야 합니다.

예를 들어 독서 습관과 기억의 관계를 조사한다고 가정해 봅시다. 지난 한 달의 독서 시간을 설문으로 묻는 방식과 실제 독서 기록을 모으는 방식은 같지 않습니다. 스스로 보고한 시간에는 기억의 부정확함이나 좋은 모습을 보이려는 응답이 섞일 수 있습니다. 그렇다고 설문이 쓸모없다는 뜻은 아닙니다. 경험을 폭넓게 조사하는 데 유용한 방법이지만, 그 방법이 잘 보여 주는 부분과 놓치는 부분을 함께 읽어야 한다는 뜻입니다.

연구 제목만 보고 사람의 본질에 관한 설명으로 확대하지 않는 것도 중요합니다. 특정 과제에서 빠르게 답한 결과가 생활 전체에서 판단을 잘한다는 뜻은 아닙니다. 관찰된 행동과 연구자가 붙인 개념 사이에 어떤 연결이 있는지 확인하면 지나친 해석을 줄일 수 있습니다. 독자는 논문 전체를 이해하지 못하더라도 ‘실제로 측정한 것은 무엇인가’라는 질문부터 던질 수 있습니다.

2. 함께 변하는 것과 원인이 되는 것은 다르다

두 변수가 함께 변하면 상관관계가 있다고 말합니다. 그러나 이것만으로 한 변수가 다른 변수를 일으킨다고 결론 내릴 수는 없습니다. 가령 학습 계획표를 쓰는 학생들의 성적이 높았다고 해도, 계획표 자체의 효과인지 원래 학습 동기가 높은 학생들이 계획표를 더 많이 쓰는 것인지 구분해야 합니다. 가정환경이나 공부할 수 있는 시간처럼 두 변수에 함께 영향을 주는 다른 조건도 있을 수 있습니다.

원인을 더 설득력 있게 알아보려면 비교 조건을 갖춘 연구가 필요합니다. 가능한 경우 참여자를 무작위로 집단에 배정하고 한 집단에는 특정 방법을 제공하며 다른 집단과 결과를 비교합니다. 다만 무작위 배정이 모든 문제를 없애지는 않습니다. 중간에 빠진 사람이 어느 집단에 더 많았는지, 측정자가 집단 정보를 알고 있었는지, 실제로 지침을 따랐는지에 따라서도 해석이 달라집니다. 실험이라는 이름만으로 설계의 질이 보장되지는 않습니다.

이 구분은 생활 속 정보에도 그대로 적용할 수 있습니다. ‘성적이 좋은 사람들이 사용하는 노트’와 ‘노트를 사용하게 했더니 성적이 향상되었다’는 서로 다른 주장입니다. 첫 번째는 관련성을 보여 주고 두 번째는 원인에 더 가까운 질문을 다룹니다. 상품 소개나 공부법 설명을 읽을 때 두 문장을 바꾸어 써 보십시오. 근거가 첫 번째인데 결론이 두 번째로 제시되어 있다면 중간의 논리가 빠져 있을 가능성이 있습니다.

3. 평균과 통계적 유의성을 개인의 운명으로 읽지 않는다

연구 결과는 흔히 집단의 평균 차이로 제시됩니다. 한 방법을 사용한 집단의 평균 점수가 높더라도 모든 참여자가 좋아졌다는 뜻은 아닙니다. 어떤 사람에게는 차이가 작고 다른 사람에게는 더 클 수 있습니다. 실제로 얼마나 차이가 났는지, 추정치 주변의 불확실성이 얼마나 큰지를 함께 살피는 이유가 여기에 있습니다. 통계적으로 유의하다는 표현도 효과가 크다거나 생활에 중요하다는 말과 동일하지 않습니다.

참여자의 특성도 확인해야 합니다. 대학생을 대상으로 짧은 실험을 한 결과를 어린아이, 고령자, 다른 문화권의 사람들에게 그대로 적용하기는 어렵습니다. 연구실에서는 방해 요소를 통제할 수 있지만 생활에서는 피로, 일정, 인간관계가 동시에 작용합니다. 그렇다고 실험실 연구를 무시할 필요는 없습니다. 특정 조건에서 나타나는 작동 원리를 알아보는 데 강점이 있으며, 실제 생활로 확장하려면 추가 검증이 필요하다고 이해하면 됩니다.

개인에게 적용할 때에는 작은 규모로 점검하는 태도가 도움이 됩니다. 새로운 공부법을 도입했다면 기분이 좋아졌다는 인상만 기록하지 말고, 같은 난도의 문제를 얼마나 정확하게 풀었는지 확인합니다. 하루의 우연한 성과보다 여러 차례의 변화가 더 유용한 정보입니다. 다만 개인 기록은 생활을 조정하는 자료이지, 다른 사람에게 효과가 입증되었다고 주장할 수 있는 연구 결과는 아닙니다.

4. 재현성과 근거의 누적을 함께 살핀다

재현성은 비슷한 조건에서 연구를 다시 수행했을 때 결과가 얼마나 일관되게 나타나는지에 관한 문제입니다. Open Science Collaboration의 2015년 연구는 심리학의 여러 연구를 재현하며 원래 결과와 차이가 나타날 수 있음을 보여 주었습니다. 이것을 심리학 전체가 틀렸다는 결론으로 받아들이는 것도 성급합니다. 특정 표본의 결과와 연구 관행을 점검하고, 주장에 어느 정도 확신을 둘지 조정하는 자료로 읽어야 합니다.

한 편의 논문보다 여러 연구가 어떤 방향으로 쌓였는지를 살펴보는 것이 유용합니다. 체계적 문헌고찰은 정해진 기준에 따라 연구를 찾아 검토하고, 메타분석은 여러 연구의 결과를 통계적으로 종합합니다. 그러나 종합 연구도 포함된 연구의 질이나 선택 기준에 영향을 받습니다. 연구 수가 많다는 이유만으로 결론이 자동으로 확정되는 것은 아닙니다. 서로 다른 조건에서 결과가 얼마나 일관적인지까지 보는 편이 좋습니다.

실제로 글을 읽을 때에는 질문, 참여자, 측정 방법, 비교 대상, 결과의 크기, 한계를 한 줄씩 적어 보십시오. 마지막에는 ‘이 연구로 아직 알 수 없는 것은 무엇인가’를 덧붙입니다. 이 질문은 흥미를 줄이는 장치가 아니라 지식을 정확히 사용하는 장치입니다. 심리학을 잘 활용하는 독자는 사람을 단정하는 문장을 빨리 고르는 사람이 아니라, 근거가 말해 주는 범위 안에서 설명을 조정할 수 있는 사람입니다.

참고 자료

• OpenStax, Psychology 2e, 2.2 Approaches to Research
• OpenStax, Psychology 2e, 2.3 Analyzing Findings
• Open Science Collaboration (2015), Estimating the reproducibility of psychological science