논문을 펼치면 많은 사람이 초록이나 서론부터 읽기 시작합니다. 첫 문장부터 마지막 문장까지 차례대로 읽어야 논문을 제대로 이해할 수 있다고 생각하기 때문입니다.
하지만 논문은 소설이 아닙니다. 앞에서부터 읽어야만 결말을 이해할 수 있는 구조가 아닙니다. 오히려 연구자가 가장 힘주어 보여 주고 싶은 결과는 표와 그림 속에 압축되어 있습니다.
표에는 연구 대상의 특징과 변수 간 차이가 숫자로 정리되어 있고, 그림에는 변화의 방향과 집단 간 패턴이 시각적으로 드러납니다. 따라서 논문을 빠르게 선별하거나 핵심 결과부터 파악해야 할 때는 본문보다 표와 그림을 먼저 읽는 방법이 효과적입니다.
이 글에서는 표와 그림을 먼저 확인하여 논문의 주장, 결과, 한계까지 빠르게 파악하는 독해 순서를 단계별로 설명합니다.
빠른 답변
논문을 빠르게 읽으려면 먼저 제목과 초록에서 연구 질문을 확인한 뒤, 표와 그림의 제목·축·단위·범례를 살펴보십시오. 다음으로 연구 대상의 특성을 보여 주는 첫 번째 표, 핵심 결과가 담긴 표, 주요 패턴을 보여 주는 그림 순서로 읽습니다. 마지막에는 결과 본문과 고찰을 확인해 자신의 해석이 연구자의 설명과 일치하는지 검증해야 합니다.
왜 표와 그림부터 읽어야 할까
논문 본문에는 연구 배경, 선행연구, 방법론, 통계적 설명이 길게 이어집니다. 중요한 내용이 많지만, 처음부터 모든 문장을 같은 무게로 읽으면 정작 핵심 결과에 도달하기 전에 집중력이 소진될 수 있습니다.
반면 표와 그림은 연구 결과를 압축해 보여 줍니다.
예를 들어 한 연구에서 두 집단의 치료 효과를 비교했다면, 본문에는 연구 설계와 분석 방법이 여러 문단에 걸쳐 설명될 수 있습니다. 그러나 핵심 결과는 다음과 같은 한 줄의 표로 정리될 가능성이 큽니다.
- 치료군의 평균 변화량
- 대조군의 평균 변화량
- 두 집단의 차이
- 신뢰구간
- 통계적 유의확률
그림 역시 마찬가지입니다. 시간에 따른 변화, 집단별 격차, 변수 간 관계처럼 문장으로는 길어지는 정보를 한눈에 보여 줍니다.
표와 그림부터 읽는다는 것은 본문을 건너뛴다는 뜻이 아닙니다. 먼저 논문의 지도를 펼쳐 보고, 그다음 필요한 구간을 찾아가는 방식에 가깝습니다.
표와 그림을 보기 전에 먼저 확인할 세 가지
표와 그림부터 읽더라도 아무런 준비 없이 숫자부터 들여다보면 해석이 빗나갈 수 있습니다. 최소한 다음 세 가지는 먼저 확인해야 합니다.
1. 논문의 제목
제목에서는 연구 대상, 주요 변수, 연구 설계를 추정할 수 있습니다.
예를 들어 다음과 같은 제목이 있다고 가정해 보겠습니다.
대학생의 수면 시간과 학업 성취도의 관계
이 제목만으로도 대략적인 연구 구조를 예상할 수 있습니다.
- 연구 대상: 대학생
- 주요 변수: 수면 시간, 학업 성취도
- 연구 목적: 두 변수의 관계 확인
- 예상 분석: 상관분석 또는 회귀분석
이 상태에서 표를 보면 어떤 숫자가 중요한지 훨씬 빨리 판단할 수 있습니다.
2. 초록의 연구 목적
초록 전체를 정독할 필요는 없지만, 연구 목적을 설명하는 문장은 반드시 확인해야 합니다.
다음 표현을 중심으로 찾으면 됩니다.
- 본 연구의 목적은
- 본 연구에서는
- 이 연구는 다음을 조사하였다
- 주요 연구 질문은
- 본 연구는 효과를 평가하고자 하였다
연구 목적을 알아야 표와 그림이 어떤 질문에 답하기 위해 만들어졌는지 이해할 수 있습니다.
3. 연구 대상과 비교 구조
표를 읽기 전에는 누가 누구와 비교되는지 확인해야 합니다.
- 남성과 여성의 비교인가
- 치료군과 대조군의 비교인가
- 실험 전과 실험 후의 비교인가
- 여러 국가 또는 지역의 비교인가
- 특정 변수가 높은 집단과 낮은 집단의 비교인가
비교 구조를 모르고 숫자만 보면 큰 값과 작은 값은 발견할 수 있어도, 그 차이가 무엇을 의미하는지는 알기 어렵습니다.
논문에서 표를 읽는 가장 좋은 순서
표를 읽을 때는 왼쪽 위에서 오른쪽 아래로 무작정 내려가면 안 됩니다. 먼저 표의 설계도를 확인한 다음 숫자를 읽어야 합니다.
1단계: 표 제목을 읽는다
표 제목은 해당 표가 어떤 질문에 답하는지 알려 줍니다.
예를 들어 다음과 같은 제목이 있을 수 있습니다.
Table 1. Characteristics of Study Participants
이 표는 연구 참여자의 특성을 보여 주는 표입니다. 연구의 핵심 효과를 보여 주는 표가 아닐 가능성이 큽니다.
반면 다음과 같은 제목이라면 핵심 결과가 포함되어 있을 가능성이 높습니다.
Table 3. Association Between Sleep Duration and Academic Performance
이 표는 수면 시간과 학업 성취도의 관계를 직접 보여 줍니다.
표 제목을 통해 먼저 다음을 구분하십시오.
- 연구 대상의 특성을 설명하는 표
- 측정 도구의 신뢰도나 타당도를 보여 주는 표
- 집단 간 차이를 보여 주는 표
- 변수 간 관계를 보여 주는 표
- 회귀분석 또는 효과 추정 결과를 보여 주는 표
- 추가 분석이나 민감도 분석을 보여 주는 표
2단계: 행과 열이 무엇을 나타내는지 확인한다
표의 행과 열은 논문의 비교 구조를 결정합니다.
예를 들어 행에는 다음 항목이 들어갈 수 있습니다.
- 연령
- 성별
- 소득
- 수면 시간
- 우울 점수
- 치료 효과
열에는 다음 항목이 들어갈 수 있습니다.
- 전체 참여자
- 치료군
- 대조군
- 평균
- 표준편차
- 효과 크기
- 신뢰구간
- 유의확률
표를 읽기 전에 스스로 한 문장으로 정리해 보십시오.
이 표는 어떤 집단에서 어떤 변수를 비교하는가?
이 질문에 답할 수 없다면 아직 숫자를 읽을 준비가 되지 않은 것입니다.
3단계: 단위와 측정 기준을 확인한다
같은 숫자라도 단위에 따라 의미가 완전히 달라집니다.
- 시간인지 분인지
- 원인지 천 원인지
- 비율인지 백분율인지
- 점수의 범위가 0점부터 10점인지, 0점부터 100점인지
- 값이 높을수록 상태가 좋은지 나쁜지
특히 심리척도나 건강 관련 척도는 점수가 높을수록 긍정적인 경우도 있고, 부정적인 경우도 있습니다.
예를 들어 우울 점수는 높은 값이 더 심한 증상을 뜻할 수 있지만, 삶의 질 점수는 높은 값이 더 좋은 상태를 의미할 수 있습니다.
단위를 확인하지 않으면 숫자를 정확히 읽고도 의미는 거꾸로 해석할 수 있습니다.
4단계: 가장 큰 차이와 일관된 방향을 찾는다
처음부터 모든 숫자를 해석하려 하지 말고 눈에 띄는 패턴부터 찾습니다.
- 어느 집단의 값이 가장 큰가
- 어느 집단의 값이 가장 작은가
- 시간에 따라 값이 증가하는가
- 시간에 따라 값이 감소하는가
- 여러 분석에서도 방향이 일관되는가
- 특정 변수만 유난히 다른가
이 단계에서는 세밀한 통계 해석보다 전체적인 지형을 파악하는 것이 중요합니다.
5단계: 신뢰구간과 효과 크기를 확인한다
많은 독자가 유의확률만 보고 결과를 판단하지만, 실제로는 효과의 크기와 불확실성도 함께 봐야 합니다.
예를 들어 두 치료법의 차이가 통계적으로 유의하더라도 실제 차이가 매우 작다면 현실적인 의미는 제한적일 수 있습니다.
반대로 표본 수가 작아 통계적으로 유의하지 않더라도 효과 추정치가 크고 신뢰구간이 넓다면, 효과가 없다고 단정하기보다 불확실성이 크다고 해석해야 합니다.
가능하다면 다음 항목을 확인하십시오.
- 평균 차이
- 오즈비
- 위험비
- 상관계수
- 회귀계수
- 표준화 효과 크기
- 95% 신뢰구간
- 유의확률
핵심 질문은 단순합니다.
차이가 있는가?
여기서 한 걸음 더 나아가야 합니다.
그 차이는 얼마나 크며, 얼마나 확실한가?
6단계: 각주를 반드시 읽는다
표 아래의 각주는 작은 글씨로 쓰여 있지만, 해석을 바꾸는 중요한 정보가 담겨 있습니다.
각주에는 다음과 같은 내용이 포함될 수 있습니다.
- 통계적 유의성 표시 기준
- 약어의 뜻
- 결측값 처리 방법
- 보정에 포함된 변수
- 기준 집단
- 표본 수가 다른 이유
- 분석에서 제외된 대상
- 측정 시점
예를 들어 회귀분석 결과가 연령과 성별을 보정한 값인지, 소득과 건강 상태까지 함께 보정한 값인지에 따라 의미가 달라질 수 있습니다.
표의 숫자는 무대 위 배우이고, 각주는 무대 뒤에서 장면을 움직이는 장치에 가깝습니다. 작아 보여도 빠뜨리면 안 됩니다.
가장 먼저 읽어야 하는 표는 Table 1이다
많은 연구에서 첫 번째 표는 연구 참여자의 기본 특성을 보여 줍니다. 흔히 기초 특성표 또는 대상자 특성표라고 부릅니다.
Table 1에는 다음 내용이 포함될 수 있습니다.
- 참여자 수
- 평균 연령
- 성별 분포
- 교육 수준
- 소득 수준
- 기저 질환
- 연구 시작 시점의 점수
- 치료군과 대조군의 초기 상태
Table 1은 화려한 결론을 보여 주지는 않지만, 연구 결과를 믿을 수 있는지 판단하는 출발점입니다.
연구 대상이 누구인지 확인한다
연구 결과를 자신의 관심 대상에게 적용하려면 표본의 특성을 알아야 합니다.
예를 들어 연구 참여자가 모두 20대 대학생이라면 그 결과를 노인 인구에 그대로 적용하기 어렵습니다. 특정 병원 환자만 대상으로 했다면 지역사회 전체를 대표하지 못할 수도 있습니다.
비교 집단이 처음부터 비슷했는지 확인한다
치료군과 대조군을 비교하는 연구에서는 두 집단의 출발점이 비슷한지 살펴봐야 합니다.
치료군이 처음부터 더 건강하거나 더 젊었다면, 이후의 차이가 치료 효과 때문인지 초기 조건 때문인지 구분하기 어려워질 수 있습니다.
다만 Table 1의 유의확률만으로 집단 균형을 판단하는 것은 주의해야 합니다. 숫자상 차이가 실제로 얼마나 큰지, 연구자가 분석 과정에서 해당 차이를 보정했는지도 함께 확인해야 합니다.
표본 수가 항목마다 다른지 확인한다
표의 전체 참여자 수가 500명인데 특정 변수의 분석 대상은 420명일 수 있습니다.
이런 차이는 결측값 때문에 발생할 수 있습니다.
- 설문에 응답하지 않은 참여자
- 검사 결과가 없는 참여자
- 추적 조사에서 이탈한 참여자
- 분석 기준을 충족하지 못한 참여자
결측값이 많다면 결과가 특정 참여자 집단에 치우쳤을 가능성을 고려해야 합니다.
핵심 결과표를 찾는 방법
논문의 모든 표를 같은 비중으로 읽을 필요는 없습니다. 연구 목적에 직접 답하는 표를 찾아야 합니다.
제목과 연구 질문의 단어를 비교한다
논문의 연구 질문에 등장한 핵심 변수가 표 제목에도 반복되는지 확인하십시오.
연구 질문이 ‘운동 프로그램이 노인의 균형 능력을 향상하는가’라면 다음과 같은 표가 핵심 결과표일 가능성이 높습니다.
Effect of the Exercise Program on Balance Performance
반면 다음 표는 보조 정보일 가능성이 큽니다.
Demographic Characteristics of Participants
보정 전 모델과 보정 후 모델을 구분한다
회귀분석 표에는 Model 1, Model 2, Model 3처럼 여러 모델이 제시될 수 있습니다.
일반적으로 모델이 추가될수록 연령, 성별, 소득, 건강 상태 같은 변수를 더 많이 보정합니다.
예를 들어 다음과 같이 구성될 수 있습니다.
- Model 1: 보정하지 않은 결과
- Model 2: 연령과 성별을 보정한 결과
- Model 3: 생활 습관과 건강 상태까지 보정한 결과
보정 변수가 추가된 뒤에도 결과의 방향과 크기가 크게 변하지 않는다면 비교적 일관된 관계일 가능성이 있습니다.
반대로 보정 후 효과가 크게 줄거나 사라진다면 초기 결과가 다른 변수의 영향을 받았을 수 있습니다.
기준 집단을 확인한다
오즈비나 위험비가 제시된 표에서는 기준 집단을 반드시 확인해야 합니다.
예를 들어 수면 시간이 7시간인 집단이 기준이라면 다른 집단의 값은 모두 7시간 집단과 비교한 결과입니다.
기준 집단을 모르고 숫자만 읽으면 누구와 누구를 비교한 것인지 놓치게 됩니다.
그림을 읽는 가장 좋은 순서
그림은 한눈에 이해되는 것처럼 보이지만, 실제로는 축과 범례를 놓치면 가장 쉽게 오독할 수 있는 요소입니다.
1단계: 그림 제목과 설명문을 읽는다
그림 아래의 설명문에는 연구자가 무엇을 보여 주려고 했는지가 적혀 있습니다.
먼저 다음을 확인하십시오.
- 어떤 변수를 보여 주는가
- 어떤 집단을 비교하는가
- 어떤 기간을 다루는가
- 점, 선, 막대, 음영이 각각 무엇을 뜻하는가
2단계: 가로축과 세로축을 확인한다
그래프를 볼 때 가장 먼저 해야 할 일은 축을 읽는 것입니다.
가로축에는 주로 다음 항목이 들어갑니다.
- 시간
- 연령
- 노출 수준
- 치료 용량
- 변수의 범주
세로축에는 다음 항목이 들어갈 수 있습니다.
- 평균 점수
- 변화량
- 발생률
- 생존 확률
- 위험도
- 측정값
축을 확인한 뒤 그래프를 한 문장으로 바꿔 보십시오.
시간이 지남에 따라 치료군과 대조군의 증상 점수가 어떻게 변하는지를 보여 주는 그래프다.
이렇게 설명할 수 있어야 그림의 기본 구조를 이해한 것입니다.
3단계: 축이 0에서 시작하는지 확인한다
막대그래프의 세로축이 0에서 시작하지 않으면 작은 차이가 매우 크게 보일 수 있습니다.
예를 들어 두 집단의 점수가 각각 80점과 84점이라고 가정해 보겠습니다.
세로축이 0부터 100까지라면 차이는 작아 보입니다. 하지만 세로축이 78부터 85까지만 표시되면 막대 높이가 크게 달라 보일 수 있습니다.
축의 절단 자체가 항상 잘못은 아닙니다. 작은 변화를 자세히 보여 주기 위해 필요한 경우도 있습니다. 다만 시각적 인상과 실제 차이를 구분해야 합니다.
4단계: 범례를 확인한다
선이나 색상이 여러 개라면 각각 어떤 집단을 나타내는지 확인해야 합니다.
- 실선과 점선
- 원과 삼각형
- 밝은 막대와 어두운 막대
- 치료군과 대조군
- 남성과 여성
- 저위험군과 고위험군
범례를 반대로 읽으면 전체 해석도 반대로 뒤집힙니다.
5단계: 오차막대와 음영을 확인한다
그래프의 점이나 막대 위아래에 표시된 선은 오차막대일 수 있습니다. 선 그래프 주변의 흐린 영역은 신뢰구간을 나타낼 수 있습니다.
오차막대는 다음 중 하나일 수 있습니다.
- 표준편차
- 표준오차
- 신뢰구간
세 가지는 의미가 다르므로 그림 설명문이나 각주를 확인해야 합니다.
오차범위가 넓다면 추정의 불확실성이 크다는 뜻일 수 있습니다. 두 집단의 평균이 달라 보여도 신뢰구간이 넓다면 그 차이를 조심스럽게 해석해야 합니다.
6단계: 전체 패턴과 예외를 함께 본다
그림에서는 먼저 전체적인 흐름을 확인합니다.
- 계속 증가하는가
- 계속 감소하는가
- 중간에 방향이 바뀌는가
- 특정 시점부터 차이가 벌어지는가
- 어느 시점에서 다시 가까워지는가
- 특정 값만 흐름에서 벗어나는가
그다음 예외적인 지점을 살펴봅니다.
하나의 급격한 변화가 실제 현상인지, 표본 수 감소나 측정 오류의 영향인지 본문에서 확인해야 합니다.
그래프 모양만 보고 인과관계를 판단하면 안 된다
두 변수가 함께 움직인다고 해서 한 변수가 다른 변수의 원인이라고 단정할 수는 없습니다.
예를 들어 수면 시간이 짧은 학생일수록 학업 성취도가 낮다는 그래프가 나왔다고 가정해 보겠습니다.
이 결과만으로 수면 부족이 성적 하락의 직접적인 원인이라고 결론 내리기는 어렵습니다.
다른 가능성도 존재하기 때문입니다.
- 과도한 아르바이트 때문에 수면과 공부 시간이 모두 부족했을 수 있다.
- 스트레스가 수면과 학업 성취도에 동시에 영향을 주었을 수 있다.
- 건강 문제가 수면의 질과 학업 수행을 함께 떨어뜨렸을 수 있다.
- 학업 부담이 큰 학생이 늦게까지 공부하면서 수면 시간이 줄었을 수 있다.
관찰연구의 표와 그림은 관계를 보여 줄 수 있지만, 인과관계를 확정해 주지는 않습니다.
따라서 그래프를 본 뒤에는 연구 설계를 확인해야 합니다.
- 무작위 대조시험인가
- 코호트 연구인가
- 횡단면 연구인가
- 사례대조군 연구인가
- 단순 설문조사인가
연구 설계에 따라 주장할 수 있는 결론의 범위가 달라집니다.
표와 그림을 본 뒤 반드시 읽어야 하는 본문
표와 그림을 먼저 읽었다고 해서 독해가 끝난 것은 아닙니다. 표와 그림에서 발견한 패턴을 본문을 통해 검증해야 합니다.
결과 부분에서 확인할 내용
결과에서는 연구자가 표와 그림을 어떻게 설명하는지 확인합니다.
특히 다음 문장을 찾으십시오.
- 유의한 차이가 나타났다
- 차이가 나타나지 않았다
- 증가 또는 감소하는 경향을 보였다
- 보정 후에도 관계가 유지되었다
- 특정 하위집단에서만 효과가 나타났다
- 신뢰구간이 넓게 나타났다
- 추가 분석에서는 결과가 달라졌다
자신이 표를 보고 내린 해석과 연구자의 설명이 일치하는지 비교해야 합니다.
방법 부분에서 확인할 내용
표의 숫자를 제대로 이해하려면 분석 방법을 확인해야 합니다.
- 표본을 어떻게 모집했는가
- 변수는 어떻게 측정했는가
- 집단은 어떻게 나누었는가
- 결측값은 어떻게 처리했는가
- 어떤 통계 분석을 사용했는가
- 어떤 변수를 보정했는가
특히 표에서 결과가 인상적으로 보일수록 측정 방식과 분석 조건을 확인해야 합니다.
고찰 부분에서 확인할 내용
고찰에서는 연구자가 결과의 의미를 해석합니다.
하지만 고찰의 문장은 표에 제시된 결과보다 더 넓은 주장으로 확장될 수 있습니다. 따라서 다음을 구분해야 합니다.
- 표가 직접 보여 주는 결과
- 연구자가 제시한 해석
- 선행연구와 연결한 추론
- 향후 연구를 위한 가설
연구자의 해석이 언제나 유일한 해석은 아닙니다. 표와 그림이 실제로 뒷받침하는 범위를 넘어서는 표현이 없는지 살펴볼 필요가 있습니다.
표와 그림부터 읽는 10분 독해 순서
논문 한 편을 빠르게 선별해야 할 때는 다음 순서를 활용할 수 있습니다.
1분: 제목과 초록의 목적 확인
논문이 무엇을 연구했는지 한 문장으로 정리합니다.
이 논문은 누구를 대상으로 무엇과 무엇의 관계를 조사했다.
2분: 전체 표와 그림 훑어보기
표와 그림의 제목만 빠르게 읽습니다.
이 단계에서는 숫자를 자세히 보지 않고 논문의 결과 구성을 파악합니다.
- 참여자 특성표
- 주요 결과표
- 추가 분석표
- 시간 변화 그래프
- 하위집단 분석 그림
2분: Table 1 확인
연구 대상과 비교 집단의 특성을 확인합니다.
- 표본 수
- 연령
- 성별
- 주요 배경 변수
- 집단 간 초기 차이
- 결측값
3분: 핵심 결과표와 그림 확인
연구 질문에 직접 답하는 표와 그림을 읽습니다.
다음 네 가지를 간단히 메모합니다.
- 방향: 증가, 감소, 차이 없음
- 크기: 차이가 큰가 작은가
- 불확실성: 신뢰구간이 넓은가
- 일관성: 여러 분석에서 비슷한가
1분: 결과 본문 확인
표와 그림을 인용하는 문장을 찾아 자신의 해석과 비교합니다.
1분: 한계와 결론 확인
표본, 측정, 연구 설계와 관련된 핵심 한계를 확인한 뒤 논문을 더 읽을 가치가 있는지 판단합니다.
표와 그림을 읽을 때 자주 생기는 오류
유의확률만 확인한다
p값이 작다는 사실만으로 효과가 크거나 중요하다고 말할 수는 없습니다.
표본 수가 매우 크면 작은 차이도 통계적으로 유의하게 나타날 수 있습니다. 따라서 효과 크기와 신뢰구간을 함께 확인해야 합니다.
평균값만 비교한다
두 집단의 평균이 같더라도 분포는 다를 수 있습니다.
한 집단은 값이 평균 근처에 모여 있고, 다른 집단은 매우 넓게 퍼져 있을 수 있습니다. 평균뿐 아니라 표준편차, 사분위수, 분포 그림을 함께 확인해야 합니다.
비율과 실제 인원수를 혼동한다
50%라는 비율은 커 보이지만, 전체 표본이 4명이라면 실제 인원은 2명입니다.
비율을 볼 때는 항상 분모를 확인해야 합니다.
- 전체 인원은 몇 명인가
- 사건이 발생한 사람은 몇 명인가
- 분석 대상에서 제외된 사람은 몇 명인가
상대위험만 보고 절대위험을 보지 않는다
어떤 위험이 100% 증가했다는 표현은 매우 커 보입니다.
하지만 발생 가능성이 0.1%에서 0.2%로 증가한 것일 수도 있습니다. 상대적인 변화와 실제 발생률을 함께 봐야 합니다.
그림의 색상과 면적에 지나치게 영향을 받는다
강한 색상, 굵은 선, 큰 원은 더 중요한 결과처럼 느껴질 수 있습니다.
그러나 시각적 강조가 통계적 중요성을 의미하지는 않습니다. 색보다 축, 단위, 효과 추정치를 먼저 확인해야 합니다.
하위집단 결과를 전체 결과처럼 해석한다
연령별, 성별, 지역별 분석에서는 일부 집단에서만 유의한 결과가 나타날 수 있습니다.
하위집단 분석이 사전에 계획된 것인지, 표본 수가 충분한지, 여러 분석 중 우연히 발견된 결과는 아닌지 확인해야 합니다.
표와 그림을 읽으며 메모하는 방법
논문을 읽을 때 복잡한 문장을 그대로 옮겨 적기보다 다음 틀로 정리하면 좋습니다.
연구 질문
이 연구는 무엇을 확인하려 했는가?
표본
누구를 몇 명 조사했는가?
비교
어떤 집단 또는 조건을 비교했는가?
핵심 결과
어떤 방향의 차이나 관계가 나타났는가?
효과의 크기
차이가 실제로 얼마나 컸는가?
불확실성
신뢰구간은 넓은가, 좁은가?
예외
특정 집단이나 분석에서 결과가 달라졌는가?
한계
이 결과를 일반화하거나 인과적으로 해석하기 어려운 이유는 무엇인가?
이 방식으로 정리하면 논문의 긴 문장을 자신의 언어로 압축할 수 있습니다.
표와 그림만 읽고 논문을 판단해도 될까
논문을 선별하는 단계에서는 표와 그림만으로도 상당한 정보를 얻을 수 있습니다.
예를 들어 다음 질문에는 비교적 빠르게 답할 수 있습니다.
- 연구 대상이 내 관심 범위와 맞는가
- 주요 결과의 방향은 무엇인가
- 효과가 충분히 큰가
- 표본 수가 너무 작지는 않은가
- 결과가 여러 분석에서 일관되는가
- 더 자세히 읽을 가치가 있는가
그러나 최종적인 평가를 위해서는 본문을 읽어야 합니다.
표와 그림만으로는 다음 내용을 완전히 판단하기 어렵습니다.
- 표본 모집 과정의 편향
- 측정 도구의 적절성
- 연구자가 제외한 데이터
- 분석 방법 선택의 타당성
- 사전에 계획된 분석인지 여부
- 결과에 영향을 줄 수 있는 교란변수
- 연구자가 인정한 한계
따라서 표와 그림부터 읽는 방법은 논문을 ‘덜 읽는 기술’이 아니라 ‘읽을 곳을 정확히 찾는 기술’로 이해하는 것이 좋습니다.
분야별로 주의해서 볼 요소
의학·보건 논문
- 치료군과 대조군의 초기 특성
- 부작용과 중도 탈락
- 절대위험과 상대위험
- 신뢰구간
- 임상적으로 의미 있는 차이
- 추적 관찰 기간
사회과학 논문
- 표본의 대표성
- 척도의 신뢰도
- 회귀계수와 보정 변수
- 상관관계와 인과관계의 구분
- 하위집단 분석
- 자기보고식 측정의 한계
교육학 논문
- 실험집단과 비교집단의 사전 점수
- 사전·사후 변화량
- 교사 또는 학교 효과
- 표본 규모
- 평가 도구
- 단기간 점수 변화의 지속 가능성
공학·자연과학 논문
- 축의 단위와 범위
- 반복 실험 횟수
- 오차막대의 의미
- 대조 조건
- 실험 환경
- 이론값과 관측값의 차이
문헌고찰과 메타분석
- 연구 선택 흐름도
- 포함된 연구 수
- 효과 크기
- 연구 간 이질성
- 숲그림의 기준선
- 출판편향 가능성
- 민감도 분석
표와 그림 독해 체크리스트
논문을 읽을 때 다음 항목을 순서대로 확인해 보십시오.
- 논문의 연구 질문을 알고 있는가
- 표 제목이 무엇을 의미하는지 이해했는가
- 행과 열의 비교 구조를 확인했는가
- 숫자의 단위와 측정 범위를 확인했는가
- 연구 대상과 표본 수를 확인했는가
- 기준 집단이 무엇인지 확인했는가
- 효과의 방향과 크기를 구분했는가
- 신뢰구간과 오차범위를 확인했는가
- 표 아래 각주를 읽었는가
- 그래프의 축이 0에서 시작하는지 확인했는가
- 범례와 선의 의미를 정확히 읽었는가
- 상관관계를 인과관계로 해석하지 않았는가
- 결과 본문에서 자신의 해석을 검증했는가
- 고찰에서 연구의 한계를 확인했는가
자주 묻는 질문
표에 별표가 많으면 중요한 결과인가
별표는 주로 통계적 유의수준을 나타냅니다. 별표가 많다고 반드시 효과가 크거나 현실적으로 중요한 것은 아닙니다. 효과 크기, 신뢰구간, 실제 차이를 함께 확인해야 합니다.
표의 숫자를 모두 이해해야 논문을 읽은 것인가
모든 숫자를 외우거나 해석할 필요는 없습니다. 먼저 연구 질문에 직접 답하는 열과 행을 찾고, 핵심 결과의 방향과 크기를 파악하는 것이 중요합니다.
그래프가 직관적으로 보이면 설명문을 생략해도 되는가
생략하지 않는 것이 좋습니다. 그래프의 선, 음영, 오차막대가 무엇을 의미하는지는 그림 설명문에 적혀 있는 경우가 많습니다. 직관만으로 판단하면 분석 조건을 놓칠 수 있습니다.
Table 1에서 유의한 차이가 있으면 연구가 잘못된 것인가
반드시 그렇지는 않습니다. 관찰연구에서는 집단 간 차이가 자연스럽게 나타날 수 있고, 실험연구에서도 우연한 차이가 생길 수 있습니다. 중요한 것은 연구자가 그 차이를 분석에서 적절히 통제했는지 확인하는 것입니다.
표와 그림부터 읽는 방법은 초보자에게도 적합한가
적합합니다. 다만 처음에는 통계 용어보다 표의 제목, 비교 집단, 단위, 증가·감소 방향부터 확인하는 것이 좋습니다. 익숙해진 뒤 효과 크기와 신뢰구간까지 읽는 범위를 넓히면 됩니다.
결론: 논문의 핵심은 종종 문장보다 먼저 보인다
논문을 처음부터 끝까지 순서대로 읽는 방법은 꼼꼼하지만, 모든 논문에 적용하기에는 시간이 많이 듭니다.
특히 참고문헌을 선별하거나 연구 동향을 빠르게 파악해야 할 때는 표와 그림이 훌륭한 출발점이 됩니다.
제목과 연구 목적을 확인하고, Table 1에서 연구 대상을 살펴본 뒤, 핵심 결과표와 그림에서 변화의 방향과 효과의 크기를 읽으십시오. 그다음 결과, 방법, 고찰로 돌아가 자신의 해석을 검증하면 됩니다.
중요한 것은 표와 그림을 결론처럼 받아들이지 않는 것입니다. 표와 그림은 논문의 심장에 가깝지만, 심장이 뛰는 조건은 연구 방법과 표본, 분석 과정에 의해 결정됩니다.
좋은 논문 독해는 많은 문장을 읽는 데서 시작되지 않습니다. 어떤 숫자를 먼저 보고, 어떤 질문을 던질 것인지 아는 데서 시작됩니다.