동료 심사, 쉽게 풀어 보기
누가 논문을 심사하는지, 심사 결과가 무슨 뜻인지, 그리고 불채택이 왜 아주 흔한 일인지.
동료 심사, 쉽게 풀어 보기
동료 심사는 초안을 출판물로 바꿔 주는 품질 관리 단계입니다. 투고처가 논문을 채택하기 전에 독립적인 전문가 몇 명이 논문을 읽고 주장이 타당한지 판단합니다. 느리고, 불완전하고, 때로는 화가 나지만, 과학 기록을 정직하게 유지하기 위해 지금까지 찾아낸 것 중에서는 여전히 가장 좋은 체계입니다.
등장인물
| 역할 | 하는 일 |
|---|---|
| 심사자(리뷰어, 레퍼리) | 논문을 꼼꼼히 읽고 비평을 쓰고 심사 결과를 추천합니다 |
| 프로그램 위원회(PC) | 학술대회의 심사자 집단이며, “PC 위원”은 심사자를 뜻합니다 |
| 에어리어 체어(AC) / 메타 심사자 | 몇 편의 논문을 총괄하고 심사 의견을 종합해 추천을 내립니다 |
| 편집자 | 학술지에서 이에 해당하는 역할로, 심사자를 정하고 최종 결정을 내립니다 |
보통 논문 한 편당 심사자 2~4명이 읽습니다. 이들은 대개 같은 세부 분야의 연구자인 무급 자원봉사자이며, 저녁과 주말에 심사합니다. 이 점이 심사 품질이 들쭉날쭉한 이유를 상당 부분 설명해 줍니다.
블라인드, 그리고 얼마나 블라인드인가
- 단일 블라인드: 심사자는 여러분이 누구인지 알지만, 여러분은 심사자가 누구인지 모릅니다.
- 이중 블라인드: 양쪽 모두 상대를 모릅니다. 저자 이름을 뺀 익명화된 논문을 제출합니다.
이중 블라인드는 대부분의 컴퓨터 과학 학술대회에서 표준이며, 유명한 이름과 기관에 대한 편향을 줄이는 것을 목표로 합니다. 제출하기 전에 투고처의 규정을 확인하세요. PDF에 이름이 실수로 들어가면 심사도 받기 전에 반려(desk reject)될 수 있습니다.
심사 결과
학술지는 보통 다음 네 가지 결과 중 하나로 답합니다.
| 심사 결과 | 풀이 |
|---|---|
| 채택(Accept) | 처음부터 나오는 경우는 드뭅니다. 마음껏 축하하세요. |
| 소폭 수정(Minor revision) | 작은 부분을 고치세요. 거의 통과입니다 |
| 대폭 수정(Major revision) | 실질적인 작업이 필요하지만 문은 열려 있습니다 |
| 불채택(Reject) | 아니오, 하지만 대개 쓸 만한 이유가 함께 옵니다 |
학술대회는 대개 이를 채택 또는 불채택으로 압축하고, 가끔 “조건부 채택(conditional accept)”을 둡니다. 심사에는 흔히 1~10점 평가와 확신도 평가 같은 점수가 함께 옵니다. 점수는 논의의 기준점이 되지만 결정을 내리지는 않습니다. 논문을 적극 옹호하는 심사자 한 명이 소수점 평균보다 더 큰 영향을 미칩니다.
반박문을 한 문단으로
많은 학술대회는 최종 결정 전에 저자가 심사 의견에 답할 수 있는 짧은 기간을 주며, 이를 반박문(rebuttal) 또는 저자 응답이라고 합니다. 몇백 단어 안에서 오해를 바로잡고, 직접적인 질문에 답하고, 논문에 이미 있는 근거를 가리킬 수 있습니다. 경계선상의 결정을 뒤집을 수도 있으며, 좋은 반박문을 쓰는 것은 하나의 기술입니다. 이는 반박과 수정에서 다룹니다.
불채택은 재난이 아니라 기본값입니다
상위 투고처는 제출작의 약 15~25퍼센트를 채택합니다. 뒤집어 보면, 좋은 투고처에 낸 좋은 논문의 전형적인 결과는 불채택입니다. 들어 본 적 있는 유명한 논문의 거의 전부가 어딘가에서 먼저 거절당했습니다. 현실적인 대응은 하루 뒤 감정이 가라앉은 상태에서 심사 의견을 읽고, 고칠 수 있는 약점을 모두 뽑아내, 더 강해진 논문으로 다시 제출하는 것입니다.
이것이 글쓰기에 의미하는 바
심사자는 지친 자원봉사자이고 빠르게 읽습니다. 명확한 구조, 정직한 주장, 깔끔한 조판은 모두 호감을 얻어 줍니다. 표준적인 절 구성을 아는 것도 도움이 되니 논문 한 편 둘러보기를 보세요. 그리고 첫 문서처럼 정돈된 LaTeX 환경은 서식이 심사자가 눈살을 찌푸리는 이유가 되는 일을 막아 줍니다. 초안에서 심사 결과를 거쳐 camera-ready에 이르는 전체 경로는 첫 논문 로드맵에 정리되어 있습니다.