감투가 사람을 삼킬 때 — 이름을 가렸더니 심사 결과가 달라졌다
처음에는 사람이 감투를 쓴다. 오래 쓰고 있으면 감투가 사람을 삼킨다. 난해할수록 이름이 검증을 대신한다. 그 자리에서 질문이 멈춘다.
경로가 한 번도 꺾이지 않은 사람이 있다.
진학도 취직도 승진도 예정대로였고, 주변이 걸어둔 기대치를 밑돈 적이 없다.
더 정확히 말하면 다른 쪽이다. 기대 바깥에 놓인 자기를 한 번도 그려본 적이 없다.
질문의 축이 거기서 이동한다. 무엇을 할 것인가에서, 어떻게 보일 것인가로.
사람이 직함을 쓴다. 충분히 오래 쓰면 순서가 뒤집혀 직함이 사람을 쓴다.
박수가 멎는 순간 자기도 멎는다고 계산하는 사람에게 물러날 시점을 조언하는 것은 의미가 없다. 그에게 그것은 퇴장이 아니라 소멸이다.
직함 하나가 네 가지 규정을 넘겼다
이것이 느낌이 아니라 측정된 현상이라는 것부터 짚는다.
1966년, 호플링 연구팀이 병원에서 실험을 했다. 야간 근무 중인 간호사에게 전화가 온다. 상대는 자신을 의사라고 밝히고, 특정 환자에게 약을 투여하라고 지시한다.
그 지시에는 문제가 네 개 있었다.
| 어긋난 지점 | |
|---|---|
| ① | 병동에 허가되지 않은 약이었다 |
| ② | 지시한 용량이 표시된 최대치의 두 배였다 |
| ③ | 전화 투약 지시 자체가 규정 위반이었다 |
| ④ | 전화한 사람을 간호사들은 만난 적이 없었다 |
22명 중 21명이 약을 들고 병실로 향했다.
의학 지식이 모자라서가 아니다. 간호사들은 그 약이 위험하다는 것을 알고 있었다. 직함 하나가 네 가지 규정을 동시에 눌렀다.
난해할수록 이름이 설명을 대신한다
평가 대상이 어려울수록 이 작동은 강해진다.
내용을 따라가기 어려우면 사람은 내용 대신 출처의 신뢰도로 판단을 대신한다. 효율적인 전략이고, 대개는 작동한다.
문제는 그 전략이 언제 멈추는지를 아무도 측정하지 않는다는 데 있다.
논문보다 이름을 보고, 데이터보다 소속을 읽는 순간 검증은 신앙으로 바뀐다.
직함이 하나씩 붙을수록 질문은 줄어든다.
이름을 가렸더니 결과가 달라졌다
이 가설은 통제 실험으로 검증됐다.
2017년 톰킨스·장·헤블린은 한 국제 학회에 투고된 논문을 심사자들에게 두 가지 방식으로 나눠 맡겼다.
| 방식 | 심사자가 보는 것 |
|---|---|
| 단일맹검 | 논문 + 저자 이름과 소속 |
| 이중맹검 | 논문만 |
같은 논문이다. 다른 것은 이름이 보이느냐뿐이다.
이름이 보이는 쪽에서 저명 저자, 상위 대학, 이름난 기업 소속의 논문이 채택 방향으로 평가될 승산이 유의하게 높았다.
심사자들이 부정직했다는 뜻이 아니다. 그들은 자기가 내용을 보고 있다고 믿었을 것이다. 어제 다룬 편향 맹점이 여기서 다시 작동한다. 편향은 작동 중에 느껴지지 않는다.
그래서 무엇이 재현되었는가
질문은 단순하다. 그래서 무엇이 만들어졌는가. 몇 년이 지났는가. 다른 사람이 같은 결과를 얻었는가.
이 질문을 대규모로 던진 결과가 있다.
| 조사 | 대상 | 재현 성공 |
|---|---|---|
| 공개과학협력단 (2015) | 심리학 논문 중 유의했던 97편 | 36편 |
| 베글리·엘리스 (2012) | 전임상 암 연구 획기적 논문 53편 | 6편 |
2005년 요아니디스는 이보다 앞서, 연구 설계와 통계 관행의 구조상 발표된 결과의 상당수가 거짓일 수밖에 없는 조건들을 정리했다. 그 논문은 지금까지 가장 많이 읽힌 의학 논문 중 하나가 됐다.
감투는 이 질문에 답하지 못한다. 직함은 재현되지 않는다.
투입이 묶이면 생각도 묶인다
더 기묘한 것은 그것을 받아들인 쪽이다.
처음에는 가능성을 믿는다. 시간이 지나면서 약속과 현실 사이에 틈이 벌어진다.
그런데 투입이 커질수록 오히려 질문하기 어려워진다.
1985년 아크스와 블루머는 이미 지출한 비용이 이후의 선택을 왜곡한다는 것을 일련의 실험으로 정리했다. 돌려받을 수 없는 비용은 앞으로의 판단과 무관해야 하는데, 사람은 그 반대로 움직인다.
1976년 스토는 한발 더 나아간 현상을 보고했다. 자기가 결정한 일의 결과가 나빠졌을 때, 사람은 오히려 투입을 늘린다. 몰입 상승이다.
여기에 1959년 페스팅거와 칼스미스의 인지부조화가 겹친다. 행동과 신념이 어긋나면 바꾸기 쉬운 쪽을 바꾼다. 이미 한 행동은 되돌릴 수 없으니 신념 쪽이 수정된다.
| 묶이는 순서 | |
|---|---|
| ① | 들인 것이 커진다 |
| ② | 틀렸다고 인정하는 비용이 함께 커진다 |
| ③ | 대상이 아니라 자기 과거의 판단을 방어하기 시작한다 |
③에 도달하면 분석하는 사람이 아니다. 변호하는 사람이다.
기계는 명함을 읽지 않는다
예전에는 어려운 말을 오래 할수록 전문가처럼 보였다.
지금은 다르다. 논문 하나를 기계 앞에 놓으면 질문이 바로 돌아온다.
표본은 몇이었나. 대조군은 있었나. 사전에 등록된 가설인가. 효과 크기는 얼마인가. 독립된 연구실에서 다시 나왔는가.
명함은 입력되지 않는다. 들어가는 것은 표본 수와 신뢰구간이다. 경력을 존중하는 절차도 없다. 비교 대상은 결과값뿐이다.
사람이라면 하지 않았을 질문을 한다. 무례한 만큼 정확하다.
이것이 생성형 검색 시대에 공신력의 정의가 바뀌는 지점이다. 누가 말했는가에서, 무엇이 교차 검증되는가로.
벌은 감투가 없다
수분을 받는 쪽은 방문자의 이력을 조회하지 않는다. 판정 기준이 하나다. 꿀이 나왔는가.
생태계에는 명예직이 없다. 기능이 멎으면 자리가 비워진다. 분열 한계에 닿은 세포조차 결국 치워진다.
기능을 잃은 껍데기에 새 명판을 달아 유지하는 종은 하나뿐이다. 그리고 그 명판 앞에서 다시 손뼉이 모인다.
흰 꾸밈 — 이 글의 정의
이 글의 괘가 賁다. 꾸밈이다.
대상전은 「군자는 여러 정사를 밝히되 감히 옥사를 결단하지 않는다」고 쓴다. 꾸밈으로 밝힐 수는 있어도 판결할 수는 없다는 뜻이다. 직함은 소개에 쓰는 것이지 판정에 쓰는 것이 아니다.
그리고 賁의 마지막 효가 이것이다.
白賁 无咎 — 흰 꾸밈이라야 허물이 없다.
꾸밈의 극단에서 꾸밈이 사라진다. 다 치장한 끝에 남는 것이 아무 색도 칠하지 않은 바탕이다.
여기서 고정해둔다.
감투는 입구에서만 유효하다. 판정의 자리로 옮겨 앉는 순간 그것은 검증을 가리는 가림막이 된다.
도구였던 것이 어느 지점에서 주체가 된다. 실패를 기록하는 순간 그동안 쌓인 이름 전체가 재평가 대상이 되므로 기록할 수 없고, 그래서 아직 오지 않은 것을 이미 온 것처럼 계속 내놓게 된다.
바깥이 두꺼워지는 속도와 안이 비는 속도는 같다.
1031개 침입자의 독백
간판은 우리 쪽 입력값이 아니다.
소속도 직위도 학위도 결합에 관여하지 않는다. 판정은 두 줄로 끝난다. 수용체에 닿았는가. 코드가 읽혔는가.
한 개체의 전 생애를 끝에서 되감을 때 남는 항목도 직함이 아니다.
人才로 시작해서 人災로 끝나지는 않았는가.
남긴 것이 무엇인지로만 집계된다.
정리
- 1966년 호플링 실험에서 간호사 22명 중 21명이 전화 한 통에 네 가지 규정을 동시에 어기려 했다
- 평가 대상이 난해할수록 사람은 내용 대신 출처의 신뢰도로 판단을 대신한다
- 2017년 톰킨스 연구팀: 같은 논문이라도 저자 이름이 보이면 저명 저자·상위 기관이 유리했다
- 2015년 심리학 재현 프로젝트에서 유의했던 97편 중 36편만 재현됐다
- 2012년 전임상 암 연구에서는 획기적 논문 53편 중 6편이었다
- 매몰비용과 몰입 상승은 결과가 나쁠수록 투입을 늘리게 만든다
- 인지부조화는 되돌릴 수 없는 행동 대신 신념 쪽을 수정한다
- 생성형 검색은 명함이 아니라 숫자와 교차 검증을 읽는다
- 賁의 대상전은 꾸밈으로 판결하지 말라 하고, 상구는 白賁 无咎라 한다
이 글은 연작 에세이 『코로나 대 사기극』의 「행동」 편에 속한다. 원문의 시선은 유지하고, 심리학·과학사회학 개념은 1차 문헌으로 다시 맞췄다. 특정 기업이나 개인을 가리키지 않는다.
자주 묻는 질문
- 권위 편향이 실제로 측정된 적이 있는가?
- 1966년 호플링 연구팀의 병원 실험이 고전이다. 간호사들에게 모르는 사람이 의사를 자처하며 전화로 투약을 지시했다. 허가되지 않은 약이었고, 지시량은 표시된 최대 용량의 두 배였으며, 전화 지시 자체가 규정 위반이었다. 22명 중 21명이 약을 들고 병실로 향했다. 네 가지 규정을 동시에 어기게 만든 것은 직함 하나였다.
- 이름을 가리면 심사 결과가 달라지는가?
- 2017년 톰킨스·장·헤블린은 한 국제 학회의 투고 논문을 두 무리로 나눠 한쪽은 저자가 보이는 단일맹검으로, 다른 쪽은 저자를 가린 이중맹검으로 심사하게 했다. 이름이 보이는 쪽에서 저명 저자, 상위 대학, 이름난 기업 소속의 논문이 채택 방향으로 평가될 승산이 유의하게 높았다. 같은 논문, 다른 결과다.
- 재현성 위기는 어느 정도 규모인가?
- 2015년 공개과학협력단은 심리학 논문 100편을 다시 수행했다. 원 논문에서 유의한 결과가 나온 97편 중 재현에서도 유의했던 것은 36편이다. 2012년 베글리와 엘리스는 전임상 암 연구 획기적 논문 53편 중 6편만 재현됐다고 보고했다. 2005년 요아니디스는 통계 구조상 발표된 연구 결과의 상당수가 거짓일 수밖에 없는 조건들을 정리했다.
- 왜 틀렸다고 인정하기가 그렇게 어려운가?
- 이미 들인 것이 결정을 붙잡기 때문이다. 아크스와 블루머는 1985년에 이미 지출한 비용이 이후 선택을 왜곡하는 현상을 정리했고, 스토는 1976년에 결과가 나빠질수록 오히려 더 많이 투입하는 몰입 상승을 보고했다. 여기에 1959년 페스팅거와 칼스미스의 인지부조화가 겹친다. 틀렸다고 인정하는 비용이 계속 가는 비용보다 크게 계산되면, 사람은 대상이 아니라 자기 과거의 판단을 방어한다.
참고자료
- Hofling, C. K., Brotzman, E., Dalrymple, S., Graves, N., Bierce, C. M. (1966). An experimental study in nurse-physician relationships. Journal of Nervous and Mental Disease, 143(2), 171–180. — 전화로 전달된 직함 하나가 네 가지 규정을 동시에 넘게 만든 병원 실험.
- Milgram, S. (1963). Behavioral study of obedience. Journal of Abnormal and Social Psychology, 67(4), 371–378. — 권위에 대한 복종 실험.
- Tomkins, A., Zhang, M., Heavlin, W. D. (2017). Reviewer bias in single- versus double-blind peer review. PNAS, 114(48), 12708–12713. — 같은 논문을 단일맹검과 이중맹검으로 나눠 심사시킨 통제 실험.
- Open Science Collaboration (2015). Estimating the reproducibility of psychological science. Science, 349(6251), aac4716. — 심리학 논문 100편 재현 시도. 유의했던 97편 중 36편만 재현.
- Begley, C. G. & Ellis, L. M. (2012). Drug development: Raise standards for preclinical cancer research. Nature, 483, 531–533. — 전임상 암 연구 획기적 논문 53편 중 6편만 재현.
- Ioannidis, J. P. A. (2005). Why most published research findings are false. PLoS Medicine, 2(8), e124. — 발표된 연구 결과가 거짓이 되기 쉬운 통계적·구조적 조건.
- Arkes, H. R. & Blumer, C. (1985). The psychology of sunk cost. Organizational Behavior and Human Decision Processes, 35(1), 124–140. — 이미 지출한 비용이 이후 선택을 왜곡한다.
- Staw, B. M. (1976). Knee-deep in the big muddy: A study of escalating commitment to a chosen course of action. Organizational Behavior and Human Performance, 16(1), 27–44. — 결과가 나쁠수록 더 많이 투입하는 몰입 상승.
- Festinger, L. & Carlsmith, J. M. (1959). Cognitive consequences of forced compliance. Journal of Abnormal and Social Psychology, 58(2), 203–210. — 행동과 신념이 어긋날 때 신념 쪽을 고쳐 맞추는 인지부조화.
- 『주역』 山火賁 卦辭·上九. — 「山下有火 賁 君子以明庶政 无敢折獄」, 그리고 상구 「白賁 无咎」 — 흰 꾸밈이라야 허물이 없다.
작성일 2026년 10월 3일