MBTI는 정확할까요? 신뢰도와 타당도 연구가 말해주는 것

저녁 자리에서 누군가는 MBTI가 직장인을 위한 별자리 운세라고 말해요. 다른 누군가는 친엄마보다 자신을 더 잘 설명해 준다고 하죠. 두 사람 모두 똑같은 설문지를 작성했는데도요.

정확하다는 단어의 뜻을 합의하지 않은 채 논쟁을 벌이고 있는 거예요. 이 도구에 대한 연구도 같은 문제를 안고 있어요. 1960년대까지 거슬러 올라가는 방대한 연구들은 어떤 질문을 던지느냐에 따라 두 가지 다른 대답을 내놓거든요.

저는 같은 네 글자를 바탕으로 무료 테스트를 운영하고 있어서 이 문제에 이해관계가 얽혀 있어요. 그래서 앞으로 이어질 내용은 출처가 명확하고 직접 찾아볼 수 있는 자료에만 바탕을 둘게요.

한 단어에 숨어 있는 두 가지 질문

검사가 정확하다는 말은 두 가지 뜻으로 쓰일 수 있어요. 심리학자들은 일부러 이 둘을 구분해서 써요.

첫 번째는 신뢰도예요. 두 번 다 같은 답이 나오는가 하는 문제죠. 월요일에는 68kg, 화요일에는 74kg을 가리키는 체중계는 실제 몸무게가 얼마든 신뢰할 수 없어요.

두 번째는 타당도예요. 측정하겠다고 한 바로 그것을 측정하고 있는가 하는 문제죠. 누가 올라가든 매일 아침 정확히 68kg을 가리키는 체중계는 완벽하게 신뢰할 수 있지만 아무런 정보도 주지 못해요.

MBTI는 첫 번째 질문에서는 비판하는 사람들이 인정하는 것보다 더 나은 결과를 보여줘요. 두 번째 질문에서는 팬들이 인정하는 것보다 결과가 나쁘죠. 이 검사를 둘러싼 대부분의 논쟁은 한쪽이 신뢰도를 말할 때 다른 쪽은 타당도를 말하기 때문에 생겨요.

신뢰도: 척도는 유지되고 유형은 흔들려요

글자로 바꾸기 전의 네 가지 척도 자체부터 살펴볼게요. 2002년 로버트 카프라로와 메리 마거릿 카프라로는 발표된 MBTI 연구들의 신뢰도 수치를 모아 Educational and Psychological Measurement에 실었어요. 표본에 따라 약간의 차이는 있었지만 척도들이 전반적으로 높은 내적 일관성과 재검사 추정치를 보인다는 사실을 발견했죠.

2025년에는 브래들리 어퍼드 연구팀이 현행 검사지를 검토한 논문을 Journal of Counseling and Development에 실었어요. 이 논문이 내적 일관성을 수치로 보여 줬어요. 네 가지 척도의 가중 평균이 .88에서 .92 사이였죠. 1.0은 척도의 모든 질문이 서로 완벽하게 일치한다는 뜻이에요. 어떤 설문지든 이 정도면 훌륭한 수치예요. 빈틈도 하나 짚었어요. 25년 동안 나온 연구 가운데 발행사 매뉴얼 밖에서 현행 검사지의 재검사 수치를 낸 연구는 하나도 없었어요.

이제 척도를 글자로 바꿔볼게요. 1993년 데이비드 피텐저는 Journal of Career Planning and Employment에 실은 리뷰에서 재검사 연구들을 검토했어요. 몇 주 뒤 다시 검사를 받은 사람 중 많게는 절반이 다른 유형으로 나왔다고 보고했죠.

두 결과는 동시에 사실일 수 있어요. 무슨 비리가 있어서가 아니라 단순한 계산 때문이에요. 유형은 네 번의 독립적인 판정이고 네 번 모두 똑같이 나와야만 같은 유형으로 인정돼요. 이해를 돕기 위해 각 글자가 열 번 중 아홉 번 유지된다고 가정해 볼게요. 네 글자가 모두 유지될 확률은 10분의 9를 네 번 곱한 값이니 대략 3분의 2가 돼요. 개별 척도가 모두 안정적으로 보여도 3분의 1은 재검사에서 유형이 바뀐다는 뜻이에요.

그러니 3월에 ESTJ로 나왔다가 4월에 ESTP로 나온 사람이 전혀 다른 사람이 된 건 아니에요. 네 개의 척도 중 하나가 중간점을 넘었을 뿐이죠. 검사할 때마다 결과가 바뀌는 이유에서 어떤 글자가 주로 바뀌는지, 왜 중간에 가장 가까운 사람들에게 그런 일이 일어나는지 다루고 있어요.

타당도: 네 가지 실제 차원, 실제 유형은 없어요

글자가 무엇을 측정하는지 가장 꼼꼼하게 확인한 단일 연구는 1989년에 나왔어요. 로버트 매크레이와 폴 코스타는 남성 267명과 여성 201명에게 MBTI와 빅파이브 설문지를 작성하게 한 뒤 그 비교 결과를 Journal of Personality에 발표했죠.

여기서 두 가지 결과가 나왔어요. 서로 정반대 방향을 가리키고 있죠.

이 도구에 좋은 소식은 네 가지 척도가 단순한 노이즈가 아니라는 점이에요. 각각의 척도는 다른 연구자들이 다른 방법으로 독립적으로 도출해 낸 성격 차원과 일치했어요. 설문지의 원리가 무엇이든, 사람들 사이에 실제로 존재하는 네 가지 차이를 잡아내고 있다는 뜻이에요.

나쁜 소식은 이 연구가 이분법을 뒷받침할 근거를 찾지 못했다는 거예요. 내향적인 사람과 외향적인 사람이 두 종류의 사람이라면 점수는 가운데 계곡을 두고 두 개의 봉우리로 쌓여야 해요. 하지만 그렇지 않아요. 네 가지 척도 중 어느 것도 그런 모양을 보이지 않았어요. 각각은 하나의 연속적인 분포이고, 글자는 단지 중심선에서 어느 쪽에 우연히 떨어졌는지를 기록할 뿐이에요.

이 발견은 결과를 해석할 때 다른 어떤 것보다 중요해요. 받은 설명은 마치 어떤 범주에 속해 있는 것처럼 쓰여 있어요. 하지만 그 밑바탕이 되는 측정은 선 위의 한 위치를 찾아낸 것에 불과하죠. MBTI와 빅파이브 비교에서 척도별로 그 비교를 자세히 살펴볼 수 있어요.

외부 평가가 말하는 것

1991년 미국 국가연구평의회 위원회는 『In the Mind's Eye』라는 보고서에서 MBTI를 평가했어요. 당시 미 육군이 쓰던 훈련 기법과 진로 개발 기법을 살펴본 보고서였죠. 결론은 단호했죠. "현재로서는 진로 상담 프로그램에 MBTI를 사용하는 것을 정당화할 만큼 잘 설계된 연구가 충분하지 않다."

위원회는 도구의 인기에 비해 이를 뒷받침하는 연구 결과가 부족하다고 덧붙였어요. 더 나은 연구를 요구했죠. 논의가 끝났다고 선언한 건 아니에요.

피텐저는 2005년 Consulting Psychology Journal에서 이 주제를 다시 다루며 거의 같은 결론에 도달했어요. 이 도구가 직관적인 매력은 아주 크지만, 홍보하는 사람들이 내세우는 주장을 뒷받침하기에는 아직 부족할 수 있다고 적었죠.

자세히 읽어보면 두 리뷰 모두 사람들이 결과로 무엇을 하는지, 네 글자 공식에서 얼마나 많은 것을 추론해 내는지에 초점을 맞추고 있어요. 진로를 선택하고 직원을 분류하는 일은 증거보다 훨씬 앞서 나가고 있죠. 두 리뷰 어느 쪽도 설문지가 아무것도 잡아내지 못한다고 주장하지는 않아요.

아직 증명되지 않은 것들

세 가지 주장은 이 자료들이 뒷받침하는 범위를 벗어나요.

누가 일을 잘할지 예측한다는 증거는 없어요. 발행사 자체도 채용이나 선발에 이 도구를 사용해서는 안 된다고 말하는데, 이는 브릭스와 마이어스의 역사에서 다시 다루는 내용이에요.

16가지 성격 유형이 16가지 종류의 사람이라는 것도 증명되지 않았어요. 증거가 가리키는 건 편의상 반으로 자른 네 개의 연속적인 척도일 뿐이죠.

그리고 임상 도구도 아니에요. 어떤 질환을 찾아내거나 배제하도록 설계된 적이 없으며, 이 사이트에 있는 것 같은 무료 온라인 설문지는 더더욱 그렇죠.

결과를 받아들이는 방법

그래서 정확할까요? 답변한 그날 네 가지 실제 차원에서 어디쯤 위치하는지 대략적으로 읽어내는 용도로는 꽤 정확해요. 하지만 평생 속하는 범주로 본다면 정확하지 않아요.

실질적인 결론은 간단해요. 점수가 한쪽으로 크게 치우친 글자는 믿으세요. 경계에 가깝게 나온 글자는 아직 결정되지 않은 것으로 여기시고요. 설명은 네 개의 선에서 같은 쪽에 있는 전형적인 사람의 초상화로 읽고, 안 맞는 부분도 있을 거라고 예상하세요. 칭찬하는 부분은 조금 의심해 보는 게 좋은데, 그 이유는 모든 유형 설명이 다 맞는 것처럼 보이는 이유에 나와 있어요.

그렇다고 해서 이 과정이 무가치한 건 아니에요. 경계가 모호하더라도 사람들이 어떻게 다른지 설명할 공통의 어휘가 있다는 건 가치 있는 일이니까요. 모호한 경계를 단단한 벽으로 대하는 게 실수일 뿐이죠.

MBTI는 이 사이트와 아무런 관련이 없는 The Myers-Briggs Company의 상표예요. 저는 혼자서 사이트를 운영하고 있고 심리학자도 아니에요. 여기 있는 테스트는 자신을 설명해 보는 방법 하나이고, 16가지 유형 페이지는 자신과 견주어 볼 수 있는 설명이에요. 제가 주장하는 건 그게 전부예요.