결과를 믿으려면 거래가 몇 번 필요한가

작은 표본이 양쪽으로 거짓말하는 이유

동전을 스무 번 던지면 앞면이 열 번이 아니라 여섯에서 열넷 사이로 나오고, 그것이 정상입니다. 매매도 같습니다. 아무 우위가 없는 시스템도 짧은 구간에서는 어떤 결과든 냅니다. 위험한 것은 좋은 시스템에서 나쁜 결과를 보는 일이 아닙니다. 그건 다들 받아들입니다. 위험한 것은 반대입니다. 쓸모없는 규칙에서 훌륭한 결과를 보고, 그것을 믿고, 크기를 키우기 시작하는 것입니다.

우위가 전혀 없는 시스템이 보여 주는 것 (참값 50%)

첫 줄이 성배를 찾았다는 이야기의 대부분을 설명합니다. 스무 번은 데이트레이딩 일주일이고, 그 일주일 동안 아무 우위 없는 시스템이 태연히 승률 70%를 냅니다. 사람은 결론을 내리고 크기를 키우며, 그다음 표본이 늘어나면 결과가 진실 쪽으로 미끄러집니다. 마지막 줄도 보세요. 사백 번을 해도 흩어짐은 여전히 ±5퍼센트포인트입니다.

우위를 증명하려면 몇 번이 필요한가

리스크 과정에서는 기대값의 거친 추정에 쉰 번이면 충분하다고 했고, 그것은 맞습니다. 거기서는 플러스가 있는지, 규모가 어느 정도인지가 문제였습니다. 하지만 특정한 우위를 증명하는 것은 다른 일이고 훨씬 비쌉니다. 신뢰도 95%로 계산하면, 승률 60%를 50%와 구별하려면 258번이 필요합니다. 55%와 50%를 구별하려면 1046번. 53%와 50%를 구별하려면 2912번.

증명의 값

핵심 결론: 작은 우위는 증명 불가능합니다

이 표에서 아이디어를 찾는 방식 전체를 바꾸는 사실이 나옵니다. 3퍼센트포인트의 우위는 존재할 수 있지만, 트레이더의 일생 안에 검증할 수 없습니다. 그러니 설령 존재하더라도 그 위에 결정을 세울 수 없습니다. 여기서 실무적 결론이 나옵니다. 승률에서의 자잘한 우위가 아니라, 수백 번에서 보이는 뚜렷한 효과나 이기는 크기에서의 우위를 찾아야 합니다. 뒤쪽이 더 빨리 검증됩니다. 평균 이익 2R과 1R의 차이는 쉰 번이면 보이지만, 53%와 50%의 차이는 천 번에도 보이지 않습니다.

이력을 정직하게 나누는 법

표본은 작을 수도 있지만 더러울 수도 있습니다. 아이디어를 찾은 바로 그 구간에서 검증한다면요. 요령은 간단하고 잘 통합니다. 가진 이력을 크기가 다른 두 부분으로 나누세요. 첫 부분, 이를테면 3분의 2에서 찾고 조정합니다. 남은 3분의 1은 규칙이 최종적으로 확정될 때까지 아예 열지 않습니다. 그다음 거기서 한 번 돌리고, 결과를 있는 그대로 받아들입니다. 실패한 뒤 다시 조정으로 돌아가 같은 3분의 1에서 또 검증했다면, 그 부분은 더 이상 깨끗하지 않습니다. 이제 거기에 맞춰 매개변수를 고르고 있는 것이고, 손대지 않은 새 구간이 필요합니다.