4.6 작은 기준 전략으로 먼저 점검하기

복잡한 모델을 만들기 전에 데이터와 주문을 대조한다

지우는 월말 상위 10개 ETF를 사는 규칙으로 첫 실행을 준비한다. 그런데 특정 시기에는 6개만 거래할 수 있고, 어떤 날에는 주문에 사용하려던 가격이 결정 시각 뒤에 도착한다. 모델을 바꿔도 이 문제는 없어지지 않는다. Baseline Checkpoint(기준선 점검점)는 작은 실행으로 이런 문제를 먼저 찾는 단계다.

기준 실행 전 세 가지 점검

점검	지우가 사용하는 기록과 계산	결과가 나쁠 때
시점	가격 도착, 점수 계산, 주문, 체결, 라벨 확정 시각을 한 줄에 놓는다. 다음 시가에 산다면 정답의 시작 가격도 주문 가정과 맞춘다.	마감 뒤에 온 자료를 마감 전으로 당기지 않는다. 관측 시각이나 주문 지연을 다시 정한다.
거래 가능 범위	날짜별 후보 100개 중 필터를 통과한 수를 센다. 80개면 80%, 6개면 6%다. 초기와 후기, 누락이 많은 시기를 나눠 본다.	대상 6개로 10개를 사는 규칙은 실행할 수 없다. 필터, 누락 처리나 대상 규칙부터 검토한다.
매매 강도	상위 10개 중 다음 달에 6개가 교체되면, 가격 변화가 없고 각각 10%라고 할 때 기존 자금의 60%를 팔고 60%를 새로 산다.	매수·매도를 합한 주문액은 자금의 120%다. 이 값에 편도 비용을 곱해 대략적인 부담을 보고 주기와 진입·청산 규칙을 살핀다.

편도 15bp라면 위 교체의 예상 비용은 자금 대비 18bp다. 실제 비용은 가격 변화, 수수료 구조, 체결량에 따라 달라진다. 이 계산은 매매 강도가 너무 높아서 상세한 체결 모형을 만들기 전에도 가정을 재검토해야 하는지를 알려 준다. 세 점검을 통과해도 거래 우위가 확인된 것은 아니다.

첫 기준 실행은 한 가지씩만 고른다

1. ●정답 한 가지
   다음 시가에 진입한 뒤 20거래일 수익률을 정답으로 정한다. 정답이 끝나는 날짜로 학습 경계를 계산한다.↓
2. ●대표 특성 몇 개
   최근 가격의 방향과 흔들림을 요약하는 소수 입력만 사용한다.↓
3. ●단순 모델 하나
   입력에 가중치를 붙이는 간단한 모델을 학습하고, 조정할 설정 수를 줄인다.↓
4. ●분할 하나
   학습과 평가의 길이, 이동 간격, 라벨 제거 규칙을 고정하고 봉인 기간은 남긴다.↓
5. ●결과 확인
   기간별 점수·대상 수·회전율을 보고 같은 규칙이 여러 구간에서 작동하는지 확인한다.

특성과 모델을 늘리기 전에 전체 과정이 당시의 자료와 주문 조건으로 실행되는지 확인한다.

간단한 기준 실행이 특정 마감 가정에서만 작동하거나 주문량이 지나치다면, 먼저 결정 주기와 거래 대상, 점수를 주문으로 바꾸는 방식, 정답의 시작과 끝을 다시 살핀다. 정상적으로 작동한다면 다음 후보를 늘리되 기준 실행도 남긴다. 더 복잡한 모델이 좋아 보일 때 어떤 변경이 얼마나 기여했는지 비교할 수 있다.