AI에게 직접 물어보면 안 되나요?
물어봐도 됩니다. 다만 그 답이 얼마나 맞는지는 아무도 재지 않습니다. 우리가 하는 일이 그것입니다.
AI 챗봇은 "이 팀이 이길 것 같습니다"라고 답합니다. 그럴듯하지만 검증되지 않은 문장입니다.
다음에 같은 질문을 하면 다른 답이 나오고, 지난번 답이 맞았는지 틀렸는지는 아무도 기록하지 않습니다.
Scoreix도 통계 모델을 씁니다. 차이는 모델이 아니라 검증 절차에 있습니다.
① 어제 경기까지 반영합니다
AI 챗봇은 학습이 끝난 시점 이후를 모릅니다. 어젯밤 결과도, 최근 5경기 흐름도, 오늘 일정도 모른 채 답합니다.
Scoreix는 종료된 경기 결과를 계속 수집해 8,855개 팀의 실력 지수를 매일 다시 계산합니다. 지금까지 채점을 마친 예측만 4,581건입니다.
Scoreix는 종료된 경기 결과를 계속 수집해 8,855개 팀의 실력 지수를 매일 다시 계산합니다. 지금까지 채점을 마친 예측만 4,581건입니다.
② 확신도를 말로 하지 않고 숫자로 잽니다
"70% 정도 확신합니다"라는 말은 검증할 수 없습니다. 진짜로 70%인지 확인하려면
그렇게 말한 예측들을 모아 실제 적중률을 세어보는 수밖에 없습니다.
아래는 우리 모델이 스스로 매긴 확신도와, 그 구간에서 실제로 나온 적중률입니다.
| 모델이 말한 확신도 | 실제 적중률 | 표본 |
|---|---|---|
| 42.4% | 42.0% | 412경기 |
| 44.4% | 49.0% | 206경기 |
| 45.9% | 49.8% | 309경기 |
| 48.5% | 56.6% | 309경기 |
| 60.0% | 60.5% | 1,245경기 |
표본 100경기 이상인 구간만 표시합니다(그보다 적으면 우연으로 흔들립니다).
모델의 날 확신도는 실제 적중률과 다릅니다. 그래서 우리는 그 차이를 측정해 보정한 값(예상 적중률)만
화면에 씁니다. 이 표가 그 보정의 근거이며, 경기 결과가 쌓일수록 자동으로 다시 계산됩니다.
③ 킥오프 전에 못박고, 틀린 것도 남깁니다
예측은 경기가 시작되기 전에 동결됩니다. 경기가 끝나면 맞았는지 틀렸는지 자동으로 채점되고,
빗나간 예측도 지우지 않고 같은 자리에 남깁니다.
사후에 말을 바꿀 수 없게 만드는 것이 이 구조의 목적입니다.
전체 기록 보기 →
④ 자신 없는 경기는 "추천하지 않는다"고 말합니다
챗봇에 물으면 어떤 경기든 답을 줍니다. 반반인 경기에도 답을 주는 것이 문제입니다.
우리는 예상 적중률이 낮은 경기를 추천에서 제외합니다. 아래는 등급별로 실제 채점된 성적입니다.
| 등급 | 실제 적중률 | 채점 경기 |
|---|---|---|
| 🔥 프리미엄 | 81.6% | 49경기 |
| 💎 가성비 | 70.4% | 480경기 |
| 📌 AI 분석 | 55.0% | 1,825경기 |
| 🔎 근소 우세 (추천 아님) | 48.7% | 2,227경기 |
🔎 근소 우세는 추천이 아닙니다. 실제로 동전던지기에 가깝다는 것이 위 숫자로 확인돼서,
추천 픽에서 빼고 별도로 채점합니다. 좋은 성적만 골라 보여주지 않기 위한 장치입니다.
⑤ 그래서 등급을 나눕니다 — 전체 53.9%, 프리미엄 81.6%
경기를 가리지 않고 전부 예측하면 적중률은 53.9% 근처입니다. 스포츠는 원래 그렇습니다.
이 숫자를 감추지 않는 이유는, 이것이 등급을 나누는 이유 그 자체이기 때문입니다.
경기는 난이도가 제각각입니다. 전력 차가 뚜렷해 웬만하면 결과가 뒤집히지 않는 경기가 있고, 누가 이겨도 이상하지 않은 동전던지기 경기가 있습니다. 평균 하나로 뭉뚱그리면 이 둘이 같아 보입니다. 그래서 우리는 모든 경기를 똑같이 예측해 내놓는 대신, 어느 경기가 고를 만한 경기인지를 먼저 가려냅니다.
🔥 프리미엄은 확신도 최상위 구간만 남긴 것이고, 실제로 채점해 보면 81.6%(49경기)입니다. 💎 가성비는 그 다음 구간으로 70.4%(480경기), 반대로 동전던지기에 가까운 경기는 🔎 근소 우세로 따로 빼서 추천하지 않는다고 명시합니다(48.7%).
즉 등급은 마케팅용 이름표가 아니라 확신도 구간의 이름이고, 위 표처럼 실제 결과로 검증됩니다. 등급을 두는 목적은 잘 맞은 것만 골라 보여주기 위해서가 아니라, 어떤 경기가 고를 만한 경기인지 킥오프 전에 미리 말하기 위해서입니다.
경기는 난이도가 제각각입니다. 전력 차가 뚜렷해 웬만하면 결과가 뒤집히지 않는 경기가 있고, 누가 이겨도 이상하지 않은 동전던지기 경기가 있습니다. 평균 하나로 뭉뚱그리면 이 둘이 같아 보입니다. 그래서 우리는 모든 경기를 똑같이 예측해 내놓는 대신, 어느 경기가 고를 만한 경기인지를 먼저 가려냅니다.
🔥 프리미엄은 확신도 최상위 구간만 남긴 것이고, 실제로 채점해 보면 81.6%(49경기)입니다. 💎 가성비는 그 다음 구간으로 70.4%(480경기), 반대로 동전던지기에 가까운 경기는 🔎 근소 우세로 따로 빼서 추천하지 않는다고 명시합니다(48.7%).
즉 등급은 마케팅용 이름표가 아니라 확신도 구간의 이름이고, 위 표처럼 실제 결과로 검증됩니다. 등급을 두는 목적은 잘 맞은 것만 골라 보여주기 위해서가 아니라, 어떤 경기가 고를 만한 경기인지 킥오프 전에 미리 말하기 위해서입니다.
과장하지 않기 위해 함께 밝힙니다. 배당이 공개된 경기로 비교해 봤을 때 배당 시장보다 낫다고 말할 근거는 아직 없어
그런 주장은 하지 않습니다. 모든 예측은 참고용 정보이며 특정 결과나 수익을 보장하지 않습니다.
관련 링크