예측 모델 만들어줘

누구나 볼 수 있는 공개 기록입니다. 읽기 전용.

사용자의 요구

예측 모델 만들어줘

대화

  1. 질문한 사람 예측 모델 만들어줘
  2. ML 엔지니어 800행과 6개 항목을 읽었습니다. 첨부한 자료와 요청을 함께 확인합니다. 데이터를 살펴보거나 궁금한 내용을 물어볼 수 있습니다. 아직 모델 학습은 시작하지 않았습니다.
  3. 질문한 사람 예측 모델 만들어줘
  4. ML 엔지니어 요청과 맞지 않는 답변이 나와 다시 확인이 필요합니다. 학습은 아직 시작하지 않았습니다.
  5. ML 엔지니어 무엇을 예측할지는 아직 말씀하지 않으셨어요. 데이터를 보면 '노쇼여부' 열을 예측하는 것으로 보여요. '노쇼여부'로 진행할까요? 다른 열을 예측하려면 그 열 이름을 알려주세요. 학습은 아직 시작하지 않았습니다.
  6. 질문한 사람 아니, 나이를 예측해줘
  7. ML 엔지니어 나이를 예측하는 모델로 진행할게요. 입력 열은 아직 지정하지 않으셔서 사용 가능한 열을 모두 쓰고, 나이는 숫자라 회귀 문제로 보고 R2 점수로 평가하겠습니다. 학습은 아직 시작하지 않았습니다.
  8. ML 엔지니어 첫 모델을 만듭니다. 여러 방법을 시험해 가장 나은 것을 고르고, 마지막에 처음 보는 데이터로 한 번 더 확인합니다.
  9. ML 엔지니어 하네스 기본 후보를 시험했습니다. 설명력(R²) -0.148. 지금까지 가장 좋습니다. 최종 확인은 마지막에 처음 보는 데이터로 합니다.
  10. ML 엔지니어 다음에 시험할 방법을 정했습니다. 하네스 기본 템플릿은 이 데이터에 맞게 조정되지 않았고 R2가 -0.148로 최대값 1.0과 큰 격차가 있습니다. 부스팅 용량과 범주형 인코딩을 조정해 개선을 시도합니다.
  11. ML 엔지니어 후보 2번을 시험했습니다. 설명력(R²) -0.654. 이전 후보가 더 좋아 그대로 둡니다. 최종 확인은 마지막에 처음 보는 데이터로 합니다.
  12. ML 엔지니어 다음에 시험할 방법을 정했습니다. t2는 원-핫 인코딩과 과도한 부스팅 용량으로 기준선 t1(-0.1478)보다 크게 나빠졌습니다(-0.6541). 같은 방향을 반복하지 않고, 범주형을 순서형으로 되돌리고 모델 용량을 줄인 새 실험을 제안합니다.
  13. ML 엔지니어 후보 3번을 시험했습니다. 설명력(R²) 0.0051. 지금까지 가장 좋습니다. 최종 확인은 마지막에 처음 보는 데이터로 합니다.
  14. ML 엔지니어 다음에 시험할 방법을 정했습니다. 현재 최고 모델(t3)의 R2가 0.0051로 최대값 1.0에 크게 못 미치고, t2의 실패로 특징 표현·용량 조정만으로는 한계가 확인되어, 아직 시도하지 않은 타깃 변환(분위수 정규화) 가설을 검증하는 실험을 제안합니다.
  15. ML 엔지니어 후보 4번을 시험했습니다. 설명력(R²) -0.0622. 이전 후보가 더 좋아 그대로 둡니다. 최종 확인은 마지막에 처음 보는 데이터로 합니다.
  16. ML 엔지니어 다음에 시험할 방법을 정했습니다. 현재 최고 모델(t3, R2 0.0051)보다 나이 예측 성능을 높이기 위해, 순서를 강제하는 순서형 인코딩 대신 빈도 기준으로 희귀 범주를 묶는 원-핫 인코딩을 시도합니다.
  17. ML 엔지니어 후보 5번을 시험했습니다. 설명력(R²) -0.0105. 이전 후보가 더 좋아 그대로 둡니다. 최종 확인은 마지막에 처음 보는 데이터로 합니다.
  18. ML 엔지니어 점수가 오르지 않아 방향을 다시 봅니다. 같은 방향을 반복하지 않고, 남은 예산으로 다른 방법을 시험할지 지금까지 가장 좋은 후보로 마칠지 정합니다.
  19. ML 엔지니어 판단 형식을 바로잡습니다. 에이전트가 낸 판단이 형식 검증을 통과하지 못해, 무엇이 틀렸는지 알려주고 한 번 다시 쓰게 합니다.
  20. ML 엔지니어 가장 좋은 후보로 마무리합니다. 에이전트가 후보 5개를 시험한 뒤 더 시험하지 않기로 했습니다. 남은 예산 9,028원 중 40원을 최종 확인에 씁니다. 지금까지 가장 좋은 후보만 처음 보는 데이터로 최종 확인합니다.
  21. ML 엔지니어 최종 확인을 마쳤습니다. 모델이 학습에 쓰지 않은 데이터에서 설명력(R²) -0.0151입니다. 아래 보관된 모델 카드에서 이 결과로 예측을 시험해 볼 수 있습니다.