Logistic Regression

놓침과 오경보 중 무엇을 줄일지는 확률을 얻은 뒤 Threshold로 결정합니다.

실습 전에

01 확률 0.6이면 반드시 양성으로 판정해야 할까요?

설명

판정 기준은 오경보와 놓침의 목적에 따라 달라질 수 있습니다.

02 클래스 수가 치우치면 정확도만으로 충분할까요?

설명

다수 클래스만 맞혀도 높게 나올 수 있어 클래스별 놓침·오경보를 함께 확인합니다.

실습

실습용 노트북 미리보기실습용 노트북 다운로드

1. Logit·확률·판정

시작 조건

logit=[−2−0.500.52]\mathrm{logit}=\begin{bmatrix}-2&-0.5&0&0.5&2\end{bmatrix}, Label=[00111]\mathrm{Label}=\begin{bmatrix}0&0&1&1&1\end{bmatrix}입니다.

진행 방법

  1. Sigmoid로 확률을 구하고 Threshold=.5의 판정을 기록하세요.
  2. Threshold=.3,.5,.7에서 TP·FP·FN·TN과 Accuracy를 비교하세요.

남길 결과

기록 항목과 확인할 점
Threshold
TP
FP
FN
TN
Accuracy

확인할 점

  • 확률과 최종 Label을 같은 값이라고 쓰지 않았는가?

2. 틀리는 종류 선택

시작 조건

미탐지(FN)를 더 줄여야 하는 센서 경보 상황을 가정하고 세 Threshold 중 하나를 선택합니다.

진행 방법

  1. 앞 활동의 Threshold 0.3,0.5,0.70.3,0.5,0.7별 TP·FP·FN·TN·Accuracy 표를 재사용하세요. 같은 Logit과 Label을 사용합니다.
  2. FN이 가장 적은 Threshold 후보를 찾으세요. 동률인 후보가 있으면 FP도 비교한 뒤 사용할 값 하나를 선택하고, 선택 근거가 된 FN·FP를 함께 적으세요.
  3. 선택한 값과 Threshold 0.5의 판정을 표본별로 대조해, 어떤 표본의 경보가 달라졌는지 설명하세요.

남길 결과

기록 항목과 확인할 점
Threshold
FN
FP
선택한 값과 근거

확인할 점

  • 동률 후보가 있으면 선택 근거를 남겼는가?

3. 다른 입력에서도 확인하기

시작 조건

Class 1 비율이 10%인 가상 Label 100개에서 항상 0을 내는 모델을 비교합니다.

진행 방법

  1. Class 1이 10개, Class 0이 90개인 Label 배열과 모두 0인 예측 배열을 만드세요.
  2. 실행 전에 TP·FP·FN·TN과 Accuracy를 계산하고, 코드로 같은 값을 구해 대조하세요. Class 1 중 놓친 표본 수를 함께 기록하세요.
  3. Accuracy가 높게 나와도 미탐지를 줄인 모델이라고 할 수 있는지, 기록한 FN으로 설명하세요.

남길 결과

기록 항목과 확인할 점
실행 전 TP·FP·FN·TN
실제 TP·FP·FN·TN
Accuracy
놓친 Class 1 수·해석

확인할 점

  • 전체 Accuracy와 Class 1의 미탐지 수를 구분했는가?