ROC 분석

ROC(Receiver operating characteristic) 분석은 (임계값이 진단 검정 결과의 전체 범위에서 다양하므로) 분류 검정의 민감도 대 (1 - 특이도)를 도표화하여 모형 예측의 정확도를 평가하기 위한 유용한 방법입니다. 주어진 ROC 곡선 아래의 전체 영역 (AUC) 은 검정 변수가 관측될 때 예측이 올바른 순서가 될 확률을 나타내는 중요한 통계를 공식화합니다 (케이스 그룹에서 무작위로 선택된 한 개체와 대조군에서 무작위로 선택된 다른 개체에 대해). ROC 분석은 단일 AUC, 정밀도-재현율(PR) 곡선 관련 추론을 지원하며, 독립 집단 또는 대응 개체에서 생성되는 두 개의 ROC 곡선을 비교하는 옵션을 제공합니다.

이전 ROC 곡선 프로시저는 단일 ROC 곡선에 대한 통계적 추론을 지원합니다. 이는 새 ROC 분석 프로시저에 의해 복구될 수도 있습니다. 또한 새 ROC 분석 프로시저는 독립 집단 또는 대응 개체에서 생성된 두 개의 ROC 곡선을 비교할 수 있습니다.

PR 곡선은 정밀도 대 재현율을 도표화하고, 관측 데이터 표본이 상당히 왜곡되었을 때 더 많은 정보를 제공하는 경향이 있으며 계층 분포에서 왜곡이 심한 데이터의 경우 ROC 곡선에 대한 대안을 제공합니다.

채무를 변제할 고객과 변제하지 않을 고객으로 고객을 올바로 분류하는 것은 은행의 관심사이므로, 이러한 의사결정을 위해 특수 모형을 개발합니다. ROC 분석은 모형 예측의 정확도를 평가할 때 사용할 수 있습니다.
통계
AUC, 음수 집단, 결측값, 양의 분류, 분리점 값, 확신 강도, 양측 근사 신뢰구간, 분포, 표준오차, 독립 집단 계획, 대응 표본 계획, 비모수 가정, 이분형-음 지수 분포가정, 중심점, 절단점, PR 곡선, 단계 선택 보간법, 근사 유의확률(양측), 민감도 및 (1 - 특이도), 정밀도 및 재현율
방법
독립 집단 또는 대응 개체에서 생성된 두 ROC 곡선 아래의 영역을 비교합니다. 두 ROC 곡선을 비교하면 두 가지 비교 진단 접근법에서 정확도에 대한 더 많은 정보를 제공할 수 있습니다.

ROC 분석 데이터 고려사항

데이터
PR 곡선은 정밀도 대 재현율을 도표화하고, 관측 데이터 표본이 상당히 왜곡되었을 때 더 많은 정보를 제공하는 경향이 있습니다. 단순 선형 보간법에서는 PR 곡선의 지나친 낙관적 추정값을 실수로 생성할 수 있습니다.
가정
케이스 집단에서 무작위로 선택된 한 개체 및 대조집단에서 무작위로 선택된 다른 개체에 대해 검정 변수를 관측할 때 예측 순서가 올바를 것으로 가정합니다. 정의된 각 집단에는 유효한 관측값이 적어도 한 개 포함됩니다. 하나의 집단변수만 하나의 프로시저에 사용됩니다.

ROC 분석 구하기

이 기능을 사용하려면 Statistics Base 옵션이 필요합니다.

  1. 메뉴에서 다음을 선택합니다.

    분석 > 분류 > ROC 분석

  2. 하나 이상의 검정변수 검정 확률 변수를 선택합니다.
  3. 하나의 상태변수를 선택하십시오.
  4. 양수 상태변수의 값을 식별하십시오.
  5. 선택적으로 대응 표본 계획 옵션을 선택하거나, 단일 집단변수를 선택하십시오. 두 옵션을 모두 선택할 수는 없습니다.
    • 검정 변수에 대한 대응 표본 계획을 요청하려면 대응 표본 계획 설정을 사용하십시오. 대응 표본 계획은 상태변수와 연관된 동일한 개체에서 검정 값이 여러 개 측정된 경우 대응 표본 시나리오에서 두 ROC 곡선을 비교합니다.
      참고: 대응표본 계획 을 선택하면 옵션 대화 상자에서 그룹화 변수분포 가정 옵션을 사용할 수 없습니다.
    • 숫자 그룹화 변수를 선택하면 그룹 정의 ... 를 클릭할 수 있습니다. 검정 변수에 대한 독립 그룹 디자인을 요청하고 두 개의 값 (중심점 또는 절단점) 을 지정합니다.
  6. 선택적으로 옵션 을 클릭하여 분류, 검정 방향, 표준 오차 모수 및 결측값 설정을 정의합니다.
  7. 선택적으로 표시 를 클릭하여 도표 및 인쇄 설정 (ROC 곡선, 정밀도-재현율 곡선 및 모델 품질 설정 포함) 을 정의하십시오.
  8. 확인을 클릭하십시오.

이 프로시저는 ROC ANALYSIS 명령 구문을 붙여넣습니다.