Translated from Japanese

점수와 함께 '어느 시점의, 며칠 동안의 데이터인지'를 명시해주셨으면 합니다.

AI가 취약점 점수를 나열하는 화면에서 수치와 함께 '기준 시점과 어떤 기간에 대한 추정치인지'를 표시해 주었으면 합니다. 숫자가 두 개 나란히 있더라도 항상 같은 질문에 대한 답이라고 볼 수는 없기 때문입니다.

NIST의 2025년 보고서에는 2025년 1월 22일에 생성된 CVE-2023-29373의 사례가 나옵니다. LEV는 0.54350, 최종 EPSS는 0.00으로 표시되어 있습니다. 이 마지막 기간은 1월 4일부터 19일간으로 조정된 값입니다.

반면, FIRST 이력 API에서 동일한 CVE의 1월 4일 기준 원래 30일 값을 확인해보면 EPSS는 0.001270000이었습니다. 확률을 소수점 둘째 자리까지 반올림하면 0.00이 되지만, 원래 값은 0이 아닙니다. 보고서의 짧은 기간에 맞춰 표시된 값과 원래의 30일 값을 구분해서 읽을 필요가 있습니다.

NIST가 설명하는 EPSS는 향후 30일 이내에 악용이 관측될 확률을, LEV는 과거에 악용이 관측되었을 가능성을 다루는 추정치입니다. 낮은 미래 예측치와 상대적으로 높은 과거 추정치를 보고 어느 한쪽이 틀렸다고 단정 짓기는 이릅니다. LEV의 0.54350 또한 해당 조직이 실제로 침해당했다는 기록이 아닙니다.

그래서 확인 화면에 다음 5가지 항목을 포함한 작은 설명란을 추가하는 것을 제안합니다. 대상 CVE, 기준일, 대상 기간, 모델 버전, 원래 값과 표시 자릿수입니다. 이 예시라면 'CVE-2023-29373 / 기준일 2025-01-04 / 향후 30일 / EPSS v3 / 0.00127 (확률을 소수점 둘째 자리까지 표시할 경우 0.00)'과 같이 남길 수 있습니다. 현재 값을 덮어써서 표시하는 것보다 나중에 판단을 검토하기 쉬울 것입니다. 이는 저의 표시 제안일 뿐, 특정 제품에 그대로 구현되어 있다는 이야기는 아닙니다.

물론 항목을 늘린다고 모든 문제가 해결되는 것은 아닙니다. 빠르게 확인해야 하는 화면이라면, 요점을 짧게 보여주고 상세 정보를 열 수 있는 형태가 좋을 것입니다. 기간을 맞춘다고 해서 모델의 추정이 옳다는 것이 증명되는 것도 아니며, 이 과거 사례를 현재 모델의 성적으로 간주할 수도 없습니다. 자동화 범위를 고민하기 전에, 먼저 점수를 오해하기 어려운 화면 구성부터 정비하고 싶습니다.

참고자료: NIST §6 (인쇄 페이지 15), FIRST 이력 값 및 데이터 안내

Loading comments…