{"text_format":"2","workbook":"xlsx","n_sheets":2,"sheets":["데이터","모델"],"not_rendered":{"charts":0,"images":7,"macros":0,"external_links":0,"defined_names":0,"comments":0,"pivot_tables":0},"unopened":[],"bounds":{"document_bytes":16777216,"sheet_cells":100000,"run_cost":"one","rows_first":2000,"rows_last":500,"rows_between":2000,"halvings":0,"cell_chars":16384,"cell_head_chars":4096},"cells_cut":0,"cells_raw":0,"read":"whole","date_system":"1900"}

{"sheet":"데이터","index":0,"n_rows":21,"n_cols":6,"rows_kept":21,"cut":false,"hidden":false,"merged":[[12,0,14,0],[12,1,14,1],[18,0,19,0],[18,1,19,1],[9,0,10,0],[9,1,10,1],[0,0,1,5],[4,0,6,0],[4,1,6,1],[7,1,8,1],[7,0,8,0]]}
["AI 학습용/시험용 데이터 품질점검 항목"]
[]
[]
["항목","정의","세부항목","요구사항","지표","산식"]
["정확성","데이터가 올바른 값 또는 라벨 정보를\n가지고 있는 정도","형식적 구문\n정확성","데이터 항목에 대한 형식적 오류 여부 검증","비율\n(정확도)","X=1-(A/B)\nA: 참값을 가지지 않는 데이터 아이템 수\nB: 검사 대상 데이터 아이템 수"]
[null,null,"구조적 구문\n정확성","데이터 항목에 대한 구조적 오류 여부를 검증","비율\n(정확도)","X=1-(A/B)\nA: 참값을 가지지 않는 데이터 아이템 수\nB: 검사 대상 데이터 아이템 수"]
[null,null,"어노테이션\n의미 정확성","어노테이션의 값의 의미적 정답 여부 검증","비율\n(정확도, 정밀도, 재현율, F1-Score, IoU)","(정밀도-Precision)\nX = A / B\nA: 정답(TRUE)으로 판정된 탐지 객체 수\nB: 검사 대상 탐지 객체 수\n(재현율-Recall)\nX = A / B\nA: 정답(TRUE)으로 판정된 탐지 객체 수\nB: 실제 정답 객체 수\n(F1-Score)\nX = 2 * { (정밀도 * 재현율 ) / (정밀도 + 재현율) }\n(IoU, Intersection over Union)\n의미적 정답과 검사 좌표 간 교차 영역 / 합집합 영역"]
["완전성"," 데이터에 누락된 정보가 없는 정도","레코드 완전성","데이터 아이템이 없는 데이터 레코드 여부 검증","비율","X=1-(A/B)\nA: 값이 하나도 없는 데이터 레코드 수\nB: 검사 대상 데이터 레코드 수"]
[null,null,"데이터 유일성","데이터셋 내 동일한 데이터 아이템 값이 없는지 검증","비율\n(중복률)","X=1-(A/B)\nA: 중복 데이터 레코드 혹은 아이템 수\nB: 검사 대상 데이터 레코드 혹은 아이템 수"]
["다양성","데이터가 실환경의 다양한 요소 및 특징을 나타내는 정도","객체 특성 분포","탐지·추적 대상 클래스(예: 전차, 장갑차, 트럭, 병력, 민간차량 등) 혹은 카테고리별 비율\n통계가 고른 분포를 보이는지 확인한다.","비율(구성비 중첩률)","k: 검사 대상 항목\nN: 검사 대상 항목 수"]
[null,null,"객체 환경 분포 ","객체 주변의 환경(예: 시간, 각도, 조도 등) 통계 분포를 확인한다.","비율(구성비 중첩률)","k: 검사 대상 항목\no N: 검사 대상 항목 수"]
["이해가능성","단위, 기호 등을 통해 데이터를 명확히 해석할 수 있는 정도","데이터 정보 충분성","데이터 컬럼에 대한 단위, 기호 등의 설명이 제공되는지 검증한다.","비율(충분율)","X = A / B\nA: 메타데이터를 제공하는 데이터 컬럼 수\nB: 검사 대상 데이터 컬럼 수"]
["일관성(Consistency)","데이터가 일관된 속성 및 표현을 갖는 정도로, 준수성과 정밀성을 하위 검증항목으로\n써 포함한다.","데이터 표준 준수성","데이터 값이 표준 및 규정에 부합하는지 검증한다.","비율(준수율)","X = 1 - (A/B)\nA: 표준 및 규정에 부합하지 않는 데이터 아이템 수\nB: 검사 대상 데이터 아이템 수"]
[null,null,"관계 준수성","데이터 컬럼 간 관계 규칙의 준수 여부를 검증한다.","비율(준수율)","X = 1 - (A/B)\nA: 컬럼 간 관계 규칙을 준수하지 않는 데이터 아이템 수\nB: 검사 대상 데이터 아이템 수"]
[null,null,"데이터 값 정밀성","데이터 값이 국방 데이터 명세서에 요구되는 정밀도를 만족하는지 검증한다.","비율(준수율)","X = 1 - (A/B)\nA: 명세서 요구 정밀도를 충족하지 못하는 데이터 아이템 수\nB: 검사 대상 데이터 아이템 수"]
["신뢰성(Credibility)","데이터의 내용 사실 여부를 믿을 수 있는 정도","데이터 출처 신뢰도","데이터가 신뢰할 수 있는 출처에서 수집되었는지 검증한다.","비율(신뢰도)","X = 1 - (A/B)\nA: 신뢰할 수 있는 출처로부터 제공되지 않은 데이터 수\nB: 검사 대상 데이터 수"]
["최신성(Currentness)","데이터가 시간 관점에서 유효한 정도","데이터 생성시기 유효성","데이터가 작전 시점에서 유효한지 검증한다. 예: 기상, 지형, 전술 환경이\n변화한 경우 구 데이터는 폐기·보완해야 한다.","비율(유효율)","X = 1 - (A/B)\nA: 데이터 사용 시점에서 유효하지 않은 데이터 레코드 수\nB: 검사 대상 데이터 레코드 수"]
["효과성(Effectiveness)","데이터가 의도한 목적, 즉 AI 임무를 달성하는 데 효과적인 정도로, 데이터가 AI 임무\n수행에 관련있는 정도에 대한 특성인 관련성을 포함한다.","데이터 속성 유효성","데이터가 AI 임무 달성에 효과가 있는지 검증한다.","비율(유효율)","X = 1 - (A/B)\nA: AI 임무 달성에 효과적인 특성을 가지지 않는 데이터 수\nB: 검사 대상 데이터 수"]
["기밀성(Confidentiality)","데이터에 기밀이 유지되어야 하는 정보를 포함하지 않는 정도로, 기밀이 유지되어야\n하는 데이터가 대외적으로 공개되어서는 안 되는 ‘비밀’인 경우와, 기밀이 유지되어야\n하는 정보를 가지는 데이터에 비식별 조치가 취해진 경우 두 가지에 대한 품질검증을\n고려할 수 있음","데이터 기밀 보유성","데이터에 기밀 유지되어야 하는 정보가 포함되었는지 검증한다.","비율(기밀보유율)","X = A / B\nA: 기밀 유지되어야 하는 비밀 정보가 포함된 데이터 수\nB: 검사 대상 데이터 수"]
[null,null,"데이터 비식별성","데이터에 기밀 유지되어야 하는 정보가 비식별 처리되었는지 검증한다.","비율(비식별율)","X = 1 - (A/B)\nA: 기밀 유지되어야 하는 비밀 정보가 포함된 데이터 수\nB: 기밀 유지 처리가 필요한 데이터 수"]
["감사가능성(Auditability)","데이터에 대한 감사 대응이 가능한 정도","데이터 감사 가능성","데이터 수집·가공·변경 이력 및 접근 기록이 남아 있어 감사 대응이 가능한지\n검증한다.","비율(감사가능율)","X = 1 - (A/B)\nA: 감사 관련 메타데이터가 존재하지 않는 데이터 레코드 수\nB: 검사 대상 데이터 레코드 수"]

{"sheet":"모델","index":1,"n_rows":24,"n_cols":7,"rows_kept":24,"cut":false,"hidden":false,"merged":[[11,0,12,0],[11,1,12,1],[0,0,1,6],[4,0,7,0],[4,1,7,1],[8,0,9,0],[8,1,9,1],[13,0,15,0],[13,1,15,1],[16,0,19,0],[16,1,19,1],[21,0,22,0],[21,1,22,1]]}
["AI 모델 검증 항목"]
[]
[]
["항목","정의","세부항목","요구사항","품질검증항목","지표","산식"]
["기능 적합성"," AI솔루션이 명시된 요구사항과 목적을 만족시키는 기능을 제공하는 정도","기능 완전성","요구사항 명세서에 정의된 기능이 AI솔루션 내 누락 없이 구현되었는지 확인","기능구현성","비율\n(구현율)","X=1-(A/B)\nA: 구현이 누락된 기능 수\nB: 요구사항 명세서 등에 명세된 기능 수"]
[null,null,"기능 정확성","AI솔루션이 제공하는 기능이 정상 동작하는지 확인","기능동작성","비율\n(정상동작률)","X=1-(A/B)\nA: 동작이 부정확한 기능 수\nB: ‘기능 완전성’ 검증 대상 기능 수"]
[null,null,"기능 적절성","AI솔루션에 내장된 AI모델의 성능을 확인","객체 탐지 성능, 객체 추적 성능, 분류 성능","비율\n(Acuuracy, Map, MOTA 등)","통상적인 지표 산식에 따름"]
[null,null,"기능 적응성","AI솔루션에 내장된 AI모델이 변화하는 현장 요구에 대응 가능한지 확인","재학습 가능 여부, 모델 회복 시간, 기존 성능 망각 정도","가능여부,\nTime-to-Recover(TTR),\nForgetting\n(망각지표)","O/X\n\n\n\n\n\n(Forgetting)\nX = 원래 환경에서의 최고 성능 – 새 환경 적응 후, 원래 환경에서의 성능"]
["성능 효율성","AI솔루션이 주어진 조건에서 활용하는 자원 대비 임무를 수행하는 성능의 정도","시간 효율성","AI솔루션이 기능을 수행하는 데 소요되는 시간을 확인","평균 소요(응답)시간, 처리량","소요시간(초), FPS(프레임 수)","\n\n\n"]
[null,null,"자원 효율성","자원 사용량이 운영 한계 내에 있는지 확인","CPU/GPU/NPU 사용성, 메모리 사용성","비율\n(자원사용율)","X = (작업 소요 자원량)/(가용 자원량)"]
["호환성","폐쇄망 하 혹은 타 시스템(통신·지휘통제·센서 퓨전 등)과 함께 운용 시 상호간섭 없이 정상 동작하고, 시스템 간 정보를 교환하거나 요구 기능을 오류없이 수행하는 정도","공존성","다른 소프트웨어와 동일한 환경에서 충돌, 오류없이 정상 동작하는지 확인","공존도","비율\n(공존가능률)","X=1-(A/B)\nA: 공존성 시험 실패 건 수\nB: 공존성 시험 건 수"]
["사용성","사용자(군)가 효과적, 효율적, 만족스럽게 특정 목표를 달성할 수 있는 정도","사용자 제어\n 가능성","사용자가 AI솔루션의 기능을 의도에 맞게 제어할 수 있는지 확인","사용자 제어 성공 정도","비율\n(제어가능률)","X=A/B\nA: 사용자 제어가 성공한 시험 건 수\nB: AI 기능의 사용자 제어 대상 시험 건 수"]
[null,null,"투명성","모델의 예측 결과에 대한 근거를 사용자가 이해할 수 있도록 시각화 또는\n로그를 제공하는지 확인","예측 과정 및 결과 근거 제공성","비율\n(근거제공률)","X=A/B\nA: 예측 결과 중, 근거(히트맵, 로그, 신뢰도 등)가 함께 제공된 건 수\nB: 전체 예측 결과 건 수"]
["신뢰성","명시된 조건에서 명시된 기간 동안 시스템 구성요소가 명시된 기능을 수행하는 정도","성숙성","AI솔루션이 고장이 난 상황에서 연속 운용 시 성능 저하 없이 일관된 성능을\n유지하는지 확인","평균 고장 시간간격(MTBF; Mean Time Between Failure)","시간","X=(운영시간)/(고장횟수)"]
[null,null,"가용성","AI솔루션이 사용자가 필요할 때 접근하고 사용할 수 있는 상태를 유지하는지\n확인","가동성","비율\n(가동률)","X=(실 운영시간)/(운영 일정에 명세된 솔루션 운영시간)"]
[null,null,"오류 허용성","공격을 위한 비정상 데이터를 입력했을 때에도 AI솔루션이 안정적인 성능을\n유지하는지 확인","노이즈·왜곡 데이터 입력 조건에서의 정상 성능 유지성,\n환경변화 데이터 입력 조건에서의 정상 성능 유지성,\n적대적 데이터 입력 조건에서의 정상 성능 유지성","비율\n(정상 성능 유지율)","X=A/B\nA: 각 조건(노이즈·왜곡, 환경변화, 적대적 입력) 하 에서의 데이터 처리 성능 결과값\nB: 정상 조건에서의 데이터 처리 성능 결과값"]
["보안성","정보와 데이터를 보호하여 사용자나 시스템이 보유한 인가 유형에 따른 접근 권한을 가질 수 있는 정도","기밀성","AI솔루션이 민감 정보를 인가된 사용자만 접근할 수 있도록 보호하는지\n확인","비인가 접근 차단성","비율\n(비인가 접근 차단율)","X=A/B\nA: 비인가 접근 차단 횟수\nB: 알려진 비인가 접근 가능 방법의 수"]
[null,null,"무결성,\n부인 방지,\n책임성","AI솔루션이 민감 정보가 승인되지 않은 방식으로 수정되거나 파괴되는 것을\n방지하는지 확인","운영 이력 로그 제공 여부, 결정 주체 선정 근거 제시 여부, AI모델 파일 위변조 방지 여부,\n입출력 데이터 위변조 방지 여부,\n로그 위변조 방지 여부","가능여부","O/X"]
[null,null,"인증성","AI솔루션이 요구되는 인증 메커니즘을 충분히 제공하는지 확인","인증 매커니즘 충분성","비율\n(인증충분률)","X=A/B\nA: 솔루션이 제공하는 인증 메커니즘 수\nB: 명세된 인증 메커니즘 수"]
[null,null,"개입 가능성","사용자가 위급 상황에서 AI솔루션에 즉시 개입해 통제할 수 있는지 확인","일시 정지 및 재개 가능 여부,\n긴급 중단 모드 제공 여부","가능여부","O/X"]
["유지 보수성","의도된 유지보수자에 의해 제품 또는 시스템이 효과적이고 효율적으로 수정, 개선 또는 적용될 수 있는 정도","분석 가능성","오류 발생 시 원인 분석을 용이하게 하도록 상세한 오류 로그 및 설정 변경이력 로그를 제공하는지 확인","상세 오류 로그 제공 여부,\n설정 변경 이력 로그 제공 여부","가능여부","O/X"]
["이식성","하나의 하드웨어, 소프트웨어 또는 기타 운영/사용 환경에서 다른 환경으로 효과적이고 효율적으로 이전될 수 있는 정도","적응성","AI솔루션이 다양한 컴퓨팅 환경에서 조정되어 작동 가능한지 확인","운영체제 및 라이브러리 호환성","비율\n(호환율)","X=A/B\nA: 타 환경 하에서 오류 없이 동작한 기능 수\nB: 요구되는 테스트 기능 수"]
[null,null,"설치 가능성","AI솔루션이 다양한 컴퓨팅 환경에서 오류없이 설치될 수 있는지 확인","다양한 컴퓨팅 환경 지원 정도","비율\n(설치가능률)","X=A/B\nA: 설치 가능한 환경 수\nB: 설치 가능 여부 테스트 환경 수"]
["안전성","시스템이 작동·오작동·외부교란 상황에서도 사람(아군·비전투원), 자산(아군 장비·시설), 환경, 임무 수행에 허용 불가능한 위험을 초래하지 않도록 설계·운영·검증되는 정도","위험도 평가","미탐지, 오탐지 등 안전성 저해 상황(위험 이벤트)의 발생 가능성과 심각도를 측정","위험도 평가","위험도 점수","\n\n\n\n"]