에이아이 플러스 인증

에이아이 플러스 인증

AI-알고리즘 성능

분류예측

• 정확도: 인공지능 알고리즘의 학습 정확도 평가
• 정밀도: 모델의 Positive 분류 대비 실제 Positive 판정 비율 평가
• 재현율, 민감도: 실제 Positive 대비 모델의 Positive 분류 비율 평가
• F1 score: 정밀도와 재현율의 조화 평균으로 평가
• 특이도: 실제 Negative 대비 모델의 Negative 분류 비율 평가

값 예측

• 정확도: 1 - 평균 오차율 (기준값과 얼마만큼 가까운지를 나타내는지를 평가)
• 평균 오차율: 오차율의 평균 ( - 오차율 = (예측값 - 기준값) / 기준값)
• 평균 절대 오차: 오차의 평균을 기준값과 예측값의 차이가 얼마인가를 알려주는데 사용되는 척도
• 평균 제곱근 오차: 표준편차의 의미로 예상값과 기준값이 평균적으로 얼마만큼 떨어졌는가를 측정

성능 효율성

• 평균 처리시간: 알고리즘의 평균 처리시간 측정
• 평균 처리량: 알고리즘의 평균 처리량 측정
• 평균 프로세서 사용률: 알고리즘 실행 시 평균 프로세서 사용률 측정
• 평균 메모리 사용률: 알고리즘 실행 시 평균 메모리 사용률 측정

---

SW 제품 품질

일반 요구사항

• 완벽성, 정확성, 일관성, 이해성, 학습성, 운영성: 사용자 문서에 기술되어야 하는 내용에 대한 평가

기능 적합성

• 기능 범위: 명세서에 정의된 기능의 구현비율 측정
• 기능적 정확성: 구현된 기능이 명세서에 정의된 대로 정확하게 동작하는 비율 측정
• 시스템의 기능적 적합성: 사용자가 시스템을 사용하는데 필요한 적절한 기능이 동작하는 비율 측정

성능 효율성

• 응답 시간 적절성: 응답 시간이 명세서에 요구된 목표에 만족하는 비율 측정
• 소요 시간의 적절성: 소요 시간이 명세서에 요구된 목표에 만족하는 비율 측정

호환성

• 다른 제품과의 공존: 운영 환경에서 다른 소프트웨어 제품과의 공존성을 측정
• 데이터 형식 교환 가능성: 명세서를 기준으로 교환 가능한 데이터 형식의 비율 측정
• 데이터 교환 프로토콜 만족: 명세서를 기주능로 교환 가능한 프로토콜의 비율 측정
• 외부 인터페이스의 적합성: 명세서를 기준으로 지원하는 외부 인터페이스 비율 측정

사용성

• 설명 완전성: 제품이 제공하는 기능 중 사용자 문서에 명시된 기능의 비율 측정
• 사용자 지침 완성도: 제품이 제공하는 기능 중 사용자 문서 및 도움말에 사용 지침이 명시된 기능의 비율 측정
• 오류 메시지 이해 가능성: 오류가 발생한 이유와 해결 방법이 나와 있는 오류 메시지의 비율을 측정
• 운영 일관성: 사용자 인터페이스가 일관성 있게 제공되는 비율 측정
• 메시지 명확성: 명확하고 일관성 있는 메시지를 제공하는 비율 측정
• 기능의 사용자 정의 가능성: 사용자가 자신의 편의를 위해 사용자 정의할 수 있는 기능 및 작동 절차의 비율 측정
• 사용자 인터페이스 정의 가능성: 사용자가 정의할 수 있는 사용자 인터페이스 요소 비율 측정
• 모니터링 가능성: 동작중인 기능 상태를 모니터링 할 수 있는 비율 측정
• 실행 취소 가능성: 중요한 결과를 제공하는 작업 중 재확인 또는 실행 취소 옵션을 제공하는 비율 측정
• 정보의 이해 가능한 분류화: 사용자에게 익숙하고 작업에 편리한 카테고리로 구분되는 정보 비율 측정
• 외형의 일관성: 사용자 인터페이스가 일관성 있게 제공되는 비율 측정
• 입력 장치의 지원: 적절한 입력 방식을 제공하는 비율 측정
• 사용자 조작 오류 방지: 사용자 인터페이스에서 오작동을 방지할 수 있도록 제공되는 기능의 비율 측정
• 사용자 입력 오류 수정: 사용자 입력 오류에 대해 제안 된 올바른 값을 제공하는 비율 측정
• 장애인을 위한 접근성: 특정 장애가 있는 잠재적인 사용자가 시스템을 성공적으로 사용할 수 있도록 사용자 - 인터페이스를 제공하는 비율 측정
• 지원되는 언어 적절성: 명세서에 명시된 지원 언어 기준으로 실제 지원하는 언어의 비율 측정

신뢰성

• 오류 수정: 발견된 신뢰성 관련 오류 중 수정된 비율 측정
• 1 - 실패율: 시험기간에 수행한 테스트 케이스 중 성공한 비율 측정
• 실패 회피: 치명적인 오류를 피하기 위해 설계된 사용자 인터페이스 비율 측정
• 구성 요소의 중복성: 시스템 오류를 피하기 위해 중복으로 설치되는 시스템 구성 요소의 비율 측정
• 백업 데이터 완성도: 정기적으로 백업되는 데이터 항목의 비율 측정

보안성

• 액세스 제어 가능성: 기밀 데이터 항목 중 무단 액세스로부터 보호되는 비율 측정
• 데이터 암호화 정확성: 데이터 항목의 암호화/해독은 요구사항 명세에 명시된 대로 올바르게 구현된 비율 측정
• 암호화 알고리즘의 강점: 암호화 알고리즘이 올바르게 구현된 비율 측정
• 데이터 무결성: 무단 액세스로 인한 데이터 손상 또는 수정이 방지되는 비율 측정
• 내부 데이터 손상 방지: 수행 가능한 수준의 데이터 손상 방지되는 비율 측정
• 버퍼 오버플로우 방지: 소프트웨어 모듈에서 사용자 입력의 메모리 액세스 부분은 버퍼 오버플로 방지 비율 측정
• 디지털 서명 사용: 부인 방지가 필요한 경우 디지털 서명을 사용하여 처리되는 비율 측정
• 사용자 감사 추적 완전성: 시스템 또는 데이터에 대한 사용자 액세스와 관련하여 감사 추적 비율 측정
• 시스템 로그 보존성: 로그 보존이 필요한 기간 중 안정적인 저장소에 시스템 로그가 유지되는 비율 측정
• 인증 메커니즘의 충분성: 로그 보존이 필요한 기간 중 안정적인 저장소에 시스템 로그가 유지되는 비율 측정
• 인증 규칙 준수성: 필요한 인증 규칙의 비율 측정

유지보수성

• 순환복잡의 적절성: 명세서에 명시된 순환복잡도 점수가 임계값을 초과하는 모듈의 비율 측정
• 코딩 규칙 준수: 구현된 모듈 중 필요한 코딩 규칙을 준수하는 비율 측정
• 시스템 로그 완전성: 감사 추적이 필요한 작업 중 실제로 시스템에 기록되는 로그의 비율 측정
• 진단 기능 효과성: 진단 기능 중 인과 관계 분석의 요구사항을 충족하는 비율 측정
• 자율 테스트 가능성: 독립적으로 테스트 할 수 있는 비율 측정
• 재시작 가능성 테스트: 유지 보수 후 재시작 지점에서 쉽게 작동하고 테스트를 수행할 수 있는 비율 측정

이식성

• 하드웨어 환경 적응성: 명시된 하드웨어 환경 중 정상적으로 기능이 동작하는 환경의 비율 측정
• 시스템 소프트웨어 환경 적응성: 명시된 시스템 소프트웨어 환경 중 정상적으로 기능이 동작하는 환경의 비율 측정
• 설치 시간 효율성: 설치 시간의 효율성 측정
• 간편한 설치성: 사용자나 관리자가 편리하게 설치 절차를 사용자 정의로 변경 가능한 비율 측정