[ISTQB CFTL 2018]3. 정적 테스팅

3.1 정적 테스팅 기초

FL3.1.1 (K1) 다양한 정적 테스팅 기법으로 확인할 수 있는 소프트웨어 작업 산출물 유형을 인식할 수 있다.

FL3.1.2 (K2) 정적 테스팅의 가치를 예제를 통해 설명할 수 있다.

Q) 다음 중 정적 테스팅에 대해 가장 잘 설명한 두 가지는?

A. 결함을 발견하고 제거하는 경제적인 방법이다. (정답)

B. 동적 테스팅의 부담을 줄여준다.

C. 사용자 요구사항에 대한 초기 확인이다. (정답)

D. 수명주기 초기에 런타임 문제를 찾을 수 있게 해준다.

E. 안전 최우선(safety-critical) 시스템을 테스트할 때는 동적 테스팅으로 결함을 더 잘 찾아내기 때문에 정적 테스팅은 덜 중요하다.

Q) 다음 중 정적 테스팅의 가치를 가장 잘 설명한 것은?

A. 리뷰를 도입함으로써, 명세의 품질이 좋아지고 개발 및 테스팅에 필요한 시간이 증가했다.

B. 정적 테스팅을 사용한다는 것은 수명주기 이후에 쉽게 결함을 제거할 수 있기 때문에 더 나은 제어와 경제적인 결함 관리를 할 수 있다는 것을 의미한다.

C. 정적 분석을 사용하여 누락된 요구사항을 줄이고 테스터와 개발자 간 의사소통이 향상되었다.

D. 정적 분석을 사용한 이후로 동적 테스팅만 수행했을 때는 발견하지 못했던 코딩 결함을 찾을 수 있었다. (정답)

FL3.1.3 (K2) 정적 기법과 동적 기법의 차이를 테스트 목적, 식별해야 하는 대상 결함 유형, 소프트웨어 수명주기에서의 역할 등을 고려해 설명할 수 있다.

테스트하고 있는 소프트웨어의 실행이 필요한 동적 테스팅과는 달리 정적 테스팅은 작업 산출물을 수동으로 검사(예: 리뷰)하거나 코드나 다른 작업 산출물을 도구를 기반으로 평가(tool-driven evaluation 예: 정적 분석)하는 방법에 의존한다. 두 가지 유형의 정적 테스팅 모두 테스트 중인 코드 또는 작업 산출물을 실제로 실행하지 않고 평가한다.

정적 분석은 안전 최우선 컴퓨터 시스템(예: 항공, 의료, 원자력 소프트웨어)에서 중요하지만 다른 영역에서도 점차 그 중요성이 일반화되고 있다. 예를 들어, 보안 테스팅에서 정적 분석은 중요한 부분이며, 또한 애자일 개발, 지속적 인도(continuous delivery), 지속적 배포(continuous deployment) 등과 같은 자동화된 빌드나 배포 시스템(delivery systems)에 통합되는 경우가 많다.

3.1.1 정적 분석으로 검토할 수 있는 작업 산출물

대부분의 작업 산출물은 정적 테스팅(리뷰나 정적 분석)으로 검사 할 수 있다.

• 비즈니스 요구사항, 기능 요구사항, 보안 요구사항과 같은 명세
• 에픽(epic), 사용자 스토리, 인수 기준
• 아키텍처 및 설계 명세
• 코드
• 테스트 계획, 테스트 케이스, 테스트 프로시저, 자동화 테스트 스크립트와 같은 테스트웨어
• 사용자 가이드
• 웹 페이지
• 계약, 프로젝트 계획, 일정, 추정치
• 액티비티 다이어그램과 같은 모델 기반 테스팅에 사용되는 모델

정적 분석은 적절한 정적 분석 도구가 존재하는 공식 구조를 사용하는 작업 산출물(일반적으로 코드 또는 모델)에 효율적으로 적용할 수 있다. 정적 분석은 요구사항과 같은 자연어로 작성된 작업 산출물을 평가하는 도구로 적용할 수도 있다 (예: 맞춤법, 문법 및 가독성 검사).

3.1.2 정적 테스팅의 효과

정적 테스팅 기법은 여러 이점이 있다. 정적 테스팅을 소프트웨어 개발 수명주기 초반에 적용하면 동적 테스팅을 실행하기 전 결함의 조기 발견을 가능하게 한다 (예: 요구사항이나 설계 명세 리뷰, 제품 백로그 재 정의(refinement) 등). 개발 초기에 발견한 결함을 제거하는 데 드는 비용은 수명주기 후반에 발견한 결함을 제거하는 비용에 비해 훨씬 적게 들며, 특히 소프트웨어를 배포하고 실제 사용하는 단계와 비교하면 더 현저하다. 정적 테스팅 기법을 사용해 결함을 발견하고 바로 수정하는 것이 동적 테스팅으로 결함을 발견하고 수정하는 것에 비해 적은 비용이 드는 경우가 대부분이다. 특히, 작업 산출물의 업데이트와 확인, 리그레션 테스팅 수행과 관련된 추가 비용을 고려하면 이는 더 명확해진다.

그 외 정적 테스팅의 효과에는 다음과 같은 것들이 있다:

• 동적 테스트 실행 전에 보다 효율적으로 결함을 발견하고 수정
• 동적 테스팅으로 발견이 쉽지 않은 결함 식별
• 요구사항 불일치, 애매 모호함, 모순, 누락, 부정확, 중복 등을 식별해서 설계나 코딩의 결함 예방
• 개발 생산성 향상 (예: 설계 개선, 향상된 코드 유지보수성)
• 개발 비용 및 기간 단축
• 테스팅 비용 및 기간 단축
• 수명주기 후반 또는 출시 후 운영 과정에서 발견되는 장애 감소로 소프트웨어 수명주기 전반에 걸친 총 품질 비용 감소
• 리뷰에 참여하는 팀원 간의 의사소통 개선

3.1.3 정적 테스팅과 동적 테스팅의 차이

정적 테스팅과 동적 테스팅의 공통 목적(1.1.1절 참조)은 작업 산출물의 품질을 평가하고 가능한 빨리 결함을 식별하는 것이다. 정적 테스팅과 동적 테스팅은 발견하는 유형의 결함이 서로 달라 상호 보완적이다.
가장 중요한 차이점 중 하나는 정적 테스팅은 소프트웨어를 실행해 결함으로 발생하는 장애를 찾아내기보다는 작업 산출물에서 직접 결함을 발견한다는 것이다. 결함은 장애를 일으키지 않고 작업 산출물에 상당히 오랜 기간 숨어 있을 수 있다. 결함이 존재하는 경로가 드물게 실행되거나 접근하기 어려워 이런 경로에 도달하는 동적 테스트를 구축하고 실행하는 것은 쉽지 않다. 반면 정적 테스팅은 훨씬 적은 노력으로 결함을 발견할 수 있다.
또 다른 차이점은 정적 테스팅은 작업 산출물의 일관성과 내부 품질을 향상하기 위해 사용하는 반면, 동적 테스트는 일반적으로 외부에 보이는 동작에 초점을 맞추고 있다는 점이다.
동적 테스팅과 비교해 정적 테스팅으로 발견하기 쉽고 비용도 적게 들어가는 일반적인 결함 유형은 다음과 같다:

• 요구사항 결함 (예: 불일치, 모호함, 모순, 누락, 부정확, 중복 등)
• 설계 결함 (예: 비효율적인 알고리즘(algorithm)이나 데이터베이스 구조, 높은 결합도(coupling), 낮은 응집도(cohesion)) 등
• 코딩 결함 (예: 정의되지 않은 값이 있는 변수, 선언했으나 사용하지 않는 변수, 도달할 수 없는 코드, 중복 코드 등)
• 표준과의 차이 (예: 코딩 표준 미준수 등)
• 잘못된 인터페이스 명세 (예를 들어, 호출하는 시스템과 호출되는 시스템이 서로 다른 측정 단위 사용)
• 보안 취약점 (예를 들어, 버퍼 오버플로우에 대한 취약성)
• 테스트 베이시스 추적성이나 불충분한 커버리지 또는 부정확성 (예를 들어, 특정 인수 조건에 대한 테스트 누락)

또한 대부분의 유지보수성 결함은 정적 테스팅으로만 발견할 수 있다 (예: 잘못된 모듈화, 낮은 컴포넌트 재사용성, 새로운 결함을 발생시키지 않고는 분석하거나 수정하기 어려운 코드 등).

 

3.2 리뷰 프로세스

FL3.2.1 (K2) 작업 산출물 리뷰 프로세스 활동을 요약할 수 있다.

Q) 다음 중 공식 리뷰의 주요 활동을 설명한 것은?

A. 리뷰 착수, 역추적, 개별 리뷰, 이슈 논의 및 분석 재작업, 후속 조치

B. 계획, 개별 리뷰, 이슈 논의 및 분석, 재작업, 마감, 후속 조치

C. 계획, 리뷰 착수, 개별 리뷰, 이슈 논의 및 분석, 수정 및 보고 (정답)

D. 개별 리뷰, 이슈 논의 및 분석, 재작업, 마감, 후속 조치, 근본 원인 분석

Q) 다음 중 작업 산출물의 리뷰 프로세스의 주요 활동의 순서를 가장 잘 나열한 것은?

A. 리뷰 착수 - 리뷰어 선정 - 개별 리뷰 - 이슈 논의 및 분석 - 재작업

B. 계획 및 준비 - 개괄 미팅 - 개별 리뷰 - 수정 - 보고

C. 준비 - 이슈 발견 - 이슈 논의 및 분석 - 재작업 - 보고

D. 계획 - 리뷰 착수 - 개별 리뷰 - 이슈 논의 및 분석 - 결함 수정 및 보고 (정답)

FL3.2.2 (K1) 공식 리뷰의 다양한 역할과 책임을 인식할 수 있다.

Q) 다음 중 공식 리뷰의 역할 담당자들로 구성된 것은?

A. 개발자, 중재자, 리뷰 리더, 리뷰어, 테스터

B. 작성자, 중재자, 관리자, 리뷰어, 개발자

C. 작성자, 관리자, 리뷰 리더, 리뷰어, 설계자

D. 작성자, 중재자, 리뷰 리더, 리뷰어, 서기 (정답)

Q) 다음 중 공식 리뷰의 역할과 책임을 바르게 연결한 것은?

A. 관리자 - 리뷰 수행 여부를 결정한다. (정답)

B. 리뷰 리더 - 리뷰 회의가 효과적으로 진행되도록 한다.

C. 서기 - 리뷰 후 작업 산출물의 결함을 수정한다.

D. 중재자 - 비용 효율성을 지속적으로 모니터링한다.

FL3.2.3 (K2) 서로 다른 리뷰 유형(비공식 리뷰, 워크쓰루, 기술 리뷰, 인스펙션)의 차이를 설명할 수 있다.

Q) 다음 중 규정과 체크리스트에 기반한 공식 프로세스를 따라야 하는 리뷰 수행 시 선택할 수 있는 리뷰 유형으로 가장 적합한 것은?

A. 비공식 리뷰 (Informal Review)

B. 기술적 리뷰 (Technical Review)

C. 인스펙션 (Inspection) (정답)

D. 워크쓰루 (Walkthrough)

Q) 당신의 부서에서 다음과 같이 리뷰를 하고 있다:

• 서기 역할을 하는 사람이 있다.
• 리뷰 목적은 잠재적 결함을 찾는 것이다.
• 리뷰 미팅은 저자가 주도한다.
• 리뷰어들은 개별 리뷰를 통해 잠재 결함을 발견한다.
• 리뷰 보고서를 작성한다.

위의 내용으로 볼 때 다음 중 어떤 유형의 리뷰를 수행한 것인가?

A. 비공식 리뷰

B. 워크쓰루(정답)

C. 기술 리뷰

D. 인스펙션

FL3.2.4 (K3) 작업 산출물에서 리뷰 기법을 적용해 결함을 식별할 수 있다.

Q) 신문 구독 시스템의 설계를 리뷰하고 있다.

예상되는 시스템 사용자는 다음과 같다:

- 구독자

- 기술 지원팀

- 결제 부서

- 데이터베이스 관리자

각 사용자는 별도의 로그인 인터페이스를 통해 시스템에 유형별 로그를 남긴다 (예: 구독자는 웹페이지로 로그인하고 기술 지원자는 애플리케이션을 통해 로그인한다).

각 리뷰어들은 이 시스템의 로그인 절차에 대해 각 사용자의 관점에서 리뷰를 요청 받았다.

다음 중 모든 리뷰어들이 공통적으로 언급했을 것으로 보이는 리뷰 의견은?

A. 웹의 로그인 페이지 상에 너무 많은 광고가 자리를 차지하고 있어 “비밀번호 분실” 링크를 찾기 어렵다.

B. 결제 정보에 접근하기 위한 로그인은 추가적인 로그인 없이 구독자의 정보에 접근할 수 있어야 한다.

C. 데이터베이스 애플리케이션에 로그인한 후, 로그아웃 기능이 없다.

D. 사용자 이름 입력 전에 비밀번호를 요청하고 있어 로그인 절차의 직관성이 떨어진다.(정답)

Q) 당신은 도서관 시스템 요구사항 문서에서 발췌한 다음 내용에 대해 체크리스트 기반 리뷰에 참여하기로 했다:

도서관 사서가 할 수 있는 일:

1. 신규 대여회원 등록

2. 대여회원이 반납한 책 처리

3. 대여회원의 연체료 수령

4. ISBN, 저자, 책 제목으로 시스템에 신규 도서 추가

5. 시스템에서 도서 삭제

6. 시스템은 5초 이내로 응답해야 함

대여회원이 할 수 있는 일:

7. 1회에 3권까지 도서 대여

8. 대여/반납한 도서 이력 보기

9. 3주 이내로 반납하지 못한 도서에 대해 연체료 납부

10. 시스템은 3초 이내로 응답해야 함

11. 최대 4주까지 무료로 도서 대여

12. (도서가 대여 중인 경우) 도서 예약

모든 사용자(사서 및 대여회원)가 할 수 있는 일:

13. ISBN, 저자, 책 제목으로 도서 검색

14. 시스템 카탈로그 둘러 보기

15. 시스템은 사용자 요청에 3초 이내로 응답해야 함

16. 사용자 인터페이스는 사용이 쉬어야 함

당신은 개별 요구사항 간 일관성에 문제가 없는지(예: 요구사항 간 충돌) 체크리스트에 기반해 요구사항을 리뷰하기로 했다.

다음 중 요구사항 간 일관성이 떨어지는 항목끼리 맞게 묶은 것은?

A. 6-10, 6-15, 7-12

B. 6-15, 9-11 (정답)

C. 6-10, 6-15, 9-11

D. 6-15, 7-12

FL3.2.5 (K2) 리뷰 성공 요소를 설명할 수 있다.

리뷰 유형은 공식 리뷰에서 비공식 리뷰까지 다양하다. 비공식 리뷰의 특징은 정의된 프로세스를 따르지 않고, 리뷰 결과를 공식적으로 문서화하여 제공하지 않는다는 점이다. 공식 리뷰의 특징은 팀 참여, 문서화된 리뷰 결과, 문서화된 리뷰 진행 절차 등이 있다. 리뷰 프로세스의 형식은 소프트웨어 개발 수명주기 모델, 개발 프로세스의 성숙도, 리뷰 대상 작업 산출물의 복잡도, 다양한 법적 또는 규정 요구사항이나 감사 추정의 필요성과 같은 요소와 관련이 있다.
리뷰의 중점은 합의된 리뷰 목적에 따라 결정된다 (예: 결함 발견, 이해 향상, 테스터와 신규 팀원 등과 같은 참여자에 대한 교육 또는 토론과 합의에 의한 결정).

3.2.1 작업 산출물 리뷰 프로세스

리뷰 프로세스의 주요 활동은 다음과 같다:

계획

• 리뷰 목적, 리뷰할 문서가 전체인지 특정 부분인지, 평가할 품질 특성 등을 포함하는 범위의 정의
• 노력과 기간 추정
• 리뷰 유형에 따라 결정되는 역할, 활동, 체크리스트와 같은 리뷰 특성의 식별
• 리뷰에 참석할 인원을 선정하고 역할 할당
• 인스펙션과 같은 보다 공식적인 리뷰의 경우에는 시작 및 종료 조건 정의
• (공식적인 리뷰 유형의 경우) 시작 조건이 충족되는지 확인 

리뷰 착수 (Initiate review)

• (물리적 또는 전자적 수단에 의한) 작업 산출물과 이슈 기록(issue log) 양식, 체크리스트, 관련된 작업 산출물과 같은 기타 자료 배포
• 참가자에게 범위, 목적, 프로세스, 역할, 작업 산출물을 설명
• 참가자가 리뷰에 대해 가질 수 있는 여러 질문에 답변

개별 리뷰 (개별 준비)

• 작업 산출물 전체 혹은 부분 리뷰
• 잠재 결함, 권고사항, 질문 기록

이슈 논의 및 분석 (Issue communication and analysis)

• 식별한 잠재 결함 전달 (예: 리뷰 회의 중 전달)
• 잠재 결함 분석 및 담당자 및 상태 할당
• 품질 특성 평가 및 문서화
• 종료 조건을 기준으로 리뷰 결과를 평가하여 리뷰 결과 결정 (예: 거부(reject), 주요 수정 필요, 약간의 수정 후 수락 등)

수정 및 보고

• 수정이 필요한 잠재 결함에 대한 결함 보고서 작성
• 리뷰한 작업 산출물에서 발견한 결함 수정 (일반적으로 저자가 수정)
• 결함 정보를 적절한 사람이나 팀과 공유 (리뷰한 작업 산출물과 연관된 다른 작업 산출물이 있는 경우)
• 필요한 경우 주석 작성자(comment originator)의 동의를 포함해 (공식적인 리뷰 유형인 경우) 업데이트 된 결함 상태 기록
• 메트릭 수집 (공식적인 리뷰 유형인 경우)
• 종료 조건의 충족여부 확인 (공식적인 리뷰 유형인 경우)
• 종료 조건이 충족되면 해당 작업 산출물 인수

작업 산출물 리뷰 결과는 3.2.3절의 설명처럼 리뷰 유형 및 공식성에 따라 다양하게 나타난다.

3.2.2 공식 리뷰에서의 역할과 책임 

일반적으로 공식 리뷰에는 다음과 같은 역할이 포함된다:

저자 (author)

• 리뷰 대상 작업 산출물 작성
• 리뷰 대상 작업 산출물 결함 수정 (필요한 경우)

관리자 (management)

• 리뷰 계획 담당
• 리뷰 실행 결정
• 인력, 예산, 시간 할당
• 진행 비용 대비 효과 모니터링
• 결과가 만족스럽지 않은 경우 제어 결정(control decisions) 실행

촉진자 (facilitator, 종종 중재자(moderator)로 부름)

• 리뷰 회의 진행 시 효과적 회의 진행 보장
• 필요한 경우 다양한 관점들에 대한 중재
• 많은 경우 리뷰의 성공 여부에 결정적인 역할을 하는 사람

리뷰 리더 (review leader)

• 전반적으로 리뷰에 대한 책임을 지는 사람
• 참여자를 결정하고 언제 어디서 진행할지 결정 

검토자 (reviewers)

• 해당 주제에 대한 전문가, 프로젝트 참여 인원, 작업 산출물에 관심이 있는 이해관계자나 특정 기술 혹은 비즈니스 배경을 가진 사람 등
• 리뷰 대상 작업 산출물의 잠재적 결함 식별
• 다양한 관점을 대표할 수 있음 (예: 테스터, 프로그래머, 사용자, 운영자, 비즈니스 분석가, 사용성 전문가 등) 

서기 (scribe, 또는 기록자 (recorder))

• 개별 리뷰 활동에서 발견한 잠재 결함 수집
• 리뷰 회의가 진행되는 경우 새로운 잠재 결함, 쟁점, 결정 사항 기록

리뷰 유형에 따라 한 사람이 두 개 이상의 역할을 수행할 수 있으며, 각 역할과 관련된 활동 역시 리뷰 유형에 따라 달라질 수 있다. 또한, 리뷰 프로세스를 지원하는 도구, 특히, 결함, 쟁점 및 의사 결정의 기록을 지원하는 도구로 인해 서기가 필요하지 않은 경우가 많다. 

3.2.3 리뷰 유형

리뷰를 다양한 목적으로 활용할 수 있지만, 주된 목적 중 하나는 결함 발견이다. 모든 리뷰 유형은 결함 발견에 도움이 될 수 있으며, 프로젝트 요구사항, 가용 자원, 제품 유형과 리스크, 비즈니스 도메인, 조직의 문화 등에 따라 적절한 리뷰 유형을 선택해야 한다.
리뷰는 다양한 특성에 따라 분류될 수 있다. 다음은 가장 일반적인 4가지 리뷰 유형과 각각의 특성을 나열한 것이다:

비공식 리뷰 (예: 버디 체크 (buddy check), 페어링 (pairing), 짝 리뷰 (pair review))

• 주요 목적: 잠재적 결함 발견
• 기타 목적: 새로운 아이디어나 해결책 도출, 소소한 문제의 빠른 해결
• 공식 (문서화된) 프로세스를 기반으로 하지 않음
• 리뷰 회의를 진행하지 않을 수 있음
• 저자의 동료 (버디 체크) 또는 다른 사람이 수행할 수 있음
• 결과는 문서로 기록할 수 있음
• 검토자에 따라 성과가 달라짐
• 체크리스트 사용 여부는 상황에 맞게 판단
• 애자일 개발에서 매우 일반적으로 사용됨

워크쓰루 (walkthrough)

• 주요 목적: 결함 발견, 소프트웨어 제품 개선, 다른 구현 방법 고려, 표준이나 규정 준수 평가
• 기타 목적: 다양한 기술이나 스타일에 대한 아이디어 교환, 참여자 교육, 합의 도출
• 리뷰 회의 전 개별 준비는 필요에 따라 수행
• 리뷰 회의는 일반적으로 작업 산출물의 저자가 주도
• 서기 참여 필수
• 체크리스트 사용 여부는 상황에 맞게 판단
• 시나리오, 드라이 런(dry run), 시뮬레이션의 형태로 수행할 수 있음
• 잠재 결함 로그와 리뷰 보고서를 작성할 수 있음
• 실무에서는 비공식적인 형식에서 매우 공식적인 형식까지 다양할 수 있음

기술 리뷰 (technical review)

• 주요 목적: 합의 도출, 잠재적 결함 발견
• 기타 목적: 작업 산출물의 품질 평가 및 자신감 획득, 새로운 아이디어 도출, 저자가 미래의 작업
• 산출물을 개선하도록 지원하고 동기를 부여, 다른 구현 방법 고려
• 검토자는 저자의 기술 동료이면서, 동일 분야 또는 다른 분야의 기술 전문가여야 함
• 리뷰 회의 전 개별 준비 필요
• 리뷰 회의는 선택 사항이며, 이상적으로는 훈련된 촉진자(일반적으로 저자가 아닌)가 주도
• 서기는 반드시 있어야 하며, 이상적으로는 저자가 아닌 사람이 수행
• 체크리스트 사용 여부는 상황에 맞게 판단
• 잠재 결함 로그와 리뷰 보고서가 일반적으로 작성됨

인스펙션 (inspection)

• 주요 목적: 잠재적 결함 발견, 작업 산출물의 품질 평가 및 자신감 획득, 저자 학습과 근본 원인 분석을 통한 유사 결함의 발생 예방
• 기타 목적: 저자가 앞으로의 작업 산출물과 소프트웨어 개발 프로세스를 개선하고 합의를 이끌어 내도록 동기를 부여
• 규칙 및 체크리스틀 기반으로 공식 문서 산출물을 작성하는 정의된 프로세스를 수행
• 명확하게 정의된 역할 참여, 낭독자(리뷰 회의 중 작업 산출물을 소리 내어 읽는 사람)의 참여 가능
• 리뷰 회의 전 개별 준비 필요
• 검토자는 저자의 동료 또는 작업 산출물과 연관된 분야의 전문가
• 명시된 시작 및 종료 조건을 사용
• 서기 참여 필수
• 리뷰 회의는 훈련받은 촉진자(저자가 아닌 사람)가 주도
• 저자는 리뷰 리더, 글을 읽는 사람 또는 서기가 될 수 없음
• 잠재적인 결함 로그 및 리뷰 보고서 작성
• 인스펙션 프로세스 포함 전체 소프트웨어 개발 프로세스를 개선하기 위해 메트릭을 수집하고 사용

하나의 작업 산출물이 두 가지 이상 리뷰 유형의 대상이 될 수 있다. 두 가지 이상의 리뷰 유형을 사용하는 경우, 순서는 필요에 따라 조정할 수 있다. 예를 들어, 작업 산출물이 기술 리뷰를 받을 준비가 됐는지 확인하기 위해 기술 리뷰 이전에 비공식 리뷰를 수행할 수 있다.

위에서 설명한 리뷰 유형은 피어 리뷰(peer review)의 형태로 수행할 수 있다. 즉, 조직에서 비슷한 수준의 동료가 수행할 수 있다.

리뷰에서 발견하는 결함 유형은 매우 다양하다. 특히, 리뷰하는 작업 산출물에 따라 달라진다. 

3.2.4 리뷰 기법 적용

개별 리뷰(개별 준비) 활동 중에 결함을 발견하기 위해 사용할 수 있는 리뷰 기법에는 여러 가지가 있다. 이런 기법은 위에서 설명한 모든 리뷰 유형에서 사용할 수 있다. 각 기법이 얼마나 효과적인지는 사용하는 리뷰 유형에 따라 달라질 수 있다. 여러 리뷰 유형에서 사용하는 개별 리뷰 기법들은 다음과 같다:

애드혹 (ad hoc)

애드혹 리뷰에서는 검토자에게 리뷰 수행 방법에 대한 안내가 거의 또는 전혀 제공되지 않는다. 검토자는 대부분의 경우 작업 산출물을 순차적으로 읽으면서 이슈를 식별하고 기록한다. 애드혹 리뷰는 특별한 준비 없이 일반적으로 사용되는 기법이다. 이 기법은 검토자의 능력에 크게 의존하며, 여러 검토자가 동일한 문제를 보고할 수 있다.

체크리스트 기반 (checklist based)

체크리스트 기반 리뷰는 체계적인 기법으로, 검토자는 리뷰 시작 시점에 배포된(예를 들어, 촉진자에 의해) 체크리스트를 기반으로 이슈를 식별한다. 리뷰 체크리스트는 잠재 결함을 식별하기 위해 경험에서 도출한 일련의 질문으로 구성된다. 체크리스트는 리뷰 대상 작업 산출물 유형별로 작성해야 하며 이전 리뷰에서 누락된 이슈 유형을 다루기 위해 주기적으로 개선할 필요가 있다. 체크리스트 기반 기법의 주요 장점은 일반적인 결함 유형에 대한 체계적인 커버리지를 갖는다는 점이다. 개별 리뷰를 수행할 때 검토자는 체크리스트를 단순히 실행하는 것뿐만 아니라, 체크리스트로 식별할 수 없는 결함도 찾기 위해 특별히 주의를 기울여야만 한다.

시나리오 및 드라이 런 (scenarios and dry run)

시나리오 기반 리뷰에서 검토자는 작업 산출물을 어떻게 검토할지에 대한 구조화된 지침을 제공받는다. 시나리오 기반 접근법은 (작업 산출물이 유스케이스와 같은 적절한 형식으로 문서화된 경우) 작업 산출물의 예상되는 용도를 기반으로 작업 산출물에 대해 “드라이런”을 수행할 수 있도록 검토자를 지원한다. 이러한 시나리오는 검토자에게 단순한 체크리스트 항목보다 특정 결함 유형을 식별하는 방법에 대한 좀 더 나은 지침을 제공한다. 체크리스트 기반 리뷰와 마찬가지로, 다른 결함 유형(예: 누락된 기능)을 발견하기 위해 검토자는 기록된 시나리오에만 너무 얽매이지 않아야 한다.

역할 기반 (role-based)

역할 기반 리뷰는 검토자가 작업 산출물을 개별 이해관계자 역할의 관점에서 평가하는 기법이다. 일반적인 역할에는 특정 최종 사용자 유형(경험 많은, 경험 적은, 노인, 아동 등)과 조직 내 특정 역할(사용자 관리자, 시스템 관리자, 성능 테스터 등)이 있다.

관점 기반 (perspective-based)

관점 기반 읽기는 역할 기반 리뷰와 마찬가지로 검토자가 개별 리뷰 중 다양한 이해관계자의 관점을 사용하게 된다. 일반적으로 사용되는 이해관계자 관점에는 최종 사용자, 영업, 설계자, 테스터, 운영자 등이 있다. 서로 다른 이해관계자 관점을 사용하면, 검토자 간에 중복되는 이슈가 줄어들고 개별리뷰가 좀 더 깊이 있게 진행된다.

또한, 관점 기반 읽기에서는 검토자가 리뷰 대상 작업 산출물로부터 이해관계자의 관점을 기반으로 하는 산출물을 작성해야 한다. 예를 들어, 테스터가 필요한 모든 정보가 존재하는지 확인하기 위해 요구사항 명세에 대한 관점 기반 읽기를 수행하면서 인수 테스트 초안을 작성을 시도할 수 있다. 또한 관점 기반 읽기에서는 체크리스트도 활용한다.

실증적인 연구에 의하면, 관점 기반 읽기가 요구사항 및 기술 작업 산출물에 대한 리뷰에 가장 효과적인 기법이다. 주요 성공 요인은 리스크를 기반으로 다양한 이해관계자의 관점을 적절하게 포함시키고 평가하는 것이다.

3.2.5 리뷰의 성공 요소

성공적인 리뷰를 위해서는 적절한 리뷰 유형과 기법을 고려해야 한다. 또한, 리뷰의 결과에 영향을 주는 여러 가지 다른 요인도 있다.

조직 차원의 성공 요인은 다음과 같다:

• 각 리뷰는 명확한 목적이 있어야 한다. 목적은 리뷰 계획 시 정의하며, 측정 가능한 종료 조건으로 사용된다.
• 목적을 달성하기에 적합하고, 소프트웨어 작업 산출물 및 참여자 유형 수준에 맞는 리뷰 유형을 적용해야 한다.
• 체크리스트 기반 및 역할 기반 리뷰와 같이 사용하는 모든 리뷰 기법은 리뷰 대상 작업 산출물의 결함을 효과적으로 식별하기에 적합해야 한다.
• 사용하는 체크리스트는 주요 리스크 식별을 위해 작성해야 하며, 가장 최신의 정보를 반영해야 한다.
• 규모가 큰 문서는 작은 단위로 작성하고 리뷰를 수행해 저자에게 결함에 대한 피드백을 조기에 그리고 빈번하게 제공함으로써 품질 관리를 수행한다.
• 참여자는 충분한 준비 시간을 갖는다.
• 충분한 여유를 가지고 리뷰 일정을 수립한다.
• 경영진은 리뷰 프로세스를 지원한다 (예: 프로젝트 일정에 리뷰 활동을 위한 충분한 시간을 배정).

사람과 관련된 성공 요인은 다음과 같다:

• 리뷰 목적 달성을 위해 적절한 사람들이 참여한다 (예를 들어, 문서를 기반으로 작업을 시작해야 하는 서로 다른 기술 세트 또는 관점을 가진 사람들).
• 테스터는 리뷰에 기여하는 중요한 검토자로 간주된다. 테스터는 작업 산출물의 학습을 통해 좀 더 효과적인 테스트를 준비하고 조기에 테스트 준비를 할 수 있게 된다.
• 참여자는 세부사항에 충분한 시간과 주의를 기울여야 한다.
• 작은 단위로 리뷰를 진행해 개별 리뷰나 리뷰 회의(개최된다면) 중에 검토자가 집중력을 잃지 않도록 해야 한다.
• 식별된 결함은 승인하고 평가하고, 객관적으로 처리해야 한다.
• 리뷰 회의를 잘 관리해 참여자가 리뷰에 참여한 시간이 가치 있다고 인식하게 해야 한다.
• 리뷰는 모든 참여자가 서로 신뢰하는 분위기에서 진행해야 한다. 리뷰 결과를 가지고 참여자들을 평가해서는 안 된다.
• 참여자는 지루함, 분노 또는 다른 참여자에 대한 적대감을 나타낼 수 있는 신체 언어 및 행동을 피해야 한다.
• 적절한 교육을 제공한다. 특히 인스펙션과 같은 공식적인 리뷰 유형에는 더 필요하다.
• 학습 및 프로세스 개선에 대한 조직 문화를 촉진해야 한다.