sw공학기술표준화 포럼운영 - tta.or.kr È& ¢Îj 6g =vxÌ_£ ,s ljq ... (eng) sw...

INSIDabcdef_:MS_0001MS_0001


[TTA-16130-SA]

[2016년도 ICT표준화포럼 최종연구보고서]

SW공학기술표준화 포럼운영

2016. 12. 15.

포럼 사무국 SW공학네트워크



제 출 문

한국정보통신기술협회 회장 귀하

본 보고서를 “SW공학기술표준화 포럼 운영에 관한 연구”의 최종

연구보고서로 제출합니다.

2016 년 12월 15일

포럼 수행기관(사무국) : SW공학네트워크 (대표자) 조경휘 (인)

연구 책임자 : 박지환 대표이사 (인) 참여 연구원 : 김현지 선임연구원 참여 연구원 : 김지섭 연구원 참여 연구원 : 배범진 책임연구원

정보통신․ 방송 연구개발 관리규정 제35조에 따라 보고서 열람에 동의합니다.



- 1 -

요 약 문 (초 록)과 제 번 호 R0166-16-1015과 제 명 사실표준화기구협력대응 및 국제표준화전문가육성

포 럼 명 (국문) SW공학기술포럼 (영문) SW Engineering Technology and Standard

사 무 국 소프트웨어공학네트워크 연구책임자 박지환

당 해 년 도사 업 기 간 2016. 협약체결일 ~ 12. 15. ( 약 9 개월)참 여 기 관 - 참여기관책임자 -

1. 포럼의 목적 및 필요성

o 국내 SW 테스팅 시장 규모 발전 - 국내 소프트웨어 테스트시장은 2005년 2200억원에 불과했던 SW테스팅

시장 규모는 2010년 5200억원을 기록하는 등 5년 새 두 배 이상 성장하

였음. 관련 업계에 따르면 국내 테스팅 시장규모는 현재 약 3천억 원 규

모로 5년 후에는 3배 이상 확대된 1조 원 규모로 늘어날 것으로 예상됨

o 국내 실정에 적합하지 않는 SW 테스트 국제 표준

- ISO/IEC 29119와 같은 국제표준의 경우, 패키지 및 SI 대상으로 소프트웨어 품질 특성 표준 및 측정 평가에 대한 내용으로 이루어져 있어, 국내의중·소 R&D 기업의 프로젝트에 적용하는데 어려움이 존재함

o 표준화·교육·확산체 필요 - 현재 모든 산업에서 SW 비중이 점차 높아지면서 제품 안전 및 품질 관

리를 위한 SW 테스트 역량이 강조되고 있음. IoT, 융합SW 등의 생활밀접형 SW의 확산으로 SW결함으로 인한 인명살상 및 경제적 손실이 높아짐

에 따라 안전에 대한 관심 또한 높음. 이러한 상황에서 국내 현실에 맞는

체계적이고 실질적인 효과를 기대할 수 있는 교육 및 표준 수립이 필요

함

2. 포럼 표준화 대상(ToR) o SW 테스트 관련 (포럼) 표준 - SW 테스트 정책 수준 평가 (포럼) 표준 수립



- 2 -

- SW 테스트 계획 수준 평가 (포럼) 표준 수립

- SW 테스트 설계 수준 평가 (포럼) 표준 수립

- SW 테스트 수행 수준 평가 (포럼) 표준 수립

- SW 테스트 보고 수준 평가 (포럼) 표준 수립

o 튜토리얼 (1건) - W 테스트 수행 산출물 작성 가이드

3. 주요 내용

o 국내/외 현황조사 및 분석 - 국제 표준 조사 - 해외 현황 공유 - 현장 적용의 문제점 도출 - 개선사항 식별

o 표준 개발 - 개선방안 고안 - 테스트 수준 평가 모델 표준 개발 - 시범 적용 - 포럼 표준 제정 - TTA 단체 표준 채택

o 확산 적용 및 보급 - 홍보 및 세미나 - 기술 교류 - 테스트 설계 컨테스트 개최 - 표준적용 결과 사례집 발간

o 회원사 구성

산업체연구소 학계 총계

대기업 중소벤처 기업

갯수 0 8 0 0 8

백분율(%) 0% 100% 0% 0% 100%



- 3 -

계속

4. 포럼 운영 결과 및 성과

구분건수

(계량치) 구분건수

(계량치)

국제활동

공적표준

기고서 제안

국내활동

국가표준

국가표준 제・개정기고서 반영 TTA

표준TTA표준 제・개정

기고서 제정

사실상표준

기고서 제안

포럼표준

포럼표준 제․개정 5기고서 반영

기고서 제정

기타성과 지표-1 6 기타성과 지표-2 1기타성과 지표-3 30

o 결과물 - 국내: SW 테스트 수행 산출물 수준 평가 포럼 표준제정 5건, 2016.08 - 국내: TTA 단체 표준 실적 2건, 2016.12 - 기타성과 지표-1: SW 테스트 수행 산출물 작성 튜토리얼 세미나 진행 6

건, 2016.07 - 기타성과 지표-2: 제1회 테스트 설계 컨테스트 in Korea 심사 기준에 적

용, 2016.09 - 기타성과 지표-2: 제1회 테스트 설계 컨테스트(표준적용) 추진 결과(사례)

집 발간 1부, 2016.12 - 기타성과 지표-3: 민간 및 대학 기관 확산 적용 30건, 2016.12

5. 활용방안 및 기대효과

유스케이스

및 산업체

활용 계획

o SW개발기업 및 대학에서 활용 - SW품질에 기반한 개발체계 조성 및 역량 강화

- 유지관리단계에서의 과도한 품질비용 소모 예방을 위한 참조

체계 확립

o SW테스트 결과물 검수/납품 요건으로 활용

- 수·발주 체계의 SW산업에서 SW테스트 결과물 검수/납품 조



- 4 -

건으로 활용

o 국가 SW R&D 결과 평가 시 활용

- 국가 SW R&D 결과 평가 및 심사 시 객관적 검증 요건으로

활용

정책활용 및

파급 효과

o 정책 및 산업에서의 활용 제안

- 국가 SW R&D 수행 결과평가 및 심사 시 수검자와 피검자의

수준과 견해 차이를 해소하기 위한 객관적 검증 조건으로 활

용 제안

- 각종 산업 분야에서 SW 활용의 높은 의존으로 인한 고품질·저비용·적시성을 갖춘 소프트웨어 개발 체계로 확립

o SW 글로벌 시장 진출의 역량 확보

- SW 글로벌 시장의 높은 품질장벽을 넘기 위한 효과적 접근전략으로 활용

- SW 글로벌 시장에서 요구되는 품질활동에 대한 근거 제시

o SW 테스팅 시장 및 인프라의 올바른 방향 수립

- 현 저가(노동기반) 경쟁 위주의 SW 테스팅 시장의 기술기반으로의 발전을 위한 기반 조성



- 5 -

- 유럽·일본 등 지식 경합 기반의 산업 발전 인프라의 한국형

정착

※ SW테스팅 서비스 시장 (2015년 기준) 해외 : 193억달러 (약 23조) 연 평균 15% 성장세 – IDC 참조 - 국내 : 5천억원 규모로 추산



- 6 -

AbstractDocument No. R0166-16-1015

TitleCooperative response of actual standardization and training of expert of global standardization.

Forum title (Kor) SW공학기술포럼 (Eng) SW Engineering Technology and Standard

Dept K.SEN 연구책임자 Jihwan ParkOperating period 2016. signing date ~ 12. 15. ( 9 months)

Involved dept - Dept in charge -

1. Purpose and necessary of the forum o Development of domestic SW testing market size - The domestic software testing market was only KRW 220 billion in 2005,

and the SW testing market grew more than twice in five years, including KRW 520 billion in 2010. According to the related industry, the domestic testing market is expected to increase to about KRW 1 trillion in five years later, which is more than three times the current level of about KRW 300 billion.

o SW test international standard not suitable for domestic situation - In the case of international standards such as ISO / IEC 29119, there

are difficulties in applying to the projects of domestic middle and small R & D companies because they consist of software quality characteristic standards and measurement evaluation for packages and SI.

o Need for standardization, education and diffusion - As the share of SW in all industries increases steadily, SW testing

capability for product safety and quality control is emphasized. IoT, convergence SW, etc. are spreading, so the concern about safety is also high due to the increase of life loss and economic loss due to SW defect. In such a situation, it is necessary to establish education and standards that can expect systematic and practical effects for domestic situation.



- 7 -

2. Target of forum standardization(ToR) o SW test related standard (forum) - Maturity Evaluation Standard for Software Test Policy - Maturity Evaluation Standard for Software Test Plan - Maturity Evaluation Standard for Software Test Design - Maturity Evaluation Standard for Software Test Execution - Maturity Evaluation Standard for Software Test Report o Tutorial (1) - SW Test Execution Product Creation Guide

3. Main points o Survey and analysis of domestic / foreign status - International Standardization Survey - Sharing of overseas status - Problems in application - Identify improvements

o Development of standards - Designed improvement plan - Development of test level evaluation model standard - Pilot application - Forum standards - TTA standards

o Spread application - PR and seminars - Technology exchange - Hold a test design contest - Publication of standard application results

o Composition of member companies



- 8 -

IndustryLab Academia Total

Large firmSmall-medium venture firm

No. 0 8 0 0 8

% 0% 100% 0% 0% 100%

4. Performance and result of management of forumCategory No.

(Measured) Category No.(Measured)

Int. activity

Theoretical standard

Suggestion

국내활동

National standard National standard

Reflected Group standard TTA standard

Amended

Actual standard

SuggestionForum

standard Forum standard 5ReflectedAmended

Other performance -1 6 Other performance-2 1Other performance-3 30

o Result - Domestic: Maturity Evaluation Standard for Software Test - Forum

Standards 5 cases, 2016.08 - Domestic: TTA Standards 2 cases, 2016.12 - Other Performance Indicators -1: SW Test Product Tutorial seminar 6

cases, 2016.07 - Other Performance Indicators-2: Applied to the Evaluation standard of

the 1st test design contest, 2016.09 - Other Performance Indicators-2: 1st test design contest (standard

application) results 1 copy, 2016.12 - Other Performance Indicators-3: Application of the spread of private and

university institutions 30 cases, 2016.12

5. Application and expected effectUsecase and o Application of SW development firm and university



- 9 -

application of

industry plan

- Enhancement of capability and establish development system based on SW quality

- Establish a reference system to prevent excessive quality costs in the maintenance phase

o Use of SW test result inspection / delivery requirement - Application of SW test result inspection / delivery condition in

SW industry of order / ordering systemo Use in evaluating SW R & D result - Use as an output verification requirement when evaluating

national SW R & D results

Application of

policy and

impact

o Application of Policy and industry - Proposal of the use as objective verification condition to

resolve the difference of opinions between examinees and evaluators in evaluating the results of national SW R&D

- Establishment of software development system with high quality, low cost, and timeliness due to high reliance on SW in various industries

o Securing the competitiveness of SW global market entry



- 10 -

- Use as an effective access strategy to overcome high quality barriers in the global market

- Presentation as a basis for quality activities required in SW global market

o Establishing the right direction for SW testing market and infrastructure - Establishing the foundation for technological development of

the current low-cost(labor-based) competitive SW testing market

- Establishment of Korean-style industrial development infrastructure based on knowledge competition such as Europe and Japan

※ SW testing service market (as of 2015) Foreign : $ 19.3 billion (approx. 23 trillion won) 15% annual growth – IDC - Domestic : estimated at 500 billion won



- 11 -

CONTENTS

1 Introduction ······························································································13

2 Management of SW engineering technology standardization

forum ··············································································································13

1 Current status in national/international ···························································13

1. Core standardization technology ··············································································13

2. Market forecast and current status ·········································································13

3. Technology development and standardization status ·····································15

2 Operation and component of forum ································································16

1. Purpose and need ········································································································16

2. History ·······························································································································17

3. Organization and main activity ·················································································18

3 2016 result of activity on SW engineering technology

standardization ····························································································20

1 Summary of major performance ········································································20

2 Activity result ···········································································································21

1. Forum management result ··························································································21

2. International standardization activity result ···························································22

3. National standardization activity result ···································································23

4. Other activity result ·······································································································33

4 2017 main plan ·······················································································35

1 2017 research target of SW engineering technology standardization

forum ··································································································································35

2 Conducted task ·······································································································35

3 Task method ············································································································35

5 Conclusion ································································································36

1 Conclusion ················································································································36

2 Expected result ·······································································································36



- 12 -

- 목 차 -

제 1 장 서론 ·······························································································13

제 2 장 SW공학기술 포럼 운영 ·······························································13

제 1 절 국내외 현황 ···································································································13

1. 핵심 표준화대상 기술 ····································································································13

2. 시장 현황 및 전망 ··········································································································13

3. 기술개발 및 표준화 현황 ····························································································15

제 2 절 포럼 구성 및 운영 ·······················································································16

1. 목적 및 필요성 ················································································································16

2. 연혁 ····································································································································17

3. 조직구성 및 주요활동 ····································································································18

제 3 장 2016년도 SW공학기술 포럼 활동결과 ····································20

제 1 절 주요 추진실적 요약 ·····················································································20

제 2 절 활동 결과 ·······································································································21

1. 포럼 운영 결과 ················································································································21

2. 국제표준화 활동 결과 ····································································································22

3. 국내표준화 활동 결과 ····································································································23

4. 기타 활동 결과 ················································································································33

제 4 장 2017년도 주요 수행계획 ····························································35

제 1 절 2017년도 SW공학기술 포럼 연구목표 ····················································35

제 2 절 수행 과제 내용 ·····························································································35

제 3 절 수행 과제 방법 ·····························································································35

제 5 장 결 론 ·······························································································36

제 1 절 결론 ·················································································································36

제 2 절 기대효과 ·········································································································36



- 13 -

제 1 장 서론

o 우리나라 소프트웨어 테스트시장은 2005년 2200억원에 불과했던 SW테스팅 시장 규모

가 2010년 5200억원을 기록하는 등 5년 새 두 배 이상 성장하였음. 관련 업계에 따르

면 국내 테스팅 시장규모는 현재 약 3천억 원 규모로 5년 후에는 3배 이상 확대된 1조

원 규모로 늘어날 것으로 예상됨

o 또한, 현재 모든 산업에서 SW 비중이 점차 높아지면서 제품 안전 및 품질 관리를 위한

SW 테스트 역량이 강조되고 있음. IoT, 융합SW 등의 생활밀접형 SW의 확산으로 SW결

함으로 인한 인명살상 및 경제적 손실이 높아짐에 따라 안전에 대한 관심 또한 높음

o 하지만 ISO/IEC 29119와 같은 SW테스트 국제표준의 경우, 패키지 및 SI 대상으로 소프

트웨어 품질 특성 표준 및 측정 평가에 대한 내용으로 이루어져 있어, 현실적으로 국내

의 중·소 R&D 기업의 프로젝트에 적용하는데 어려움이 존재함. 이러한 상황에서 SW테

스트와 관련하여 국내 현실에 맞는 체계적이고 실질적인 효과를 기대할 수 있는 표준

수립 및 확산이 필요함

제 2 장 SW공학기술 포럼 운영

제 1 절 국내외 현황

1. 핵심 표준화대상 기술

o SW테스트 수준 평가 표준 체계가 갖추어야 할 5개의 영역(정책, 계획, 설계, 수행, 보

고)을 구분하여 수립하는 것이 중요

- SW테스트 정책 수준 평가 표준 체계

- SW테스트 계획 수준 평가 표준 체계

- SW테스트 설계 수준 평가 표준 체계

- SW테스트 보고 수준 평가 표준 체계

- SW테스트 완료 수준 평가 표준 체계

2. 시장 현황 및 전망



- 14 -

가. 국외 시장현황 및 전망

o 미국, EU, 일본 등 선진국에서는 신성장동력 창출을 위해 ICT융합 정책을 추진하고 있

으며, 세계 ICT융합 시장 또한 지속적인 성장 추세임

o 자동차 분야의 경우, 글로벌 기업인 BMW, 폴크스바겐, 도요타는 전장부품을 납품하는

업체에 개방형 자동차 표준 소프트웨어 구조인 AUTOSAR와 기능안전성 표준인 ISO

26262를 준수하도록 요구하고 있음

o 항공 분야의 경우, 소프트웨어 기능안전성 표준으로 DO-178B/DO-278(미국),

ED-12B/ED-109(유럽)를 채택하고 FAA(미국)나 JAA(유럽) 등을 통해 인증 받도록 하고

있음

o 또한, 웹과 모바일 정보통신기기의 발달로 인해 장애인, 고령자와 같은 사회 소외계층의

정보격차 문제가 심화되면서 이를 해결하기 위한 법제도도 강화되고 있음

o 미국의 경우, 연방정부에 조달되는 모든 전자·정보기술 제품을 대상으로 장애인 접근성

을 반드시 준수하도록 재활법 508조를 의무화 시행하고 있음

그림 6 테스트 Solution 시장 현황



- 15 -

그림 7 국내 S/W 테스트 시장 규모

나. 국내 시장현황 및 전망

o 국내 SW테스팅 시장 규모는 약 3000억 원 규모로, 시장조사기관 IDC에 따르면 소프트

웨어테스팅 시장은 연평균 15.4%의 성장세를 나타내고 있음

o SW와 하드웨어(HW) 융·복합으로 시스템이 복잡해지면서 SW와 관련된 다양한 문제가

발생하고, 품질 관리 비용도 함께 증가하고 있음

o SW 테스팅의 중요성은 점점 커지지만 국내 관련 제도와 생태계 조성을 위한 전문인력

은 부족한 실정임. 특히 대기업에 비해 SW 공학 능력이 떨어지는 소기업에게 SW 테스

팅 환경이 절실함

3. 기술개발 및 표준화 현황

가. 국외 기술개발 및 표준화 현황

o 국외에서는 테스팅 성숙도 모델(TMMi) 테스트 프로세스 개선(TPI) 기반으로 소프트웨어

품질 및 시험 평가를 수행하고 있으나, 앞서 언급한 바와 같이 자동차, 항공, 의료, 철도

등 ICT융합 분야에서의 소프트웨어 비중이 증가하면서 기능에 대한 안전성을 확보하기

위해 고품질의 소프트웨어가 요구되고 있음



- 16 -

o 미국, EU, 일본 등 선진국에서는 신성장동력 창출을 위해 ICT융합 정책을 추진하고 있

으며, 세계 ICT융합시장 또한 지속적인 성장 추세임

o 앞서 언급한 바와 같이 자동차, 항공, 의료, 철도 등 ICT융합 분야에서의 소프트웨어 비

중이 증가하면서 기능에 대한 안전성을 확보하기 위해 고품질의 소프트웨어가 요구되고

있음

o 자동차 분야의 경우, 글로벌 기업인 BMW, 폴크스바겐, 도요타는 전장부품을 납품하는

업체에 개방형 자동차 표준 소프트웨어 구조인 AUTOSAR와 기능안전성 표준인 ISO

26262를 준수하도록 요구하고 있음

o 항공 분야의 경우, 소프트웨어 기능안전성 표준으로 DO-178B/DO-278(미국),

ED-12B/ED-109(유럽)를 채택하고 FAA(미국)나 JAA(유럽) 등을 통해 인증 받도록 하고

있음

o 또한, 웹과 모바일 정보통신기기의 발달로 인해 장애인, 고령자와 같은 사회 소외계층의

정보격차 문제가 심화되면서 이를 해결하기 위한 법제도도 강화되고 있음

나. 국내 기술개발 및 표준화 현황

o 현재 국내에서는 ISTQB(International Software Testing Qualifications Board) 또는

CSTS(Certified Software Testing Specialist) 자격증 취득을 위한 교육을 진행하고 인력

을 양성하여, 컨설팅을 수행하고 있음

o 또한, 국제 표준인 ISO/IEC 29119 를 활용하여, 소프트웨어의 품질 및 시험평가를 수행

하고 있음

o 하지만 자격증을 보유하고 있는 전문 인력의 역량 수준이 소프트웨어의 품질을 정확하

게 검증할 만큼 높지 않으며, ISO/IEC 29119를 국내에 적용하기에는 국내 실정과 맞지

않는 부분이 있어, 적용하는데 있어 어려움이 존재함

제 2 절 포럼 구성 및 운영

1. 목적 및 필요성

<목적>



- 17 -

o SW공학기술 표준화를 통해 중소기업의 체계적 개발 역량을 확보하여, SW품질확보 및

글로벌 경쟁력을 갖추고자 함

- 국내/외 전문위원회 포럼활동을 통한 실태 현황 파악

- 산업중심의 SW공학기술 표준을 위한 방향 수립

- 중소 SW R&D 기업의 글로벌 품질 경쟁력 강화 지원

- 지역 및 소규모 기업의 품질역량 강화 지원

<필요성>

o 중·소기업의 체계적 개발 역량 부족

- 중·소기업의 경우 상대적으로 개발 프로세스 및 방법론에 기반한 개발 역량이 부족하여

개발된 제품의 품질이 저하되고, 개발과정과 유지보수과정에서 높은 품질비용을 소모하

고 있는 바 이에 대한 적절한 가이드가 필요함

o SW품질확보 및 글로벌 경쟁력 미비

- 실질적 효과를 얻을 수 있는 참조가 부족하여 SW의 품질을 확보하기 위한 높은 비용을

투자하더라도, 글로벌 수준의 경쟁력을 보장받기가 어려움

o 사회적·경제적 품질 비용 증가

- IoT, 융합SW 등 SW산업의 사회 전반으로의 확산과, 사용자의 요구 다양화 및 빠른 트

렌드 변화에 대응하기 위한 품질 비용이 증가됨

o 사회 전반 SW활용도 및 안전이슈 증가

- IoT, 융합SW 등의 생활밀접형 SW의 확산으로 SW결함으로 인한 인명살상 및 경제적

손실이 높아짐에 따라 안전에 대한 관심과 이슈가 발생함

o 지역, 소규모 기업의 품질정보·기술 소외

- SW산업 발전 과정의 불균형으로 지역기업과 소규모 기업에 대한 품질사각지대가 발생

하고, 품질확보를 위한 정보취득과 기술 확보의 어려움이 존재함에 따라, 상대적으로

품질을 확보하고 강화하기 위한 역량이 부족하게 됨

2. 연혁

2015.01 - K.SEN 산하 SW공학기술표준화 포럼 조직 설립

2015.09- 15’ 09 ASQN (Asia Software Quality Network) 한국대표 참가

- 아시아권 각 국가 별 협의회 대표자들을 대상으로 아시아 표준화 제안

2015.10 - (표준보급) 국내확산 세미나 (전주정보영상진흥원)

2015.11

- KSEN/KES 1:2015 / SW R&D 분야에 적합한 요구사항 관리체계 포럼

표준 제정 (2015, 11. 16)

- KSEN/KES 2:2015 / SW R&D 분야에 적합한 요구사항 식별체계 포럼



- 18 -

3. 조직구성 및 주요활동

가. 조직구성(조직도 포함) 및 추진체계

[조직도] [추진체계도]

o 추진 체계

표준 제정 (2015, 11. 16)

- (표준보급) 패키지SW에 적합한 요구관리체계 가이드 (총 43개 사)

- (표준보급) 국내확산 세미나 (경남테크노파크)

2015.12 - (표준보급) 국내 확산 세미나 (광주진흥원)

2016.07- KSEN(소프트웨어공학네트워크)을 사단 법인으로 등록 완료 (2016. 07.

19)

2016.08

- 포럼 표준 제정 : KSEN.TE-20.10001 / SW테스트 정책 수준 평가 표준

체계 (2016. 08. 17)

- 포럼 표준 제정 : KSEN.TE-20.10002 / SW테스트 계획 수준 평가 표준

체계 (2016. 08. 17)

- 포럼 표준 제정 : KSEN.TE-20.10003 / SW테스트 설계 수준 평가 표준

체계 (2016. 08. 17)

- 포럼 표준 제정 : KSEN.TE-20.10004 / SW테스트 수행 수준 평가 표준

체계 (2016. 08. 17)

- 포럼 표준 제정 : KSEN.TE-20.10005 / SW테스트 보고 수준 평가 표준

체계 (2016. 08. 17)

2016.09 - SW 테스트 수행 산출물 작성 튜토리얼 세미나

2016.10 - 제1회 소프트웨어 테스트 디자인 콘테스트 개최(2016. 10. 18)



- 19 -

- 현행조사 및 분석

‧ 국내/외 표준 및 현황 조사 후 개선사항 도출

‧ 일본의 10여회 진행한 테스트 수준 역량 강화 결과 및 노하우 공유

- 표준 개발

‧ 산업 현장 기반의 실용적 접근 방법 개발, 시범 적용 및 표준 제정

‧ 확산 보급을 위한 튜토리얼 프로그램 개발

‧ TTA 단체 표준 채택

- 확산 적용 및 보급

‧ 서울/경기 및 지역 SW 품질역량센터 중심의 홍보, 세미나 추진

‧ ASQN (Asia Software Quality Network) 와의 기술 교류

‧ 제 1회 테스트 설계 컨테스트 심사기준으로 활용

‧ 수준 적용 결과 및 사례집 발간

나. 분과별 주요활동

1) 현황조사 분과 : 현행 조사 및 분석

o 국내/외 표준 및 현황 조사 후 개선사항 도출

o 일본의 10여회 진행한 테스트 수준 역량 강화 결과 및 노하우 공유

2) 표준개발 분과 : 표준 개발

o 산업 현장 기반의 실용적 접근 방법 개발, 시범 적용 및 표준 제정

o 확산 보급을 위한 튜토리얼 프로그램 개발

o TTA 단체 표준 채택

3) 현장적용 분과 : 확산 적용 및 보급

o 서울/경기 및 지역 SW 품질역량센터 중심의 홍보, 세미나 추진

o ASQN (Asia Software Quality Network) 와의 기술 교류

o 제1회 테스트 설계 컨테스트 심사기준으로 활용

o 수준 적용 결과 및 사례집 발간

다. 회원사 구성

산업체연구소 학계 총계

대기업 중소벤처 기업

갯수 0 8 0 0 8

백분율(%) 0% 100% 0% 0% 100%



- 20 -

제 3 장 2016년도 SW공학기술 포럼 활동결과

제 1 절 주요 추진실적 요약

구분계획

건수(계량치)실적

건수(계량치)대표 결과물

국제활동

공적표준

기고서 제안 - -

기고서 반영 - -

기고서 제정 - -

사실상표준

기고서 제안 - -

기고서 반영 - -

기고서 제정 - -

국내활동

국가표준

국가표준 제・개정 - -

TTA표준

TTA표준 제・개정 2 -

포럼표준

포럼표준 제・개정 5 5O SW테스트 정책 수준 평가 표준 체계 등 5 건 제정

기타성과 지표-1 6 6O SW테스트 수행 산출 작성 튜토리얼 세미나

기타성과 지표-2 1 1O 제1회 테스트 설계 컨테스트 추진 결과집

기타성과 지표-3 30 30 O 민간 및 대학 기관 확산 적용



- 21 -

제 2 절 활동 결과

1. 포럼 운영 결과

가. 회의 개최 현황

NO 유형 일자 장소 참석자 수 회의명

1 운영위원회 20160406 씽크포비엘 회의실 8 킥오프 회의

2 운영위원회 20160413 씽크포비엘 회의실 8 계획검토 및 확정

3 현황조사 20160420 에이펙스소프트 회의실 9 조사범위수립

4 현황조사 20160427 에이펙스소프트 회의실 8 조사내용 1 차 공유

5 운영위원회 20160504 씽크포비엘 회의실 8 5 월 정기회의

6 현황조사 20160518 에이펙스소프트 회의실 8 조사내용 2 차 공유

7 현황조사 20160525 에이펙스소프트 회의실 8 개선방안에 대한 참조 내용 조사

8 운영위원회 20160601 씽크포비엘 회의실 8 6 월 정기회의

9 현황조사 20160615 에이팩스소프트 회의실 8 현황조사 분석 보고서 리뷰

10 방법론 20160629 티큐 회의실 8 테스트 정책 평가 표준 리뷰

11 방법론 20160706 티큐 회의실 8 테스트 계획 평가 표준 리뷰

12 방법론 20160720 티큐 회의실 8 테스트 설계 평가 표준 리뷰

13 방법론 20160803 TQ 회의실 8 테스트 수행 평가 표준 리뷰

14 방법론 20160817 TQ 회의실 8 테스트 보고 평가 표준 리뷰

15 방법론 20160831 TQ 회의실 8 5 개 표준에 대한 일관성 검토

16 운영위원회 20160908 씽크포비엘회의실 8 포럼 주관사(수행기관) 변경

17 방법론 20160921 TQ 회의실 9 표준화 문서 리뷰

18 현장적용 20161005 GTG 회의실 15 홍보 및 세미나 방안 논의

19 현장적용 20161012 GTG 회의실 15 테스트 디자인 컨테스트 준비 사항 공유

20 현장적용 20161102 GTG 회의실 15 컨테스트 심사 결과 검토 (표준 적용 논의)

21 현장적용 20161116 GTG 회의실 15 사례집 발간 내용 검토

22 운영위원회 20161130 씽크포비엘회의실 15 활동 보고 및 차년도 계획 수립



- 22 -

나. 세미나 개최 현황

2. 국제표준화 활동 결과

가. 기고서 실적(제안/반영)

NO 표준구분 기고서명 기구명

표준화 회의명

기고자표준화 단계

연월일 문서번호

기고 반영 기고 반영

1 제정

2 개정

3 기술반영

4 정책기고

나. 기고서 실적(제정)

NO 표준구분 국제표준명 기구명

표준화 회의명

기고자표준화 단계

제정연월일

표준제정번호

1 제정

2 개정

다. 대표 기고서 실적

NO 일자 장소 참석자 수 내용

1 20160902 토즈 강남점 11명 SW 테스트 수행 산출물 작성 튜토리얼 세미나(1 차) - 투비소프트 등

2 20160905 토즈 강남점 12명 SW 테스트 수행 산출물 작성 튜토리얼 세미나(2 차) - 인피닉 등

3 20160906 토즈 강남점 15명 SW 테스트 수행 산출물 작성 튜토리얼 세미나(3 차) - - 비즈피어 등

4 20160907 토즈 강남점 14명 SW 테스트 수행 산출물 작성 튜토리얼 세미나(4 차) - 가온테스트, 롯데닷컴 등

5 20160909 토즈 강남점 9명 SW 테스트 수행 산출물 작성 튜토리얼 세미나(5 차) - Ebay, 우아한 형제들 등

6 20160912 토즈 강남점 10명 SW 테스트 수행 산출물 작성 튜토리얼 세미나(6 차) - 와이즈넛 등

7 20161018 한국과학기술회관 250명 제 1 회 소프트웨어 테스트 디자인 컨테스트



- 23 -

3. 국내표준화 활동 결과

가. 표준개발 실적(포럼/단체/국가)

나. 대표 표준개발 및 활용 실적

o KSEN.TE-20.10001 / SW테스트 정책 수준 평가 표준 체계

- 목적

‧ SW테스트는 SW제품 리스크를 관리하고 결함을 예방하는 적극적인 활동이며, 완성도

높은 테스트로 높은 품질을 기대할 수 있으며, 이를 위해 테스트를 효과적이고 효율적

으로 실행하기 위해서는 테스트 정책과 전략을 세우고, 테스트를 계획하고, 테스트 케

이스를 설계하고, 이를 기반으로 실제로 테스트를 수행하며, 전반적인 테스트 활동에

대한 테스트 보고 절차를 포함하는 체계적인 활동을 수행해야 함

‧ 이 표준의 목적은 테스트의 방향성과 목표를 정의하는 테스트 정책 관련 산출물에서

준수해야할 항목들을 식별하여 SW테스트 정책의 수준 평가를 위한 평가 항목으로 활

용하는 것임

- 주요 내용

‧ 테스트의 방향성과 목표를 정의하는 테스트 정책 관련 산출물에서 준수해야할 항목들

을 식별하였으며 SW테스트 정책에 대한 수준 평가 항목은 아래의 평가 항목을 포함

번호 제개정 표준(초안)명표준화 기구

회의명 구분과제채택 연월일

표준제정 연월일

과제채택번호

표준제정번호

1 제정SW테스트 정책 수준 평가

표준 체계 포럼

2 제정SW테스트 계획 수준 평가

표준 체계포럼

3 제정SW테스트 설계 수준 평가

표준 체계포럼

4 제정SW테스트 수행 수준 평가

표준 체계포럼

5 제정SW테스트 보고 수준 평가

표준 체계포럼

6 제정SW테스트 정책 수준 평가

표준 체계 TTA

제100차 운영위원회

과제채택 20161115 2016-1906

7 제정SW테스트 계획 수준 평가

표준 체계TTA


과제채택 20161115 2016-1907

8 제정SW테스트 설계 수준 평가

표준 체계TTA


과제채택 20161115 2016-1908

9 제정SW테스트 수행 수준 평가

표준 체계TTA


과제채택 20161115 2016-1909

10 제정SW테스트 보고 수준 평가

표준 체계TTA


과제채택 20161115 2016-1910



- 24 -

평가 항목 관련 테스트 산출물

테스트 목표 Ÿ 테스트 정책서

테스트 프로세스Ÿ 테스트 정책서Ÿ 테스트 전략서

테스트 조직 Ÿ 테스트 정책서Ÿ 테스트 전략서

이해관계자 Ÿ 테스트 정책서

제품의 공통 리스크 분석 및 식별 Ÿ 테스트 전략서

테스트 접근법 정의 Ÿ 테스트 전략서

테스트 환경 및 도구 Ÿ 테스트 전략서

테스트 측정지표 정의 및 공유 Ÿ 테스트 전략서

테스트 산출물 정의 및 형상관리 방안 Ÿ 테스트 전략서

‧ 테스트 목표

. 비즈니스 니즈 및 목표에 준하는 테스트 프로젝트의 목표 및 목적을 식별하고 정의

하였는지 검토

‧ 테스트 프로세스

. 소프트웨어 개발 수명 주기 모델(순차적 개발 모델, 반복적-점증적 개발 모델)에 기

반 하여 테스트 프로세스를 정의하였는지 검토

‧ 테스트 조직

. 독립성을 고려하여 테스트 조직을 구성하며, 테스트 조직의 테스트 역할을 기술하는

지 검토

‧ 이해관계자

. 테스트 정책을 이해관계자와 공유할 수 있는 방법이 있는지 검토

‧ 제품의 공통 리스크 분석 및 식별

. 제품의 공통적인 리스크 분류 체계(기능 리스크, 비기능 리스크 등)를 제시하고, 각

분류별 리스크를 분석하는 기준, 즉 리스크 결정 요인을 정의하는지 검토

‧ 테스트 접근법 정의

. 공통 리스크 완화를 위해 프로젝트 및 제품의 특성을 고려한 테스트 모델, 테스트

레벨, 테스트 유형을 정의하고 각 테스트 레벨에 해당하는 접근법을 정의하는지 검

토

‧ 테스트 환경 및 도구

. 테스트 레벨별 테스트 환경을 제시하며, 사용 가능한 또는 사용하고 있는 테스트 지

원도구를 분석하고 각 테스트 레벨에서 활용해야할 도구를 제시하고 있는지 검토

‧ 테스트 측정지표 정의 및 공유

. 테스트 활동 동안 수집할 데이터와 테스트 메트릭 및 성과 측정 방법을 기술하는지

검토하며, 테스트 성과 공유 방안에 대해 기술하는지 검토



- 25 -

‧ 테스트 산출물 정의 및 형상관리 방안

. 테스트 프로세스의 각 활동 단계별 필수 산출물 목록을 정의하고 산출물의 형상관리

정책을 제시하고 있는지 검토

- 활용 및 기대 효과

‧ SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 정책 수준 평가 시 활

용

‧ 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성하여

활용

o KSEN.TE-20.10002 / SW테스트 계획 수준 평가 표준 체계

- 목적






‧ 이 표준의 목적은 테스트를 효과적이고 효율적으로 수행하기 위한 테스트 계획 수립과

관련된 산출물에서 준수해야할 항목들을 식별하여 SW테스트 계획의 수준 평가를 위

한 평가 항목으로 활용하는 것임

- 주요 내용

‧ 테스트를 효과적이고 효율적으로 수행하기 위한 테스트 계획 수립과 관련된 산출물에

서 준수해야할 항목들을 식별하였으며 SW테스트 계획에 대한 수준 평가 항목은 아래

의 평가 항목을 포함



- 26 -

평가 항목 테스트 산출물

테스트 목표 Ÿ 테스트 계획서

테스트 범위 Ÿ 테스트 계획서

고려사항 및 제약사항 Ÿ 테스트 계획서

이해관계자 식별 Ÿ 테스트 계획서

제품 리스크 식별 및 분석Ÿ 테스트 계획서Ÿ 제품 리스크 분석 결과서

프로젝트 리스크 식별 및 분석 Ÿ 테스트 계획서

테스트 전략 Ÿ 테스트 계획서

테스트 시작 기준 및 종료 기준 정의 Ÿ 테스트 계획서

테스트 중단 및 재시작 기준 정의 Ÿ 테스트 계획서

테스트 환경 및 도구 식별 Ÿ 테스트 환경 요구사항 명세서

테스트 공수 산정Ÿ 테스트 계획서Ÿ 테스트 공수 산정 분석서

테스트 일정

Ÿ 테스트 계획서

Ÿ WBS (Work Breakdown Structure)Ÿ 테스트 상세 일정표

테스트 산출물 Ÿ 테스트 계획서

테스트 교육 Ÿ 테스트 계획서

‧ 테스트 목표

. 테스트를 수행해서 달성하려는 목적이나 목표를 기술하는지 검토

‧ 테스트 범위

. 테스트 대상 업무 범위를 식별하고 테스트 대상 영역을 기술하는지 검토

‧ 고려사항 및 제약사항

. 테스트와 관련한 고려 사항이나 전제 조건 및 사전 준비사항에 대해서 기술하고 있

는지 검토

‧ 이해관계자 식별

. 테스트 수행에 영향을 끼치는 이해관계자를 식별하고 이해관계자와의 커뮤니케이션

방안을 수립하고 있는지 검토

‧ 제품 리스크 식별 및 분석

. 테스트 전략서 상의 테스트 리스크 분류 기준 별 제품 리스크(기능 및 비기능 리스

크)를 식별하는지를 검토

‧ 프로젝트 리스크 식별 및 분석

. 테스트 프로젝트 차원에서 테스트 활동에 영향을 미치는 프로젝트 리스크를 식별하



- 27 -

고 기술하는지 검토

‧ 테스트 전략

. 전체 테스트에 대한 테스트 모델, 테스트 프로세스, 테스트 레벨, 테스트 유형, 각

테스트 별 접근법 등을 수립하고 테스트 이행 방안을 기술하는지 검토

‧ 테스트 시작 기준 및 종료 기준 정의

. 테스트 레벨 별 테스트 프로세스의 시작 기준, 종료 기준을 정의하는지 검토

‧ 테스트 중단 및 재시작 기준 정의

. 테스트 중단을 위한 기준 및 재시작 기준을 명확히 기술하는지 검토

‧ 테스트 환경 및 도구 식별

. 테스트 환경 구축에 필요한 기반시설 및 도구를 식별하는지 검토

‧ 테스트 공수 산정

. 테스트 공수 산정 기준을 정하고 테스트 프로세스에 관여하는 작업들에 대한 공수,

자원, 인력, 비용 등에 대한 테스트 공수 산정 활동을 체계적으로 수행할 수 있도록

기술하는지 검토

‧ 테스트 일정

. 테스트 공수 및 테스트 전략에 기반한 레벨별 테스트 활동을 정의하고, 각 테스트

프로세스의 개별 테스트 활동의 시작일자, 종료일자를 기술하는지 검토

‧ 테스트 산출물

. 테스트 레벨별 테스트 관련 산출물을 식별하여 기술하고, 항목별 형상 관리 기준을

정의하는지 검토

‧ 테스트 교육

. 테스트 매니저, 테스트 분석/설계자, 테스트 수행자, 테스트 환경 관리자 등 테스트

담당자에게 필요한 교육 내용, 일정, 수강 대상을 기술하는지 검토


‧ SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 계획 수준 평가 시 활

용


활용

o KSEN.TE-20.10003 / SW테스트 설계 수준 평가 표준 체계

- 목적






‧ 이 표준의 목적은 실제 테스트를 수행하기 위하여 구체적인 테스트 케이스를 도출하는

테스트 설계관련 산출물에서 준수해야할 항목들을 식별하여 SW테스트 설계의 수준

평가를 위한 평가 항목으로 활용하는 것임



- 28 -

- 주요 내용

‧ 테스트 활동 중 실제 테스트를 수행하기 위하여 구체적인 테스트 케이스를 도출하는

테스트 설계 활동에서 준수해야할 항목들을 식별하였으며 SW테스트 설계에 대한 수

준 평가 항목은 아래의 평가 항목을 포함


테스트 설계 기법 및 선택 방법 Ÿ 테스트 설계 명세서

테스트 기능 항목 및 테스트 컨디션 도출 Ÿ 테스트 설계 명세서

테스트 케이스 도출 Ÿ 테스트 설계 명세서Ÿ 테스트 케이스 명세서

테스트 케이스 구성 요소 Ÿ 테스트 케이스 명세서

테스트 프로시저 도출 Ÿ 테스트 케이스 명세서

테스트 추적성 도출Ÿ 테스트 케이스 명세서Ÿ 테스트 설계 명세서

‧ 테스트 설계 기법 및 선택 방법

. 테스트 계획서에 있는 테스트 전략 내용을 반영하며 테스트 케이스 설계 기법이나

방법을 명시하는지 검토

‧ 테스트 기능 항목 및 테스트 컨디션 도출

. 테스트 베이시스 분석을 통해 테스트 기능 항목을 도출하고 각 테스트 기능 항목에

대해 테스트 컨디션을 식별하는지 검토

‧ 테스트 케이스 도출

. 테스트 컨디션을 고려한 테스트 케이스를 작성하고, 리스크를 고려한 테스트 케이스

의 우선순위를 기술하는지 검토

. 에러처리, 예외처리, 이상처리 등과 같은 비정상 상황을 위한 테스트 케이스를 포함

하는지 검토

‧ 테스트 케이스 구성 요소

. 테스트 케이스는 사전 조건, 입력값, 기대 결과 값, 테스트 수행 절차, 사후 조건의

필수 구성 요소를 제시하는지 검토

‧ 테스트 프로시저 도출

. 효율적인 테스트 수행을 위하여 테스트 케이스의 우선순위를 고려하여 테스트 프로

시저를 작성하는지 검토

‧ 테스트 추적성 도출

. 테스트 베이시스, 기능 항목, 테스트 컨디션, 테스트 케이스 간의 추적성을 기술하는

지 검토




- 29 -

‧ SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 설계 수준 평가 시 활

용


활용

o KSEN.TE-20.10004 / SW테스트 수행 수준 평가 표준 체계

- 목적






‧ 이 표준의 목적은 테스트 활동 중 실제적으로 테스트 케이스 및 테스트 프로시저를 실

행하여 테스트를 진행하는 테스트 수행 활동에서 준수해야할 항목들을 식별하여 SW

테스트 수행의 수준 평가를 위한 평가 항목으로 활용하는 것임

- 주요 내용

‧ 실제적으로 테스트 케이스 및 테스트 프로시저를 실행하여 테스트를 진행하는 테스트

수행관련 산출물에서 준수해야할 항목들을 식별하였으며 SW테스트 수행에 대한 수준

평가 항목은 아래의 평가 항목을 포함



- 30 -


사전 테스트 체크리스트 작성Ÿ 사전 테스트 체크리스트Ÿ 테스트 환경 요구사항 명세서

사전 테스트 수행Ÿ 사전 테스트 체크리스트Ÿ 사전 테스트 로그Ÿ 테스트 환경 관리 명세서

테스트 케이스 및 테스트 프로시저 실행Ÿ 테스트 현황 보고서Ÿ 테스트 케이스 명세서

테스트 로그 기록Ÿ 테스트 로그Ÿ 테스트 케이스 명세서

테스트 실행 현황 관리 Ÿ 테스트 현황 보고서

테스트 결함 보고Ÿ 테스트 결함 보고서Ÿ 결함 관리 대장

테스트 결함 분류Ÿ 테스트 결함 보고서Ÿ 결함 관리 대장

테스트 결함 조치Ÿ 테스트 결함 보고서Ÿ 결함 관리 대장

결함 현황 관리Ÿ 테스트 현황 보고서Ÿ 테스트 결함 보고서

테스트 완료 기준 평가 Ÿ 테스트 현황 보고서

테스트 리포팅 Ÿ 테스트 현황 보고서

이해관계자 참여 Ÿ 테스트 결함 보고서

‧ 사전 테스트 체크리스트 작성

. 테스트 대상에 대한 테스트 실행 준비가 완료되었는지 검증하기 위한 체크리스트가

있는지 검토

‧ 사전 테스트 수행

. 사전 테스트 체크리스트를 활용하여 사전 테스트를 수행하는지 검토

‧ 테스트 케이스 및 테스트 프로시저 실행

. 계획된 순서에 의해 테스트 케이스 및 테스트 프로시저를 수행하며, 기대결과와 비

교하는지 검토

‧ 테스트 로그 기록

. 테스트 수행결과를 기록하며, 테스트 중인 소프트웨어, 테스트 도구, 테스트 수행시

간, 테스트 담당자 등 테스트 로그를 문서화하는지 검토

‧ 테스트 실행 현황 관리

. 작성된 테스트 케이스 대비 실행 완료된 테스트 케이스, 실행된 테스트 케이스의 성

공율 또는 실패율을 기록하는지 검토

‧ 테스트 결함 보고

. 기대 결과와 실제 결과를 비교하며, 불일치에 대해 결함 보고를 진행하는지 검토

‧ 테스트 결함 분류



- 31 -

. 테스트 결함의 원인을 분석하며, 결함의 유형, 심각도, 우선순위 등을 구분하여 관리

하는지 검토

‧ 테스트 결함 조치

. 결함 조치 결과를 확인하기 위해 재테스트 활동을 수행하며, 리그레션 테스트 활동

을 수행하는지 검토

‧ 결함 현황 관리

. 발견된 결함에 대한 보고 및 결함 현황에 대한 관리를 수행하는지 검토

‧ 테스트 완료 기준 평가

. 테스트 실행 결과가 테스트 계획서 상의 테스트 완료 기준을 만족하는지 확인하며,

완료 기준 계획과의 차이를 식별하고 문서화 하는지 검토

‧ 테스트 리포팅

. 테스트를 수행하면서 수집한 결함 및 테스트 진행 데이터를 정성적, 정량적으로 문

서화하는지 검토

‧ 이해관계자 참여

. 테스트 실행 현황, 결함 현황 등을 이해관계자와 공유하는지 검토


‧ SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 수행 수준 평가 시 활

용


활용

o KSEN.TE-20.10005 / SW테스트 보고 수준 평가 표준 체계

- 목적






‧ 이 표준의 목적은 테스트의 현황과 테스트의 수행 결과에 대해 평가하고 공유하기 위

한 테스트 보고 관련 산출물에서 준수해야할 항목들을 식별하여 SW테스트 보고의 수

준 평가를 위한 평가 항목으로 활용하는 것임

- 주요 내용

‧ 테스트의 현황과 테스트의 종료 결과에 대해 평가하고 공유하기 위한 테스트 보고관련

산출물에서 준수해야할 항목들을 식별하였으며 SW테스트 보고에 대한 수준 평가 항목

은 아래의 평가 항목을 포함



- 32 -

평가 항목 관련 테스트 산출물

테스트 진행 현황 Ÿ 테스트 현황 보고서

제품 품질 현황Ÿ 테스트 현황 보고서Ÿ 테스트 종료 보고서

이슈 분석 Ÿ 테스트 종료 보고서

리스크 변경 기록Ÿ 테스트 계획서Ÿ 테스트 현황 보고서

정기 보고 Ÿ 테스트 현황 보고서

재사용 테스트 자산 식별 Ÿ 테스트 종료 보고서

테스트 평가 Ÿ 테스트 종료 보고서

‧ 테스트 진행 현황

. 테스트 진행 상황에 대해 모니터링하고, 이슈를 식별하여 보고서를 작성하는지 검토

‧ 제품 품질 현황

. 제품 품질에 대한 리뷰를 위해 제품 품질 현황, 테스트 제품 리스크 현황을 분석하

고 보고하는지 검토

‧ 이슈 분석

. 테스팅 수행기간 동안 발생한 이슈 수집 및 분석을 수행하는지 검토

‧ 리스크 변경 기록

. 제품 및 테스트 프로젝트 리스크에 대한 문서를 리뷰하고, 신규 리스크와 기존 리스

크에 대한 변경 내용을 보고서에 기록하는지 검토

‧ 정기 보고

. 모니터링을 통해서 식별된 내용을 주기적(주간, 월간 등)으로 프로젝트 이해관계자

에게 보고하는지 검토

‧ 재사용 테스트 자산 식별

. 재사용 가능한 테스트 자산을 식별하여 형상관리 방안에 준하여 관리하고 이를 이해

관계자와 공유하는지 검토

‧ 테스트 평가

. 테스트 종료 보고서를 통해 테스트 목적의 적합성, 테스트 접근법의 적합성, 테스트

효과성, 테스트 프로세스 등에 대한 평가를 기술하는지 검토


‧ SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 보고 수준 평가 시 활

용


활용



- 33 -

4. 기타 활동 결과

o 활용 사례

- SW 테스트 수행 산출물 작성 튜토리얼 세미나

‧ 주요 내용

. 중소 SW R&D기업의 SW 개발 과정에서의 테스트 수준 평가 체계

. SW 공학에 기반한 SW 테스트 수행 산출물 작성

‧ 파급 및 기대 효과

. 중소 SW R&D기업의 SW 테스트 인식 제고

. 중소 SW R&D기업 내 SW 테스트 평가 표준 적용 동기 부여

‧ 진행 일정

. 2016.09.02 SW 테스트 수행 산출물 작성 튜토리얼 세미나(1차) - 투비소프트 등

. 2015.09.05 SW 테스트 수행 산출물 작성 튜토리얼 세미나(2차) - 인피닉 등

. 2015.09.06 SW 테스트 수행 산출물 작성 튜토리얼 세미나(3차) - 비즈피어 등

. 2015.09.07 SW 테스트 수행 산출물 작성 튜토리얼 세미나(4차) - 가온테스트, 롯

데닷컴 등

. 2015.09.09 SW 테스트 수행 산출물 작성 튜토리얼 세미나(5차) - Ebay, 우아한 형

제들 등

. 2015.09.12 SW 테스트 수행 산출물 작성 튜토리얼 세미나(6차) - 와이즈넛 등

- 제1회 SW 테스트 디자인 컨테스트 (2016.10.18)

‧ 주요 내용

. 국내 최초 소프트웨어 테스트 디자인 컨테스트를 개최

. 소프트웨어 테스트 엔지니어 및 관련 전문가들의 소프트웨어 테스트 디자인 역량 평

가

. 제정한 SW테스트 심사 표준 체계들을 SW 테스트 디자인 컨테스트의 심사 기준으

로 활용

‧ 기대 효과

. 소프트웨어 테스트 분석, 설계의 중요성 전파

. 테스트 엔지니어의 경험 공유의 장 제공

. 소프트웨어 테스팅에 대한 창조적이고 흥미로운 경험 기회 제공

. 소프트웨어 테스팅 산업 및 기술에 대한 홍보

- 표준 확산 적용

‧ 주요 내용

. 체계적인 SW 테스트 절차 교육

. 중소 SW R&D기업의 SW 개발 프로젝트에서의 테스트 수준 평가



- 34 -

‧ 파급 및 기대 효과

. 중소 SW R&D기업의 SW 테스트 관련 검증 역량 강화

. SW R&D 과제 결과물에 대한 객관적인 품질 요건 확보

‧ 중소 R&D기업 적용

. 스마트쿱 (2016.12.01)

. 애즈원아이앤씨 (2016.12.01)

. 네무스텍 (2016.12.01)

. 지엘티코리아 (2016.12.02)

. 위키박스 (2016.12.02)

. 유아이 (2016.12.02)

. 소노엠 (2016.12.02)

. 와이젬 (2016.12.02)

. 마크애니 (2016.12.05)

. 가시 (2016.12.05.) 외 21개 기업 적용



- 35 -

제 4 장 2017년도 주요 수행계획

제 1 절 2017년도 SW공학기술 포럼 연구목표

- TTA 표준 제정 : SW테스트 정책 수준 평가 표준 체계

- TTA 표준 제정 : SW테스트 계획 수준 평가 표준 체계

- TTA 표준 제정 : SW테스트 설계 수준 평가 표준 체계

- TTA 표준 제정 : SW테스트 수행 수준 평가 표준 체계

- TTA 표준 제정 : SW테스트 보고 수준 평가 표준 체계

제 2 절 수행 과제 내용

- SW 품질 검증에서 가장 중요한 활동인 SW 테스트와 관련하여 테스트 정책과 전략을

세우고, 테스트를 계획하고, 테스트케이스를 설계하고, 이를 기반으로 테스트를 수행하

고, 최종적으로 테스트 보고 절차를 포함한 전반적인 테스트 활동에 대한 수준 평가 체

계에 대한 국내 R&D 기업에 대한 확산 추진

- 테스트 디자인 컨테스트 및 중소 R&D 기업의 사례를 통한 포럼 표준의 보완 사항 도출

및 개선을 통하여 보다 효과적이고 실용적으로 접근 가능한 TTA 표준 제정 추진

- TTA 표준 제정을 바탕으로 국내 R&D 기업들에 대한 확산 적용을 통하여 SW 테스팅

관련 산업 발전 인프라의 확산에 기여

제 3 절 수행 과제 방법

- 본 과제의 수행 조직인 SW공학기술표준화 분과 외에 K.SEN 산하 SW테스팅분과와의

협력 체계 구성 (SW테스팅 분과에는 한국SW산업협회 산하 SW테스팅 포럼이 구성되어

있으며, SW테스팅 포럼은 기술관련 연구 실적 및 일본 테스팅 협회와의 기술적 교류가

많은 단체임)

- 국내 테스팅 관련 업계는 물론 R&D 기업들과의 협력을 통해 SW테스트 관련 수준 평가

에 관련하여 보다 실용적이고 국내 R&D 환경에 적합한 평가 체계를 수립하고 확산 추

진

- 일본 ASTER 및 아시아권 국가들의 테스팅 단체들과의 상호 검토를 통해 보완 추진 (추

후 테스트 설계 컨테스트의 국제 대회 개최 예정)



- 36 -

제 5 장 결 론

제 1 절 결론

- 국내 SW R&D 환경에 적합한 SW 테스팅에 대한 체계적인 평가 체계가 미비하여 SW

품질에 대한 객관적인 검증이 어려웠으나, 본 과제를 통해 SW R&D 수행 과정에서의

SW 테스팅 수준 평가에 대한 객관적 기준 수립은 물론 SW품질에 기반한 개발 체계 조

성 및 역량 강화에 대한 인식 확립의 계기가 되었다고 평가됨

- 특히 제1회 소프트웨어 테스트 디자인 컨테스트의 개최를 통하여 소프트웨어 테스트의

중요성에 대한 인식을 높이고 소프트웨어 테스트 기술 경험 공유의 기회를 제공함은 물

론 포럼에서 제정한 수준 평가 체계들의 심사 기준으로의 활용을 통하여 테스트 수준

평가 체계의 적용에 대한 가능성을 확인함

- 다만, 사전 조사 및 기반 준비 등으로 인하여 관련 표준에 대한 준비가 빠르게 진행되지

못하고, 이로 인해 TTA 표준화 제정과 관련한 일정 계획에 다소 차질이 있어 올해 과제

수행 기간 내에 TTA 표준으로의 제정까지는 완료하지 못하였으며, 내년도에 보다 적극

적인 보완 및 대응을 통하여 TTA 표준으로의 제정을 달성할 계획임

제 2 절 기대효과

o 정책 및 산업에서의 활용

- 본 표준 기술을 적용하여 국가 SW R&D 수행 결과평가 및 심사 시 수검자와 피검자의

수준과 견해 차이를 해소하기 위한 객관적 검증 조건으로 활용이 가능할 것으로 기대됨

- 이를 통해 각종 산업 분야에서 SW 활용의 높은 의존으로 인한 고품질·저비용·적시성을

갖춘 소프트웨어 개발 체계 확립의 토대 마련

o SW 글로벌 시장 진출의 역량 확보

- SW 글로벌 시장의 높은 품질 장벽을 넘기 위한 효과적 접근 전략으로의 활용 가능성이

기대됨

- 특히 SW 글로벌 시장에서 요구되는 품질활동에 대한 근거 제시의 방법으로 활용이 기

대됨

o SW 테스팅 시장 및 인프라의 올바른 방향 수립

- 현 저가(노동기반) 경쟁 위주의 SW 테스팅 시장의 기술 기반으로의 발전을 위한 기반

을 조성하고, 유럽·일본 등 지식 경합 기반의 산업 발전 인프라의 한국형으로의 정착에

대한 방향 수립에 긍정적인 요소로 작용할 것으로 기대됨



- 37 -

표준화 추진과제(표준/기고서) 요약서 작성

1. 2016년도 국내표준화 활동실적-표준

표준(안)명 - 국문 : SW테스트 정책 수준 평가 표준 체계- 영문 : Maturity Evaluation Standard for Software Test Policy

표준 상태 ① 포럼표준 제정 ■ ② TTA표준 제정 □ ③ 국가표준 제안/채택□, 표준화 내용요약 (주요 표준화 대상 및 범위)

1. 표준의 목적- 테스트의 방향성과 목표를 정의하는 테스트 정책 관련 산출물에서 준수해야할 항목들을 식별하여 SW테스트 정책의 수준 평가를 위한 평가 항목으로 활용

2. 추진 경위 ① 포럼 표준 개발 시작일 : 2016년 4월 1일 ② 포럼 표준 제정일 : 2016년 8월 17일 ③ 포럼 표준 문서번호 : KSEN.TE-20.10001

3. 대상 및 범위 SW테스트 정책 수준 평가 항목은 테스트의 방향성과 목표를 정의하는 테스트 정책 관련 산출물에서 준수해야할 항목들을 식별하였으며, SW테스트 정책의 수준 평가를 위한 평가 항목으로 활용 가능하도록 개발하였다. SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 정책 수준 평가 시 활용할 수 있으며, 본 표준에 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성할 수 있다.

4. 내용요약 SW테스트 시 테스트 정책 관련 산출물에서 준수해야 할 항목들을 아래와 같이 식별하고, 관련 테스트 산출물에서 각 항목들의 검토 내용을 기술 - 테스트 목표 - 테스트 프로세스, 테스트 조직 - 이해관계자 - 제품의 공통 리스크 분석 및 식별 - 테스트 접근법 정의 - 테스트 환경 및 도구 - 테스트 성과지표 정의 및 배포 - 테스트 산출물 정의 및 형상관리 방안

5. 기대효과(표준활용)- SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 정책 수준 평가 시 활용- 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성하여 활용

Reference 참고자료

국내외 표준과 관련성

붙임



- 38 -

표준(안)명 - 국문 : SW테스트 계획 수준 평가 표준 체계- 영문 : Maturity Evaluation Standard for Software Test Plan


1. 표준의 목적- 테스트를 효과적이고 효율적으로 수행하기 위한 테스트 계획 수립과 관련된 산출물에서 준수해야할 항목들을 식별하여 SW테스트 계획의 수준 평가를 위한 평가 항목으로 활용


3. 대상 및 범위 SW테스트 계획 수준 평가 항목은 테스트를 효과적이고 효율적으로 수행하기 위한 테스트 계획 수립과 관련된 산출물에서 준수해야할 항목들을 식별하였으며, SW테스트 계획의 수준 평가를 위한 평가 항목으로 활용 가능하도록 개발하였다. SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 계획 수준 평가 시 활용할 수 있으며, 본 표준에 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성할 수 있다.

4. 내용요약 SW테스트 시 테스트 계획 수립 관련 산출물에서 준수해야 할 항목들을 다음과 같이 식별하고, 관련 테스트 산출물에서 각 항목들의 검토 내용을 기술 - 테스트 목표 - 테스트 범위 - 고려사항 및 제약사항 - 이해관계자 및 이해관계자와의 커뮤니케이션 - 제품 리스크 식별 및 분석 - 프로젝트 리스크 식별 및 분석 - 테스트 전략 - 테스트 중단 및 재시작 기준 정의 - 테스트 종료 기준 - 테스트 공수 산정 - 테스트 일정 - 테스트 산출물 - 테스트 교육

5. 기대효과(표준활용)- SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 계획 수준 평가 시 활용- 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성하여 활용





- 39 -

표준(안)명 - 국문 : SW테스트 설계 수준 평가 표준 체계- 영문 : Maturity Evaluation Standard for Software Test Design


1. 표준의 목적- 실제 테스트를 수행하기 위하여 구체적인 테스트 케이스를 도출하는 테스트 설계관련 산출물에서 준수해야할 항목들을 식별하여 SW테스트 설계의 수준 평가를 위한 평가 항목으로 활용


3. 대상 및 범위 SW테스트 설계 수준 평가 항목은 테스트 활동 중 실제 테스트를 수행하기 위하여 구체적인 테스트 케이스를 도출하는 테스트 설계 활동에서 준수해야할 항목들을 식별하였으며, SW테스트 설계의 수준 평가를 위한 평가 항목으로 활용 가능하도록 개발하였다. SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 설계 수준 평가 시 활용할 수 있으며, 본 표준에 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성할 수 있다.

4. 내용요약 SW테스트 시 테스트 설계 관련 산출물에서 준수해야 할 항목들을 아래와 같이 식별하고, 관련 테스트 산출물에서 각 항목들의 검토 내용을 기술 - 테스트 설계 기법 및 선택 방법 - 테스트 기능 항목 및 테스트 컨디션 도출 - 테스트 케이스 도출 - 테스트 케이스 구성 요소 - 테스트 프로시저 도출 - 테스트 추적성 도출

5. 기대효과(표준활용)- SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 설계 수준 평가 시 활용- 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성하여 활용





- 40 -

표준(안)명 - 국문 : SW테스트 수행 수준 평가 표준 체계- 영문 : Maturity Evaluation Standard for Software Test Execution


1. 표준의 목적- 실제적으로 테스트 케이스 및 테스트 프로시저를 실행하여 테스트를 진행하는 테스트 수행 활동에서 준수해야할 항목들을 식별하여 SW테스트 수행의 수준 평가를 위한 평가 항목으로 활용


3. 대상 및 범위 SW테스트 수행 수준 평가 항목은 실제적으로 테스트 케이스 및 테스트 프로시저를 실행하여 테스트를 진행하는 테스트 수행관련 산출물에서 준수해야할 항목들을 식별하였으며, SW테스트 수행의 수준 평가를 위한 평가 항목으로 활용 가능하도록 개발하였다. SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 수행 수준 평가 시 활용할 수 있으며, 본 표준에 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성할 수 있다.

4. 내용요약 SW테스트 시 테스트 수행 관련 산출물에서 준수해야 할 항목들을 아래와 같이 식별하고, 관련 테스트 산출물에서 각 항목들의 검토 내용을 기술 - 사전 테스트 체크리스트 작성 - 사전 테스트 수행 - 테스트 케이스 및 테스트 프로시저 실행 - 테스트 로그 기록 - 테스트 실행 현황 관리 - 테스트 결함 보고 - 테스트 결함 분류 - 테스트 결함 조치 - 결함 현황 관리 - 테스트 완료 기준 평가 - 테스트 리포팅 - 이해관계자 참여

5. 기대효과(표준활용)- SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 수행 수준 평가 시 활용- 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성하여 활용





- 41 -

표준(안)명 - 국문 : SW테스트 보고 수준 평가 표준 체계- 영문 : Maturity Evaluation Standard for Software Test Report


1. 표준의 목적- 테스트의 현황과 테스트의 수행 결과에 대해 평가하고 공유하기 위한 테스트 보고 관련 산출물에서 준수해야할 항목들을 식별하여 SW테스트 보고의 수준 평가를 위한 평가 항목으로 활용


3. 대상 및 범위 SW테스트 보고 수준 평가 항목은 테스트의 현황과 테스트의 종료 결과에 대해 평가하고 공유하기 위한 테스트 보고관련 산출물에서 준수해야할 항목들을 식별하였으며, SW테스트 보고의 수준 평가를 위한 평가 항목으로 활용 가능하도록 개발하였다. SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 보고 수준 평가 시 활용할 수 있으며, 본 표준에 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성할 수 있다.

4. 내용요약 SW테스트 시 테스트 보고 관련 산출물에서 준수해야 할 항목들을 아래와 같이 식별하고, 관련 테스트 산출물에서 각 항목들의 검토 내용을 기술 - 테스트 진행 현황 - 제품 품질 현황 - 이슈 분석 - 리스크 변경 기록 - 정기 보고 - 재사용 테스트 자산 식별 - 테스트 평가

5. 기대효과(표준활용)- SW 개발 프로젝트의 테스트 및 테스트 프로젝트에서의 테스트 보고 수준 평가 시 활용- 제시된 항목을 기반으로 조직, 프로젝트 상황, 제품의 특성에 따라 다르게 구성하여 활용





- 42 -

2. 2016년도 국제표준화 활동실적-기고서

기고서 명 - 국문 명 : - 영문 명 :

작성자 인적사항성명 소속직급 연락처

제출 표준화 기구기구명 관련기술위원회회의명 회의기간 2016. . ~ 2016. .장소

기고서 상태 ① 기고서 제안 □, ② 기고서 반영□, ③ 기고서 제정□

표준화 내용요약 (주요 표준화 대상 및 범위) 1. 작성배경 및 목적

2. 기고서 주요 내용

3. 중요도


국내표준화 여부



- 43 -

3. 회원사 명부 작성

o 기관 회원 : 8개 기관

구분 NO 회원사 명 비고

산업체

(대기업)

1 2345678910

산업체

(중소・벤처)

11 씽크포비엘 의장사12 비즈피어13 GTG14 TQ15 에이펙스16 한톨17 오블리스18 투이솔루션

연구 기관192021

학 계

2223242526

o 개인회원 : 34명



- 44 -

NO 성명 소속 직책 비고1 박지환 씽크포비엘 대표2 김정선 씽크포비엘 과장3 김은영 씽크포비엘 과장4 천선일 씽크포비엘 대리5 박민정 씽크포비엘 사원6 심태연 오블리스 대표7 김도훈 에이펙스소프트 대표8 권영기 에이펙스소프트 수석9 박영근 비즈피어 상무10 최도연 씽크포비엘 대리11 편해란 비즈피어 과장12 오명운 SK플레닛 수석13 최정일 LGCNS 수석14 김지호 에이펙스소프트 책임15 이현주 TQ 대표16 임경모 씽크포비엘 부장17 장석주 한국폴리텍대학 교수18 김은정 씽크포비엘 이사19 박수정 TQ 선임20 최승희 TQ 선임21 조경휘 GTG 수석22 조경휘 GTG 부사장23 홍성호 투비소프트 그룹장24 김기범 GTG 수석25 김대학 씽크포비엘 과장26 최장식 투이솔루션 대표27 장일수 파수닷컴 상무28 강형서 한톨 대표29 조한형 투비소프트 팀장30 최정훈 비즈피어 차장31 김형진 비즈피어 대표컨설턴트32 최애숙 비즈피어 대표컨설턴트33 채우병 비즈피어 대표컨설턴트34 정상훈 비즈피어 대표컨설턴트

4. 약어표

5. 참고문헌 등.



주 의

1. 본 보고서는 미래창조과학부에서 정보통신진흥기금으로 수

행한 정보통신방송표준개발사업의 연구보고입니다.

2. 본 연구보고서의 내용을 대외적으로 발표할 때에는 반드시 정

보통신방송표준개발사업의 결과임을 밝혀야 합니다.

2016년도 ICT표준화포럼

최종연구보고서

편집 및 발행인 : 박재문

발행처 : 한국정보통신기술협회

463-824

경기도 성남시 분당구 분당로 47

TEL : +82-31-724-0114

FAX : +82-31-724-0009

sw공학기술표준화 포럼운영 - tta.or.kr È& ¢Îj 6g =vxÌ_£ ,s ljq ... (eng) sw...

Documents