정책미래의 예측정책점검 및 평가

서울대학교 의과대학의료관리학교실

교수 김 영 치Young Chi Kim, MD, PhD, MPH

정책미래의 예측

Ⅰ. 정책분석에서의 예측

Ⅱ. 예측의 접근방법

Ⅲ. 추세연장적 예측

Ⅳ. 이론적 예측

Ⅴ. 판단적 예측

정책분석에서의 예측

예측의 형태 – 투사, 예견, 추측

예측의 목적 – 미래에 실현될 가능성들 중에서 최선의 가능 행동노선이 택해지도록 계획하고 정책을 입안하기 위함

예측의 한계 – 예측의 정확성, 비교적인산출(comparative yield), 맥락(context)

미래의 종류- 잠재적 미래, 개연적 미래, 규범적 미래

미래사회의 세 가지 유형

개연적 미래(일어날 것같은 상태)

규범적 과거(일어났어야했던 과거)

규범적 미래(일어나야만하는 상태)

과거 현재 미래

개연적 과거(일어났던 상태)

잠재적 미래(일어날 수있는 상태)

잠재적 과거(일어날 수있었던 상태)

예측의 접근방법

추세연장(Trend Extrapolation): 귀납적 논리(inductive logic)

이론적 가정(Theoretical Assumptions): 연역적 논리(deductive logic)

식견 있는 판단(Informed Judgments): 역류적 논리(retroductive logic) - 경험과 통찰력

추세연장적 예측

전통적 시계열분석(Classical Time-series Analysis)

선형 경향추정(Linear Trend Estimation)

지수가중(Exponential Weighting)

자료변환(Data Transformation)

격변방법론(Catastrophe Methodology)

이론적 예측

이론지도작성(Theory Mapping)

이론적 모형화(Theoretical Modeling)

인과모형화(Causal Models)

회귀분석(Regression Analysis)

구간(점)추정(Interval Estimates)

상관분석(Correlational Analysis)

판단적 예측

델파이 기법(Delphi Technique)

교차영향분석(Cross-impact Analysis)

실현가능성 평가(Feasibility Assessment)

정책 델파이의 원칙

선택적 익명(selective anonymity)

반복(iteration)

통제된 환류(controlled feedback)

식견 있는 다수의 창도(informed multiple advocacy)

양극화된 통계처리(polarized statistical response)

구성된 갈등(structured conflict)

컴퓨터 회의방식(computer conferencing)

정책 델파이의 단계<1단계>: 이슈의 구체화(issue specification)

<2단계>: 창도자 선정(selection of advocates)

<3단계>: 질문지 설계(questionnaire design)

<4단계>: 1차 응답결과의 분석(analysis of first-round results)

<5단계>: 후속 질문지개발(development of subsequent questionnaires)

<6단계>: 회의소집(organization of group meeting)

<7단계>: 최종보고서 작성(preparation of final report)

한 정책 델파이 질문지에 사용된 항목의 유형과 척도

항목유형 항목 척도

예측 국립정신병원 연구진의 최근 추산에 따르면 확실히 믿을 만하다 1( )1000명당 마리화나 사용자수가 2004년에는 믿을 만하다 2( )1994년의 두 배가 된다고 한다. 당신은 이 믿기 어렵다 3( )추산이 얼마나 믿을 만하다고 생각하는가? 믿을 수 없다 4( )

모르겠다 5( )

이슈 마리화나의 개인적 사용금지를 법제화 매우 중요 1( )[해야 한다, 하지 말아야 한다]: 하나만 중요 2( )0표 하라 조금 중요 3( )이 이슈는 다른 것보다 상대적으로 얼마나 중요치 않음 4( )중요한가? 모르겠다 5( )

목표 국가정책의 목표는 약물의 이용과 남용 매우 바람직 1( )사이의 차이를 대중에게 일깨워주는 데 바람직 2( )있다. 이러한 목표가 얼마나 바람직한가? 바람직하지 않음 3( )

매우 바람직하지 않음 4( )모르겠다 5( )

대안 마약남용에 대한 교육 프로그램이 일반 대중 확실히 실현 가능 1( )의 잠재적 사용자를 감소시키는 데 도움이 아마도 실현 가능 2( )된다고 제안되었다. 이 정책대안은 얼마나 아마도 실현 불가능 3( )실현 가능한가? 확실히 실현 불가능 4( )

모르겠다 5( )

정책미래의 예측접근방법 기초 적합한 기법 산출물연장적 예측 추세연장 전통적 시계열분석 투사

선형경향추정지수가중자료변환격변방법론

이론적 예측 이론 이론지도작성 예견인과모형화회귀분석구간(점)추정상관분석

판단적 예측 식견 델파이 기법 추측있는 교차영향분석판단 실현가능성평가

벽신 현 봉

그대 벽 앞에 섰을 때그 벽에 기어오르지 말라

벽이 그대를 가로막을 때그 벽에 머리를 부딪치지 말라

벽 앞에서 그대는 눈을 감고벽이 그대의 친구가 되게 하라

그대 마음의 눈에벽 너머의 세상이 보일 때까지그대 다만 기다려라

그대 어깨에 날개가 돋아나지 않아도그대는 그 벽을 넘을 수 있으리니

정책결과의 점검(Monitoring)

Ⅰ. 정책분석에 있어서의 점검

Ⅱ. 정책결과 점검의 접근방법

Ⅲ. 정책결과 점검을 위한 기법

정책분석에 있어서의 점검점검의 네 가지 주요기능

1) 순응(compliance)

2) 감사(auditing)

3) 회계(accounting)

4) 설명(explanation)

정보의 출처

정책결과의 유형

- 정책산출(policy outputs)

- 정책영향(policy impacts)

정책행위의 유형

- 정책투입(policy inputs)

- 정책과정(policy processes)

정책결과 점검의 접근방법

사회체제회계(social system accounting): 사회지표(social indicators)

사회실험(social experimentation): 직접통 제(direct control), 비교집단(comparison group), 무작위배정(random assignment)

사회감사(social auditing)

연구와 실제의 종합(research and practice synthesis): 사례조사(case survey), 연구조사(research survey)

정책결과 점검을 위한 기법

그래프에 의한 표시(graphic display)

지니 지수(Ginni index)

도표에 의한 표시(tabular display)

지수치(index numbers)

단절적 시계열분석(interrupted time-series analysis)

통제-시계열분석(control-series analysis)

회귀-불연속분석(regression-discontinuity analysis)

정책성과의 평가

Ⅰ. 정책분석에 있어서 평가

Ⅱ. 정책성과 평가의 접근방법

Ⅲ. 정책성과 평가를 위한 기법

평가의 기능

정책성과(policy performance)에 대한신뢰성 있고 타당성 있는 정보를 제공

목표와 목적을 선택하는데 있어서 관련된 가치들의 명료화(clarification)와 비판(critique)에 기여

문제의 구조화(problem structuring)와제안(recommendation), 및 다른 정책분석방법의 적용에 기여

정책성과의 평가기준

효과성: 가치 있는 결과가 달성되었는가?

능률성: 가치 있는 결과를 달성키 위해 얼마나 많은 노력이 요구되었는가?

충족성: 가치 있는 결과의 달성이 문제를 어느 정도 해결했는가?

형평성: 비용과 편익이 상이한 집단들 간에 형평성 있게 분배되고 있는가?

대응성: 정책결과는 특정 집단의 요구, 선호 또는 가치를 만족시키고 있는가?

적합성: 바람직한 결과가 실제로 가치 또는 값어치가 있는가?

정책성과 평가의 접근방법 및 기법

유사평가(Pseudo-Evaluation): 그래프에의한 표시, 도표에 의한 표시, 지수값, 통제-시계열분석, 회귀-불연속분석

공식적 평가(Formal Evaluation): 목표지도작성, 가치의 명료화, 가치비판, 제약조건지도작성, 교차영향분석, 할인

결정이론적 평가(Decision-Theoretic Evaluation): 자유토론, 정책논증분석, 정책 델파이, 사용자-조사분석

Problem-Solving Process

1Verify, Define, andDetail the Problem

2Establish Evaluation Criteria

3IdentifyAlternative Policies

4EvaluateAlternative Policies

5SelectPreferred Policies

6MonitorPolicy Outcomes

The Policy Cycle

A Problem for Government

STAGE 6:Policy Termination

STAGE 1: Agenda Setting

STAGE 2:Policy FormulationSTAGE 5: Policy Change

STAGE 4:Policy Evaluation

STAGE 3: Policy Implementation