MakeIt(메이크잇) 도움말

(윈도우즈 버전)

5. 평가 (입력)

5. 평가 (입력)

평가(입력) 탭(Tab)에서는 모델구축에서 만든 모델과 평가방법 설정에서 지정한 평가방법에 따라 평가자들이 각 모델 요소에 대하여 자신의 평가 값을 입력할 수 있습니다.

  5-1. 입력 방법

입력 방법 패널(Panel)에는 2개의 단추가 있습니다.

    5-1-1. 평가자 별 직접입력

‘평가자별 직접입력’ 아이콘을 클릭하면, 각 평가자가 평가 값을 입력할 수 있는 화면이 나타납니다.

마우스나 키보드를 활용하여 평가 값을 입력할 수 있습니다. 매트릭스 별 평가, 일관성 검증, 페이지 선택, 평가자 선택의 단계가 있습니다.

[매트릭스 별 평가]

매트릭스 별 평가는 평가방법 설정에서 지정한 방법으로 쌍대비교와 직접입력의 2가지 방법이 있습니다.

    쌍대비교

쌍대비교 평가는 기준과 대안를 쌍으로 묶어 1대1로 여러 번 비교합니다. 쌍으로 묶은 두 개 요소 중에서 어느 것이 더 중요한지, 얼마만큼 중요한 지를 판단합니다. 예를 들어, 프로젝트의 목적인 [나에게 가장 적합한 휴대폰 선택] 의 1차 평가기준 간의 상대적 중요도를 판단합니다.

첫 번째 1대1 비교 대상은 ‘가격(공기계)’ 과 ‘성능’입니다. ‘가격(공기계)’이 ‘성능’보다 더 중요하다고 판단하고(방향). 더 중요한 정도로 ‘상당히’ 더 중요하다고 판단하였다면(정도). 이 두 가지를 종합하여 “‘가격(공기계)’이 ‘성능’보다 ‘상당히’ 더 중요하다.” 가 됩니다. 아래 그램에서와 같이 이에 해당되는 셀을 마우스 클릭합니다.

두 번째 1대1 비교 대상은 ‘성능’ 과 ‘디자인’입니다. ‘성능’과 ‘디자인’은 동등하게 중요하다고 판단하였다면, 이에 해당되는 셀을 선택합니다.

이와 같은 방식으로 평가를 진행합니다. 모든 1대1 비교가 완료되면 아래 화면과 같이 나타납니다. 평가가 완료되면 매트릭스의 맨 오른쪽에 ‘판단 도우미’ 열이 나타납니다.

판단 도우미는 논리적으로 향상된 결과가 도출될 수 있도록 지원하는 기능을 수행합니다. 예를 들어, 판단 도우미 열에서 ‘1’ 번이 나타난 행의 판단을 수정하면 논리적으로 더 좋은 결과가 도출된 가능성이 가장 높아집니다. ‘2’ 번이 나타난 행의 판단을 수정하면 효과가 2번째로 좋아 질 것으로 예상됩니다. 판단 도우미 기능의 활용에 대해서는 뒤에서 자세히 설명합니다.

아래 부분에 나타나는 결과 그래프는 기본적으로 입력 순서대로 출력됩니다. 그래프를 마우스로 클릭하면 내림차순, 오름차순 순으로 정렬이 가능합니다.

‘표로 보기’ 단추를 클릭하면 시트 형식으로 결과를 살펴볼 수 있습니다. 그리고 해당 내용을 복사해서 외부 프로그램으로 보내 추가 작업을 할 수 있습니다. 그래프로 보기 단추를 클릭하면 다시 그래프 형식으로 결과가 나타납니다.

* 비일관성비율과 판단 도우미는 다음 단계(5-1-1-2. 일관성 검증)를 참고해주세요.

    직접입력

직접입력은 기준 또는 대안에 절대 점수를 입력하여 평가하는 방법입니다. 예를 들어 [성능]의 하위 기준인 [카메라]에 대한 대안의 상대적 선호도를 판단하는 경우, 휴대폰 별 카메라 화소수를 활용합니다. 카메라 화소 수는 높을수록 좋기 때문에 평가방법 설정에서 입력 값이 클수록 더 좋게 평가되도록 설정합니다.

직접입력을 완료하면 아래 화면과 같이 나타납니다.

위 그림에서 아래 부분의 결과 그래프는 입력 순서대로 출력됩니다. 마우스로 클릭하면 내림차순, 오름차순 순으로 정렬할 수 있습니다.

‘표로 보기’ 단추를 클릭하면 시트 형식으로 조회할 수 있습니다. 그리고 해당 내용을 복사해서 외부 프로그램으로 보내 추가 작업을 할 수도 있습니다. 그래프로 보기 단추를 클릭하면 다시 그래프 형식으로 결과가 출력됩니다.

    일관성 검증

평가방법에서 쌍대비교로 판단할 경우에만 일관성 검증이 가능합니다.

매트릭스에서 쌍대비교 평가를 완료하면 하위요소의 상대적 중요도 그래프(또는 표)의 아래쪽에 비일관성비율이 자동 계산되어 나타납니다(빨간 색으로 표시). 비일관성비율은 쌍대비교한 평가 값들의 논리적 일관성이 얼마나 유지되었는지를 알려주는 것으로 값이 클수록 논리적 일관성이 떨어진 평가임을 의미합니다. 비일관성비율이 0.1보다 클 경우에는 일부 평가를 다시 해서 비일관성비율을 낮춰야 합니다. 논리적 일관성이 떨어지는 평가를 찾기 어려울 경우에는 프로그램의 ‘판단 도우미’를 활용하여 비일관성비율을 낮출 수 있습니다.

판단 도우미에 1, 2, 3 등의 숫자는 개선 효과가 클 것으로 예상되는 순위를 의미합니다. 숫자를 클릭하면 일종의 최적해가 빨간색으로 표시됩니다. 이를 참고해서 자신이 평가들 중 일관성이 떨어지는 평가를 찾으면 보다 쉽게 일관성 검증을 진행할 수 있습니다.

예를 들어 프로젝트의 목적인 [나에게 가장 적합한 휴대폰 선택] 의 1차 평가기준들에 대한 쌍대비교 평가 값에 대하여 일관성 검증을 실시합니다. 위 그림을 보면 현재 평가 값들의 비일관성비율은 0.2324로 0.1보다 큽니다. 따라서 재 판단이 필요합니다. 가장 일관성 개선효과가 큰 평가는 ‘가격(공기계)’와 ‘브랜드’에 대한 평가입니다. 해당 행의 오른쪽에 있는 판단 도우미 열에 있는 ‘1“을 클릭합니다.

그러면 아래 그림과 같이 최적해가 표시됩니다. 최적해를 참고하여 평가자 본인의 새로운 평가를 입력합니다(평가자는 최적해와 다른 판단을 할 수도 있습니다). 예를 들어, 최적해를 그대로 수용하려면 표시된 셀(9)을 선택합니다. 평가 값이 바뀌면서 상대적 중요도 및 비일관성비율이 다시 계산됩니다. 비일관성비율이 0.0934로 기준인 0.1보다 낮아졌습니다.

‘1’의 수정으로 비일관성비율이 0.1보다 작아지지 않거나, 기존의 판단을 계속 유지하는 것이 옳다고 생각하면 판단 도우미의 ‘2’, ‘3’ 등을 참고하여 비일관성비율이 0.1보다 작아질 때까지 판단을 재검토합니다.

   이동

 

매트릭스에 대한 평가 및 일관성 검증이 완료되면 다음 매트릭스(페이지)로 이동합니다. 이동 방법은 ‘매트릭스(페이지) 선택’을 활용해서 이동하는 방법과 ‘모델’ 트리구조를 활용해서 이동하는 방법 등 2가지가 있습니다. 평가 순서대로 진행하고 싶으시면 ‘메트릭스(페이지) 선택’을 활용합니다.

       매트릭스(패이지) 선택

화면 오른쪽 아래쪽에 있는 ‘메트릭스(페이지) 선택’ 부분에서 ‘>’ 단추를 클릭합니다.

그러면 다음 매트릭스가 선택됩니다. 모든 매트릭스에 대하여 앞에서 살펴본 방식으로 평가 및 일관성 검증을 실시합니다.

메트릭스(페이지) 선택에 관련된 단추의 기능은 아래 그림과 같습니다.

       모델 트리구조

화면 왼쪽 위에 있는 모델 트리구조를 활용하여 원하는 매트릭스(페이지)로 이동할 수 있습니다. ‘모델’에서 이동하고 싶은 1차기준 또는 하위기준을 선택합니다.

아래 그림과 같이 선택 기준에 대한 평가 페이지로  이동합니다.

    평가자 선택

특정 평가자의 평가 및 일관성 검증이 완료되면 다음 평가자의 평가 화면으로 이동합니다. 아래 그림은 첫 번째 평가자의 마지막 페이지입니다. 마지막 페이지에서는 다음 페이지 버튼이 없습니다. 왼쪽 아래에 있는 ‘평가자 선택’ 부분에서 ‘>’ 단추를 클릭합니다.

그러면 다음 평가자의 마지막 페이지가 나타납니다. ‘메트릭스(페이지) 선택’ 부분의 ‘|<’ 단추를 클릭하면 처음 페이지로 이동합니다.

그러면 아래 그림과 같이 다음 평가자에 대한 평가를 시작할 수 있는 화면이 나타납니다. 앞에서 설명한 것과 동일한 방법으로 다음 평가자에 대한 평가 및 일관성 검증을 실시합니다. 모든 평가자에 대하여 반복합니다.

    5-1-2. 모든 평가자 일괄입력

모든 평가자의 모든 매트릭스에 대한 평가를 한꺼번에 입력할 수 있습니다.

아래 그림에서 ‘자료 입력 범위’ 내에 평가 값을 입력합니다.

★ 범위 밖에 있는 셀을 수정하면 오류가 발생할 수 있습니다.

입력 내용이 잘 보이지 않을 경우 셀 크기를 늘릴 수 있습니다. 예를 들어, 목표/평가기준 열과 평가방법 열 사이 경계선에 마우스 커서를 대고 더블클릭하면 ‘목표/평가기준’ 열의 내용이 다 보일 정도로 열 너비가 조정됩니다.

    평가 값 입력 (쌍대비교)

우선 ‘평가방법’ 열의 값이 ‘쌍대비교’인지 확인합니다. 쌍대비교일 경우 ‘평가요소’ 열의 값은 ‘요소1----vs----요소2’ 형식으로 나타납니다. 요소1(왼쪽)이 요소2(오른쪽) 보다 더 중요할 경우에는 중요한 정도에 따라 ‘2’ ~ ‘9’ 의 값을 입력할 수 있습니다. 요소2(오른쪽)가 요소1(왼쪽) 보다 더 중요할 경우에는 중요한 정도에 따라 1/2 ~ 1/9 의 값을 입력합니다. 요소1(왼쪽)과 요소2(오른쪽)가 동등하게 중요할 경우에는 1을 입력합니다. 이 내용을 정리하면 아래 표와 같습니다.

구분	요소1(왼쪽)이 요소2(오른쪽) 보다 중요
중요한 정도	조 금	약 간	상 당 히	많 이	매 우 많 이	아 주 많 이	대 단 히 많 이	극 히 많 이
값	2	3	4	5	6	7	8	9
셀 입력 값	2	3	4	5	6	7	8	9

구분	요소1(왼쪽)과 요소2(오른쪽)가 동등하게 중요
중요한 정도	동등
값	1
셀 입력 값	1

구분	요소2(오른쪽)가 요소1(왼쪽) 보다 중요
중요한 정도	조 금	약 간	상 당 히	많 이	매 우 많 이	아 주 많 이	대 단 히 많 이	극 히 많 이
값	2	3	4	5	6	7	8	9
셀 입력 값	1/2	1/3	1/4	1/5	1/6	1/7	1/8	1/9

★ 평가방법이 쌍대비교일 경우에는 위 표에 나와 있는 셀 입력 값만 유효한 값으로 인식합니다. 이 외의 값이나 다른 내용의 입력 값은 무시되며 붉은 색으로 표시됩니다.

프로젝트의 목적인 [나에게 가장 적합한 휴대폰 선택] 의 1차 평가기준 간의 상대적 중요도를 판단합니다. 평가자2의 경우를 예로들어 설명하면 다음과 같습니다.

첫 번째 1대1 비교 대상은 ‘가격(공기계)’ 와 ‘성능’입니다. ‘“‘가격(공기계)’ 이 ‘성능’보다 약간 더 중요하다.”고 판단하면 3을 입력합니다.

두 번째 평가는 ‘성능’ 와 ‘디자인’에 대한 것입니다. ‘성능’과 ‘디자인’울 동등하게 중요하다고 판단하면, 해당하는 셀을 클릭한 후, ‘1’을 입력하고 엔터키를 칩니다.

세 번째 평가 대상인 ‘디자인’ 와 ‘브랜드’에 대해서는 “‘브랜드’가 ‘디자인’보다 조금(2) 더 중요하다.” 고 평가합니다. 이와 같은 방법으로 모든 평가를 입력합니다.

[참고] 

쌍대비교의 경우, 허용된 값 이외의 값을 입력하였을 경우 붉은 색으로 처리되며 입력한 값은 적용되지 않습니다. 정해진 규칙에 맞는 값을 입력해 주세요.

    평가 값 입력 (직접입력)

직접입력은 기준 또는 대안에 대해 직접 점수를 입력하여 평가하는 방법입니다. 예를 들어, [성능]의 하위 기준인 [카메라]에 대한 대안의 상대적 중요도를 판단합니다. 여기서는 휴대폰 별 카메라 화소수를 활용합니다. 카메라 화소 수는 높을수록 좋기 때문에 평가방법 설정에서 입력 값이 클수록 더 좋게 평가되도록 설정합니다.

입력할 셀을 클릭합니다. 그러면 셀이 파란색으로 변합니다.

‘70’ 을 입력하고 엔터(<┘)하면 ‘70’이 입력되고 자동으로 아래 셀이 선택됩니다.

‘80’ 을 입력하고 엔터(<┘)하면 ‘80’이 입력되고 자동으로 아래 셀이 선택됩니다.

‘90’ 을 입력하고 엔터(<┘)하면 ‘90’이 입력되고 자동으로 아래 셀이 선택됩니다.

직접입력이 모두 완료되면 아래 화면과 같이 나타납니다.

평가방법이 직접입력일 경우, 올바른 값을 입력하면 입력이 완료되고 파란색으로 처리됩니다. 그러나 지정된 숫자 이외의 값이 입력되면 붉은 색으로 처리되며 입력한 값은 적용되지 않습니다. 정해진 규칙에 맞는 값을 입력해 주세요.

‘모든 평가자 일괄입력’ 화면에서는 일반 엑셀처럼 복사(Copy, Ctrl + C), 붙여넣기(Paste, Ctrl + V) 기능을 활용할 수 있습니다. 우선 마우스 드래그를 활용하여 복사할 범위를 지정합니다.

그러면 지정된 범위가 파란색으로 표시됩니다. 키보드의 Ctrl키와 C키를 동시에 눌러 지정된 범위를 복사합니다.

붙여넣기 할 셀을 클릭합니다. 그리고 키보드의 Ctrl키와 V키를 동시에 눌러 복사한 내용을붙여넣기 합니다.

붙여넣기가 완료되면 아래 화면과 같이 나타납니다.

  5-2. 엑셀 연동

엑셀 연동 기능은 평가자의 평가를 설문을 통해 취합한 경우 등에 활용하면 매우 유용합니다. 엑셀 연동 패널(Panel)은 ‘모든 평가자 일괄입력’ 기능이 선택되어 있을 때에만 사용할 수 있습니다. ‘평가자별 직접입력’ 기능에서는 비활성화 됩니다. 엑셀 연동 패널(Panel)에는 2개의 단추가 있습니다.

    5-2-1. 엑셀양식 내려받기

모든 문항, 모든 평가자의 모든 평가 내용을 한 번에 입력할 수 있는 내용의 엑셀파일을 생성합니다. ‘엑셀양식 내려받기’ 단추를 클릭합니다.

그러면 아래 그림과 같이 파일을 저장할 위치 및 파일 이름을 설정하는 창이 나타납니다. 파일이름을 입력하고 ‘저장’ 단추를 클릭합니다.(파일 이름을 바꾸지 않을 경우 기본 값으로 저장됩니다.)

저장이 완료되면 아래 그림과 같이 저장 완료 창이 나타납니다.

    5-2-2. 엑셀양식에 평가 값 입력하기

앞에서 저장한 엑셀파일을 불러온 후, 평가 값을 규칙에 맞게 입력합니다. 아래 그림에 표시된 자료 입력 범위에만 자료를 입력할 수 있습니다.

[주의] 

범위 밖에 있는 셀을 수정하거나, 내용을 추가할 경우 오류가 발생할 수 있습니다.

셀의 표시 형식은 텍스트를 유지합니다. 해당 셀의 표시 형식은 다음과 같이 확인할 수 있습니다(엑셀 2010 기준).

[주의]

엑셀에 값을 입력해도 허용되는 값인지 여부를 확인할 수 없습니다(‘모든 평가자 일괄입력’ 화면에서는 잘못된 값을 입력할 경우 빨간 색으로 표시됩니다.). 엑셀에 값을 입력하기 전에 평가방법에 따라 허용되는 값인지 여부를 꼭 확인해 주세요.

평가방법	셀 입력 값
	허용되는 값	허용되지 않는 값
쌍대비교	1. 2, 3, 4, 5, 6, 7, 8, 9 1/2, 1/3, 1/4, 1/5, 1/6, 1/7, 1/8, 1/9	허용되는 값을 제외한 모든 값
직접입력	정수, 소수 등의 숫자	문자, 특수기호, 숫자와 문자, 특수기호 등의 조합, 공백

다음 그림과 같이 엑셀에 모든 평가자의 평가를 입력하고, ‘파일을 저장합니다.

    5-2-3. 엑셀에서 자료 가져오기

엑셀파일에 입력한 내용을 프로그램으로 가져올 수 있습니다. ‘엑셀에서 가져오기’ 단추를 클릭합니다.

아래 그림과 같이 파일을 열 수 있는 창이 나타납니다.

가져올 폴더 및 파일을 선택한 후 ‘열기’ 단추를 클릭합니다.

선택한 파일에 이상이 없을 경우 아래 그림과 같이 ‘엑셀에서 가져오기’ 창이 나타납니다.

‘완료’ 단추를 클릭합니다.

‘모든 평가자 일괄입력’ 화면에서 가져온 내용을 확인합니다.

5-3. 설문지 작성

설문지 작성 기능은 off-line으로 평가자의 평가를 받을 때 활용하면 매우 유용합니다.

    5-2-3. 설문지(엑셀) 만들기

종이 또는 파일로 AHP 분석을 하기 위한 양식(엑셀)을 생성합니다. 설문지 패널(Panel)에 있는 설문지(엑셀) 만들기 단추를 클릭합니다.

그러면 저장 폴더, 이름을 설정하는 창이 나타납니다. 저장할 파일 이름을 입력하고 ‘저장’ 단추를 클릭합니다.

엑셀 파일을 열어 설문서 양식과 내용을 확인합니다.