도구 비교 점수표, 필수 조건을 평균 점수에 묻지 마세요

먼저 탈락 조건과 선호 조건을 나눕니다

필수 파일 형식으로 내보낼 수 없는 후보가 보기 좋은 화면과 낮은 가격으로 높은 총점을 받으면, 점수표가 실제 과제를 해결하지 못합니다. 반드시 충족해야 하는 조건을 먼저 통과/실패/미확인으로 확인한 뒤 선호 항목의 점수를 비교하세요.

필수 조건이 아직 미확인이면 임의로 중간 점수를 주지 않습니다. 공식 문서와 시험으로 확인할 작업을 남기고 결정 시한 전에 확인할 수 있는지를 봅니다. 이 글은 선택 기록을 만드는 방법이며 모든 도구의 객관적인 우열을 산출하는 공식이 아닙니다.

점수의 뜻과 근거를 함께 정의합니다

편의성 5점이라는 값만 적으면 누가 어떤 기준으로 판단했는지 알 수 없습니다. “동일 샘플을 설명서 없이 완료”, “수동 수정 한 번 필요”처럼 점수의 뜻을 정하고 관찰을 옆에 적습니다. 후보마다 다른 시험을 했다면 아직 같은 비교표에 넣기 어렵습니다.

작업 시간이 있다면 측정한 값과 사용자 인상을 분리합니다. 한 번의 작은 시험에서 3분과 4분이 나왔다고 전체 사용자의 성능 차이로 표현하지 않습니다. 준비 시간·재작업·시험 순서처럼 결과에 영향을 주는 조건도 기록합니다.

가중치를 바꾸면 결론도 바뀔 수 있습니다

가상의 A는 비용 항목 5점, 작업 편의 3점이고 B는 비용 3점, 편의 5점이라고 가정합니다. 비용 60%·편의 40%로 합하면 A 4.2점, B 3.8점입니다. 비중을 비용 40%·편의 60%로 바꾸면 A 3.8점, B 4.2점으로 바뀝니다.

이 숫자는 실제 제품을 채점한 결과가 아닙니다. 점수와 비중이 달라지면 결론이 바뀐다는 계산 예시입니다. 따라서 가중치는 후보를 보고 유리하게 고치기보다 자신의 업무 우선순위를 정한 뒤 적용하고, 왜 그 비중인지 함께 설명합니다.

미확인과 비용의 중복 집계를 막습니다

월 요금이 낮다는 이유로 비용 점수를 높이고, 동일한 요금에서 나온 회당 비용에도 큰 비중을 주면 같은 사실을 두 번 세는 형태가 될 수 있습니다. 서로 다른 질문을 설명하는 항목인지 확인하세요. 같은 근거의 표현만 다른 항목은 합치거나 역할을 나눕니다.

여러 항목이 미확인인 후보를 숫자로 완성해 보이게 만들지 않습니다. 미확인 비율과 결정에 필요한 추가 시험을 같이 표시하세요. 낮은 점수는 시험한 결과의 불만족일 수 있고, 미확인은 아직 판단할 근거가 없다는 뜻이므로 구분해야 합니다.

• 필수 조건이 총점 밖에서 확인되었는가?
• 각 점수에 같은 정의와 관찰 근거가 있는가?
• 비용·기능을 표현만 바꿔 중복 집계하지 않았는가?
• 가중치의 이유와 미확인 항목을 공개했는가?

작은 점수 차이는 다음 확인 질문으로 씁니다

점수가 비슷하다면 소수점 자릿수를 늘려 강한 순위를 만들기보다 어떤 조건에서 차이가 나는지 확인합니다. 필수 작업의 실패, 내보내기의 누락, 운영 담당자가 이해하지 못한 단계처럼 구체적인 문제가 점수 차이보다 선택에 중요한 경우가 있습니다.

최종 기록에는 통과한 필수 조건, 선택한 비중, 사용한 근거와 남은 확인을 적습니다. 새로운 업무나 담당자 변화가 생기면 가중치를 다시 볼 수 있습니다. 주관적 평가를 독립 시험이나 일반적인 추천 순위로 포장하지 않는 것이 이 점수표의 기본 조건입니다.