두 명의 전문가를 떠올려 보세요.

사진은 보이지 않습니다. 이름도 보이지 않습니다. 직함이나 이전에 일했던 회사의 로고도 보이지 않습니다.

대신 다음 정보가 보입니다.

  • 업무와 직접 관련된 기술,
  • 구체적인 작업 사례,
  • 개인 기여에 대한 설명,
  • 해당 기술을 사용한 맥락,
  • 결과,
  • 문제에 대한 제안 방식,
  • 가용성과 가격.

그래도 합리적인 결정을 내릴 수 있을까요?

많은 상황에서 첫 평가는 강한 인상을 주지만 실제 업무 적합성을 충분히 설명하지 못하는 신호보다, 과업과 직접 연결된 정보에서 시작할 때 더 체계적일 수 있습니다.

연구와 실무는 간접 신호와 기술의 직접적 증거를 점점 더 구분하고 있습니다

OECD는 A Skills-First Labour Market에서 지원자를 실제로 보여 준 기술을 기준으로 평가하고 선택하는 인재 식별 방식을 설명합니다. 구조화된 평가와 역량 중심 면접 등이 방법에 포함됩니다. [1]

Sackett, Zhang, Berry, Lievens의 직원 선발 방법 연구에서는 업데이트된 분석에서 직무에 특화된 구조화 면접, 직무 지식 검사, 작업 표본 등이 높은 위치에 있었습니다. 동시에 저자들은 하나의 도구를 모든 상황에서 가장 좋은 방법으로 간주해서는 안 된다고 명확히 경고합니다. [2]

이 연구는 채용을 다루며, 전문가 서비스 시장을 직접 연구한 것은 아닙니다. 연구의 계수나 순위를 서비스 제공자 선택에 그대로 적용해서는 안 됩니다.

그럼에도 공통 원칙은 유용합니다. 정보가 실제 과업과 그 과업을 수행하는 데 필요한 행동에 가까울수록, 역량을 나타내는 간접 신호에만 의존할 필요가 줄어듭니다.

수행자를 선택할 때 제안의 품질과 실제 수행 역량은 가격과 별도의 기준이 될 수 있습니다

세계은행이 자금을 지원하는 조달에서는 비가격 기준에 방법론과 작업 계획의 품질, 위험 관리, 과거 성과, 수행 역량, 핵심 인력 등이 포함될 수 있습니다. 기준은 개별 프로젝트에 맞게 정해야 하며, 입찰자는 자신의 주장을 뒷받침하는 증거를 제시해야 합니다. [3]

미국 FAR도 가격의 상대적 중요성이 구매 성격에 따라 달라질 수 있음을 보여 줍니다. 요구사항이 덜 명확하거나 더 많은 개발 작업이 필요하거나 수행 실패 위험이 높다면 기술 요소와 과거 성과가 더 중요해질 수 있습니다. [4]

이 역시 공식 공공 조달 제도이며, 민간 고객이 전문가를 선택하기 위한 직접적인 지침은 아닙니다.

하지만 중요한 사고방식을 보여 줍니다. 가격은 하나의 기준입니다. 상대가 문제를 이해하고 실제로 해결할 역량이 있는지를 평가하는 일을 대신할 필요는 없습니다.

신원을 가린다고 편향이 자동으로 사라지는 것은 아닙니다

익명 또는 부분 익명 방식의 첫 평가는 과업과 직접 관련되지 않은 일부 정보에 노출되는 것을 줄일 수 있습니다.

그렇다고 과정이 자동으로 객관적이 되는 것은 아닙니다.

OECD는 선발에 사용되는 알고리즘 도구가 일부 인간 편향을 줄일 수 있지만, 설계, 데이터, 사용 방식에 따라 편향을 재현하거나 증폭할 수도 있다고 설명합니다. [1]

단순한 전문가 비교에서도 잘못된 기준을 만들거나, 포트폴리오의 시각적 완성도를 지나치게 높게 평가하거나, 실제 수행 능력보다 자기 일을 잘 설명하는 사람에게 유리하게 평가할 수 있습니다.

따라서 이름과 사진을 가리는 것은 평가 설계의 한 장치일 뿐입니다. 전체 과정이 공정하다는 증거는 아닙니다.

특정 업무에 대한 전문가의 적합성을 판단하는 10가지 신호

1. 업무와 직접 관련된 기술

그 사람이 몇 개의 기술을 적어 놓았는지부터 보지 마세요.

먼저 물어야 할 질문은 다음입니다.

이 업무에 실제로 필요한 기술은 무엇인가?

시스템 이전이 필요하다면 긴 기술 목록보다 데이터 이전, 연동, 테스트, 안전한 전환 경험이 더 중요할 수 있습니다.

사용성 조사가 필요하다면 디자인 도구를 아는 것보다 조사를 수행하고, 관찰을 종합하고, 결과를 의사결정으로 연결하는 능력이 더 중요할 수 있습니다.

기술 목록의 항목 수가 많아진다고 적합성이 자동으로 높아지는 것은 아닙니다.

2. 기술을 실제로 사용했다는 증거

**"할 수 있습니다"**라는 주장과 **"이렇게 사용했습니다"**라는 증거는 다른 정보입니다.

증거에는 다음이 포함될 수 있습니다.

  • 작업 일부,
  • 유사 과업을 위해 만든 작업 샘플,
  • 해결한 문제에 대한 설명,
  • 코드 저장소,
  • 보고서,
  • 설계 결과물,
  • 녹화 자료,
  • 독립적으로 확인 가능한 결과,
  • 법적으로 공유할 수 있는 추천 또는 확인 자료.

직원 선발 연구는 서비스 제공자의 포트폴리오 연구가 아닙니다. 다만 Sackett와 공동 저자의 업데이트된 분석은 특정 직무에 필요한 행동과 지식에 가까운 방법, 그중 작업 표본의 가치를 보여 줍니다. [2]

포트폴리오는 공식적인 작업 표본 검사와 같지 않습니다. 하지만 두 경우 모두 증거가 실제 과업과 얼마나 연결되어 있는지 확인하는 것이 중요합니다.

3. 프로젝트 이름보다 맥락의 유사성

프로젝트 이름이 같아도 실제 난이도와 조건은 전혀 다를 수 있습니다.

**"온라인 상점"**은 간단한 결제 기능이 있는 작은 상품 목록일 수도 있고, 복잡한 물류, 반품, 여러 연동이 필요한 다국가 플랫폼일 수도 있습니다.

과거 작업을 비교할 때 다음을 확인하세요.

  • 규모,
  • 복잡성,
  • 제약,
  • 사용자 유형,
  • 전문가의 책임 범위,
  • 프로젝트 단계,
  • 시간 조건,
  • 다른 팀에 대한 의존성.

반드시 같은 산업일 필요는 없습니다.

실제 수행 난이도에 영향을 주는 문제와 조건이 비슷한지를 보세요.

4. 명확한 개인 기여와 책임 범위

**"그 프로젝트에서 일했습니다"**라는 말만으로는 무엇을 책임졌는지 알 수 없습니다.

다음을 구분하세요.

  • 직접 수행한 일,
  • 의사결정 책임을 가진 부분,
  • 팀이 함께 수행한 부분,
  • 참여 전에 이미 완성되어 있던 부분,
  • 하지 않은 일.

큰 프로젝트의 훌륭한 결과는 여러 사람의 공동 작업에서 나올 수 있습니다.

그 사실이 경험의 가치를 낮추지는 않습니다.

한 사람에게 팀 전체의 성과를 귀속시키지 않고, 그 사람의 경험 중 실제로 평가해야 할 부분을 볼 수 있게 해 줍니다.

5. 결과와 확인 가능성

모든 프로젝트가 측정 가능한 결과를 공개할 수 있는 것은 아닙니다.

결과를 볼 수 있다면 다음을 확인하세요.

  • 정확히 무엇이 달라졌는지,
  • 비교할 기준점이 있는지,
  • 결과의 어느 부분을 전문가의 작업과 신뢰성 있게 연결할 수 있는지,
  • 데이터가 측정 가능한지,
  • 독립적으로 확인할 수 있는지,
  • 여러 요인으로 생긴 결과를 하나의 개입만으로 설명하지 않는지.

공개된 결과가 없다고 역량이 없다는 뜻은 아닙니다. 그 특정 증거의 독립적 확인 가능성이 낮다는 뜻일 뿐입니다.

6. 증거의 최신성

여러 해 전의 증거도 오래 유지되는 기술이라면 여전히 가치가 있습니다.

다만 변화가 빠른 분야에서는 전문가가 그 역량을 최근에도 사용했는지 확인하는 것이 좋습니다.

최신성이 특히 중요한 경우:

  • 도구나 표준이 바뀐 경우,
  • 규정이 바뀐 경우,
  • 기술 생태계가 바뀐 경우,
  • 사용자 기대가 바뀐 경우,
  • 현재 버전의 시스템 지식이 필요한 업무.

예전에 해 본 적이 있는지만 묻지 마세요. 그 증거가 지금의 수행 능력을 여전히 잘 보여 주는지 확인하세요.

7. 문제를 이해하는 방식과 제안하는 접근 방식

인상적인 포트폴리오를 가진 제공자라도 당신의 구체적인 문제에는 잘 맞지 않을 수 있습니다.

다음을 할 수 있는지 확인하세요.

  • 목표를 자신의 말로 다시 설명하기,
  • 주요 의존 관계 파악하기,
  • 요구사항과 가정 구분하기,
  • 부족한 정보 지적하기,
  • 논리적인 단계 제안하기,
  • 왜 그 접근 방식을 권하는지 설명하기.

세계은행의 비가격 기준에서는 방법론과 작업 계획의 품질이 대표적인 평가 영역 중 하나입니다. [3]

하나의 유일한 정답 방법을 찾는 것이 목적은 아닙니다.

그 제안이 당신의 문제에 대한 실제 답인지, 모든 고객에게 보내는 같은 형식인지 확인하는 것이 목적입니다.

8. 가정의 품질과 위험에 대한 접근

좋은 제안은 불확실성이 없는 척하지 않습니다.

전문가가 다음을 파악할 수 있는지 보세요.

  • 아직 모르는 것,
  • 가격이나 일정에 영향을 주는 가정,
  • 작업을 막을 수 있는 요소,
  • 고객 측 의존 사항,
  • 먼저 확인해야 할 내용,
  • 주요 위험을 줄이는 조치.

세계은행은 위험 관리를 일반적인 비가격 평가 영역 중 하나로 제시합니다. [3]

영국의 위험 배분 지침도 공급자가 실제로 영향을 줄 수 있는 결과에 대해서만 책임을 지는 것이 적절하다고 설명합니다. [5]

전문성은 아무 문제도 생기지 않을 것이라고 약속하는 데 있지 않습니다. 무엇이 잘못될 수 있고 누가 그것을 관리할 수 있는지 인식하는 것도 전문성입니다.

9. 필요한 기간 안에 실제로 수행할 수 있는 역량

전문 역량과 가용성은 같은 것이 아닙니다.

기술적으로 매우 잘 맞는 사람도 필요한 기간 안에 일을 끝낼 수 없을 수 있습니다.

다음을 확인하세요.

  • 언제 시작할 수 있는지,
  • 현실적으로 얼마나 시간을 배정할 수 있는지,
  • 혼자 일하는지 팀과 일하는지,
  • 핵심 부분을 실제로 누가 수행하는지,
  • 다른 의무가 일정에 영향을 주는지,
  • 수행 중 소통 방식은 어떤지.

다른 고객에 대한 모든 정보를 알 필요는 없습니다.

제시한 일정이 실제 운영 역량에 근거하는지 판단할 수 있을 만큼의 정보가 필요합니다.

10. 가격을 범위, 품질, 위험과 함께 평가하기

제안들이 실제로 비교 가능하고, 요구사항이 명확하며, 수행 위험이 낮다면 가장 낮은 가격이 가장 좋은 선택일 수 있습니다.

하지만 보편적인 규칙은 아닙니다.

FAR는 가격의 상대적 중요성이 요구사항의 명확성, 필요한 개발 작업의 양, 수행 실패 위험에 따라 달라질 수 있다고 명시합니다. [4]

금액을 비교하기 전에 다음을 확인하세요.

  • 범위가 같은지,
  • 비슷한 결과가 포함되어 있는지,
  • 가정이 비교 가능한지,
  • 추가 비용이 발생할 수 있는지,
  • 초과 비용의 위험을 누가 부담하는지,
  • 더 비싼 제안이 실제로 필요한 구체적 가치를 제공하는지.

가격은 중요한 경제적 신호입니다. 하지만 가격만으로 역량이나 품질이 증명되지는 않습니다.

지나치게 높게 평가하기 쉬운 7가지 신호

1. 직함.
같은 직함도 조직마다 전혀 다른 책임을 의미할 수 있습니다.

2. 경력 연수만 보는 것.
10년이라는 숫자는 업무가 얼마나 복잡했는지, 얼마나 빨리 성장했는지, 특정 기술을 얼마나 자주 사용했는지를 말해 주지 않습니다.

3. 이전 직장이나 고객의 유명세.
맥락을 줄 수는 있지만 개인의 실제 책임 범위를 설명하지는 않습니다.

4. 프로필의 기술 개수.
긴 목록이 잘 입증된 짧은 기술 목록보다 자동으로 우수한 것은 아닙니다.

5. 포트폴리오의 시각적 완성도.
좋은 표현은 가치가 있지만, 당신이 실제로 구매하려는 작업의 품질과는 별개일 수 있습니다.

6. 높은 가격 또는 낮은 가격만 보는 것.
가격 자체는 어느 방향으로도 품질을 증명하지 않습니다.

7. 사진, 이름, 수행과 직접 관련되지 않은 특징.
첫인상에는 영향을 줄 수 있지만 첫 역량 평가가 반드시 이런 정보에 의존할 필요는 없습니다.

모두에게 같은 질문을 적용하되, 수학적 정밀함을 가장하지 마세요

구조화된 비교란 각 전문가에게 비슷한 질문을 하고 비슷한 종류의 증거를 평가하는 것입니다.

각 사람에 대해 다음을 확인할 수 있습니다.

  • 핵심 기술 적합성,
  • 증거의 강도,
  • 맥락의 유사성,
  • 개인 기여의 명확성,
  • 접근 방식의 품질,
  • 위험 인식,
  • 수행 역량과 가용성,
  • 총비용.

직원 선발 연구는 직무 관련 방법과 보다 구조화된 과정의 가치를 뒷받침하지만, 서비스 시장을 위한 보편적인 점수 체계를 제공하지는 않습니다. [2]

따라서 다음과 같은 표현을 사용할 수 있습니다.

강한 증거 / 부분적 증거 / 충분하지 않은 증거

8.2와 8.4의 차이에 과학적 의미가 있는 것처럼 다루는 것보다 낫습니다.

구조는 일관성을 돕습니다. 정성적 결정을 객관적인 실험실 측정으로 바꾸지는 않습니다.

예시: 익명의 두 전문가와 하나의 업무

신원과 추가 정보는 언제 필요해질까요?

기술 중심 평가가 무기한 익명을 유지한다는 뜻은 아닙니다.

후속 단계에서는 다음 정보가 필요할 수 있습니다.

  • 신원 확인,
  • 계약에 필요한 정보,
  • 회사 또는 사업자 정보,
  • 법적으로 필요한 자격이나 허가,
  • 실제 팀 구성,
  • 운영상 중요한 경우 시간대와 작업 장소,
  • 보안과 접근 권한 부여에 필요한 정보.

요구사항과 직접 관련된다면 일부 정보는 더 이른 단계에 필요할 수도 있습니다.

원칙은 '모든 것을 숨긴다'가 아닙니다. '특정 결정에 필요해질 때 정보를 공개한다'입니다.

기술 중심 평가에도 좋은 기준이 필요합니다

사진과 이름을 가려도 나쁜 평가 과정을 만들 수 있습니다.

예를 들어:

  • 업무와 관련 없는 증거를 평가하기,
  • 해결책의 품질보다 설명 스타일을 높게 평가하기,
  • 이유 없이 특정 경력 경로를 요구하기,
  • 모든 평가 대상에게 알려지지 않은 기준을 사용하기,
  • 비교 중간에 기준을 바꾸기,
  • 확인할 수 없는 정보에 과도한 확신을 부여하기.

각 기준을 점검하는 좋은 질문은 다음입니다.

"이 정보가 바로 이 업무를 수행할 능력을 예측하거나 평가하는 데 어떻게 도움이 되는가?"

답이 약하다면 기준도 약할 수 있습니다.

전문가를 선택하기 전 확인할 12가지 질문

1. 이 업무에 실제로 필요한 기술을 평가하고 있는가?
2. 주장이 증거로 뒷받침되는가?
3. 증거가 유사한 맥락이나 문제에서 나온 것인가?
4. 이 사람이 직접 한 일을 알고 있는가?
5. 결과를 적어도 일부 확인할 수 있는가?
6. 이 분야에 충분히 최신인 증거인가?
7. 제안이 내 문제를 이해하고 있음을 보여 주는가?
8. 전문가가 가정과 위험을 공개적으로 설명하는가?
9. 제시한 가용성이 제안한 일정을 뒷받침하는가?
10. 비슷한 범위와 책임 수준에서 가격을 비교하고 있는가?
11. 모두를 비슷한 질문과 정보 유형으로 평가하고 있는가?
12. 수행과 직접 관련 없는 기준이 결정에 지나치게 큰 영향을 주고 있지는 않은가?

먼저 일을 보고, 지위는 나중에 봅니다

이력서, 사진, 직함 없이 전문가를 비교한다는 것은 경력이 존재하지 않는 척하는 것이 아닙니다.

순서를 바꾸는 것입니다.

먼저:

기술 -> 증거 -> 맥락 -> 개인 기여 -> 결과 -> 최신성 -> 접근 방식 -> 위험 -> 수행 역량 -> 가격.

그다음 협업, 확인, 계약에 필요한 정보를 봅니다.

이 순서가 완벽한 결정을 보장하지는 않습니다.

하지만 더 좋은 첫 질문을 만드는 데 도움을 줄 수 있습니다.

다음이 아니라:

"어떤 프로필이 가장 인상적인가?"

다음을 묻는 것입니다.

"누가 바로 이 일을 수행할 수 있다는 가장 강하고 관련성 높은 증거를 제시하는가?"

출처 및 추가 읽을거리

[1] OECD - A Skills-First Labour Market: Promoting skills-first hiring and talent management, 2026
출처 열기

[2] Sackett, Zhang, Berry, Lievens - Revisiting the design of selection systems in light of new findings regarding the validity of widely used predictors, 2023
출처 열기

[3] World Bank - Rated Criteria
출처 열기

[4] U.S. Federal Acquisition Regulation - 15.101 Best value continuum
출처 열기

[5] UK Government - Risk Allocation and Pricing Approaches Guidance Note, 2026
출처 열기

방법론 참고: 출처 [1]과 [2]는 주로 채용과 직원 선발을, [3]-[5]는 공식 조달과 계약을 다룹니다. 이 글은 서비스 비교에 신중하게 적용할 수 있는 원칙만 사용합니다. 과업 관련 기술 평가, 증거의 가치, 구조화된 기준, 방법론과 위험 평가, 가격과 다른 요소의 분리가 이에 해당합니다. 열 가지 신호 모델 자체는 독창적인 편집 종합입니다.

다음 단계

추측 없이 검증된 전문가를 찾아보세요.

기술, 서비스, 가격, 가능 일정은 프로필을 열기 전에도 확인할 수 있습니다.

전문가 둘러보기 발견되게 하세요