품질관리 기술

간단하지만 효과적인 기술은 문제가 있거나 모순되는 설문조사 응답을 표시함으로써 데이터의 무결성을 관리하는 데 도움을 줄 수 있습니다.

품질관리 기술

고객에게 신뢰할 수 있는 인사이트를 주기 위해서는 데이터 무결성이 굉장히 중요합니다. 따라서 우리는 품질관리 기술을 이용해야 하고 이를 통해 분석에 사용해야 할 데이터는 무엇인지, 버려야 할 데이터는 무엇인지를 이해합니다.


QC 플래그
는 응답자에게 문제가 있거나 응답자가 일관적이지 않은 경우 변수가 참이 되도록 정의된 설문조사의 참/거짓 변수입니다. 이 플래그는 응답자가 신뢰할 수 있는 정보를 주고 있는지를 판단하기 위해 전체적으로 이용됩니다.

오디언스 및 분포 방법에 따라 설문조사 내내 각각의 응답자에 대한 3~5번의 QC 플래그를 실행해야 하며 B2C의 경우 더 많이 실행해야 합니다. 주어진 설문조사에서 다수의 경로가 있는 경우 우리는 대부분의 응답자가 3~5번의 QC 플래그를 볼 수 있도록 해야 합니다. QC 플래그를 생성할 때 QC 제거를 끌어낼 것을 확인하기 위해 패널에게 연락하는 것이 가장 좋습니다. 이것은 보통 트리거된 QC 플래그의 수를 기반으로 합니다. 사전에 대비해서 이 기준을 설정함으로써 QC 제거에 맞춰 대부분의 모호성을 줄일 수 있습니다.  이런 객관적인 측정 외에도 패널 대부분은 빨간색 플래그가 없는지 확실히 확인하기 위해 수정 가능한 응답들도 검토합니다(말도 안 되는 소리, 반복적인 응답). 다시 말하자면 구체적인 정책에 대해 패널과 상의하는 것이 가장 좋습니다.


QC 플래그의 일부 예시는 다음과 같습니다:

  1. 생년을 묻고 나이에 대해 물어봅니다 - 일반적으로 스크리닝 섹션의 시작 및 끝부분에 2개의 개별 질문이 있습니다. 결과가 모순되는지 비교합니다.
  2. 우편 번호에서 얻은 국가와 직접 제공된 국가 - 우편 번호에 대해 묻고 나중에 국가를 물어봅니다.  결과가 모순되는지 비교합니다.
  3. 흔하지 않은 활동 - 예를 들어, 전용기를 타고 비행한 적이 있습니까? 또는 작년에 집과 콘도를 모두 구입한 적이 있습니까?
  4. 위조 벤더의 사용 - 응답자가 현재 또는 과거에 위조 벤더 중 하나를 사용하고 있음을 나타내는지 확인하기 위해 인식 퍼널에 "위조" 벤더명을 포함합니다.
  5. 주의 점검 질문 - 응답자가 주의를 기울이고 있는지 확인하기 위해 설문조사 내내 굉장히 간단한 질문을 배치합니다. 예를 들어 잔디는 무슨 색인가요?
  6. 행렬에서 일자로 줄 세우기 - 순위 질문에서 같은 열에 있는 모든 행에 대답하는 응답자는 일반적으로 데이터의 품질이 낮다는 신호입니다.
  7. 스피드광(Speeders) - 일반적으로 제한적 개시(soft launch) 데이터로 결정된 인터뷰 길이(LOI) 중앙값의 3분의 1 또는 2분의 1만에 설문조사를 완료한 경우 플래그가 올라갑니다.


    QC 종료는 꽤 드물지만 명백하게 거짓 정보를 제공하고 있는 응답자를 제거하기 위해 사용될 수도 있습니다. 일반적으로 우리는 위조 브랜드에서 구매한 적이 있다고 주장하는 사람을 종결시키는 인식 퍼널에서 QC 종료를 볼 수 있습니다. 이것은 정기 종료로 간주되기 때문에 첫 15분 안에 발생해야 합니다.

    20230821.Logic.Jump.Quality.Removal
    위의 이미지와 같은 로직 점프는 QC 제거처럼 응답자를 종결시키기 위해 사용될 수 있습니다.