무관심 품질

후보가 스무 개인데 이번 분기에 할 수 있는 것이 다섯 개일 때, 무엇을 빼는지가 무엇을 하는지보다 어렵습니다. 예전에는 요청이 많이 들어온 순서로 줄을 세웠습니다. 그런데 요청 수는 목소리가 큰 쪽을 알려 주는 숫자일 뿐, 그것을 만들면 만족이 올라간다는 뜻은 아니었습니다.

페이지덱이 테마 색상을 열두 가지로 늘린 적이 있습니다. 요청이 꾸준히 들어오던 항목이었고 2주가 들었습니다. 내보낸 뒤에 달라진 것이 없었습니다. 만족도 조사 점수가 그대로였고, 설정 화면을 연 사용자가 전체의 3퍼센트였습니다. 요청은 계속 들어왔습니다. 지현이 그 2주를 돌아보며 물은 것은 하나였습니다. 만들기 전에 이걸 알 수 있었느냐입니다.

한 기능을 두 방향으로 물어 판정합니다. 있으면 어떻겠느냐와 없으면 어떻겠느냐를 따로 묻고, 두 답이 모두 아무렇지 않다에 가까우면 무관심 품질입니다.

설문 조사로 모으는 절차는 이렇습니다.

1. 기능을 한 문장으로 적습니다. 알림을 개선한다가 아니라 내가 언급된 알림만 따로 모아 보여 준다처럼 씁니다.
2. 있을 때와 없을 때를 각각 묻고, 마음에 든다·당연하다·아무렇지 않다·참을 수 있다·싫다 다섯 중에서 고르게 합니다.
3. 기능마다 가장 많이 나온 조합으로 유형을 읽습니다. 표본 100명 안팎이면 대체로 갈립니다.

후보 스무 개를 넣으면 일고여덟 개가 여기로 분류되는 일이 흔합니다. 이 모델의 쓸모 절반이 그것을 찾는 데 있습니다. 덜어 낸 만큼 남은 후보에 쓸 시간이 늘어나기 때문입니다.

읽을 때 조건이 하나 붙습니다. 1위와 2위 유형의 차이가 몇 퍼센트에 그치면 평균이 사용자층을 가린 경우입니다. 관리자에게는 꼭 필요하고 일반 사용자에게는 아무래도 좋은 기능이 전체로는 무관심으로 보입니다. 이때는 그룹을 나눠 다시 읽습니다.

"이 항목은 무관심 품질로 나왔습니다. 이번 분기 목록에서 빼겠습니다."

만들어도 만족이 달라지지 않으니 순위에서 내리자는 말입니다.

"후보 스무 개 중 일곱 개가 무관심이었어요. 남은 열세 개만 보면 됩니다."

조사의 값이 무엇을 할지보다 무엇을 지울지에 있었다는 뜻입니다.

"전체로는 무관심인데 관리자만 떼어 보면 매력적 품질입니다."

평균이 갈린 사용자층을 덮고 있었다는 지적입니다.

지현은 분기 계획을 세울 때 후보 목록을 먼저 이 기준으로 훑습니다. 민서가 만들고 싶어 하던 테마 색상 항목은 그 뒤로 세 번 조사에 올랐고 세 번 모두 무관심으로 나왔습니다. 두 사람은 지우지 않고 목록 맨 아래에 남겨 두기로 했습니다. 지금 만들 이유가 없다는 것과 영원히 필요 없다는 것은 다르기 때문입니다.