증명되는 AX Part 2
09

PART 2 · 증명

AI Leverage를 측정하는 법

개인 생산성에서 조직 기여까지, 검증된 산출과 투입을 연결해 AI leverage를 정직하게 측정한다.

회의실에서 가장 공허한 슬라이드

성과 리뷰의 단골 슬라이드 — 좌석 사용률 우상향 곡선, 월간 호출 수, “생성한 초안 N건”, 맨 아래 한 줄 “AI로 생산성 2~4배 향상.” 결재자가 묻는다. “그 2배는 무엇이 2배입니까? 초안은 다 통과됐습니까? 비용은 빼고 본 숫자입니까?” 여기서 대부분 말을 흐린다.

문제는 발표자의 게으름이 아니라 잴 단위를 미리 정하지 않은 채 효과부터 주장한 것이다. 기준선 없는 개선율은 인상이고, 품질 계수를 뺀 속도는 절반만 본 숫자다.1

이 장은 그 공허한 슬라이드를 검증된 산출로 말하는 장부로 바꾼다. 도구는 다섯 산식(개인 생산성 배수, 팀 처리량 배수, 리드타임 개선율, 단위 업무 비용, 순가치)과 숫자가 허풍이 되지 않게 잡아주는 두 보정 계수(재배치 확신도, 품질 계수)다. 측정은 이 책의 척추가 아니라 각 결정 지점에 녹아 작동하는 판단 기준이다(서문). 이 장은 5장에서 재설계한 업무를 10장 증거 등급으로 보고하고 12장 게이트로 판정하기 전에 그 사이에서 숫자를 만드는 단계다. 산식은 결정의 근거로만 쓴다. 대시보드 채우기로 부풀리지 마라.

이 장에서 가져갈 결정 한 줄: leverage는 사용량이 아니라 검증된 산출 ÷ 투입이다 — 분자에는 승인·배포·완료를 통과한 산출만 넣고, 분모에는 AX 과제 총비용(1·2·3층 합산, 11장)을 다 넣는다.

이 책 자신에게도 같은 잣대: 이 책은 저자의 성과 주장조차 위 leverage 산식과 증거 등급(L0~L5) 밖에서 말하지 않는다. 본문에 등장하는 저자의 실측·운영 경험도 같은 기준으로 등급화했고, 기준선·비교군·순가치를 갖추지 못한 대목은 그 상한 안에서만 진술한다 — “큰 효과”가 아니라 “어느 등급까지 판정 가능한 상태”로.


핵심 관점: leverage는 사용량이 아니라 ‘검증된 산출 ÷ 투입’이다

‘AI를 많이 쓰는 것’과 **AI leverage(검증된 산출 배수)**는 다르다(1장). 이 장은 그 관점을 숫자로 옮긴다. 이하 본문은 ‘leverage’로 줄여 쓴다.

AI Leverage Ratio = (AI 적용 후 검증된 산출가치 / 투입 시간·인원·비용) ÷ (AI 적용 전 검증된 산출가치 / 투입 시간·인원·비용)

가장 중요한 단어는 분자의 검증된이다(검증된 산출 정의는 1장). 검토·테스트·승인·배포·완료·재무 확인을 통과한 산출만 분자에, 통과하지 못한 산출은 분모(재작업 비용)에 들어간다.

측정은 도구가 아니라 업무 결과에서 시작한다. 토큰·호출·좌석·활성 사용자는 비용 통제·남용 탐지에 필요하지만 성과로 인정되는 조건이 따로 있다.

보조 지표왜 필요한가성과로 인정되는 조건
활성 사용자율도구가 실제로 쓰이는지 본다사용 후 완료된 업무와 연결될 때
호출 수·토큰비용·남용·모델 라우팅을 본다업무 완료 1건당 비용으로 환산될 때
프롬프트·워크플로 재사용공통 자산화를 본다재사용 후 품질·리드타임이 개선될 때
생성 산출물 수초안 생산량을 본다승인·테스트·업무 완료를 통과할 때

표의 오른쪽 열이 이 장의 규칙이다. 채택·비용 지표는 검증된 결과로 환산될 때만 성과 슬라이드에 올라간다. 환산되지 않은 좌석 사용률은 비용 관리 슬라이드에만 둔다.


leverage 측정 의사결정 트리 — 이 주장, 보고해도 되는가

성과 보고 직전, 주장이 어느 단계인지 트리로 판정한다. 위에서부터 막히는 첫 지점이 지금 말할 수 있는 최대치다.

[AI leverage 주장 후보]


Q1. AI 적용 '전' 기준선(처리량·리드타임·품질·비용)을
    숫자로 댈 수 있는가?
   ├─ 아니오 ──────────────▶  L1까지만. "사용·산출이 확인된다"
   │                          (기준선 먼저. 그전엔 개선율 금지)
   └─ 예


Q2. 검증된 산출(승인·배포·완료 통과)만
    분자에 넣었는가? 초안·생성량을 뺐는가?
   ├─ 아니오 ──────────────▶  되돌림. 통과 못 한 산출은 분모로
   └─ 예


Q3. 품질 계수를 곱했는가?
    (오류·반려·재작업·장애를 반영했는가)
   ├─ 아니오 ──────────────▶  속도만 본 반쪽 주장. 품질 보정 먼저
   └─ 예


Q4. 절감 시간에 재배치 확신도를 곱했는가?
    (줄어든 시간이 실제로 무엇으로 갔는가)
   ├─ 아니오 ──────────────▶  "시간 절감" 주장만 가능. 조직 성과 X
   └─ 예


Q5. 비교군(유사팀·holdout·A/B·순차)이 있는가?
   ├─ 아니오 ──────────────▶  L2. "전후 비교에서 개선이 관측된다"
   └─ 예


Q6. 비용을 차감한 순가치가 (+)인가?
    AX 과제 총비용(1·2·3층 합산, 11장)·검수·재작업을 다 뺐는가?
   ├─ 아니오 ──────────────▶  L3. "비교군 기준 개선이 확인된다"
   └─ 예 ──────────────────▶  L4. "재무 효과로 인정 가능하다"

이 트리는 10장의 증거 등급(L0–L5, 자율성 L0–L4와 다른 척도 — 증거 강도)과 같은 척도를 쓴다. 트리에서 막힌 지점이 곧 보고 문구의 상한이다. “재무 효과”는 Q6까지 통과한 뒤에만 쓴다(L4). L5(“전사 전략 KPI 반영”)는 측정 트리가 아니라 전략 KPI 연결로만 도달하므로 이 장의 산식만으로는 L4가 상한이다(10장). 트리를 건너뛰고 곧장 “2배 향상”을 말하는 것이 그 공허한 슬라이드의 정체다.


다섯 개의 산식 — 개인에서 조직까지 (정본 요약)

leverage는 한 숫자가 아니라 개인 → 팀 → 조직으로 전환되는지를 단계별로 본다. 다섯 산식을 한 표로 본다 — 분자·분모의 정의가 곧 거짓말 탐지기다.

산식정의핵심 함정(분자·분모의 함정)
① 개인 생산성 배수(AI 후 검증 완료 산출가치 / 실제 투입 시간) ÷ (AI 전 동일)‘실제 투입 시간’ = AI 사용 + 검토·수정·재작업. 1분 초안 + 1시간 검수면 분모는 1시간 1분
①-가치가중Σ(완료 업무 수 × 업무 가치점수 × 품질 계수 × 난이도 보정) ÷ 실제 투입 시간쉬운 건만 골라 건수를 부풀리는 착시를 난이도 보정으로 차단
② 팀 처리량 배수(AI 후 팀 완료 업무량 / 팀 총 투입 시간) ÷ (AI 전 동일)‘팀 완료 업무량’ ≠ 개인 산출의 합. 대기열·리뷰·승인·배포 통과분만. 개인 3배·팀 1배면 병목은 리뷰·승인·통합(5장 재설계)
③ 리드타임 개선율(AI 전 p50/p90 − AI 후 p50/p90) ÷ AI 전 p50/p90p50/p90을 함께 보고. p50만 보면 예외 케이스 악화가 숨는다
④ 단위 업무 비용(사람 시간 + AI 운영 + 검수 + 재작업 + 기반 비용 배분액) ÷ 검증 완료 업무 수통과 못 한 산출은 분모를 못 키우고 분자(재작업 비용)만 키운다(총비용 3층은 11장)
⑤ 순가치·ROI순가치 = 총 인정 가치 − AX 과제 총비용(1·2·3층 합산, 11장) / ROI = 순가치 ÷ AX 과제 총비용(1·2·3층 합산, 11장)총비용은 토큰·API뿐 아니라 전환·구현·교육·운영·관측·검수·재작업 포함(11장). 차감 전 “생산성 2배”와 차감 후 “순가치 (+)“를 반드시 분리

가치가중 ①의 구성 요소: 완료 업무 수(승인·검수·배포·전달까지 끝난 것만) / 업무 가치점수(조직 KPI 상대 가치) / 품질 계수(아래 정의) / 난이도 보정 / 실제 투입 시간(AI 사용 + 검토 + 수정 + 재작업).

⑤의 총 인정 가치는 비용 절감 + 비용 회피 + 매출·전환 기여 + 품질·리스크 개선 + 의사결정 지연 감소의 합이다. 개인 배수(①)는 개인 평가가 아니다. HR 순위표·토큰 리더보드로 쓰면 더 긴 프롬프트·더 많은 호출이 성과처럼 보여 행동을 왜곡한다. 개인 단위 측정은 네 용도로만 쓴다 — 교육·도구 지원이 필요한 직무 찾기, 배수가 높은 업무 유형 확인, 우수 사례를 Skill·MCP·템플릿으로 일반화(15장), 팀 처리량 전환 확인.


두 개의 보정 계수 — leverage가 허풍이 되지 않게

다섯 산식이 부풀려지는 지점은 둘이다 — 절감 시간이 실제로는 사라졌을 때, 빨라졌지만 품질이 무너졌을 때. 이 둘을 잡는 계수가 재배치 확신도와 품질 계수다. 직접 측정해보며 가장 자주 부푼 곳이 이 두 곳이었다.

재배치 확신도 — ‘시간 절감 ≠ 비용 절감’

시간을 줄였다는 주장은 그 시간이 어디로 갔는지 증명되어야 성과가 된다. 회의·대기로 사라지면 인정하지 않는다. 절감 시간에 재배치 확신도를 곱한다.

조직 전환 가능 시간 = 절감 시간 × 재배치 확신도
재배치 확신도의미인정 수준
0.00시간이 줄었다는 체감만 있음성과 불인정
0.25개인 여유 또는 일부 준비 시간 감소교육·도입 참고
0.50팀 백로그 처리 증가 또는 리드타임 감소 확인생산성 향상 후보
0.75SLA·처리량·품질 지표 개선 확인조직 성과 인정
1.00외주비·운영비 감소, 채용 회피, 매출·전환 개선 확인재무 효과 인정

“하루 30분 아꼈다”는 0.00~0.25 구간이다. 그 30분이 팀 백로그를 줄였거나(0.50), SLA를 개선했거나(0.75), 외주비를 깎았을 때(1.00)에야 위로 올라간다. 시간 절감을 그대로 원화로 환산하는 보고는 확신도 1.00을 임의로 가정한 것이고, leverage 부풀리기의 1번 경로다.

품질 계수 — 속도와 품질을 한 화면에서

속도가 빨라져도 오류·반려·장애·재작업이 늘면 leverage가 아니다. 완료 산출가치에 품질 계수를 곱한다.

계산 세부: 처음엔 건너뛰고 결정 문장만 읽어도 된다.

품질 보정 산출가치 = 완료 산출가치 × 품질 계수
품질 계수 = 1 - 중대 오류율 - 재작업률 - 승인 반려율 보정

품질 계수는 업무마다 다르게 둔다. 금전성 처리·대외 발송·개인정보·채용·평가 영향 업무는 낮은 오류율에도 크게 보정한다. 5장의 D형(승인 보조)에 해당하며 사람의 최종 판단을 유지하는 만큼 가중도 무겁다. 영역별로 품질의 정의도 다르다 — 개발은 변경 실패율, 운영은 반려율, 데이터는 지표 오해·권한 위반이다.

계수를 빼면: 품질 계수를 누락한 “속도 2배”는 반려율이 두 배가 됐어도 2배로 보고되고, 재배치 확신도를 누락한 “시간 30% 절감”은 그 시간이 회의로 사라졌어도 30% 절감으로 보고된다. 이 두 계수가 leverage 측정의 거짓말 탐지기다.


단계별 적용: 6단계 측정 설계 절차

use case 하나를 측정하기로 했다면 다음 6단계를 순서대로 닫는다. 한 단계라도 비면 그만큼 증거 등급 상한이 내려간다.

단계무엇을 하는가닫지 못하면
1. 업무 단위 정의“업무 1건”과 “완료” 시점을 못 박는다(예: 처리 1건 = 접수 → 승인 완료)무엇을 셀지 모름. 측정 불가
2. 기준선 확보AI 전 4주(주기 긴 업무는 직전 90일) 처리량·리드타임·품질·비용개선율 주장 금지(L1 상한)
3. AI 적용 방식 분류Assist / Workflow / Agent / Batch / Product 중 어느 수준인가초안 보조와 자동 실행을 같은 성과로 오인
4. 품질 가드레일(No-Go)성과 목표보다 먼저 “이러면 멈춘다” 기준을 둔다품질 악화를 성과로 착각
5. 증거 등급 확정트리로 L0~L5를 판정하고 보고 문구를 거기 맞춘다체감과 재무 효과가 같은 레벨로 섞임
6. 확대·유지·보류·폐기12장 게이트로 다음 행동을 판정한다측정만 하고 결정으로 안 이어짐

1단계가 가장 자주 생략된다. 직접 측정 설계를 굴려보며 가장 많이 무너진 지점이 여기였다. “업무 1건”을 합의하지 않으면 팀마다 다른 단위로 세어 숫자가 어긋난다 — 같은 지표가 조직마다 다른 테이블·필드를 참조하는 ‘단일 원장 부재’ 패턴이다.2 3단계 적용 방식 분류는 성과 인정 강도를 가른다. 초안을 받는 Assist와 여러 단계를 실행하고 승인으로 넘기는 Agent를 같은 “생산성 2배”로 묶으면 안 된다. 자동화 수준이 높을수록 품질 가드레일과 개입 지점을 촘촘히 본다.


AI leverage 장부 — 사례 발표가 아니라 장부로

전사 leverage는 사례 발표가 아니라 장부(ledger)로 관리한다. 사례 발표는 가장 멋진 한 건만 보여주지만, 장부는 모든 use case의 기준값·비용·검증·성과 연결을 같은 ID로 묶는다. 핵심은 하나 — 비용·완료·검증 로그가 같은 업무 단위 ID로 연결되는 것이다.

필드설명
work_unit_id업무 단위 ID(비용·완료·품질을 묶는 키)
적용 영역4장의 4개 영역 중 하나
업무 유형문서·회의·공고·PRD·코드·테스트·SQL·리포트 등
담당 조직업무 owner와 검증 owner
기준 기간 / 처리량 / 리드타임 / 품질 / 비용AI 적용 전 기준선 다섯 항목
AI 적용 방식 / 자동화 수준Assist–Product / 초안–자동 처리
사람 개입 지점검토·승인·예외 판단·배포·대외 발송
AI 비용 / 검수·재작업 비용모델·인프라·관측 / 사람 검토·수정·복구
완료 산출 / 조직 KPI 연결검증 완료 수 / 비용·처리량·SLA·품질·매출·리스크
증거 등급 / 확산 판단L0~L5 / 확대·유지·보류·폐기

이 장부는 새 풀스택 대시보드가 아니다. 초기에는 스프레드시트 한 장, 협업 도구 DB, 기존 BI view로 충분하다. 별도 앱·서버·인증을 붙이는 순간 측정 비용이 측정 대상보다 커진다(6장 Anti-Slop 참조). 중요한 건 화면이 아니라 같은 ID로 연결된 세 로그다.

장부가 작동하려면 일곱 이벤트가 같은 키를 공유해야 한다 — 최소 요구는 work_unit_id, org, task_type, ai_method, cost_tag, completion_result, quality_result. 없으면 토큰 비용과 조직 성과를 연결할 길이 없다(7장의 ‘에이전트가 읽을 수 있는 데이터 준비’가 측정의 전제로 돌아온다).


영역별로 다른 단위로 잰다 — 같은 잣대 금지

4장의 4개 적용 영역은 생산성 단위가 다르다. 같은 “생산성 배수”라는 단어를 써도 영역마다 분자가 다르다. 섞어서 하나의 배수로 평균 내면 의미가 사라진다.

적용 영역개인 생산성 단위핵심 조직 기여 지표흔한 착시
사내업무 AI 도입업무 유형별 처리 시간, 첫 산출까지 시간회의 후속·보고·의사결정 리드타임, 비용 회피개인 편의를 재무 효과로 단정(L4 아님)
업무 자동화사람 touch 수, 사람 개입 시간처리량/FTE, p50/p90, 반려율, 외주비자동 답변률을 해결률로 오인
개발 자동화accepted change, test, review 처리change lead time, deployment frequency, change failure rateLOC·커밋 수·AI 생성 비율 단독 측정
데이터 처리/분석SQL·report·view·품질 샘플요청 대기 감소, 셀프서비스 전환율, 지표 일치율잘못된 SQL 자동화를 처리량으로 계상

개발 영역이 가장 위험하다. “코드량 2배·테스트 3배·배포 2.5배”는 활동 지표이지 성과가 아니다. AI는 코드량을 부풀리는 데 능하므로 delivery·품질 지표로 보정한다.

활동 지표(주장)성과 지표로의 변환
코드량 2배검증 완료 PR·accepted change 증가. LOC 단독 금지
테스트 3배의미 있는 테스트·자동 회귀 검증 증가. flaky test 제외
배포 2.5배change lead time, deployment frequency, deployment rework rate를 함께
병렬 3배품질 저하 없이 유지 가능한 active delivery stream 수

이 보정은 외부 표준 DORA(처리량과 불안정성을 함께)·SPACE(생산성을 활동 단일 지표로 보지 않음) 관점을 빌렸다. 다만 외부 연구는 참고 근거일 뿐이다. 내부 ROI는 기준선·비교군·실행 로그·품질 검증·재무 확인으로만 인정한다(도구 세대가 바뀌어도 ‘활동 ≠ 성과’ 원칙은 유지된다).

제품·고객 서비스 AI는 이 장부에 섞지 않는다. 제품 탑재 AI는 개인 생산성 배수가 아니라 제품 KPI 비회귀(전환율·해결률·latency·error·개인정보 위험)로 본다. 운영팀의 반복 업무 감소분만 업무 자동화 지표를 함께 적용한다.


체크리스트: leverage 주장을 보고에 올리기 전

#확인비었으면
1“업무 1건”과 “완료” 시점을 한 문장으로 정의했는가측정 단위 미정. 보고 보류
2AI 적용 전 기준선(처리량·리드타임·품질·비용)이 있는가개선율 주장 금지(L1 상한)
3분자에 검증된 산출만 넣고 초안·생성량을 뺐는가leverage 아님. 사용량임
4품질 계수를 곱했는가(반려·재작업·장애 반영)속도만 본 반쪽 주장
5절감 시간에 재배치 확신도를 곱했는가“시간 절감”까지만. 조직 성과 X
6비용 분모에 토큰·사용량 실비를 포함했는가단위 비용 왜곡. 순가치 무효
7순가치(차감 후)와 생산성 주장(차감 전)을 분리했는가결재자가 진짜 숫자를 못 가림
8p50과 p90을 함께 보고하는가예외 케이스 악화를 숨길 수 있음
9영역별로 다른 단위를 썼는가(같은 잣대 금지)평균이 의미를 지움
10증거 등급을 보고 문구에 명시했는가체감과 재무가 같은 레벨로 섞임

6번이 이 장의 핵심 방어선이다. 토큰·사용량 실비가 빠진 leverage 보고는 분자만 부풀린 숫자다. 에이전틱은 작업당 토큰을 여러 배로 쓰지만 그 비용은 표준 대시보드에 잘 안 보인다 — 보이지 않는 비용을 분모에서 빼면 ROI는 언제나 장밋빛이다.


흔한 실패모드

레드플래그는 “이 슬라이드가 나오면 의심하라”는 회의용 판별구다.

1 — 사용량을 성과로 보고. 레드플래그: 성과 슬라이드 1번이 “월간 호출 수 우상향”. 차단: 보조 지표 인정 조건표 + 체크 3.

2 — 기준선 없는 개선율. 레드플래그: “체감상 빨라짐”이 “2배”로 적힘. 차단: 6단계 2단계 + 트리 Q1(L1 상한).

3 — 품질 계수 누락한 속도 주장. 레드플래그: 속도만 있고 반려율·재작업률 칸이 빔. 차단: 품질 계수 + 체크 4. 거부 1순위.

4 — 시간 절감을 곧장 원화로. 레드플래그: “30분 × 인원 × 시급 = 연 OO 절감”. 차단: 재배치 확신도 표 + 체크 5.

5 — 토큰비를 분모에서 누락. 레드플래그: 순가치 슬라이드에 “AI 비용” 줄 없음. 차단: 단위 비용 산식 + 체크 6. 거부 2순위(11장).

6 — 개인 배수를 조직 성과로 직행. 레드플래그: 개인 배수만 있고 팀 처리량 칸 없음. 차단: 팀 처리량 배수 + 5장 병목 재설계.

7 — 개인 지표를 평가·순위표로. 레드플래그: “개인별 AI 활용 랭킹” 공유. 차단: 개인 배수 4대 용도 한정(평가 금지).

8 — 측정이 새 업무가 됨. 레드플래그: 측정 인프라에 풀스택 앱·전담 인력. 차단: “장부는 스프레드시트로 충분”(6장).


Before/After: 같은 효과, 두 가지 보고

예를 들어 한 운영팀이 반복 처리 업무에 에이전트 워크플로를 한 운영 주기(약 90일) 돌렸다. 같은 운영 결과를 두 가지로 보고한다.

구분Before(사용량·반려)After(장부·통과)
분자생성 초안 수승인 통과분만(통과 못 한 분은 재작업 비용으로 분모 이동)
기준선“체감상 빨라짐”직전 4주 처리량·p50/p90·반려율·단위 비용
업무 단위미정의처리 1건 = 접수 → 승인 완료
품질없음품질 계수(반려율 미악화=가드레일 통과) 곱함
시간 절감30분 → 곧장 원화× 재배치 확신도(예외·백로그로 감 확인 → 0.50~0.75)
비용 분모토큰 누락AI 실비 포함, 차감 전 “처리량/FTE”와 차감 후 “순가치 (+)” 분리
증거 등급없음L2 명시(비교군 없음), 다음 주기 유사팀 비교로 L3
결재자 반응“그게 뭔 2배요?”“L3까지 가져오면 확대”

갈린 것은 효과의 크기가 아니라 — 잴 단위를 먼저 정하고, 검증된 산출만 분자에 넣고, 두 계수로 보정하고, 비용을 차감했는가다.


리더가 승인·요구할 신호

이 박스는 leverage 보고를 사이에 둔 양쪽이 같이 쓰는 게이트다 — 승인자에게는 “무엇을 보면 인정·반려할지”, 실무자에게는 “무엇을 갖춰야 통과되는지”. 거버넌스 세부는 17·18장에 있고, 여기서는 회의에서 한 문장으로 쓸 신호만 남긴다.

요구할 것 (없으면 성과로 인정하지 않는다)

  • 비용 분모에 토큰·사용량 실비를 포함한 단위 비용·순가치인가. AI 운영비가 빠진 ROI는 분자만 부풀린 숫자다(11장).
  • AI 적용 전 기준선이 숫자로 있는가. 없으면 개선율을 말하지 못한다(L1 상한).
  • 분자가 검증된 산출(승인·배포·완료 통과)인가. 생성 초안 수·코드량·토큰은 분자가 아니다.
  • 품질 계수(반려·재작업·장애)와 재배치 확신도(절감 시간의 행방)가 곱해져 있는가.
  • 보고 문구에 **증거 등급(L0~L5)**이 명시됐는가(10장).

반려할 것

  • 기준선 없는 개선율 — “체감상 2배”를 “2배”로 적은 것.
  • 품질 계수를 누락한 속도 주장 — 빨라졌다는데 반려율·재작업률 칸이 빈 것.
  • 시간 절감을 재배치 확신도 없이 곧장 원화로 환산한 것.
  • 개인 배수를 검증 없이 팀·조직 성과로 직행시킨 것.
  • 개인별 토큰·호출 수 리더보드(역인센티브를 만든다).

승인할 것

  • 영역별로 다른 단위를 쓴 보고(개발은 change failure rate, 운영은 반려율).
  • 차감 전 생산성 주장과 차감 후 순가치를 분리해 둔 보고.
  • 비교군이 없어 정직하게 L2로 낮춰 보고하고 다음 주기 L3 계획을 붙인 것.
  • 장부를 스프레드시트·기존 BI로 가볍게 연 결정(측정 인프라를 풀스택으로 키우지 않는다).

이 장의 요약

  • leverage는 사용량이 아니라 ‘검증된 산출 ÷ 투입’이다. 분자에는 승인·배포·완료를 통과한 산출만 넣는다. 토큰·호출·좌석·초안 수는 비용 통제 지표이지 성과가 아니다.
  • 다섯 산식으로 개인 → 팀 → 조직을 단계별로 본다: 개인 생산성 배수, 팀 처리량 배수, 리드타임 개선율(p50/p90), 단위 업무 비용, 순가치. 개인 배수가 높아도 팀 처리량이 그대로면 병목은 리뷰·승인·통합에 있다(5장 재설계로).
  • 두 계수가 거짓말 탐지기다: 절감 시간에 재배치 확신도를 곱하고(시간 절감 ≠ 비용 절감), 산출가치에 품질 계수를 곱한다(속도 ≠ 성과).
  • 영역마다 단위가 다르다. 개발의 “코드량 2배”는 활동 지표일 뿐 — accepted change·change failure rate로 보정하고 같은 잣대로 평균 내지 않는다.
  • leverage는 사례 발표가 아니라 장부로 관리한다. 비용·완료·품질이 같은 업무 단위 ID로 연결되면 된다 — 풀스택 대시보드가 아니라 스프레드시트로 시작한다(6장).
  • 보고 직전 트리로 증거 등급을 판정한다. 막힌 지점이 보고 문구의 상한이다(10장). 기준선 없으면 L1, 비교군 없으면 L2, 순가치 미산정이면 L3, 순가치 (+)면 L4. L5(전략 KPI)는 전략 연결로만 도달한다.
  • 측정은 척추가 아니라 판단 기준이다. 대시보드 채우기가 본업이 되는 순간 재설계가 멈춘다. 산식은 12장의 확대·유지·보류·폐기 판정 근거로만 쓰고 그 자체를 키우지 마라.

다섯 산식·두 보정 계수·6단계 절차·Ledger 필드·증거 등급 트리는 도구·모델이 바뀌어도 유지되는 방법론 골격이다. 인용한 외부 표준(DORA·SPACE)과 ‘에이전틱의 작업당 토큰 배수’는 집필 시점 기준이며, 산식은 그대로 두고 값만 바뀐다.

Footnotes

  1. AI 성과 증명을 요구하지만 측정 대상 행위의 정의와 비교 기준선이 없어, 실무가 코드량·문서량 같은 잘못된 대리지표를 들고 오는 패턴. 거의 모든 조직에서 반복 관측되는 ‘가치 증명 불가’ 패턴이다.

  2. 같은 지표가 조직마다 다른 테이블·필드를 참조해 숫자가 어긋나는 ‘단일 원장 부재(SSOT 부재)’ 패턴. 측정을 요구하기 전에 단위·완료 정의·참조 원천을 먼저 못 박아야 한다는 현장 교훈에서 가져왔다.