나는 매일 나의 AI 비용을 추적한다
기술직 해고가 매일 수천 명에게 영향을 미치고 있습니다. 많은 기업이 그 이유로 AI를 꼽습니다. 그들은 아직 실현되지 않은 생산성 예측을 바탕으로 인력을 감축합니다.
이것은 엔지니어링 문제가 아닙니다. 측정의 문제입니다.
도구를 배포하는 것은 쉽습니다. 연결하고, 콘텐츠를 생성하게 하면 데모는 훌륭해 보입니다. 상사에게는 40% 더 빠르다고 말하죠.
가치를 전달하는 것은 다릅니다. 도구를 실행하고 관리하는 비용을 제외한 후, 도구가 실제로 무엇을 돌려주었는지 물어야 합니다.
대부분의 팀은 배포가 곧 전달이라고 가정합니다. 이러한 가정은 잘못된 결정으로 이어집니다. 숫자로 그 차이를 보여줄 수 없다면, 당신은 막대한 예산을 가지고 추측을 하고 있는 것입니다.
어떤 기업들은 더 빠르게 움직이기 위해 프로그램 관리를 없애버립니다. 도구가 제대로 작동하는지, 혹은 비용이 너무 많이 들지는 않는지 묻는 사람들을 제거합니다. 이런 사람들이 없다면, 당신의 가장 큰 승부수가 실패하고 있는지조차 알 수 없습니다.
나는 모든 AI 워크플로우를 추적하기 위해 간단한 파일을 사용합니다. 화려한 대시보드는 사용하지 않습니다.
나는 다음과 같은 구체적인 지표를 추적합니다:
• Baseline minutes: AI 도입 전 작업에 소요된 시간. • Token cost: 실행당 직접적인 달러 비용. • Seat cost: 월간 구독료. • Steering minutes: 프롬프트를 입력하고 AI를 수정하는 데 쓰는 시간. 이것이 숨겨진 비용입니다. • Output kept percentage: 인간의 재작업 없이 AI가 생성한 결과물의 비율. • Rework tax: 수정하거나 폐기해야 했던 작업의 비율.
가장 중요한 부분은 킬 스위치(kill switch)입니다. 임계값을 미리 결정하십시오. Rework tax가 50%를 넘거나 순 시간 절감량이 5분 미만으로 떨어지면, 해당 워크플로우를 중단하십시오. 매몰 비용(sunk costs)에 대해 논쟁하지 마십시오.
이 정신적 공식을 사용하십시오: Net Value = Minutes Saved - Steering Minutes - (Rework Tax x Volume)
이 숫자가 0이거나 음수라면, 당신은 돈을 낭비하고 있는 것입니다. 생산적으로 보일지 모르지만, 실제로는 아무것도 전달하지 못하고 있습니다.
이 시대를 살아남는 사람들은 AI를 가장 많이 배포하는 사람들이 아닙니다. 진짜 스코어보드를 보여줄 수 있는 사람들입니다. 그들은 무엇이 효과적이었는지, 비용이 얼마였는지, 그리고 무엇을 중단했는지를 증명할 수 있습니다.
측정하지 않으면 ROI를 주장할 수 없습니다. 결과를 증명하십시오. 그러면 당신은 없어서는 안 될 존재가 될 것입니다.
당신은 AI가 전달하는 가치를 측정하고 있습니까, 아니면 그저 슬라이드 한 장을 믿고 있습니까?
선택 사항 학습 커뮤니티: https://t.me/GyaanSetuAi