AI 벤더에게 아무도 묻지 않는 레퍼런스 체크 질문들
저는 이 과정에서 여러 번 실패했습니다.
벤더가 제공한 레퍼런스(추천 고객)에게 전화를 겁니다. 그들은 모두 만족해합니다. 모두 똑같은 말을 합니다. 계약을 체결합니다. 6개월 후, 고객 지원 응답에 며칠씩 걸립니다. 갱신 비용은 40%나 급등합니다.
레퍼런스 체크가 실패한 것입니다. 고객들이 거짓말을 한 것이 아닙니다. 당신이 잘못된 질문을 던진 것입니다.
대신 다음과 같은 질문을 사용해 보세요:
지난 6개월 동안 벤더의 담당자와 몇 명이나 대화했나요? 단 한 명뿐이라면 위험 요소입니다. 영업과 지원 팀을 아우르는 팀과 소통할 수 있다면 안정성의 신호입니다. 규모가 작은 팀을 가진 AI 벤더는 정작 도움이 가장 필요할 때 무너집니다.
운영 환경(production)에서 문제가 발생했던 마지막 사례에 대해 말씀해 주세요. 문제는 언제나 발생하기 마련입니다. 제가 알고 싶은 것은 벤더의 대응 방식입니다. 그들이 소통을 잘했나요? 문제를 해결한 후 후속 조치를 취했나요? 이는 데모 시연보다 훨씬 더 많은 것을 알려줍니다.
계약하기 전에 미리 알았더라면 좋았을 점은 무엇인가요? 이 질문은 비판보다는 조언을 구하는 방식입니다. 고객들은 예상치 못한 가격 변동이나 숨겨진 기능의 공백에 대해 이야기해 줄 것입니다.
계약을 갱신할 때 다른 옵션도 검토했나요? 갱신 시점이 진실을 말해줍니다. 경쟁사를 검토한 후에도 계속 이용하기로 결정한 고객은 강력한 신호입니다. 검토 없이 계속 이용하는 고객 또한 좋은 신호입니다.
초기 도입 이후에 합류한 직원들에게는 어떻게 작동하나요? 초기 사용자들은 지원과 조력자(champions)가 있습니다. 하지만 신규 사용자는 도구를 혼자 익혀야 합니다. 이 질문은 실제 일상적인 사용 경험을 보여줍니다.
이 질문들은 공격적이지 않습니다. 좋은 벤더라면 자신 있게 답변할 것입니다. 답변이 엇갈린다면 계약 체결 전에 더 유리한 조건을 협상하는 데 도움이 됩니다.
두 결과 모두 제품이 마음에 드는지 묻는 것보다 훨씬 유용합니다.
Source: https://dev.to/sumaskeller/the-reference-check-questions-nobody-asks-ai-vendors-142d
Optional learning community: https://t.me/GyaanSetuAi