Sarvam Prism 출시, 엔터프라이즈 워크플로에 신속한 의사결정 도입
Sarvam AI는 11월 3일 Prism을 출시하며, 회사가 자체 수행한 테스트에서 측정한 성능을 바탕으로 44밀리초 만에 엔터프라이즈 의사결정을 제공한다고 밝혔다. Sarvam Prism 출시는 사전에 정의된 답변을 선택하고 확률을 반환하는 시스템인 의사결정 모델을 선보인다. 이 설계는 엔터프라이즈 구매자에게 실질적인 질문을 던진다. 어떤 의사결정은 소프트웨어가 처리할 수 있고, 어떤 의사결정에는 여전히 사람이 필요한가?
Prism은 TypeSafe AI의 Jev, Microsoft-Decision-1, Perplexity의 Decider를 포함하는 분야에 합류한다. 이 모델의 등장은 일상적인 판단과 개방형 텍스트 생성을 분리하려는 개발자에게 또 하나의 선택지를 제공한다. 핵심적인 긴장은 자동화 적용 범위에 있다. 확신 있는 답변은 충분한 실제 업무가 자동 처리 대상일 때에만 도움이 된다.
이번 발표는 AI 시스템이 비즈니스 전략을 수립한다는 해석보다 더 제한적인 해석을 뒷받침한다. Prism은 개발자가 제공한 선택지를 평가한다. 그 중요성은 이러한 선택지가 워크플로에 어떻게 들어가는지, 확신도가 에스컬레이션을 어떻게 제어하는지, 그리고 공개된 결과가 독립 테스트를 견디는지에 있다.
Sarvam Prism 출시가 실제로 바꾸는 것
Prism은 개발자에게 결과에 불확실성이 함께 표시되는, 선택지 중 하나를 고르는 전용 모델을 제공한다. 이는 AI 판단과 그에 따라 작동하는 소프트웨어 사이의 인터페이스를 바꾼다.
Sarvam은 의사결정 모델 발표에서 Prism이 Sarvam 105B를 기반으로 구축됐다고 설명한다. 회사는 세 가지 평가 그룹에서 평균 71.8점을 기록했고, NVIDIA B200 그래픽 프로세서에서 중앙 응답 시간 44밀리초를 달성했다고 보고했다.
이 평가 그룹에는 공개 벤치마크, Sarvam이 재현한 외부 의사결정 지수, 내부 인도 언어 벤치마크가 포함된다. 이 결과는 회사의 출시 주장을 뒷받침한다. 그러나 엔터프라이즈 워크로드 전반의 순위를 독립적으로 검증한 것은 아니다.
워크플로에는 실행 가능한 답변이 필요하기 때문에 인터페이스가 중요하다. 고객 서비스 시스템에는 담당 팀, 긴급도 평가 또는 검토 요청 사유가 필요할 수 있다. 동일한 수신 메시지가 근거를 제공하더라도 각 판단은 서로 다른 결과를 초래한다.
범용 언어 모델도 구조화된 답변을 생성할 수 있다. Prism이 제시하는 장점은 전문화에 있다. 애플리케이션이 의사결정 공간을 제공하고 모델이 이를 직접 점수화한다. 이후 개발자는 결과를 기존 규칙과 연결할 수 있다.
이 점은 반복적인 운영 의사결정을 담당하는 소프트웨어 팀에게 출시의 의미를 부여한다. 이들이 관심을 두는 것은 모델 출력이 애플리케이션 내에서 신뢰할 수 있는 분기를 뒷받침할 수 있는지다. 유창성만으로는 이 질문에 답할 수 없다.
청구 관련 대기열을 추천하는 것과 환불을 승인하는 것의 차이를 생각해 보자. 둘 다 고객 불만을 다루지만 서로 다른 근거와 권한이 필요하다. 라우팅 결정이 조용히 자금 이동 권한으로 이어져서는 안 된다.
이 구분은 독자가 “엔터프라이즈 의사결정”이라는 표현에서 추론할 수 있는 범위를 제한한다. 이 표현은 일상적인 분류부터 전략적 판단까지 모든 것을 포괄한다. Prism의 공개 인터페이스는 후자보다 전자를 더 직접적으로 다룬다.
따라서 이번 출시는 구체적인 평가 기회를 만든다. 구매자는 동일한 운영 제약 아래 전문화된 의사결정 구성 요소가 기존 워크플로를 개선하는지 물어볼 수 있다. 자율적 경영에 관한 더 광범위한 주장을 받아들일 필요는 없다.
이는 제품 시연을 평가하는 방식도 바꾼다. 증거가 불완전할 때는 매력적인 답변보다 애플리케이션의 동작이 더 중요하다. 부적절한 선택지를 고르는가, 불확실성을 표현하는가, 아니면 검토를 유발하는가?
이러한 결과는 속도와 함께 같은 평가에 포함되어야 한다. 추가 조사를 초래하는 빠른 의사결정은 업무량을 줄이지 않고 이동시키기만 할 수 있다. 관련 단위는 수정과 예외를 포함한 완료된 워크플로다.
Sarvam이 해결해야 할 과제는 모델 출시를 조직이 활용할 수 있는 증거로 전환하는 것이다. 구매자는 어떤 의사결정이 이 인터페이스의 이점을 얻는지 알아야 한다. 또한 애플리케이션이 기존 규칙이나 인간의 권한을 유지해야 하는 지점도 확인해야 한다.
엔터프라이즈 구매자가 마주하는 적용 범위의 질문
유용한 척도는 모델이 허용 가능한 오류율로 처리하는 업무의 양이다. 정확도와 속도는 이 척도에 기여하지만, 어느 쪽도 이를 완전히 설명하지는 못한다.
적용 범위는 자동 처리 대상이 되는 유입 업무의 비중을 뜻한다. 신중한 모델은 업무의 상당 부분을 에스컬레이션하면서도 신뢰할 수 있는 의사결정을 내릴 수 있다. 공격적인 모델은 더 많은 업무를 처리할 수 있지만 추가 오류를 만들 수 있다.
이 지점에서 이번 출시는 엔터프라이즈 구매자와 워크플로 벤더에게 압박을 가한다. 확신도에 관한 주장은 더 까다로운 조달 질문을 요구한다. 구매자는 선택한 임계값 아래로 떨어지는 모든 사례에 어떤 일이 일어나는지 물어야 한다.
CXOToday의 엔터프라이즈 의사결정 보도는 최소 90% 확신도를 가진 답변에 대한 Sarvam의 보고 오류율을 반복해 인용한다. 회사는 이처럼 확신도가 높은 부분집합에서 영어 오류율 2.2%, 인도 언어 오류율 4.4%를 보고했다.
이 수치는 선택된 답변을 설명한다. 모든 요청의 오류율이나 자동화 대상이 되는 요청의 비중을 설명하지는 않는다. 운영 가치를 추정할 때는 이 분모가 중요하다.
예를 들어 지원 조직은 잘못된 라우팅과 미해결 라우팅을 모두 이해해야 한다. 모호한 티켓을 검토로 보내는 것은 올바른 행동일 수 있다. 그럼에도 사람에게 남는 업무가 있다.
같은 논리는 문서 처리에도 적용된다. 불확실한 분류는 잘못된 의사결정으로부터 후속 프로세스를 보호할 수 있다. 그 가치는 검토자가 불확실성을 효율적으로 해소할 충분한 맥락을 받는지에 달려 있다.
이는 워크플로 소유자에게 실질적인 절충안을 만든다. 확신도 요건을 강화하면 자동 오류는 줄일 수 있지만 검토 대기열은 늘어난다. 이를 완화하면 처리량은 높일 수 있지만 더 많은 위험이 후속 운영으로 넘어간다.
서로 다른 오류는 서로 다른 결과를 초래한다. 일상적인 요청을 잘못 분류하는 것과 민감한 에스컬레이션을 잘못 분류하는 것은 둘 다 오류로 집계된다는 이유만으로 동일하게 다뤄져서는 안 된다. 집계 정확도는 이 차이를 가릴 수 있다.
따라서 유용한 구매 결정에는 워크로드별 관점이 필요하다. 어떤 사례가 흔한지, 어떤 사례의 잘못된 처리가 비용이 큰지, 어떤 사례에 이미 신뢰할 수 있는 규칙이 있는지가 중요하다. 이러한 답이 추가 모델이 프로세스를 개선하는지 결정한다.
과거 티켓은 출발점이 될 수 있지만 신중한 해석이 필요하다. 기록된 목적지는 이전 조직 구조나 과거 정책을 반영할 수 있다. 그 레이블을 재현한다고 해서 오늘날 자동으로 올바른 비즈니스 결과가 되는 것은 아니다.
이 압박은 워크플로 자동화를 판매하는 벤더에게도 미친다. 이들의 시연은 미해결 사례, 반복 처리 및 수정을 고려해야 한다. 모델 응답은 고객이 최종적으로 경험하는 서비스의 일부일 뿐이다.
지식 노동자에게도 시사점은 비슷하다. 불확실성을 명확하게 표시하는 시스템은 모든 답변을 똑같이 확신에 차서 제시하는 시스템보다 판단을 더 잘 지원할 수 있다. 그 이점은 근거가 되는 증거에 계속 접근할 수 있는지에 달려 있다.
이 때문에 모든 Prism 평가에서는 품질과 함께 적용 범위도 제시되어야 한다. 그렇지 않으면 팀은 서로 다른 워크로드를 인정하지 않은 채 선택적인 시스템과 제한 없는 시스템을 비교할 위험이 있다. 검토 노력이 계산에 들어가면 겉보기 승자는 달라질 수 있다.
제한된 의사결정은 그 주변 소프트웨어를 바꾼다
사전 정의된 답변 공간은 통합을 더 명확하게 만들지만, 합리적인 의사결정을 정의하는 책임은 애플리케이션에 남긴다. 이 책임은 Prism의 엔터프라이즈 제안에서 핵심적이다.
Jev와의 비교는 이 분야가 매력적인 이유를 설명하는 데 도움이 된다. Andreessen Horowitz는 10월 투자 발표에서 TypeSafe의 타입화된 의사결정 출력을 소프트웨어가 직접 소비할 수 있는 값으로 설명한다. 이 투자자는 이러한 특성이 AI를 애플리케이션에 더 쉽게 내장할 수 있게 한다고 주장한다.
이는 TypeSafe 투자자가 제시한 긍정적인 상업적 관점이다. 이 접근 방식의 매력을 설명하지만 Prism을 독립적으로 검증하지는 않는다. 공통된 제안은 일부 판단이 제한된 인터페이스에 자연스럽게 부합한다는 것이다.
제한된 출력은 모델이 응답한 후의 과정을 단순화할 수 있다. 소프트웨어는 각 허용 답변을 승인된 작업과 연결할 수 있다. 개발자는 확신도가 불충분할 때 수행할 작업도 지정할 수 있다.
그러나 출력을 제한한다고 해서 사용 가능한 선택지가 현실을 포괄한다는 보장은 없다. 고객 문제가 여러 부서에 걸쳐 있다면 하나의 목적지는 부적절할 수 있다. 애플리케이션에는 모호성을 처리할 경로가 필요하다.
“검토 필요”와 같은 선택지는 평가가 적절한 에스컬레이션을 보상한다면 그 경계를 나타낼 수 있다. 그렇지 않으면 인터페이스가 선택을 강제하기 때문에 모델이 단호해 보일 수 있다. 이는 이해의 증거가 아니라 설계 특성이다.
각 선택지의 표현도 시스템의 일부가 된다. “청구 문제”와 “결제 실패”는 조직 내에서 겹칠 수 있다. 불명확한 범주는 모델이 텍스트를 합리적으로 해석하더라도 논쟁의 여지가 있는 결과를 낳을 수 있다.
이는 의사결정 모델 간 경쟁에도 영향을 미친다. Sarvam Prism과 Jev를 비교하는 구매자는 의사결정 정의를 동일하게 유지해야 한다. 시스템마다 범주 설명을 바꾸면 모델 성능과 애플리케이션 설계가 뒤섞이게 된다.
평가에서는 동일한 증거도 유지해야 한다. 한 시스템에는 완전한 고객 이력이 제공되고 다른 시스템에는 짧은 메시지만 제공된다면, 각 출력은 서로 다른 실질적 질문에 답하는 셈이다. 모델 비교에는 공통 과제가 필요하다.
Sarvam의 공개 모델 카드는 중복 청구를 신고하는 고객과 관련한 구체적 사례를 제공한다. 이 사례는 담당 팀, 긴급도 및 고객 감정에 대해 묻는다. 이는 고객 배포를 문서화한 것이 아니라 인터페이스를 설명하는 사례다.
유용한 분석적 요점은 이러한 판단이 여전히 분리되어 있다는 것이다. 메시지는 청구 관련일 수 있지만 긴급도는 불확실할 수 있다. 이를 하나의 “자동 처리” 답변으로 결합하면 에스컬레이션의 이유가 가려진다.
개발자는 이러한 분리된 신호를 사용해 더 명시적인 정책을 구축할 수 있다. 애플리케이션은 라우팅은 허용하되 중요한 조치는 검토 대상으로 남겨둘 수 있다. 이는 자동화의 범위를 명확하게 유지한다.
이 구분은 생성형 시스템이 여전히 어디에 적합한지도 설명하는 데 도움이 된다. 대기열을 선택하는 모델이 반드시 응답 초안을 작성하거나 누락된 정보를 수집하는 시스템을 대체하는 것은 아니다. 서로 다른 구성 요소가 서로 다른 단계에 기여할 수 있다.
따라서 의사결정 모델을 위한 가장 강력한 아키텍처적 근거는 선택적이다. 이는 개발자가 정의하고 평가할 수 있는 판단을 위한 집중된 인터페이스를 제공한다. 그 유용성은 워크플로 내 적절한 지점에 이 인터페이스를 배치하는 데 달려 있다.
엔터프라이즈 팀에게 이 질문은 보편적인 AI 승자를 고르는 문제에서 벗어난다. 특정 의사결정이 자체 모델, 규칙, 증거 및 에스컬레이션 경로를 가질 가치가 있는지의 문제가 된다.
공개 가중치는 배포 선택지와 의무를 만든다
모델 가중치에 접근할 수 있으면 조직은 통제권을 얻지만, 인프라 호환성은 구매 결정의 일부가 된다. 공개적으로 이용할 수 있다고 해서 모델 운영에 필요한 작업이 사라지는 것은 아니다.
Sarvam의 모델 배포 요구사항에는 Apache 2.0 라이선스와 약 120GB의 여유 가속기 메모리가 명시돼 있다. 모델 카드에는 가중치용 저장 공간도 약 106GB가 필요하다고 적혀 있다.
공개된 속도 측정은 모델을 로드한 뒤 순차적으로 요청을 처리하는 방식을 사용한다. 카드에 따르면 B200에서 중앙값은 44밀리초, 95백분위수는 420밀리초다. 응답 기한을 일관되게 지켜야 하는 애플리케이션에서는 이처럼 느린 구간의 수치가 중요하다.
카드는 또한 맞춤형 가중치 레이아웃 때문에 제공된 추론 코드를 사용해야 한다고 밝힌다. 추론이란 학습된 모델을 실행해 답을 얻는 과정이다. 이 릴리스는 모든 범용 모델 서버와 자유롭게 교체해 사용할 수 있는 형태가 아니다.
이러한 세부 사항은 자체 호스팅을 실질적인 엔지니어링 선택으로 만든다. 조직은 모델의 보고된 품질과 함께 배포 환경을 고려해야 한다. 하드웨어 확보 여부, 유지보수, 운영 책임의 주체는 로컬 제어가 유용한지에 영향을 준다.
지연 시간 수치에도 신중한 경계가 필요하다. 이는 요청 제출 방식 등을 포함한 공개 테스트 구성에 관한 결과다. 이를 고객 대상 응답 시간에 대한 포괄적 약속으로 해석해서는 안 된다.
배포된 애플리케이션은 모델 주변에서 추가 작업을 수행한다. 증거를 확보하고, 요청을 준비하며, 접근 규칙을 적용하고, 답변을 처리해야 한다. 각 단계는 사용자 경험에 영향을 미친다.
수요는 또 다른 차이를 만들 수 있다. 순차적 벤치마크 요청은 많은 사용자가 동시에 작업을 제출할 때의 동작을 보여주지 않는다. 배포 평가는 현실적인 조건에서 대기열과 경쟁 워크로드를 살펴봐야 한다.
이 구분은 구매 결정에서 중요하다. 증거 검색이 프로세스의 대부분을 차지한다면, 조직이 더 빠른 모델을 선택해도 개선 효과는 미미할 수 있다. 반대로 작은 판단 단계라도 워크플로 전반에서 반복되면 중요해질 수 있다.
로컬 운영은 문제가 발생했을 때 대응해야 하는 주체도 바꾼다. 조직은 서비스 중단, 모델 업데이트, 호환성 문제에 대한 명확한 책임자를 정해야 한다. 이러한 책임은 배포 평가에 포함돼야 한다.
공개 가중치는 고정된 모델 버전을 내부 테스트에 활용할 수 있게 한다. 이를 통해 팀은 안정적인 기준과 비교해 변화를 평가할 수 있다. 하지만 워크로드가 바뀐 뒤에도 그 기준이 적절하다는 점까지 입증하는 것은 아니다.
맞춤화는 또 다른 평가 의무를 만든다. 조직이 자체 라벨에 맞춰 모델을 조정한다면 신뢰도 동작을 다시 평가해야 한다. 익숙한 사례에서 분류 성능이 개선됐다고 해서 신뢰할 만한 불확실성 추정이 자동으로 유지되는 것은 아니다.
호스팅 서비스는 책임을 다르게 배분한다. 구매자는 기반 가속기를 직접 운영하지 않고도 모델을 평가할 수 있다. 다만 여전히 서비스 한계와 전체 애플리케이션의 동작을 이해해야 한다.
따라서 Sarvam Prism 출시는 구매자에게 의미 있는 배포 선택지를 제시한다. 실질적인 차이는 누가 모델 환경을 통제하고 누가 운영 업무를 부담하는지에 있다. 어느 경로도 그 자체로 품질 문제를 해결하지는 않는다.
신뢰도 주장은 워크로드별 증거가 필요하다
신뢰도 점수는 사람들이 의존하는 워크로드에서 오류와의 관계가 유지될 때만 유용하다. 캘리브레이션은 예측된 확실성과 관측된 정확성 사이의 관계를 설명한다.
Artificial Analysis의 의사결정 모델 평가는 이보다 넓은 범주에 대해 독립적인 주의를 제기한다. 해당 기관의 10월 출시 분석은 테스트된 의사결정 모델 전반에서 과신 현상을 발견했으며, 특히 지식 및 추론 과제에서 두드러졌다.
이 결과는 Prism 출시 이전의 것이므로 Prism 테스트로 제시해서는 안 된다. 다만 신뢰도를 제품 기능으로 받아들이기보다 측정해야 하는 이유는 보여준다. 과제 유형에 따라 신뢰성 패턴도 달라질 수 있다.
여기서는 벤치마크의 정체성이 중요하다. Sarvam이 재현한 외부 지수는 비공개 구성 요소를 대체한 것이므로, 그 결과를 공식 외부 점수로 취급해서는 안 된다. 이름이 비슷하다고 평가 절차가 동등해지는 것은 아니다.
복합 순위에도 같은 주의가 적용된다. 여러 평가 그룹을 결합하면 그 선택과 가중치로 정의된 질문에 답하게 된다. 기업 워크로드는 더 좁은 범위의 판단에 더 큰 중요성을 둘 수 있다.
언어는 또 다른 경계를 만든다. Sarvam의 decision API 제한 사항에 따르면 인도 언어 답변 중 약 38.4%가 0.9 신뢰도 임계값을 넘는 반면, 영어에서는 68.5%가 이를 넘는다. 이는 문서화된 평가 안에서도 서로 다른 검토 요건이 존재함을 시사한다.
이는 다국어 운영에서 특히 관련성이 크다. 시스템은 특정 언어에서 신중한 신뢰도를 보이면서도 더 많은 작업을 미해결 상태로 남길 수 있다. 구매자는 수용된 답변의 품질과 함께 서비스 범위를 평가해야 한다.
문서에는 이미지 지원이 아닌 텍스트 입력이 명시돼 있다. 호스팅 서비스의 질문당 한도는 32,768토큰이며, 토큰은 모델이 텍스트를 처리하는 단위다. 구매자는 이 서비스 한도와 더 큰 모델 수준의 주장을 구분해야 한다.
이러한 세부 사항은 운영 평가가 헤드라인 벤치마크에서 멈출 수 없는 이유를 보여준다. 입력 형식과 서비스 경계는 어떤 작업이 모델에 도달하는지 자체를 결정한다. 또한 판단 전에 필요한 전처리에도 영향을 미친다.
문서 워크플로에서는 부정확하게 추출된 텍스트가 판단 단계를 훼손할 수 있다. 모델이 받은 텍스트를 올바르게 해석하더라도 전체 프로세스는 여전히 잘못될 수 있다. 평가는 오류가 어디에서 발생하는지 식별해야 한다.
지원 라우팅에서는 변화하는 고객 행동이 관련된 과제를 만든다. 신제품, 개정된 정책 또는 낯선 불만은 들어오는 요청의 의미를 바꿀 수 있다. 과거의 신뢰도 동작이 미래 성능을 보장하지는 않는다.
애플리케이션은 누락된 증거와 부정적 증거도 구분해야 한다. 환불 기록이 없다고 해서 환불이 발생하지 않았다는 사실이 반드시 입증되는 것은 아니다. 좋은 의사결정 설계는 이런 공백을 드러낸다.
이는 자동화된 판단의 근거 자료를 보존해야 하는 이유다. 검색 가능한 AI 지식 베이스는 증거가 어떻게 구성되는지 이해하는 데 유용한 맥락을 제공한다. 다만 의사결정 과정에는 접근, 관련성, 검토를 위한 자체 규칙이 여전히 필요하다.
이 글을 위해 검토한 어떤 출처도 Prism의 광범위한 프로덕션 성과를 입증하지 않는다. 현재 이용 가능한 증거는 이 릴리스, 인터페이스, 보고된 테스트에 대한 논의를 뒷받침한다. 지속적인 비즈니스 개선에 관한 주장은 추가 관찰이 필요하다.
구매자에게 남는 경계는 분명하다. 신뢰도는 자신의 의사결정에 맞춰 검증해야 할 가설로 다뤄야 한다. 그 결과로 나온 증거가 자동화를 어디까지 확대하고 어디에 검토를 남길지 결정해야 한다.
Prism의 다음 사례를 강화할 수 있는 요소
다음으로 유용한 증거는 재현성, 프로덕션 적용 범위, 배포 성능 순이다. 각각은 Prism의 실질적 가치에 남아 있는 서로 다른 질문에 답할 수 있다.
첫째, 독립적인 재현은 동일한 평가 절차에서 출시 결과가 어떻게 비교되는지 명확히 해줄 수 있다. 여기에는 동일한 과제 정의, 모델 버전, 입력, 시간 측정 경계가 포함된다. 재현은 모든 기업 워크로드가 공개 벤치마크와 같을 필요 없이 비교에 대한 신뢰를 높일 수 있다.
다른 결과가 나온다고 해서 제품이 자동으로 무효화되는 것은 아니다. 차이를 낳은 조건을 설명해야 한다는 뜻이다. 하드웨어, 요청 길이, 평가 구성, 서비스 접근 방식은 모두 비교의 의미에 영향을 미칠 수 있다.
둘째, 프로덕션 보고는 자동화 적용 범위와 관측된 오류를 연결해야 한다. 고객 사례 연구는 검토된 사례, 수정된 판단, 워크로드 구성을 포함한다면 더 많은 정보를 제공할 수 있다. 이러한 분모가 없는 성공 사례는 핵심적인 상충 관계를 해소하지 못한다.
언어별 보고는 특히 가치가 있다. 구매자는 시스템이 자신들이 서비스하는 모든 사용자 집단에서 일관되게 업무를 줄이는지 확인할 필요가 있다. 전체 평균의 개선은 불균등한 검토 부담을 감출 수 있다.
셋째, 배포 증거는 현실적인 수요 아래에서의 동작을 보여줘야 한다. 응답 시간 분포, 서비스 중단, 긴 입력의 영향은 팀이 운영 적합성을 평가하는 데 도움이 된다. 안정적인 워크로드 테스트는 중앙값만으로는 제공할 수 없는 정보를 더한다.
이러한 신호는 Sarvam Prism과 Jev의 비교에도 적용돼야 한다. 경쟁사의 더 빠른 릴리스나 더 강한 벤치마크는 명확히 규정된 과제 안에서만 의미가 있다. 조달 결정은 출시 순서가 아니라 워크로드를 따라야 한다.
Sarvam Prism 출시는 일상적인 판단을 확률이 포함된 선택지로 표현하고, 소프트웨어가 행동 방식을 결정하게 하자는 집중된 제안을 내놓는다. 그 가치는 조직이 이러한 확률을 검증하고 사용 범위에 적절한 경계를 유지할 수 있는지에 달려 있다.
시험 도입을 고려하는 팀이라면 관측 가능한 결과와 명확한 에스컬레이션 경로가 있는 기존 워크플로를 선택해야 한다. 각 판단의 근거 자료를 보존한 뒤, 동일한 조건에서 Prism을 현재 프로세스와 비교하라. 성공적인 자동화와 함께 미해결 사례 및 수정 사항도 집계하라. 중요한 결과를 수반하는 조치는 조직의 기존 권한 규칙을 계속 적용받게 하라. 검토자에게 시스템이 조사를 줄이는지, 아니면 조사가 발생하는 위치만 바꾸는지 물어보라. 증거가 더 넓은 범위를 뒷받침할 때만 확장하라. 조직에서 반복되는 어떤 판단이 충분히 명확한 선택지, 신뢰할 수 있는 기준 결과, 관리 가능한 영향을 갖추고 있어 이 비교를 의미 있게 만들 수 있을까?



