Magi: 에이전트의 사고 방식과 성과를 정확히 이해하세요

지금 많은 팀이 첫 AI 에이전트를 구축하고 있습니다. 다른 벤더의 에이전트가 기대에 미치지 못해 두 번째 시도에 나선 팀도 많습니다.

어느 쪽이든 같은 질문이 곧 떠오릅니다. 정말 잘 작동하고 있는가? 에이전트는 실제로 고객과 대화하고 있지만, 어떤 대화가 잘 됐고 어떤 대화가 어긋났는지, 그리고 그 이유가 무엇인지 파악하기는 어렵습니다. 성과는 몇 가지 핵심 수치로만 보이고, 그 이면을 이해하려면 대부분의 팀에게 없는 시간이 필요합니다.

AI 에이전트로 실질적인 가치를 얻는 팀에는 공통점이 하나 있습니다. 자신의 에이전트를 이해한다는 것입니다. 에이전트가 왜 그렇게 답했는지, 모든 대화에서 어떤 성과를 내고 있는지, 다음에 무엇을 고쳐야 하는지 알고 있습니다.

Magi는 바로 이를 위한 도구입니다. Agent Designer에 내장된 AI 어시스턴트로, 이제 모든 Maven 고객이 사용할 수 있습니다. Magi는 Ask Maven을 대체하며, 처음부터 새로 구축해 훨씬 강력한 어시스턴트가 되었습니다. Ask Maven에서 하던 모든 질문을 이제 모든 페이지에서 Magi에게 할 수 있습니다.

Magi의 위치

Magi는 Agent Designer의 모든 페이지 오른쪽 하단에 있는 원형 버튼에 있습니다. 클릭하면 작업 중인 화면 옆에 Magi가 열립니다. Magi는 현재 페이지를 인식하므로, 보고 있는 대화, charter, 기능 등 무엇이든 파악합니다. 자연어로 질문하면 그 자리에서 답하므로, 페이지를 떠나거나 보고서를 뽑을 필요가 없습니다.

Magi가 답하는 질문

"에이전트는 왜 그렇게 말했을까?"

Magi가 가장 깊이 파고드는 영역입니다. Magi는 대화 기록, AI 요약, 모든 메시지 이면의 추론 과정까지 대화 전체를 읽습니다. 에이전트가 검토한 지식과 액션 중 실제로 사용한 것이 무엇인지, 어떤 charter와 세그먼트가 일치했는지, 어떤 안전 검사가 작동했는지 알려줍니다. 그리고 에이전트가 실제로 본 정보를 바탕으로 특정 응답이 왜 그렇게 나왔는지 설명합니다.

예를 들어 고객이 수업료에 대해 물었는데 에이전트가 답하지 못했다고 해 봅시다. 해당 대화를 열고 Magi에게 물으면, 일치한 charter와 거기에 연결된 액션을 알려줍니다. 이제 어디를 살펴봐야 할지 알 수 있습니다.

"이 액션은 왜 한 번도 제안되지 않았을까?"

Magi는 한 페이지씩이 아니라 전체 구성을 아울러 추론합니다. charter가 평가 대상에 포함되고 있는지, 어떤 charter가 특정 액션이나 지식 베이스를 사용할 수 있게 하는지, 세그먼트 조건이 무엇을 의미하는지, 에이전트가 도구를 선택할 때 읽는 설명이 정확히 무엇인지 알려줍니다. 여러 화면에 걸친 질문도 하나의 답으로 해결됩니다.

"정말 잘 작동하고 있을까?"

이번 달 채널별 핸드오프처럼 데이터를 요청하면, Magi가 쿼리를 만들고 Magi 패널에서 바로 표나 차트를 그려줍니다. 카테고리, 태그, 채널, 언어, 세그먼트, charter별 처리량과 구성을 다룹니다. 해결, 컨테인먼트, 감정 분석 같은 품질과 결과 지표는 물론 처리 시간, 피드백, 제품 이벤트, Intelligent Fields 추세도 다룹니다. 어떤 수치든 그 이면의 대화를 요청하면 Magi가 찾아 보여줍니다.

"무엇부터 고쳐야 할까?"

Magi는 플랫폼에서 조치가 필요한 항목을 계속 정리하는 Inbox를 읽습니다. 누락된 지식, 중복 문서, 사용자 지정 항목 등이 포함됩니다. 누락된 지식 항목은 부족한 부분을 직접 짚어주므로 무엇을 추가해야 할지 정확히 알 수 있습니다.

"그 대화를 찾아서 바로 열어줘."

Magi는 대화, 최종 사용자, 지식, 동기화 상태, 앱, 이벤트 등 에이전트 안의 무엇이든 찾아냅니다. 또한 모든 페이지, 앱, 기능, charter, 지식 베이스, 문서, 대화로 바로 이동시켜 줍니다.

"이 액션 설명을 더 명확하게 다듬어줘."

Magi는 아직 저장하지 않은 수정 사항을 포함해 화면에 있는 내용을 봅니다. 저장하기 전에 charter 초안을 검토해 달라고 하거나, 에이전트가 액션 사용 여부를 판단할 때 읽는 설명을 다듬어 달라고 요청하십시오. Magi가 문구를 제안하고, 저장 여부는 사용자가 결정합니다.

"이걸 우리 시스템과 어떻게 연결하지?"

개발자는 앱을 에이전트에 연결하는 등 통합 코드에 대해 Magi에게 도움을 요청하고, Agent Designer를 벗어나지 않고 답을 얻을 수 있습니다.

신뢰할 수 있도록 설계

• 하나의 에이전트로 범위 제한. Magi는 현재 열려 있는 에이전트만 보며, 조직 내 다른 에이전트는 절대 보지 않습니다.
• 비밀 정보 차단. 앱 자격 증명은 Magi가 접근하기 전에 삭제 처리됩니다. Magi는 앱의 공개 설명만 읽으며, API 키는 절대 읽지 않습니다.
• 민감한 번호 마스킹. 입력한 카드 번호, 사회보장번호, 계좌 번호, 신분증 번호는 Magi가 읽기 전에 마스킹됩니다.
• 현재는 읽기 전용. Magi는 읽고, 조사하고, 답합니다. 에이전트를 변경하지 않습니다.
• 근거 제시. 어떤 수치든 그 이면의 대화를 요청할 수 있으며, 모든 설명은 에이전트가 실제로 사용한 추론에 기반합니다.

이미 Maven을 사용 중이라면 Agent Designer 오른쪽 하단의 Magi 버튼을 찾아보십시오. Magi가 할 수 있는 모든 기능은 Magi 문서에서 확인할 수 있습니다. Maven이 처음이라면 데모 예약을 통해 에이전트에게 '왜'를 묻는 경험을 직접 확인해 보십시오.