생성형 오케스트레이션 사용 관련 FAQ

자주 묻는 질문(FAQ)에서는 맞춤형 조종사를 위한 생성적 오케스트레이션 모드가 AI에 미치는 영향을 설명합니다 Copilot Studio.

생성형 오케스트레이션이란?

생성적 오케스트레이션 을 사용하면 사용자 지정 조종사가 관련 주제 및/또는 작업을 통해 사용자 질문에 답할 수 있습니다. 생성형 오케스트레이션은 대화 내역의 세부 정보를 사용하여 입력 내용을 채워 넣음으로써 보다 자연스러운 대화를 가능하게 합니다. 예를 들어 Kirkland에서 가장 가까운 매장에 대해 질문한 다음 그곳의 날씨를 요청하면 오케스트레이션은 Kirkland의 날씨를 요청하려는 것으로 추론합니다. 이 시스템은 여러 개의 작업이나 토픽을 연결할 수도 있습니다. 예를 들어, "매장 영업시간을 알아보고 가장 가까운 매장을 찾아야 합니다."라고 답할 수 있습니다. Copilot이 세부 정보에 대해 확신이 서지 않는 경우, 후속 질문을 하여 모호성을 해소할 수 있습니다.

생성형 오케스트레이션은 무엇을 할 수 있나요?

생성형 오케스트레이션을 통해 시스템은 먼저 토픽과 사용 가능한 작업의 이름, 설명, 입력 및 출력을 사용하여 사용자 쿼리에 답변하기 위한 계획을 만듭니다. 또한 최근 10번의 대화 내역도 참조합니다. 그런 다음 대화에서 필요한 입력 내용을 채워 계획을 실행하고, 누락되거나 모호한 세부 정보가 있는 경우 사용자에게 후속 조치를 취합니다. 시스템은 사용자에게 답변하기 전에 사용자의 질문에 대한 답변을 찾았는지 확인합니다. 그렇지 않은 경우에는 다시 과정을 거칩니다. 마지막으로, 시스템은 토픽 및/또는 작업의 계획 출력을 기반으로 응답을 생성합니다. 또한 최종 응답을 생성할 때 Copilot에 대한 사용자 지정 지침도 사용합니다.

생성형 오케스트레이션의 의도된 용도는 무엇입니까?

Copilot 내에서 이 모드를 사용하면 대화 기록, 토픽에 대한 이름 및 설명, 작업에 대한 이름, 설명, 입력 및 출력을 기반으로 사용자 쿼리에 답변할 수 있는 Copilot를 생성할 수 있습니다.

생성형 오케스트레이션은 어떻게 평가되나요? 성능을 측정하는 데 사용되는 메트릭은 무엇입니까?

생성형 오케스트레이션은 프로세스의 각 단계에서 엔드투엔드 품질을 평가합니다. 품질은 시스템이 사용자 쿼리를 성공적으로 처리하는 계획을 얼마나 잘 만들고 실행하는지를 기준으로 측정됩니다. 품질 측정 점수는 미세 조정 과정에서 우리 팀에서 수동으로 라벨을 지정합니다. 다양한 사용자 쿼리, 프롬프트, 작업에 대한 품질을 평가합니다. 또한 우리는 시스템이 최종 사용자나 플러그인 작성자의 악성 콘텐츠를 얼마나 잘 무시하는지, 그리고 시스템이 유해한 콘텐츠 생성을 얼마나 잘 피하는지 평가합니다.

생성형 오케스트레이션의 한계는 무엇인가요? 사용자가 시스템을 사용할 때 생성형 오케스트레이션 제한의 영향을 최소화하려면 어떻게 해야 합니까?

최상의 결과를 얻으려면 토픽과 작업에 고품질 설명이 포함되어야 합니다. Copilot Studio 설명서에서 고품질 설명을 작성하는 방법에 대한 지침을 제공합니다.

생성형 오케스트레이션을 효과적이고 책임감 있게 사용하려면 어떤 운영 요소와 설정이 필요합니까?

생성형 오케스트레이션은 현재 영어로만 제공됩니다. Copilot에서 생성형 모드를 활성화하면 테스트 패널을 사용하여 시스템 성능을 테스트할 수 있습니다. 또한 Copilot에 대한 사용자 지정 지침을 추가하여 최종 응답을 생성하는 데 도움을 줄 수 있습니다.

작업이란 무엇이고, 생성형 모드가 활성화된 Copilot에서는 어떻게 작업을 사용하나요?

사용자 쿼리에 답하기 위해 사용자 지정 Copilot에 작업을 추가할 수 있습니다. Microsoft나 타사에서 개발한 작업을 사용할 수도 있고, 직접 작업을 만들 수도 있습니다. 사용자 지정 Copilot에 대해 어떤 작업을 구성할지 구성합니다. 또한 시스템에서 사용하는 이름, 설명, 입력 및 출력을 편집할 수 있습니다.

Copilot Studio는 작업에 어떤 데이터를 제공할 수 있습니까? Copilot Studio 작업에는 어떤 권한이 있나요?

Copilot이 작업을 호출하면 해당 작업은 작업에서 지정한 입력 값을 받습니다. 입력 값에는 최종 사용자와의 대화 기록 중 일부가 포함될 수 있습니다.

작업에서 활성화된 Copilot Studio를 사용할 때 어떤 종류의 문제가 발생할 수 있습니까?

작업이 항상 의도한 대로 작동하지는 않을 수 있습니다. 작업에 대한 입력을 준비할 때 또는 작업의 출력에 따라 응답을 생성할 때 오류가 발생할 수 있습니다. Copilot이 사용자 쿼리에 대해 잘못된 작업을 호출할 수도 있습니다. 작업을 사용할 때 이러한 오류의 위험을 줄이려면 사용자 지정 코파일럿에서 작업에 대해 관련성이 높고 모호하지 않은 고품질의 설명을 구성해야 합니다.