Componentes instalados com o painel Avaliação
Vários tipos de componentes fazem parte da guia Avaliação, incluindo trabalhos agendados, tabelas, propriedades do sistema e fluxos.
Trabalhos agendados instalados
| Trabalho agendado | Descrição |
|---|---|
|
Preencher bate-papos agregados de valor do CE - Diariamente |
Este script programado é executado diariamente e seleciona aleatoriamente 1000 conversas das conversas de ontem. Depois disso, para cada conversa, este trabalho extrai a duração do bate-papo e os classifica como pequeno, médio ou grande. Ele também classifica os bate-papos em que um Knowledge o artigo ou item do catálogo foi invocado. Para o bate-papo avaliado, ele também classifica as conversas com base no desempenho do bate-papo e preenche esses dados na tabela Agregados de valor de avaliação. |
Tabelas instaladas
| Rótulo | Nome |
|---|---|
| Avaliação |
[sn_na_conv_eval_evaluation] |
| Configurações de avaliação |
[sn_na_conv_eval_evaluation_configurations] |
| Métricas de Avaliação |
[sn_na_conv_eval_evaluation_metrics] |
| Conjunto de avaliação |
[sn_na_conv_eval_evaluation_set] |
|
Agregados de valor de avaliação |
[sn_na_conv_eval_evaluation_value_agregados] |
Tabelas remotas instaladas
| Tabela | Descrição |
|---|---|
|
Cálculos de valor do avaliador de conversa [sn_na_conv_eval_st_value_calcs] |
Para a consulta fornecida, a definição desta tabela remota calcula a economia de tempo e a porcentagem de eficiência para bate-papos pequenos, médios e grandes. Além disso, retorna a economia de tempo e a eficiência quando um Knowledge o artigo ou item do catálogo foi invocado. |
| Cálculos semanais de conversa [sn_na_conv_eval_weekly_cals] |
Para a consulta fornecida, a definição desta tabela remota calcula a economia de tempo e a porcentagem de eficiência para bate-papos pequenos, médios e grandes para diferentes semanas do intervalo de datas selecionado. Além disso, retorna a economia de tempo e a eficiência quando um Knowledge o artigo ou item do catálogo foi invocado para todas as diferentes semanas do intervalo de datas selecionado. |
Propriedades do sistema instaladas
| Propriedade | Descrição |
|---|---|
|
sn_na_conv_eval.erroBandMinRecords |
Número mínimo de registros necessários para calcular a faixa de erro para desvio superior e inferior. Por padrão, o valor é 30. |
|
sn_na_conv_eval.evalWeights |
Contém pesos para cada métrica de avaliação para avaliação de bate-papo. Esta propriedade é usada para calcular pontuações totais ou compostas para registros de avaliação. |
|
sn_na_conv_eval.maxEvaluateCount |
Número máximo de registros a serem avaliados em um dia. Por padrão, o valor é 200. |
|
sn_na_conv_eval.total_sampled_conv_count |
Edite esta propriedade para controlar o número total de conversas que podem ser amostradas para cálculos de valor. Por padrão, o valor é 1000. |
| sn_na_conv_eval.value_chat_classificador |
Edite esta propriedade para mudar a definição de conversas pequenas, médias e grandes. Por padrão, o valor armazenado é 4, 10. 4 e 10 significam o número total de mensagens de entrada. Menos ou igual a 4 mensagens de entrada na tabela sys_cs_message para uma conversa significa que é uma conversa pequena. Mais de 4 mensagens de entrada e menos de ou igual a 10 mensagens de entrada significa que é uma conversa média, e mais de 10 mensagens de entrada significa que é uma conversa grande. |
Regras de negócio instaladas
| Nome | Quando | Inserir | Atualizar | Condições do filtro |
|---|---|---|---|---|
| Adicionar mensagem informativa para o Conjunto de avaliação | depois | VERDADEIRO | VERDADEIRO | StateCHANGESTOem andamento Evaluation_type: Conversa Eq |
| Métrica de rotulagem de expansão | antes | VERDADEIRO | VERDADEIRO | Se você estiver usando o Google Analytics, você poderá usar o Google Analytics para acessar o site do Google Analytics, como o Google Analytics, o Google Analytics, o Google Analytics, o Google Analytics, o Google Analytics, o Google Analytics, o Google Analytics, o Google Analytics, o Google Analytics, o Google, o Google, o Google, o Google, o Google, o Google, o Google, o Google, o Google, o Google, o Google, etc. |
| UpdateLabelingScoresOnEvaluation | depois | VERDADEIRO | VERDADEIRO | Se você estiver usando o Google Analytics, você poderá usar o Google Analytics para acessar o site do Google Analytics, como o Google Analytics, o Google Analytics, o Google Analytics, o Google Analytics e o Google Analytics |
| Atualizar pontuações de desvio | antes | VERDADEIRO | VERDADEIRO | Métrica_type: O LLM gerou pontuações e mudanças |
| ObterAutoEvalCompositeScore | depois | FALSO | VERDADEIRO | StateCHANGESTOComplete |
Fluxos instalados
| Fluxo | Descrição |
|---|---|
|
Executar avaliação |
Executa avaliações quando as conversas são concluídas. |
| Executar avaliação em lote | Executa avaliações em lote, avaliando até 100 conversas concluídas do Virtual Agent. O fluxo é acionado quando o Conjunto de avaliação é criado ou atualizado e o Tipo de avaliação é Conversa. |
Ações de fluxo instaladas
| Ação de fluxo | Descrição |
|---|---|
|
Conversas aleatórias |
Executa a randomização de conversas e retorna 100 conversas aleatoriamente de uma determinada consulta. |
| InvokeApiDefinition | Invoca o recurso OneExtend no modelo de linguagem grande (LLM). |
| Avaliação do Classificador de Bate-papo | Fornece o título, a categoria e se a avaliação deve ser executada. |
| Transcrição de compilação | Cria a transcrição de uma conversa. |
| EvalExecuteCondition | Verifica se a transcrição é boa o suficiente para ser avaliada. |
Inclusões de script instaladas
| Inclusões de script | Descrição |
|---|---|
| EvalExecuteCondition |
Use esta inclusão de script para atualizar a condição de avaliação. |
| EvalUtils | Função de utilitário primário para o avaliador. |