Pular para o conteúdo principal

O que são Monitors

Um Monitor é um dashboard personalizado composto por widgets. Cada widget representa em gráfico uma consulta sobre Traces, Metrics ou Logs, para que uma equipe possa manter em uma única página os números que importam: custo por modelo, latência p95, taxa de aprovação dos evaluators e muito mais. Todo Monitor tem um escopo:
  • Workspace: representa dados de todos os Projects do workspace. Somente administradores do workspace podem criar, editar ou excluir Monitors de workspace.
  • Project: representa dados de um único Project.
O escopo é definido na criação e não pode ser alterado depois.

Criar um Monitor

1

Abra Monitors

Abra Monitors na seção Observability da barra lateral e escolha + Monitor.
2

Dê um nome ao monitor

Insira um Name e uma Description opcional do que o Monitor acompanha.
3

Escolha o escopo

Selecione Workspace (all projects) ou um Project. A caixa de diálogo abre no projeto ativo. Os demais membros só veem os Projects aos quais têm acesso.
4

Escolha um modelo

Em Start from template, mantenha Blank monitor ou comece a partir de um dashboard pronto. Consulte Modelos.
5

Defina o intervalo padrão

Default range é a janela de tempo com a qual o dashboard é aberto. Automatic usa o intervalo padrão. Intervalos além da retenção de dados do plano não são oferecidos.
6

Crie

Na caixa de diálogo New monitor, escolha Create. O dashboard é aberto imediatamente.

Modelos

Todo widget criado a partir de um modelo pode ser editado, movido ou excluído como qualquer outro.

Usar o dashboard

O cabeçalho do dashboard contém os controles de todo o Monitor:
  • Intervalo de tempo: escolha um intervalo predefinido ou personalizado. O intervalo se aplica a todos os widgets e é mantido na URL da página, então um link para o dashboard abre a mesma janela. Os intervalos são limitados à retenção de dados do plano.
  • Refresh: recarrega todos os widgets.
  • + Widget: abre o editor de widgets. Consulte Adicionar um widget.
  • Ações do monitor: Settings, Duplicate e Delete.
Arraste um widget pelo cabeçalho para movê-lo ou arraste sua borda para redimensioná-lo. Depois que o layout mudar, escolha Save layout para mantê-lo ou Cancel para descartá-lo.

Ações do widget

Abra o menu de um widget para:
  • Edit: reabrir o widget no editor.
  • Duplicate: adicionar uma cópia ao mesmo Monitor.
  • Create alert: abrir o formulário de Alerts com a métrica, os filtros e o Project do widget já preenchidos. A linha de meta do widget se torna o limite do alerta. Disponível para métricas GenAI de Traces. Os alertas não têm divisão, então Split results by não é transferido, e um Monitor de workspace exige que um Project seja escolhido no formulário. Os Notifiers do alerta são selecionados nesse formulário.
  • Delete: remover o widget.
Widgets de série temporal desenhados como linhas ou barras também mostram um botão no cabeçalho para alternar entre gráfico de linhas e gráfico de barras.

Adicionar um widget

O editor de widgets tem a configuração na parte superior e uma Preview ao vivo do widget abaixo, usando o intervalo de tempo atual do dashboard.
1

Escolha os dados

  • Dataset: Traces, Metrics ou Logs. Somente os datasets disponíveis para o workspace são listados.
  • Measure: a métrica a ser representada, por exemplo Requests, LLM cost, Latency p95 ou Evaluator pass rate. Consulte Medidas.
  • Aggregate: como os valores são combinados, como contagem, soma, média ou um percentil. As opções dependem da medida.
  • Interval: o tamanho do bucket para séries temporais, Auto, Minute, Hour ou Day.
2

Filtre os dados

Em Where, escolha + Filter para restringir a consulta, por exemplo a um modelo, provedor ou Deployment. Até 20 filtros por widget.
3

Divida os resultados

Em Split results by, selecione uma ou mais dimensões, como Model, Provider, Project, Agent ou Tool, para obter uma série ou linha por valor. Deixe vazio para representar todos os resultados juntos.
4

Dê um nome e escolha a visualização

Insira um Title e escolha uma Visualization. Somente as visualizações adequadas à consulta são listadas:
5

Ajuste as opções de exibição

Expanda Display options para ajustar o widget. As opções exibidas dependem da visualização:
  • Sort e Limit: mostram os valores Top ou Bottom e quantos (top lists e tabelas).
  • Value precision: casas decimais, de 0 a 6. Deixe em branco para automático.
  • Show overall, Show others, Show percentage: adicionam uma linha de total, agrupam os valores restantes em uma linha ou mostram a participação de cada valor (top lists e tabelas).
  • Target line: um valor de referência desenhado no gráfico (séries temporais).
6

Salve

Confira a Preview e escolha Save. O widget é adicionado ao Monitor.

Medidas

O dataset Traces oferece as medidas GenAI abaixo.

Gerenciar Monitors

A lista Monitors mostra cada Monitor com seu escopo, número de widgets, última atualização e quem o atualizou.
  • Use Search por nome ou descrição e Filter por Scope.
  • Abra o menu de uma linha para abrir, usar Duplicate ou Delete em um Monitor. Uma cópia duplica todos os widgets.
  • Para renomear um Monitor, alterar sua descrição ou o intervalo padrão, abra-o e escolha Settings no menu .

Permissões

Visualizar, criar, editar e excluir Monitors dependem, cada um, da função do membro. Membros sem acesso de edição veem os dashboards somente para leitura: os widgets não podem ser movidos, redimensionados, adicionados ou editados. Monitors de workspace exigem, além disso, um administrador do workspace para serem criados, editados ou excluídos. Create alert em um widget também exige permissão para criar Alerts. Para chaves de API, a permissão Read abrange listar e obter, e Write abrange criar, atualizar e excluir.