Descrição da ferramenta: Ledda é uma ferramenta de monitoramento de agentes de IA que conecta rastreamentos OpenTelemetry, permitindo visualizar chamadas, uso de ferramentas e decisões em tempo real, além de alertar sobre falhas ou comportamentos anômalos.
Atributos:
🛠️ Integração OpenTelemetry: Compatível nativamente com OpenTelemetry para coleta detalhada de dados.
📊 Visibilidade Completa: Permite visualizar todas as ações dos agentes de IA em produção.
🔔 Alertas em Tempo Real: Notifica sobre quedas na taxa de conclusão ou aumento de alucinações.
👥 Acessível à Equipe: Interface compreensível por toda a equipe, não apenas engenheiros.
💰 Plano Gratuito: Oferece 50 mil unidades sem necessidade de cartão de crédito.
Exemplos de uso:
🔍 Análise de chamadas do LLM: Monitoramento detalhado das interações do modelo para identificar problemas.
⚠️ Aviso sobre queda na taxa de sucesso: Receber alertas quando a taxa de conclusão diminui significativamente.
🧩 Sintonia na utilização de ferramentas: Verificação do uso adequado das ferramentas integradas pelos agentes.
📈 Acompanhamento do desempenho em produção: Visualizar o comportamento dos agentes durante operações reais.
🤖 Detecção de alucinações do modelo: Identificar spikes nas alucinações geradas pelos agentes AI.