Продуктовые метрики: AI / LLM продукты

18 метрик категории «AI / LLM продукты» с формулами, SQL-расчётами и интерпретацией. 3 бесплатных.

Список (18)

• Hallucination Rate (HR)
• RAG Precision @ K (P@K)
• Token Cost per Request (TCR) 🔒
• Prompt Success Rate (PSR) 🔒
• Token Cost per Resolution (TCPR) 🔒
• Token Cost per Conversation (TCpC) 🔒
• Context Window Utilization (CWU) 🔒
• LLM Latency P95 (Inference) (LLM-P95) 🔒
• Tool Use Success Rate (ToolS) 🔒
• Citation Accuracy (CitAcc) 🔒
• Time to First Token (TTFT)
• RAGAS Faithfulness (фактологическая точность) 🔒
• RAGAS Answer Relevance (релевантность ответа) 🔒
• RAGAS Context Recall (полнота ретривала) 🔒
• LLM Cache Hit Rate (доля попаданий в кэш) 🔒
• Human Handoff Rate (доля передач оператору) 🔒
• Доля принятых ответов (Response Acceptance Rate) (RAR) 🔒
• Полнота извлечения Recall@K (RAG) (Recall@K) 🔒

← Все метрики