panel de control RAG

rag.gaxoblanco.com · evaluación 2026-05-25 · 167 chunks · Llama-3.1-8B-Instruct

preguntas disponibles hoy

sugeridas

chunks
167
11 fuentes
faithfulness
0.508
threshold 0.70
answer relevancy
0.673
threshold 0.70
evaluadas
14/14
golden dataset
modelo
Llama-3.1-8B-Instruct
HuggingFace · Novita
faithfulness por pregunta
whatsapp_descripcion
0.80
whatsapp_stack
0.43
lineup_descripcion
1.00
lineup_spotify
1.00
stack_general
0.25
stack_docker
1.00
experiencia_general
0.00
experiencia_flextech
0.25
orientacion_futuro
0.00
perfil_general
0.25
decisiones_arquitectura
0.33
rag_bot_descripcion
0.20
rag_bot_construccion
0.60
viner_descripcion
1.00

threshold 0.70 · verde = pasa · amarillo = por debajo

knowledge base
  • tecnologias 26
  • rag_bot 26
  • whatsapp_booking_bot 22
  • decisiones_tecnicas 20
  • that_day_london 17
  • lineup 11
  • objetivos_profesionales 10
  • preferencias 10
  • experiencia_y_perfil 10
  • sobre_este_sistema 9
  • flextech 6
flujo de una query
input
detección de saludo · contacto directo · intent visitante (recruiter / cliente / neutro)
guardia de entrada
bloquea injection / jailbreak en ES + EN · ~40 keywords · re.search con \b para evitar substring match
guardia de relevancia
bloquea off-topic sin keywords del perfil · keywords cortas con límite de palabra · permite preguntas ambiguas
retrieval — ChromaDB MMR
k=8 · fetch_k=30 · lambda=0.6 · nomic-embed-text via Ollama · contextos proyecto + referencia separados · historial con proyecto_activo
conectores externos (condicional)
GitHub GraphQL si pregunta sobre repos · HuggingFace Hub si pregunta sobre modelos · solo si el router activa la fuente
LLM — Llama 3.1 8B
HuggingFace Inference API · Novita · ~2s · prompt en primera persona · CTA adaptado por intent del visitante
guardia de salida
valida que la respuesta contenga keywords del perfil · bloquea respuestas fuera de foco · 158 tests unitarios cubren todo el pipeline
stack tecnológico

api y orquestación

FastAPI 0.115 LangChain 0.3 Python 3.11 HTMX 1.9 Jinja2 3.1 slowapi

retrieval

ChromaDB 0.6.3 nomic-embed-text Ollama 0.6.8 MMR k=8

infraestructura

Docker Nginx Let's Encrypt Donweb VPS

evaluación

RAGAS 0.2.15 pytest 8.3 158 tests golden dataset 11q