Saltar al contenido principal

Abrir en AthenaHQ

app.athenahq.ai/oracle

Propósito

Oracle es una herramienta automatizada de control de calidad y verificación de la presencia de tu marca en las búsquedas con IA. Analiza las respuestas generadas por IA recopiladas para las consultas que sigues y las contrasta con tu base de conocimientos. Al comprobar automáticamente lo que dicen modelos de IA (como ChatGPT, Claude y Gemini) sobre tu marca frente a tus hechos verificados, Oracle detecta inexactitudes confirmadas, contradicciones internas de tu base de conocimientos y discrepancias entre distintos modelos de IA. Así puedes evaluar rápidamente las alucinaciones de la IA y tomar medidas para corregir la información.

Qué hay en la página

Cabecera de página La barra superior incluye el título, una breve descripción, un icono de reloj para el menú Historial de ejecuciones y el botón principal Ejecutar Oracle (o Cancelar). Aviso del estado de ejecución Solo es visible mientras se está ejecutando un análisis de Oracle. Muestra la etapa actual (por ejemplo, «Recopilando respuestas» o «Verificando afirmaciones»), el número de respuestas analizadas hasta el momento y una estimación del tiempo restante. Panel de resumen Cuando una ejecución ha terminado (o sigue procesándose pero ya ha terminado de verificar afirmaciones), verás el panel principal de resultados:
  • Tarjeta de inexactitudes: muestra el porcentaje de respuestas analizadas con una inexactitud confirmada y el recuento de respuestas señaladas.
  • Tarjeta de respuestas analizadas: muestra el número total de respuestas de IA analizadas en esta ejecución. Si el sistema ha alcanzado un límite y no ha podido analizar todas las respuestas aptas, aparece aquí la nota «Flujo limitado».
  • Hallazgos prioritarios: una lista de hasta 5 inexactitudes de alto impacto (Crítica o Importante) encontradas durante la ejecución. Cada fila muestra la gravedad, la afirmación falsa de la IA y el hecho verdadero de la base de conocimientos. Puedes pulsar «Ver todo» para abrir la cola completa.
  • Problemas de la base de conocimientos: una sección desplegable que muestra puntos en los que tu base de conocimientos se contradice.
  • Discrepancias entre modelos: una sección desplegable que muestra casos en los que dos modelos de IA distintos han dado respuestas contradictorias a la misma consulta.
Gráficos
  • Precisión por modelo: un gráfico de barras que muestra el porcentaje de respuestas de la muestra sin hallazgos confirmados, desglosado por modelo de IA (por ejemplo, ChatGPT o Claude). Los textos de ayuda muestran los números exactos de respuestas señaladas y analizadas para ese modelo.
  • Temas en los que se equivoca la IA: un gráfico de barras que agrupa los hallazgos confirmados por la etiqueta temática de la base de conocimientos generada por el modelo en el hecho contradicho (por ejemplo, «Funciones» o «Precios»).
  • Temas de consultas: un gráfico de barras que agrupa los hallazgos confirmados por el tema de la taxonomía de la consulta que produjo originalmente la respuesta incorrecta.
Panel superpuesto de revisión de hallazgos (detalle) Al pulsar un hallazgo prioritario o «Ver todo», se abre un flujo de revisión a pantalla completa. Muestra todos los detalles de un hallazgo: la afirmación falsa, el hecho verdadero y las pruebas citadas. Desde aquí puedes recorrer los hallazgos y evaluarlos. Panel lateral de respuesta de IA (detalle) Al pulsar «Ver respuesta» dentro de un hallazgo, se abre un panel lateral con el texto completo de la respuesta de IA y la cita problemática resaltada. Editor de hechos (detalle) Al pulsar «Abrir hecho» o «Editar hecho» dentro de un hallazgo, se abre el editor de la base de conocimientos para actualizar de inmediato la información de referencia sin salir de Oracle.

Qué puedes hacer aquí

  • Ejecutar un análisis: haz clic en Ejecutar Oracle arriba a la derecha para iniciar un nuevo análisis de la última ejecución de consultas completada frente a tu base de conocimientos actual.
  • Cancelar un análisis: haz clic en Cancelar arriba a la derecha si necesitas detener una ejecución en curso.
  • Cambiar entre ejecuciones anteriores: haz clic en el reloj (Historial de ejecuciones) para abrir un desplegable con los análisis anteriores. Selecciona cualquier fecha y hora para cargar el panel de esa ejecución.
  • Revisar un hallazgo: haz clic en una fila de «Hallazgos prioritarios» para abrir el panel superpuesto de revisión detallada.
  • Marcar un hallazgo como revisado: dentro del panel de revisión, haz clic en Marcar como revisado. Oracle volverá a evaluarlo en la siguiente ejecución.
  • Ignorar un hallazgo: haz clic en Ignorar para descartar un hallazgo si no permite tomar medidas.
  • Reabrir un hallazgo: si anteriormente has marcado como revisado o ignorado un hallazgo, pulsa Reabrir para devolverlo a Pendiente de revisión.
  • Editar un hecho de la base de conocimientos: mientras revisas un hallazgo, haz clic en Editar hecho para corregir la entrada de referencia de la base de conocimientos.

Datos que se muestran

Los datos de Oracle se obtienen de la última ejecución de consultas completada, contrastando sus afirmaciones con los hechos verificados que has añadido a tu base de conocimientos. Los hallazgos se generan mediante IA para detectar contradicciones reales entre ambos conjuntos de datos.

Flujos de trabajo habituales

Ejecutar un nuevo análisis de Oracle
  1. Ve a la página Oracle.
  2. Haz clic en Ejecutar Oracle en la esquina superior derecha.
  3. Espera a que el análisis avance por sus etapas (Recopilando respuestas, Comparando, Verificando, etc.).
  4. Cuando termine, revisa el panel de resumen para ver las estadísticas de inexactitudes y priorizar hallazgos.
Revisar y resolver un hallazgo
  1. En el panel de una ejecución completada, haz clic en una fila de Hallazgos prioritarios o en Ver todo.
  2. En el panel superpuesto de revisión, lee la afirmación falsa de la IA junto al hecho verdadero de tu base de conocimientos y las pruebas citadas.
  3. Si debes actualizar el hecho, haz clic en Editar hecho.
  4. Cuando termines de investigar, haz clic en Marcar como revisado o Ignorar para quitar el hallazgo de la cola de pendientes.

Estados vacíos, de carga y de error

  • Estado vacío de configuración: si tu base de conocimientos tiene menos de 25 hechos, la página muestra «Configura primero tu base de conocimientos». No puedes ejecutar Oracle hasta alcanzar ese mínimo.
  • Explicación de primera ejecución: si tu base de conocimientos está lista pero aún no has ejecutado Oracle, verás «Descubre en qué se equivoca la IA sobre tu marca» con un botón para iniciar tu primera ejecución.
  • Carga: al cambiar de ejecución o esperar a que termine una, se muestran marcadores de las tarjetas del panel.
  • Errores: si una ejecución falla, aparece un cuadro de aviso rojo que explica el motivo. Entre los motivos concretos están:
    • La base de conocimientos es demasiado grande o pequeña para auditarla.
    • No hay respuestas que analizar (si las ejecuciones recientes no han producido respuestas legibles).
    • Este sitio web sigue más de 2.000 consultas activas (se ha superado el alcance admitido; contacta con soporte de AthenaHQ).
    • El último análisis ha fallado (fallo genérico).
  • Error de acceso: si no se puede contactar con el servicio de facturación, aparece una pantalla «No se ha podido verificar el acceso» con un botón «Reintentar».
  • Enlaces de entrada: la navegación lateral principal y la página Base de conocimientos (que dirige aquí los flujos de verificación).
  • Enlaces de salida: Base de conocimientos (para corregir hechos o temas) y páginas de Contenido (para ver borradores de corrección).

Preguntas habituales de soporte

¿Por qué no puedo pulsar «Ejecutar Oracle»? El botón estará desactivado si no tienes suficientes hechos verificados en tu base de conocimientos (necesitas al menos 25) o si acabas de añadir consultas y el sistema aún está esperando a que termine la recopilación de la primera ronda de respuestas de IA. ¿Qué significa «Flujo limitado» en mis respuestas analizadas? Para proteger el rendimiento y gestionar los límites, Oracle solo puede obtener hasta un máximo de respuestas por ejecución (normalmente 100.000). Este límite se aplica a la última ejecución de consultas completada, no a todas las respuestas recopiladas desde el último análisis de Oracle. Si se alcanza, el panel avisa de que el flujo se ha truncado; interpreta los resultados como incompletos y contacta con soporte. ¿Por qué una ejecución anterior indica «Historial importado» y no muestra el porcentaje de precisión? Las ejecuciones importadas de versiones anteriores de Oracle no tienen las muestras de respuestas originales necesarias para calcular un porcentaje exacto de precisión. Solo muestran el recuento total de hallazgos descubiertos en esa fecha.