Passer au contenu principal

Ouvrir dans AthenaHQ

app.athenahq.ai/oracle

Objectif

Oracle automatise le contrôle qualité et la vérification de la présence de votre marque dans la recherche IA. Il analyse les réponses collectées pour vos prompts suivis et les confronte à la base de connaissances. En comparant les déclarations de ChatGPT, Claude, Gemini et d’autres modèles à vos faits vérifiés, Oracle révèle les inexactitudes confirmées, les contradictions internes de la base et les désaccords entre modèles. Vous pouvez ainsi trier rapidement les hallucinations IA et agir pour corriger les informations.

Contenu de la page

En-tête Titre, courte description, icône d’horloge pour Historique des exécutions et bouton principal Lancer Oracle ou Annuler. Bannière de progression Visible uniquement pendant une analyse : étape actuelle (« Collecte des réponses », « Vérification des affirmations »), nombre de réponses examinées et temps restant estimé. Vue d’ensemble Une fois l’exécution terminée, ou la vérification des affirmations achevée pendant le traitement :
  • Inexactitudes : pourcentage des réponses contenant une inexactitude confirmée et nombre brut de réponses signalées.
  • Réponses analysées : total examiné pendant l’exécution. « Collecte plafonnée » indique qu’une limite a empêché d’analyser toutes les réponses éligibles.
  • Constats prioritaires : jusqu’à cinq inexactitudes à fort impact (Critique ou Majeur), avec gravité, affirmation IA erronée et fait correct de la base. « Tout voir » ouvre la file complète.
  • Problèmes de la base de connaissances : section repliable des contradictions internes.
  • Désaccords entre modèles : section repliable des réponses contradictoires de deux modèles au même prompt.
Graphiques
  • Exactitude par modèle : barres du pourcentage de réponses échantillonnées sans constat confirmé. Les infobulles donnent les nombres exacts de réponses signalées et analysées.
  • Sujets mal compris par l’IA : constats confirmés regroupés selon le tag de sujet de la base généré par modèle sur le fait contredit, par exemple « Fonctionnalités » ou « Tarification ».
  • Sujets des prompts : constats regroupés selon le sujet taxonomique du prompt à l’origine de la réponse incorrecte.
Examen détaillé des constats Un constat prioritaire ou « Tout voir » ouvre une vue plein écran avec l’affirmation erronée, le fait exact et les preuves citées. Parcourez les constats pour les trier. Panneau de réponse IA « Voir la réponse » affiche le texte intégral dans un panneau latéral, avec l’extrait problématique surligné. Éditeur de fait « Ouvrir le fait » ou « Modifier le fait » ouvre l’éditeur de la base pour corriger immédiatement l’information de référence sans quitter Oracle.

Actions disponibles

  • Lancer une analyse : Lancer Oracle en haut à droite analyse la dernière collecte de prompts terminée par rapport à la base actuelle.
  • Annuler : arrête une exécution en cours.
  • Consulter l’historique : l’horloge ouvre les analyses passées ; choisissez une date et une heure pour charger le tableau de bord associé.
  • Examiner un constat : cliquez sur une ligne des constats prioritaires.
  • Prendre connaissance : marque le constat comme examiné. Oracle le réévaluera à la prochaine exécution.
  • Ignorer : écarte un constat sans action possible.
  • Rouvrir : remet un constat examiné ou ignoré en attente d’examen.
  • Modifier un fait : corrige l’entrée de la base pendant l’examen du constat.

Données affichées

Oracle utilise la dernière collecte de prompts terminée et confronte ses affirmations aux faits vérifiés ajoutés à la base. L’IA détecte les contradictions réelles entre ces deux ensembles.

Procédures courantes

Lancer une analyse Oracle
  1. Ouvrez Oracle.
  2. Cliquez sur Lancer Oracle en haut à droite.
  3. Attendez la collecte des réponses, la comparaison, la vérification et les autres étapes.
  4. Examinez la vue d’ensemble pour voir les statistiques d’inexactitude et prioriser les constats.
Examiner et traiter un constat
  1. Dans une exécution terminée, cliquez sur un Constat prioritaire ou Tout voir.
  2. Comparez l’affirmation IA erronée, le fait de la base et les preuves.
  3. Si nécessaire, cliquez sur Modifier le fait.
  4. Après investigation, Prendre connaissance ou Ignorer le retire de la file d’attente.

États vides, de chargement et d’erreur

  • Configuration nécessaire : avec moins de 25 faits, « Configurez d’abord votre base de connaissances ». Oracle ne peut pas démarrer avant ce minimum.
  • Première utilisation : si la base est prête mais Oracle jamais exécuté, « Découvrez ce que l’IA se trompe à dire sur votre marque » présente le premier lancement.
  • Chargement : cartes de substitution pendant le changement d’exécution ou l’attente du résultat.
  • Erreurs : encart rouge indiquant notamment une base trop grande ou trop petite pour l’audit, aucune réponse lisible dans les collectes récentes, plus de 2 000 prompts actifs suivis (périmètre dépassé, contactez l’assistance AthenaHQ), ou l’échec générique de la dernière analyse.
  • Erreur d’accès : si le service de facturation est inaccessible, « Impossible de vérifier l’accès » et Réessayer.
  • Accès : barre latérale principale et base de connaissances pour les vérifications.
  • Liens sortants : base de connaissances pour corriger faits ou sujets, pages Contenu pour consulter les brouillons correctifs.

Questions fréquentes

Pourquoi « Lancer Oracle » est-il désactivé ? Il faut au moins 25 faits vérifiés dans la base et une première collecte de réponses IA terminée après l’ajout de prompts. Que signifie « Collecte plafonnée » ? Pour préserver les performances et respecter les limites, Oracle récupère un nombre maximal de réponses par exécution, généralement 100 000. La limite concerne la dernière collecte de prompts terminée, et non toutes les réponses depuis la précédente analyse Oracle. Si elle est atteinte, les résultats sont incomplets ; contactez l’assistance. Pourquoi une ancienne exécution indique-t-elle « Historique importé » sans taux d’exactitude ? Les exécutions reprises d’anciennes versions d’Oracle n’ont pas les échantillons bruts nécessaires au calcul exact. Elles affichent uniquement le nombre de constats trouvés à cette date.