L'IA qui, la plupart du temps, ne dit rien

On a proposé 2 061 compteurs à la fonction de résumé. Elle a écrit 262 phrases. Toutes les autres demandes se sont terminées par le même résultat, et ce n'est pas un message d'erreur même s'il est rangé comme tel : trop peu de données.

Dans quatre-vingt-sept cas sur cent, la réponse est : rien. Ce n'est pas un défaut et ce ne fut pas une surprise ; c'est le même constat qui a tué une version antérieure de la sentinelle des compteurs, arrivé par un autre chemin.

Où se situe le seuil

Un compteur devient éligible si, sur les trente derniers jours, il a enregistré du trafic au moins dix jours et vu au moins cinquante visiteurs. En dessous, il n'y a rien à dire qui ne soit du bruit. « Votre meilleur jour a été le mardi » est une affirmation sur une pièce tombée deux fois sur face.

La plupart des compteurs ici sont sous la ligne. Voilà à quoi ressemble de l'intérieur un service pour petits sites, et toute fonction qui résume un comportement doit décider quoi en faire. Il y a trois options et une seule est honnête :

• Abaisser le seuil et écrire des phrases sur du bruit.
• Écrire des phrases vagues, vraies à n'importe quel volume — une autre façon de ne rien dire en ayant l'air de parler.
• Ne rien dire, visiblement.

Ce que coûtent celles qui s'écrivent quand même

Les 262 phrases terminées viennent toutes du même modèle, mistral-nemo, et ont demandé 12,8 secondes en moyenne chacune — 5,4 secondes au plus rapide, 54,3 au plus lent.

C'est cet écart qui explique que cela ne se passe pas pendant que quelqu'un attend une page. La phrase est écrite à l'avance, rangée, et réutilisée sept jours avant d'être réécrite. Une page de statistiques qui mettrait treize secondes à apparaître serait pire qu'une page sans résumé.

Pourquoi les refus sont conservés

Une demande refusée pourrait simplement être supprimée. La garder est ce qui rend cet article possible : le rapport entre 1 796 et 262 est une description du public, disponible à tout moment, au prix d'une requête.

Cela empêche aussi que le même compteur soit reproposé le lendemain et refusé de nouveau, ce qui transformerait un seuil en une file qui ne se vide jamais. Et c'est la version honnête de l'état de la fonction : ce n'est pas un moteur de résumés qui n'a parfois rien à dire. C'est un moteur qui n'a le plus souvent rien à dire, et le chiffre est écrit plutôt que laissé à une impression.