Il y a un genre de papier sur l’IA que je commence à reconnaître.
Prenez un vrai débat industriel.
Remplacez la version la plus solide d’un camp par une abstraction simpliste et étroite.
Prouvez quelque chose de vrai sur ce jouet.
Et laissez tout le monde sur internet prétendre que le débat est clos.
C’est apparemment ce qui se passe avec On the Reliability Limits of LLM-Based Multi-Agent Planning.
Pour être claire, le papier a l’air sérieux et le théorème central n’est pas absurde. Dans un réseau d’agents fermé où chaque agent dispose des mêmes preuves et ne peut transmettre des informations que via des canaux linguistiques limités, un décideur centralisé ayant accès aux mêmes informations dominera le réseau délégué. Dans ce régime, les agents ne créent pas d’information. Ils la compressent et l’acheminent.
C’est bon. Certes. Peu importe.
Le retour d’environnement manquant
Mais ce n’est pas à ça que ressemblent les systèmes d’agents en pratique.
Le montage expérimental décrit dans le papier utilise un prompting en relais où les étapes en aval ne voient pas la question originale, seulement la sortie compressée des étapes précédentes. En d’autres termes, ils mesurent les modes de défaillance d’un jeu de téléphone arabe académique et présentent ça comme un résultat sur le « planning multi-agent ».
Cette distinction est cruciale.
Les vrais systèmes d’agents tirent leur valeur de choses que ce cadrage élimine :
l’état persistant, les artefacts partagés, l’utilisation d’outils, l’accès du vérificateur aux sources, le retour d’environnement, les rôles hétérogènes et les nouveaux signaux entrant dans le système au fil du temps.
Le papier lui-même l’admet implicitement en traitant les sorties d’outils, les recherches en base de données, les réponses d’API et les observations d’environnement comme des informations exogènes qui modifient l’analyse.
Alors, qu’est-ce qu’ils ont vraiment montré ?
Quelque chose d’étroit mais d’utile :
si votre architecture multi-agent se résume à plusieurs agents s’échangeant des résumés approximatifs d’un même contexte, alors non, l’architecture n’est pas magique.
C’est un résultat honnête.
Mais ce n’est pas un argument sérieux contre l’orchestration d’agents moderne. C’est un argument contre les systèmes de relais fermés avec preuves partagées et communication bornée.
Ce n’est pas la même chose.
C’est ce schéma que j’aimerais que les gens surveillent davantage :
🍎 parfois un papier prouve quelque chose de vrai,
🍏 mais seulement après avoir amputé la partie du problème où réside la valeur réelle.
Rappelez-vous, les enfants : un théorème peut être correct, même quand il vise la mauvaise cible.
Papier :