J'ai compilé un binaire Chromium personnalisé pour que l'IA corrige les mauvaises interfaces utilisateur - Voici comment cela fonctionne

La plupart des outils d'optimisation de l'interface utilisateur fonctionnent de la même manière : injectez du JavaScript, surveillez les événements de clic, exécutez des tests A/B, attendez des mois pour obtenir des résultats.

Je voulais quelque chose de différent. Quelque chose qui pourrait voir le DOM de la manière dont le navigateur le voit réellement – ​​au niveau géométrique – et l'utiliser pour prendre de véritables décisions de mise en page sans conjectures.

J'ai donc construit Headless BAI : un pipeline d'IA comportementale qui compile un binaire Chromium corrigé, intercepte les données du cadre de délimitation DOM en C++, regroupe le comportement des utilisateurs avec K-Means et achemine les correctifs de mise en page via un LLM Llama-3-8B. Le résultat : une réduction de 31,42 % de la friction spatiale de l'interface utilisateur sur plus de 1 000 sessions utilisateur.

Voici exactement comment cela fonctionne, couche par couche.

Le problème avec l'inspection DOM basée sur JavaScript

Toutes les approches existantes (Puppeteer, Playwright et même Chrome DevTools Protocol) présentent la même limitation : elles se situent en dehors du p...
[Courte citation de 8% de l'article original]