Buildermark
Gelatinous Development · Programmation
Buildermark est un outil de mesure open source et local-first qui suit et analyse la part de votre base de code générée par des agents d'IA. Il fait correspondre les journaux de votre agent de codage avec les commits git pour attribuer chaque ligne, puis affiche le résultat au moment où vous validez votre commit. Tout tourne sur votre machine, sans compte et sans synchronisation cloud.
À propos de Buildermark
Qu'est-ce que Buildermark
Buildermark répond à une question que la plupart des équipes ont cessé de poser à voix haute : quelle part de ce code un agent a-t-elle réellement écrite ? Disons qu'il s'agit d'un suivi des agents de codage IA avec une seule tâche. L'outil d'attribution de code par IA fait correspondre les diffs de vos conversations avec l'agent de codage aux diffs de vos commits git, puis indique le pourcentage exact de chaque commit qui vient d'un agent. Pas de hooks d'agent. Pas d'étiquetage manuel.
Son intérêt, c'est qu'il ne vous gêne pas. Un conteneur d'application local exécute un serveur Go sur localhost:55022 et sert une interface web sur votre machine. Vos données ne quittent jamais votre ordinateur, ce qui compte si vous travaillez sur des dépôts privés ou sous des règles de conformité strictes. Pour un outil de développement local-first, c'est tout l'intérêt. Buildermark est une analyse de code open source que vous pouvez lire et auditer vous-même, publiée sous licence MIT.
La limite honnête, c'est la portée. L'application de bureau nécessite macOS 15 ou Windows 10, et les utilisateurs Linux n'ont droit qu'à une CLI. Le Team Server, qui agrégérait ces chiffres à l'échelle d'une organisation, est encore sur liste d'attente, pas encore livré. Si vous avez besoin de tableaux de bord inter-équipes aujourd'hui, Buildermark n'y est pas encore. Pas de vue organisation. Pas encore.
Pour commencer
- Téléchargez l'application de bureau pour macOS ou Windows, ou installez la CLI Linux.
- Laissez Buildermark importer automatiquement vos conversations avec l'agent, en ajoutant des chemins de dossiers partagés si vous récupérez l'historique depuis des machines virtuelles ou des conteneurs.
- Laissez-le charger votre historique git pour avoir des commits avec lesquels comparer.
- Consultez les pourcentages d'attribution d'agent par commit, ou ouvrez l'interface web sur localhost:55022 pour une ventilation plus complète.
- En option, notez vous-même les conversations avec l'agent, ou laissez l'agent consigner sa propre critique avec la compétence /rate-buildermark.
Informations sur le produit
Aperçu des tarifs, des plateformes compatibles et des performances de Buildermark.
Idéal pour
Les utilisateurs, tâches et cas d'usage où cet outil convient le mieux.
Utilisateurs
- Développeurs indépendants qui utilisent plusieurs agents de codage et veulent une réponse claire sur la part de code écrite par les agents
- Responsables techniques qui évaluent si l'adoption des agents de codage IA change réellement le travail produit
- Équipes soucieuses de la confidentialité qui ne peuvent pas envoyer l'historique de code vers un cloud tiers
Tâches
- Mesurer l'attribution d'agent sur un dépôt
- Comparer les agents à votre propre base de code
- Archiver les conversations avec les agents de codage
- Noter la production des agents
Cas d'usage
- Chercher à justifier ou à remettre en question un budget de codage IA avec des chiffres plutôt qu'à l'intuition
- Travailler sur une base de code privée où un service d'analyse hébergé n'est pas envisageable
- Comparer deux agents sur le même projet avant d'engager votre équipe sur l'un d'eux
Fonctionnalités clés
Attribution d'agent par commit
Buildermark fait correspondre les diffs de votre agent de codage aux commits et attribue chaque ligne à un agent ou à un humain. Vous obtenez le pourcentage exact d'un commit écrit par un agent, sans dépendre de hooks d'agent et sans étiquetage manuel. Le comparateur agnostique au format résiste aux formateurs automatiques, aux réordonnancements et au bruit des fins de ligne.
Notation des conversations
Vous pouvez noter les conversations avec l'agent à la main, ou laisser l'agent consigner sa propre critique via la compétence /rate-buildermark. Cela transforme un historique de chat brut en un signal que vous pouvez comparer entre sessions et agents.
Comparaison d'agents
Comme l'outil sait quelle part chaque agent a apportée à votre base de code réelle, il peut comparer comment Claude, Codex, Gemini et Cursor se comportent sur votre travail réel. C'est plus utile qu'un benchmark synthétique, puisque le code est le vôtre.
Gestion des données local-first
Vos données ne quittent jamais votre machine. Zéro analyse et zéro télémétrie, l'application tourne entièrement sur localhost:55022, et la seule requête sortante est une vérification des mises à jour. Buildermark est sous licence MIT, donc l'affirmation est vérifiable plutôt qu'une promesse.
Import automatique des conversations et des commits
Les conversations de Claude Code, Codex, Gemini et d'autres agents sont importées automatiquement, et vous pouvez ajouter des chemins de dossiers partagés pour récupérer depuis des machines virtuelles et des conteneurs. L'historique git se charge seul, et la correspondance des diffs s'exécute ensuite.
Notifications natives
L'attribution apparaît dans votre centre de notifications au moment où vous validez votre commit, ainsi vous voyez le pourcentage de l'agent pour chaque commit sans ouvrir de tableau de bord. Cela fonctionne sous macOS, Windows et Linux.
Extensions de navigateur pour les agents cloud
Les extensions Chrome, Firefox et Safari importent les conversations d'agents basés sur le cloud comme Claude Code Cloud et Codex Cloud. Vous cliquez sur la page de chaque conversation, attendez quelques secondes, et l'extension confirme l'import.
Avantages et inconvénients
Avantages
- Tourne entièrement en local sur localhost:55022, donc les dépôts privés restent privés
- Sous licence MIT et open source, ce qui rend les affirmations de confidentialité auditables
- La correspondance de diffs agnostique au format survit aux formateurs automatiques et au code déplacé
- Couvre les principaux agents au même endroit : Claude Code, Codex, Gemini et Cursor
- Les notifications natives placent l'attribution devant vous sans tableau de bord séparé
Inconvénients
- L'application de bureau est réservée à macOS 15+ et Windows 10+, donc les utilisateurs Linux obtiennent une CLI sans interface graphique
- Le Team Server pour les agrégations à l'échelle de l'organisation est encore sur liste d'attente, donc pas encore de vue inter-équipes
- Il n'y a pas d'API publique, ce qui limite la création de rapports personnalisés par-dessus
- Les conversations d'agents cloud nécessitent un clic dans une extension de navigateur au lieu de se synchroniser seules
Questions fréquentes
Il mesure la part de votre code écrite par des agents de codage IA. L'objectif est simple : mesurer le code généré par IA et le transformer en pourcentage. Il fait correspondre les diffs des conversations avec l'agent aux diffs de vos commits git et indique un pourcentage par commit.
Contenus associés
Découvrez des outils, des compétences et des articles liés à Buildermark.
Alternatives à Buildermark
Forefront
Forefront · ProgrammationForefront est une plateforme web pour construire avec de l'IA open source. Elle vous laisse affiner les principaux modèles de langage open source sur vos propres données, évaluer leurs performances et les exécuter via une API ou les exporter pour les héberger vous-même. Les développeurs qui veulent le confort d'une plateforme fermée mais tiennent à rester propriétaires de leurs modèles et de leurs données sont le public visé ici.
Startkit
StartKit.AI · ProgrammationStartkit est un boilerplate pour créer des produits SaaS d'IA et des wrappers d'IA. Voyez-le comme un boilerplate de startup IA avec les parties ennuyeuses déjà branchées : authentification, paiements Stripe et Lemon Squeezy, limites d'usage, e-mail transactionnel et un kit de démarrage d'API IA qui parle à OpenAI, Anthropic, Groq ou Llama. Vous clonez le dépôt, fixez votre prix et attaquez la partie du produit pour laquelle les gens paient vraiment. Il repose sur Next.js au-dessus de React et Tailwind, donc une bonne partie du code boilerplate vous semble déjà familière.
Testim
Tricentis · ProgrammationTestim est une plateforme d'automatisation des tests dopée à l'IA, qui sert à créer et exécuter des tests de bout en bout sur des applications web, mobiles et Salesforce. Elle s'appuie sur l'apprentissage automatique pour garder les tests stables quand une interface change, alors les équipes passent moins de temps à réparer des sélecteurs cassés. Pas mal pour un outil de tests automatisés que vous pouvez utiliser dès aujourd'hui. Vous créez des tests en enregistrant des actions dans un navigateur, puis vous ajoutez du JavaScript quand vous avez besoin de plus de contrôle. C'est un choix solide pour une équipe QA bien occupée.