Chef robotique piloté par IA — pizza et pâtes faites maison, du pétrissage au dressage.
Un robot ne sait pas pétrir. Il sait suivre une trajectoire, appliquer une force, mesurer une résistance. Le pétrissage demande tout ça simultanément, avec un retour tactile en boucle fermée. C'est un problème ouvert depuis vingt ans.
NonnoRobot est notre tentative : utiliser une recette comme ancrage symbolique, une caméra comme oracle visuel, et un transformer comme planificateur d'actions. Pas une démo en chambre froide — un robot capable de produire une pizza margherita comestible en moins de douze minutes.
On vectorise 47 recettes (étapes, ingrédients, gestes) et on les indexe avec un embedding multimodal qui combine texte et image. Au moment de cuisiner, le robot retrouve la recette la plus proche du brief utilisateur, génère un plan d'actions ROS 2, et exécute pas à pas en re-vérifiant l'état après chaque étape.
La stack tient en onze services Docker : FastAPI pour l'orchestration, ROS 2 Jazzy pour le contrôle moteur, PyTorch pour la vision, Postgres pour le journal, Redis pour les états transitoires. Le tout pilotable depuis un dashboard Next.js — utile en démo, indispensable en debug.
11
47
120 ms
Suivant ▸ 002
Memoria