Le corps du joueur en 33 points
La détection de pose de Google repère 33 points du corps. L'application n'en garde que six (épaules, poignets, hanches) : assez pour suivre le swing, avec moins de mémoire et de calcul.
01 · Le besoin
GolfSwing transforme le téléphone en analyseur de swing. On le pose face à soi, ou derrière soi dans l'axe de la cible, et on swingue normalement : aucun capteur, aucun équipement, juste le téléphone et ses clubs.
La caméra détecte la posture en temps réel grâce à la détection de pose de Google ML Kit. L'application en déduit la distance de carry, la qualité du coup, le tempo, la trajectoire (draw ou fade) et l'angle d'attaque, puis rejoue la balle en 3D. Elle s'appuie sur la taille du joueur pour calibrer ses estimations, sans réglage manuel.
Toute l'analyse tourne sur le téléphone : la caméra n'envoie aucune image. Par-dessus, j'ai ajouté une couche de jeu pour donner envie de revenir : chaque swing rapporte des pièces, qui débloquent des tenues pour le personnage, la balle et le club.
02 · Livré
03 · Architecture
La détection de pose de Google repère 33 points du corps. L'application n'en garde que six (épaules, poignets, hanches) : assez pour suivre le swing, avec moins de mémoire et de calcul.
En parallèle, un calcul de mouvement maison compare la luminosité de chaque image à la précédente en environ 5 ms. Son pic marque l'instant de l'impact.
Adresse, montée, transition, descente, impact, finish… Une machine à états suit le joueur phase par phase : c'est elle qui mesure le tempo réel du swing.
Trois parcours de 18 trous (l'Île, le Volcan, le Manoir hanté) rendus en Three.js dans une WebView. Ils sont produits par un générateur Node.js, et l'application comme la scène 3D lisent le même fichier de données.
Les comptes joueurs et le couplage avec la version web passent par Firebase. L'analyse et l'historique des swings, eux, restent sur le téléphone.
04 · Défis
La détection de pose prend environ 50 ms, trop pour chaque image. Elle ne tourne donc qu'une image sur trois, pendant que le flux optique, dix fois plus rapide, analyse toutes les images. Le tampon d'image est alloué une fois pour toutes : aucune création de mémoire à chaque image, donc pas de saccade.
Même immobiles, les points détectés bougent de quelques pixels d'une image à l'autre. Un lissage exponentiel absorbe ce tremblement, et un contrôle de cohérence baisse le score quand le mouvement détecté ne correspond pas à une vraie vitesse des poignets.
L'application détecte seule si le joueur est gaucher ou droitier, au moment de la montée du club. Elle gère deux placements du téléphone : de face, pour la trajectoire draw ou fade, et dans l'axe de la cible, pour l'angle d'attaque.
Un parcours dessiné à la main ne dit pas si ses trous sont jouables. Le générateur rejoue chaque trou avec le même moteur physique que le jeu ; tant que le trou ne se termine pas, la forme est resserrée par paliers de 12 %. C'est le moteur qui juge, jamais une approximation.
Les parcours de saison, comme Halloween, reviennent chaque année : leurs dates sont stockées sans année, la fenêtre peut enjamber le Nouvel An, et le compte à rebours se calcule en UTC pour ne pas se tromper d'un jour aux changements d'heure.