J'ai diminué l'alimentation des moteurs à 6V et le problème a disparu...
Pourtant le tutoriel Adafruit indiquait d'alimenter en 12V et que le Hat adapterait entre 5V et 12V.
J'ai fait d'autres essais de tensions : ça fonctionne bien en 3V (les moteurs tournent juste un peu moins vite) ; par contre, le problème revient dès 8V. Je vais donc rester sur du 6V !
Décidément, l'alimentation des cartes recèle encore quelques zones à éclaircir ! Je ne vais plus me fier à 100% aux tutoriels, même si hébergés par Adafruit...
En tout cas, merci pour la réponse qui m'a conduit vers la solution !