C'est déjà très bien après aussi peu de temps, mais je suis du même avis que @sbouju pour le terrain il faudrait quelque-chose de plus lisse et surtout plus stable (goudron ou béton) qui ne perturbe pas ton équilibre, l'herbe non plus n'est pas idéale, Même si les chutes y sont plus douces.
Si non, il semblerait que tu ais du mal à tenir ta roue verticale. La serrer un tout petit peu plus avec les jambes dans les premiers temps m'a permis de résoudre ce problème en attendant de maîtriser mes appuis et de pouvoir relâcher la pression.
En plus, ça limite les glissements vers l'extérieur, mais je crois que pour cela, rien ne vaut une surface bien lisse, pas de chocs, pas de glissements.
Peut-être devrais tu faire quelques tours d'un poteau bien stable dans un sens puis dans l'autre et quelques oscillations avant/arrière, le temps de trouver cet "verticalité". Ça aide aussi à apprendre à s’arrêter proprement sans devoir sauter en marche.
Et pour la fatigue, au début c'est tout à fait normal. Je n'étais pas essoufflé comme toi malgré un age à peu près équivalent au tien, mais je fait quand même un peu de sport, par contre, j'avais les jambes en coton et avec une tendance aux tremblements au bout de 10 mn. C'était dû à la crispation, mais au fils des sorties, j'ai pu faire 15 puis 20 mn et maintenant plus d'une heure sans mettre pied à terre alors que je n'ai parcouru que 300 Km.
Ça vas venir, ne perds pas espoir.