Bonjour,
Si l’arbre est jeune, il va perdre naturellement des fruits, car son système racinaire ne peut pas tous les nourrir.
Il ne faut donc pas se précipiter pour les enlever.
A mon avis, début juin, lorsque les fruits restants auront grossis , et tous les risques de gelée disparus , il sera temps d’en éliminer certains pour ne garder que quelques fruits qui pourront ainsi prendre une belle taille et murir correctement.
Cordialement, jcf