Lavez et coupez les abricots en deux, puis dénoyautez-les. Taillez la moitié des abricots en quartiers et laissez l'autre moitié en demi-fruits.
Faites chauffer le lait jusqu'à frémissement. Retirez du feu, ajoutez les fleurs de lavande et couvrez. Laissez infuser 15 minutes puis filtrez pour retirer les fleurs.
Dans un saladier, fouettez les œufs avec le sucre et le sucre vanillé jusqu'à ce que le mélange blanchisse légèrement (environ 3 minutes).
Incorporez progressivement la farine tamisée et le sel, en fouettant pour éviter les grumeaux.
Versez le lait parfumé à la lavande en filet, tout en mélangeant pour obtenir une pâte lisse. Laissez reposer cette préparation 15 minutes.
Préchauffez le four à 180°C (thermostat 6). Beurrez généreusement un moule à tarte d'environ 24 cm de diamètre.
Disposez harmonieusement les morceaux d'abricots dans le fond du moule, en alternant les demi-fruits et les quartiers.
Versez délicatement la pâte sur les fruits. Si vous le souhaitez, parsemez quelques amandes effilées sur le dessus.
Enfournez pour 35 minutes, jusqu'à ce que le dessus soit joliment doré et que la lame d'un couteau insérée au centre en ressorte propre.