Né le 3 septembre 1703 de Maximilien-Emmanuel, Électeur de Bavière, et de Thérèse Cunégonde, Charlotte Sobieski, fille de Jean III (1674-1696), roi de Pologne. 
Frère de l'empereur Charles de Bavière (1711-1740). 
Il fait ses études à l'université d'Ingelstadt du 12 septembre 1719 au 17 mars 1721, puis à l'université de Sienne. Nommé évêque de Ratisbonne le 29 juillet 1719, suite à la renonciation de son frère Clément-Auguste, archevêque de Cologne. 
Il devient Évêque de Freisingen en 1730, Chanoine de Saint-Lambert en 1738 puis élu à l'unanimité évêque de Liège, le 23 janvier 1744. Inauguré le 10 mars, après la signature d'une capitulation. 
Il est enfin nommé cardinal par le pape Benoît XIV (1740-1758),  le 17 janvier 1746