Franz Xaver Glötzle wurde als uneheliches Kind des Webergesellen Anton Glötzle und der Dienstmagd Catharina Geiß geboren und wurde zu Julius Geiß in Pflege gegeben, der als Mesner der Gottesackerkapelle in Immenstadt sein Geld verdiente, aber auch Miniaturen malte. Geiß ließ den Jungen zum Fass- und Porzellanmaler ausbilden; beeinflusst wurde Franz Xaver Glötzle, der schon in jungen Jahren Landschaftsbilder malte, vom ortsansässigen Künstler Nikolaus Drexel.
Nachdem er im Jahr 1841 Johanna Margaretha Lettenmayer geheiratet hatte, überließ ihm sein Ziehvater sein Haus. Glötzle arbeitete nun auch als Lithograph; unter anderem druckte er auch Gemälde Drexels. 1948 schuf er Bilder für die Kreuzwegstationen am Kalvarienberg in Immenstadt; diese wurden im 20. Jahrhundert ersetzt.