1767 yılında, minaresine yıldırım düşmüş, bunun üzerine Sultan III. Mustafa tarafından bina emini tayin edilen Tıfli Mehmed Emin Efendi tarafından yeniden inşa edilmiştir.
1876 yılında, Kavalalı Mehmed Ali Paşa’nın kızı Zeynep Hanım tarafından kapsamlı bir onarım geçirmiştir.
1996 yılında, İmam Hacı Süleyman Bilir ve cami cemaatinin katkılarıyla bir restorasyon daha yapılmıştır.
Öne çıkan özellikleri
Yaldızlı Tekke Camii olarak da bilinir.
Tek minareli ve tek şerefeli bir yapıdır.
Bahçesinde türbeler bulunmaktadır.
Kagir bir yapısı olan caminin iç bölümü mansurelidir.
Duvarlarında moloz taşlar ve tuğlalar kullanılmış olup, üst bölümleri özenle sıvanmıştır.
Marsilya tarzı kiremit çatısı (özellikle Akdeniz tarzı evlerde kullanılan, geleneksel bir çatı kaplama malzemesidir) bulunmaktadır.
Caminin iki ayrı kapısı vardır ve kapılardan geçildiğinde dikdörtgen şeklinde bir sofa karşılar.
Fenai Ali Efendi’nin mezarı, caminin bahçesinde bulunan türbededir.
Kütahya doğumlu olan Şeyh Fenai Ali Efendi, “Fenai” mahlasıyla pek çok şiir kaleme almış bir mutasavvıftır.