Caminin bulunduğu yerde İplik Pazarı kurulduğu için İplikçi Camii olarak adlandırılmıştır. Çarşı civarında, Ispartalı zenginlerden Abdi Ağa tarafından 1562 tarihinde inşa edilmeye başlanmış, 1569 yılında bitirilmiştir. İlk binanın üstü tahta ile örtülmüş; fakat kurşun kaplanmamıştır. Yıpranan çatı örtüsü 1725 yılında eski haliyle onarılmıştır. 1782 yılında Sadrazam olan Halil Hamid Paşa tarafından caminin doğu ve batı tarafına birer kanat ekletilmiş, doğu yanına kövkeden bir minare ve kitaplık yaptırılarak genişletilmiştir. Daha sonra kubbeli cami tamamı yıkılarak yerine bugünkü cami yapılmıştır. İlaveler yapan Halil Hamid Paşa’dan dolayı cami Halil Hamid Paşa Camii olarak da anılmıştır.
Dikdörtgen planlı cami iki katlı olup alt katında bir kütüphane yer almaktadır. Kuzeybatı köşede tek şerefeli bir minaresi vardır. Mihrap mukarnas kavsaralı ve sütuncelidir. Üst sıradaki pencerelerinde vitray işçiliği görülmektedir. Minare şerefesinin altı mukarnas süslemelidir. Ispartalı Hacı Abdi Bey tarafından 1569 yılında yaptırılmıştır. 1725 yılında onarılmış ve 1782 yılında Sadrazam Halil Hamit Paşa tarafından caminin sağ ve soluna eklenti yaptırılmıştır. Ayrıca bu eklentiler sırasında caminin minaresinin yanına bir kütüphane ve karşısına muvakkithane (saat ayar merkezi) yaptırıldığı da bilinmektedir. 1890 yılındaki son onarımının ardından cami günümüze kadar gelebilmiştir.