Camii ismini bir zamanlar kalabalık bir Müslüman Mahallesi olan Karataş Mahallesi’nden almaktadır. Çevresinde oturan insan kalmadığından şimdilerde kapalı olan bu camii, bir zamanlar içini dolduran kalabalık bir Müslüman cemaatin varlığının ayakta duran son şahididir. Yapım tarihi kesin olarak bilinmemekle beraber vaaz kürsüsü arkasında bulunan H.1295/M.1878 tarihi bu yapının daha önceye tarihlenmesine sebep olmaktadır.
Moloz taştan inşa edilmiş olan eserin harimi üç sahınlıdır. Sahınları oluşturan ayaklar Bursa kemerleri ile birbirine bağlanmıştır. Camii avlusunun doğu bölümü zeminin yükseltilmesi ve mihrap eklenmesi ile bir yazlık mescit haline getirilmiştir. Sille’deki diğer camiler gibi iç kısmı zengin ahşap süslemelidir. Her iki mihrabı, minberi ve vaaz kürsüsü ahşaptan yapılmış olan eserde ahşap kesim tekniğinde yapılmış çok kaliteli bitkisel süslemeler görülebilmektedir.
Yapıyı özel yapan diğer bir unsur ise içinde bulunan el sanatı eserleridir. Mumlar, avizeler, askılı gaz lambaları, orijinal Sille el dokuması halılar ve üzerinde bağış yapanın Osmanlıca künyesi bulunan kandiller bu eserlerden sadece birkaçıdır. Selçuklu Belediyesi tarafından 2010 yılında restore edilen eser, bugün sadece Ramazan aylarında teravih namazı için açılmaktadır.
