اسم مسجد بيلن مشتق من كلمة \"بيلن\" التي تعني التل — وهو بالفعل موجود بقليل من الارتفاع عند سفح تل هيصاربشي.
لا يُعرف بدقة متى تم بناؤه، لكن الخصائص المعمارية تؤرخه إلى القرن الـ 14. وفقاً لبعض المصادر، تم تحويل كنيسة إلى مسجد على يد خوجة موقبيل. في عام 1750 قام محمد سعيد آغا، وفي عام 1811 قام عمر آغا، ببناء المئذنة وإعطاء المبنى شكله الحالي.
عندما تدخل إلى الداخل، ستقابلك أربعة أعمدة أثرية — هذه الأعمدة تروي القصة الحقيقية لهذا المسجد. تم جلب هذه الأعمدة من مبنى أثري آخر — رأسا اثنين منها بالنمط الكورنثي. أي أنها جُلبت من ميلاسا، ربما من معبد يعود إلى عهد هكاتومنوس أو من مبنى عام آخر، وتم وضعها هنا في القرن الـ 14.
هذا مثال على الاستمرارية التي نصادفها بشكل متكرر في العمارة الإسلامية في الأناضول: أحجار البناء تنتقل عبر القرون، وعمود كان يخدم آلهة قديمة يصبح العمود الفقري لمركز إيماني جديد.