İkizce tepelerdeki Bizans kalesi , Osmanlılar tarafından onarılarak uzun yıllar kullanılmıştır.Balıkesir de vali olarak görev yapan Osmanlı şehzadeleri dönem dönem bu kalede ikamet etmişlerdir. İşte bu dönemlerde kale ile kervansaray yolu üzerinde bir sıcak su kaynağı bulunmuş… Yerden kendiliğinle çıkan bu sıcak suyun şifalı olduğu o zamanlarda anlaşılmış. Ve suya ‘Ölümsüzlük suyu’ anlamına gelen ‘Bengi-su’adını koymuşlar.

Bu suyu gören , içen , Osmanlı padişahı Fatih Sultan Mehmet’in ünlü Veziri Zağnos Mehmet Paşa kervansaray ve kale yolu üzerinde insanların kalabalık olması nedeniyle ve bu insanlara hizmet için,XV.yüzyılda kesme taştan ve toprak yakma tuğladan iki kubbeli bir hamam inşa etmiş.(bu hamamlar o tarihten bu yana hala kullanılmaktadır.) Bundan sonra adı da Bengi kapalı-ılcaksuyu diye anılmış,daha sonra bu isim Bengi kaplıcası olarak değişime uğramış… Ve daha sonraları eftelle kaplıcası – daha da sonra Pamukçu Kaplıcaları diye ün yapmış.. İnsanlar işte o tarihten bu yana, bu suyla(Bengi-su ile) hep şifa bulmuşlardır….