Tot 1606 is weinig bekend over de geschiedenis van dit gebouw. In ieder geval kan men met zekerheid zeggen dat het in hout was opgetrokken. Op deze datum werd het door een storm verwoest. Men herbouwde het vier jaar later waarbij verschillende stijlen door elkaar werden gebruikt. Enkele gebroken bogen op de benedenverdieping van de gevels herinneren aan de gotiek, de eerste verdieping aan het Renaissance-type terwijl de puntgevels barok zijn. De hoofdgevel vertoont boven elkaar geplaatste ionische zuilen op de bovenverdieping.

 

De architekt die volgens het plan van Schilder Jacques Van de Steen werkte is Quentin Ratte, meester-metselaar te Doornik. De bouwers hebben zich waarschijnlijk laten beïnvloeden door de Renaissance-gevel van het Stadhuis te Gent. In 1881 stortte het hele gebouw in en werd getrouw weer opnieuw opgetrokken. Na 1940 werd het gebouw grotendeels gerestaureerd en heeft eveneens een 'lifting' in 1998 ondergaan.