Der ältere Rathausbau, der 1807 während der Belagerung der Stadt zerstört wurde, wurde 1913 geringfügig modernisiert.
1945, trotz intensiver Bombardierungen des Stadtzentrums während der Schlacht um Kołobrzeg, blieb das Gebäude unversehrt. Nach dem Zweiten Weltkrieg diente es verschiedenen Institutionen als Standort. Derzeit beherbergt es die Galerie für zeitgenössische Kunst, das Touristeninformationszentrum und das Standesamt.
Das zweigeschossige Gebäude in C-Form wurde auf Fundamenten aus dem 15. Jahrhundert errichtet. Im zentralen Teil befindet sich ein Innenhof, auf dem ursprünglich ein Denkmal für König Friedrich Wilhelm III. und später eine Ehrentribüne stand.
Äußerlich ähnelt es einer mittelalterlichen Wehrburg, geschmückt mit Türmchen und Zinnen. Der zentrale Turm ist mit einer Uhr sowie den Wappen von Kołobrzeg und Polen verziert. Die historische Uhr, die 2014 abgenommen wurde, ist derzeit im Museum Patria Colbergiensis ausgestellt.
Auf der nordöstlichen Seite des Gebäudes im Erdgeschoss sind architektonische Elemente des mittelalterlichen Rathauses erhalten geblieben. Unter den Säulen, die den Risalit des Gebäudes stützen, befindet sich ein Pranger aus dem 16. Jahrhundert, bekannt als Adebarsäule. Auf dem Kapitell der Säule befindet sich eine geschnitzte Maske, die mit der Legende des Kolberger Vogts Jakub Adebar verbunden ist.