Das Rathaus in Skarszewy, am südwestlichen Eck des Marktplatzes gelegen, ist eines der ältesten Gebäude der Stadt und stammt aus dem 18. Jahrhundert. Erbaut aus Ziegeln, überstand es verheerende Brände in den Jahren 1709, 1712 und 1714. Im 19. Jahrhundert diente das Rathaus als Sitz der Stadtverwaltung und sein Dach wurde von einem hölzernen Türmchen mit einer Uhr gekrönt, die bis 1945 die Zeit für die Bewohner maß. Im 18. Jahrhundert wurden die Häuser mit den Nummern 14 und 15 unter einem gemeinsamen Dach verbunden und bildeten einen einzigen Komplex. Das Gebäude diente bis zur Zeit der Zweiten Polnischen Republik administrativen Zwecken, als die Stadtverwaltung ein neues Rathaus in der Nähe errichtete und das alte Rathaus in Wohnungen umgewandelt wurde. Heute ist dieses Gebäude, ein Zeuge der Geschichte von Skarszewy, ein wertvolles historisches Denkmal und ein wichtiger Bestandteil des Stadtbildes. Nach unbestätigten Berichten befand sich das ursprüngliche Rathaus im Zentrum des Marktplatzes, seine genaue Lage ist jedoch unbekannt.