In fondo a Piazza Castello vi è la maestosa residenza seicentesca della famiglia Malaspina.
Il palazzo è caratterizzato da un portale bugnato sovrastato dal bassorilievo araldico dell'importante famiglia dei Malaspina: un'aquila avente in petto lo scudo con lo spino secco, sormontata dalla corona imperiale.
Una raffigurazione seicentesca del Palazzo rivela una decorazione di merli, oggi scomparsa.
La struttura odierna poggia sulle antiche mura comunali.
Tutte le altre fortificazioni sono state distrutte o inglobate da costruzioni civili successive nel corso dei secoli.