Il Castello di Moresco, all'interno dell'Associazione de I Borghi più belli d'Italia, sorge sulla sommità di un colle che domina la sottostante valle dell’Aso; nel Medioevo fu roccaforte del Comune di Fermo nella guerra contro Ascoli. La sua posizione strategica è ancora evidente: dal borgo infatti si gode una spettacolare vista che spazia dal Monte Conero al Gran Sasso.
Il borgo, completamente circondato dalle mura, ha forma triangolare con al vertice l’imponente Torre eptagonale del XII sec. che è sede, specie nel periodo estivo, di mostre d'arte e fotografiche. L’altra torre, detta dell’orologio, risale al ‘300, sovrasta la vecchia porta di accesso al castello ed è affiancata da un elegante portico cinquecentesco. Della chiesa che era all’interno delle mura (Santa Maria in Castro) rimane oggi solo la navata sinistra, ora divenuta portico ai lati della piazza, decorato dall’affresco della Madonna con bambino di Vincenzo Pagani. Il Palazzo Comunale funge anche da piccola pinacoteca, nella quale sono conservate varie opere provenienti da chiese e collezioni private, prima tra tutte una grande pala d’altare di Pagani, conservata nella sala consiliare.