Costruito su progetto di Luigi Fedeli di Sarnano nel 1827 e intitolato ad Apollo, successivamente fu ristrutturato e modificato da Pietro Ghinelli di Senigallia nel 1891. Fu in quella occasione che il nome gli venne cambiato in quello attuale per dedicarlo al celebre architetto folignate (1734-1808). Il restauro interessò anche parte della facciata il cui ordine inferiore con tre porte è stato disegnato da Tito Buccolini. La parte superiore del prospetto è quanto rimane del preesistente palazzo gentilizio della famiglia Gregori il cui stemma è ancora visibile nei capitelli di due finestre. Fu distrutto da un bombardamento durante la Seconda guerra mondiale. La parte residuale dell’edificio è stata restaurata soltanto nel 2004.