Questo palazzo è stato costruito nel XIII secolo, quando Pesaro iniziò ad essere governata da un’istituzione comunale. In età medioevale, fino al 1563, la sede della Comunità sorgeva tra Palazzo Ducale e Palazzo Baviera, occupando l’area oggi delimitata dalla fontana. Il palazzo comunale venne sistemato su edifici già presenti che vennero ristrutturati e riadattati alla nuova funzione.