Le prime notizie della costruzione del Palazzo del Governo di Matelica risalgono al 1271 ad opera dell’architetto Benincasa da Firenze.

Unito con la Torre Civica, presenta sul fianco un piccolo loggiato, detto La Loggia, risalente al 1511 e progettato dagli architetti lombardi Costantino e Giovan Battista da Lugano.