La Torre dell'Orologio, di impianto rettangolare e costruita nel 1472-73 su progetto di Luca Fancelli su richiesta del marchese Ludovico II, è così detta per l'antico orologio realizzato da Bartolomeo Manfredi, meccanico, matematico e astrologo alla corte dei Gonzaga, noto anche come Bartolomeo dell'Orologio. L'Orologio venne inaugurato nel dicembre del 1473.
Il quadrante indica le ore contrassegnate da numeri romani, e riporta altre indicazioni come i segni zodiacali, le ore planetarie, i giorni della Luna, la posizione degli astri utile a sapere se un certo momento della giornata è sotto l'influsso di pianeti favorevoli.