Il Palazzo dei Diamanti è il centro della città rinnovata da Ercole I d'Este. Si racconta che in una delle sue 8.500 punte sia nascosto un diamante vero dall'enorme valore e che l'unico a sapere la reale posizione fosse il costruttore, a cui fu tagliata la lingua.