Situato in una posizione centralissima della città è appartenuto nella seconda metà del XVI secolo ai fratelli Geronimo e Cola Baldi. Realizzato su strutture presistenti, ingloba fabbricati differenti di diversi periodi e nel suo complesso si affaccia e costituisce l'omonima Corte.
Nella seconda metà del '600 fu scelto dal Vescovo di Otranto Gabriele Adarso de Santander come dimora e residenza invernale facendolo divenire un importante "cenacolo intellettuale" .
Alla fine del XX secolo l'intero complesso edilizio che caratterizza la Corte Baldi è stato ristrutturato e restaurato dagli attuali proprietari De Ronzi - Filieri che hanno adibito gli ambienti a pubblica struttura. Oggi Palazzo baldi è sede di un rinomato hotel cittadino.