Il palazzo fu edificato, al tempo del dominio spagnolo, dalla nobile famiglia Lopez. Al nucleo più antico, costituito dalla cinquecentesca casa-torre, nel XVII secolo venne addossato un più ampio corpo di fabbrica, a completare la dimora signorile. Dal 1992, per volontà di monsignor Vincenzo Franco, l'edificio ospita il Museo Diocesano. All'interno è possibile ammirare splendide opere ed elementi architettonici provenienti dalla cattedrale di Otranto e dalle chiese parrocchiali appartenenti alla diocesi locale.

I tre piani dell'edificio ospitano sezioni dedicate alla scultura, alla pittura e agli arredi e strumenti liturgici. Tra le opere di maggior pregio, un monumentale fonte battesimale del XVI secolo, attribuito alla bottega del celebre scultore salentino Gabriele Riccardi, ornato da lastre a rilievo raffiguranti scene dell'Antico e Nuovo testamento; i frammenti di un mosaico pavimentale, ascrivibile al IV-V secolo, rinvenuto sotto il pavimento della cattedrale nel corso dei lavori di ristrutturazione; vari strumenti liturgici di grande valore e raffinata fattura.