La residència del bisbe a Oxoma està situada al carrer Major, a prop de la catedral. L'element més interessant és el portal d'entrada, que data de l'època del bisbe Alonso Enríquez (1506–1523).

Construïda en l'estil gòtic hispanoflamenc, consisteix en un arc semicircular format per grans dovelles, amb un intradós lobat, emmarcat per un alfiz d'inspiració musulmana que reposa sobre mènsules i que sosté l'escut d'armes del bisbe Enríquez.

La importància de l'ofici episcopal a El Burgo de Osma és tal que és difícil entendre plenament els valors de la ciutat sense tenir en compte aquest vincle estret entre la ciutat i l'església, entre la vida cívica i la presència eclesiàstica.

A partir de 1342, el bisbe va ser el senyor temporal de la ciutat i les seves terres, havent adquirit aquests drets del Capítol de la Catedral.

Avui dia, el Palau acull no només la residència i els despatxos del bisbe, sinó també els arxius diocesans.