A unos pasos del Palacio El Duque, por la parte posterior de la estatua del Corazón de Jesús, se halla esta casona de piedra, de aspecto sobrio y austero. Fue construida por los propios vecinos de la villa para albergar la cárcel en 1.879, y constaba de un patio interior y dos celdas calabozo.
Hoy en día es el albergue municipal de peregrinos "La Peña", que cuenta con 20 plazas, ya que forma parte de la "ruta de Santo Toribio" del Camino de Santiago, entre la costa asturiana y Santillana del Mar.
