Reformado en el año 1825, su construcción se remonta sin embargo a más de dos siglos antes. Fue casa del Señor do Couto de San Paio, abad del Monasterio de San Paio de Abeleda a finales del siglo XVI, y estuvo asociado a su familia. De hecho, varios de sus miembros se hallan enterrados en una capilla de la iglesia de San Paio.
El pazo es de planta rectangular y dos plantas, más una torre que tiene tres. Adosada a ella hay una capilla, que fue erigida en el siglo XVIII y conserva un retablo de estilo barroco. La planta baja, hoy bodega, fue cárcel. En la fachada destacan varios escudos, que son los de los cenobios que San Paio de Abeleda tenía como anexos: San Martín de Celeiros y San Andrés de Fontela en Chandrexa de Queixa, Santa María de Pedraza en Chantada y Santa María de Torbeo en Quiroga.
Situado en el lugar de O Couto, parroquia de San Paio, actualmente es vivienda privada.