El monasterio de Lavaix fue muy importante para la vida del pueblo. Los priores del monasterio decidieron hacer del Pont de Suert la capital de sus dominios. Con el paso del tiempo el patrimonio del monasterio de Lavaix fue aumentando hasta hacerse importante, y las donaciones de los Erill en la segunda mitad del siglo XII acabaron de configurar el Monasterio.

Cuando se instauró el orden social del feudalismo los campesinos perdieron la libertad y quedaron atados a las tierras bajo el dominio de los señores feudales los cuales se beneficiaron del proceso de feudalización aumentando sus posesiones y poder.

En el Vall de Boí, estos señores feudales eran los Erill. Desde Erillcastell (su lugar de origen) inician a finales del s.XI una rápida ascensión social, participando en las campañas de repoblamiento y reconquista.

Los señores de Erill utilizaron los recursos obtenidos de los botines de guerra para promocionar la construcción de las iglesias del Valle de Boí, una manera de mostrar su poder y de adquirir prestigio social.

A lo largo del siglo XVIII y principios del XIX este gran patrimonio fue disminuyendo, hasta que en el año 1835 la vida del Monasterio se acabó a razón de la desamortización de Mendizábal.

Algunos de los elementos decorativos que encontramos en algunas casas del Pont de Suert, provienen del Monasterio, como por ejemplo algunas columnas o capiteles en las fachadas de la plaza Mercadal del pueblo. Otros elementos del Monasterio, los encontramos en la Colección de Arte Sacro de la Ribagorza en la iglesia Vieja, ahora convertida en museo.

El Palacio Abacial del Pont de Suert era la Antigua residencia de los abades del Monasterio ya que en esa época el abad era también Barón del Pont de Suert, ejerciendo las funciones Civiles del pueblo. Actualmente se encuentra en ruinas y la mayor parte del año está anegado por el pantano de Escales.

Cuando las aguas del pantano están en sus niveles bajos se puede acceder fácilmente a pie desde la boca sur del túnel de Lavaix (carretera N-260) o desde El Pont de Suert por el Camino del Agua.