Ce sont les Selves de Plamon, famille de drapiers, qui donnent leur nom à cet hôtel. Ici les grandes époques architecturales de Sarlat ont marqué les fenêtres de chaque étage. Le 14^e s., caractérisé par de grandes arcades ogivales, se retrouve au rez-de-chaussée. Le 1^er étage est percé de baies à remplages de style gothique rayonnant. Enfin, le dernier étage présente une architecture plus tardive (15^e s.). La cour intérieure possède un bel escalier à balustres du 17^e s.