De pastorie is één van de weinige historische gebouwen die Dessel nog rijk is. Het gebouw dateert van rond 1780 en is opgetrokken in een sobere, maar elegante classicistische stijl. De voorgevel is volledig symmetrisch opgebouwd rond het centrale deel met de inkomdeur, een venster op de eerste verdieping en een dakvenster in het schilddak.
Van pastorie tot school
Naast de functie als woonplaats voor drie geestelijken deed het gebouw ook dienst als Latijnse school. Opvallend is dat veel leerlingen niet uit Dessel zelf kwamen, maar uit onder meer Noord-Brabant (Nederland), Antwerpen en de regio Brussel-Leuven.
De studenten verbleven er van oktober tot eind augustus. Het schoolgeld bedroeg 4 gulden per jaar. Voor kost en inwoon bij lokale gezinnen betaalden ze ongeveer 110 gulden per jaar. De laatste sporen van de Latijnse school dateren van 1795.
Van pastorie naar sociaal huis
Begin 2004 besliste de gemeenteraad om de pastorie te renoveren en om te vormen tot een sociaal huis. In april 2009 namen het OCMW en de sociale dienst van Dessel hun intrek in het gebouw.