Runt 1850 flyttade de sedan till någon annan plats i Ljusfall men återvände 1854 till föräldragården efter att Olofs storebror och äldste sonen på gården dött några år tidigare.
I slutet av 1850-talet tog Olof över gården och titulerades nu skatteman på samma sätt som tidigare fadern gjort. Titeln ändras dock ganska omedelbart till undantagsägare utan att det riktig framgår vem som istället tog över det tillhörande jordbruket.
Sonen Anders Peter bosatte sig i början här hos föräldrarna med sin familj men flyttade sedan "hammaren" i närheten.
Vid 1900 års folkräkning finns de skrivna tillsammans på en plats som kallas Skogstorp och som låg i närheten av Ljusfalls Väster- och Mellangårdar. Olof kallades här "Undantagshjon".