Ifølge familietradisjonen skal Hans Holtermann ha vært øyenvitne til at to handelsskip som tilhørte ham, forliste under en uforsiktig kappseilas på vei hjem. Etter denne hendelsen skal han ha besluttet å kjøpe Austrått som nettopp da var til salgs. For 26 900 riksdaler fikk han skjøte på dette godset 13.12.1760 av den tidligere eierens enke, Mette Kristine Dass, f. Høyer. Han overleverte godset til sin sønn Eiler i 1773.