Omkring 1388 satt riksråd Jakob Fastulvsøn som herre på Austrått. Han hadde sannsynligvis fått Austrått med sin hustru Elsebe Ottesdatter Rømer. Hun ble stammor til den yngre Rømer-ætten. Jakob og Elsebes sønn Narve Jakobssøn Rømer overtok etter dem. Og etter ham igjen overtok datteren Gertrud Narvesdatter, men først etter å ha ført en prosess mot stefaren Henrik Jenssøn Gyldenløve. Gertrud ble gift i Sverige med ridderen Magnus Green, men døde uten livsarvinger. Austrått gikk da over til hennes fetter ridder Otte Madssøn Rømer, gift med Ingeborg Lydersdatter Struds. Han var blant de rikeste i Norge på den tiden. Han var også en av hovedarvingene i det store skiftet etter junker Hans Sigurdsson, sammen med ridder Alv Knutsson Tre Rosor og væpner Arald Gautesson Kane.