Gumppenberg, Familie